A seguirPróximo em Política e sociedade de IA
Viés de IA
Sociedade
GUIA DA SOCIEDADE
A ética da IA é o estudo e a prática de garantir que os sistemas de IA tratem as pessoas de forma justa, respeitem a privacidade, sejam responsáveis perante os humanos e não causem danos que superem os seus benefícios.
Ouça este guiaNarrado por IA · ~8 min
É importante porque a IA agora ajuda a decidir quem é contratado, sinalizado, aprovado ou vigiado, e casos documentados mostram que os erros e preconceitos nestes sistemas recaem de forma desigual em diferentes grupos.
AI ethics asks a practical question: when a machine helps make a decision about people, how should it be built, tested and governed so that it is fair, safe and accountable? The topic covers several recurring concerns. Fairness asks whether a system works equally well for different groups. Privacy asks what personal data is collected and how it is used. Transparency and explainability ask whether people can find out that AI is involved and why it reached a result. Accountability asks who is responsible when it goes wrong. Safety asks whether the system can cause physical, financial or psychological harm. Wider questions include effects on jobs, the environment and the concentration of power. AI ethics is not only philosophy; it shows up as design decisions, test results, documentation, audits and laws.
In practice, ethical review follows a repeatable process. First, define the system's purpose and the people it affects, including people who never use it directly, such as the subjects of a risk score. Second, map what could go wrong in that specific context. Third, measure: test accuracy not just overall but separately for each relevant group, and test for misuse. Fourth, mitigate: change the data, the model, the decision threshold or the human process around it, or decide not to deploy. Fifth, assign accountability and keep monitoring after launch. The NIST AI Risk Management Framework 1.0, released by the US National Institute of Standards and Technology in January 2023 for voluntary use, names these activities govern, map, measure and manage. It lists the traits of trustworthy AI as valid and reliable, safe, secure and resilient, accountable and transparent, explainable and interpretable, privacy-enhanced, and fair with harmful bias managed, and it notes that these must be balanced against one another depending on context.
The case for measuring by group comes from documented failures. In 2018 Joy Buolamwini and Timnit Gebru published Gender Shades, which tested three commercial systems that guessed gender from face photos. The worst group, darker-skinned women, saw error rates up to 34.7%, while the best group, lighter-skinned men, saw a maximum error of 0.8%. Part of the explanation was the data used to build and judge such systems: two widely used face benchmarks they examined were 79.6% and 86.2% lighter-skinned. A system can report high average accuracy while failing badly for a group that was underrepresented in its data.
The second landmark case shows that fairness itself has more than one definition. In May 2016, ProPublica analyzed COMPAS, a commercial tool from Northpointe that scores how likely a defendant is to reoffend, using records for more than 7,000 people arrested in Broward County, Florida in 2013 and 2014. About 61% of people labeled likely to reoffend were rearrested within two years, and only about 20% of those predicted to commit violent crimes did so. Among defendants who did not reoffend, Black defendants had been labeled higher risk 44.9% of the time and white defendants 23.5%. Northpointe disputed the analysis, arguing its scores were equally accurate for both groups. Months later, Jon Kleinberg, Sendhil Mullainathan and Manish Raghavan proved that, except in highly constrained special cases, no risk score can satisfy three common fairness conditions at once. Both sides could be right by their own definition. Choosing which kind of fairness matters is a value judgment that the math cannot make.
Law has begun to turn some ethical lines into rules. The European Union's AI Act takes a risk-based approach: a short list of uses is banned, high-risk uses face requirements for data quality, documentation and human oversight, and many low-risk uses face few or none. Its prohibitions, applying since 2 February 2025, cover manipulative techniques that cause significant harm, exploiting people's age, disability or economic situation, social scoring, predicting crime from profiling alone, building face recognition databases by untargeted scraping, inferring emotions in workplaces and schools, and most real-time remote biometric identification in public spaces by police. The NIST framework, by contrast, is voluntary guidance. The Stanford AI Index 2025 counted 59 AI-related regulations issued by US federal agencies in 2024, more than double the year before.
AI ethics is easy to confuse with neighboring ideas. Law sets minimum requirements that are enforced; ethics also covers what is permitted but still harmful or unfair. AI safety, in its narrow sense, focuses on preventing accidents and dangerous capabilities, often in powerful future systems, while ethics usually deals with harms to people from systems already in use. Responsible AI is the name many companies give to their internal ethics programs, which typically combine principles, review boards and testing. All three overlap, and the same audit can serve each.
The broader costs reach beyond individual decisions. The International Energy Agency's April 2025 report estimates that data centres consumed about 415 terawatt-hours in 2024, about 1.5% of global electricity, and projects consumption more than doubling to around 945 terawatt-hours by 2030, slightly more than Japan uses today, with AI the most important driver. Concentration is another concern: the Stanford AI Index 2025 found that nearly 90% of notable AI models released in 2024 came from industry, so a small number of companies make many of the design choices that affect everyone. Public opinion is divided as well: in the same report, optimism about AI ranged from 83% of people surveyed in China to 39% in the United States.
Doing ethics well has real costs and real limits. Measuring disparities requires knowing which group each person belongs to, which can conflict with privacy. Audits, documentation and human review take staff time. Principles written in general terms, such as fairness or transparency, can be adopted without changing any product, a pattern critics call ethics washing. Trade-offs are unavoidable: making a model more explainable can make it less accurate, and equalizing one error rate can unbalance another. The most useful habit is specific: name the decision, the affected people, the measured error rates for each group, who can appeal, and who is accountable.
04Exemplo trabalhado
Imagine uma ferramenta de risco usada em dois grupos de 200 pessoas cada. No grupo A, 100 pessoas reincidirão; no grupo B, 50. As taxas básicas são de 50% e 25%.
No grupo A, a ferramenta sinaliza 100 pessoas como de alto risco: 60 que reincidirão e 40 que não reincidirão.
No grupo B, a ferramenta sinaliza 50 pessoas como de alto risco: 30 que reincidirão e 20 que não reincidirão.
Verifique a calibração: em ambos os grupos, 60% das pessoas sinalizadas reincidiram (60 em 100 e 30 em 50). Por esta medida a ferramenta trata os grupos de forma igual.
Verifique as taxas de falsos positivos: o grupo A tem 40 sinalizados erroneamente entre 100 não reincidentes, o que representa 40%; o grupo B tem 20 de 150, cerca de 13,3%.
Tente equalizar as taxas de falsos positivos alterando quem é sinalizado em um grupo e, em seguida, recalcule a proporção de pessoas sinalizadas que reincidem.
O que isso mostra
O aluno percebe que a mesma ferramenta pode ser justa por uma definição e injusta por outra, e que equalizar ambas é impossível quando as taxas básicas diferem, como provaram Kleinberg e colegas. A verificação é que a aritmética nas etapas 4 e 5 usa as mesmas contagens, mas fornece veredictos opostos.
Auditorias de análise facial: o estudo Gender Shades de 2018 testou três classificadores comerciais de género e encontrou taxas de erro de até 34,7% para mulheres de pele mais escura contra no máximo 0,8% para homens de pele mais clara.
Justiça criminal: A análise de 2016 da ProPublica das pontuações de risco COMPAS para mais de 7.000 pessoas no condado de Broward, Flórida, descobriu que réus negros que não reincidiram foram rotulados de maior risco, quase duas vezes mais que a taxa de réus brancos.
Gestão de riscos nas organizações: o Instituto Nacional de Padrões e Tecnologia dos EUA publicou seu Quadro 1.0 voluntário de Gestão de Riscos de IA em janeiro de 2023, organizando o trabalho em quatro funções: governar, mapear, medir e gerenciar.
Regras vinculativas: desde 2 de fevereiro de 2025, a Lei da UE sobre IA proibiu práticas como a pontuação social, a recolha não direcionada de imagens faciais para construir bases de dados de reconhecimento e o reconhecimento de emoções em locais de trabalho e escolas.
Custo ambiental: a Agência Internacional de Energia estima que os centros de dados utilizaram cerca de 415 terawatts-hora, cerca de 1,5% da eletricidade mundial, em 2024, e projeta cerca de 945 terawatts-hora até 2030, sendo a IA o principal impulsionador.
As regras ainda estão chegando. De acordo com o cronograma de implementação publicado da Lei da IA da UE, as obrigações para os usos autônomos de alto risco listados no Anexo III da Lei estão programadas para serem aplicadas a partir de 2 de dezembro de 2027, com obrigações para a IA incorporada em produtos já cobertos pela lei de segurança de produtos da UE a partir de 2 de agosto de 2028. A forma como os reguladores interpretam termos como alto risco e supervisão humana adequada moldará a prática muito mais do que apenas o texto. A medição continua sendo um problema de pesquisa em aberto. Gender Shades mostrou em 2018 que a composição de benchmark pode esconder falhas, e a mesma questão aplica-se agora aos geradores de linguagem e imagem, onde danos como resultados estereotipados ou afirmações fabricadas são mais difíceis de contar do que erros de classificação. A contabilidade ambiental também está no topo da agenda. A análise de 2025 da Agência Internacional de Energia prevê que o uso de eletricidade nos centros de dados praticamente duplicará até 2030, e o seu cenário base prevê que as emissões dos centros de dados aumentem de 180 milhões para 300 milhões de toneladas até 2035, ao mesmo tempo que observa que as aplicações de IA também poderiam reduzir as emissões noutros locais. Não se sabe se essas poupanças se materializarão. Finalmente, os debates sobre quem define os valores continuam. Com a maioria dos modelos de fronteira construídos por algumas empresas, as questões sobre o contributo público, as auditorias independentes e o acesso dos investigadores continuarão provavelmente a ser centrais neste domínio.
Boletim informativo gratuito
Três histórias verificadas de IA a cada manhã de dia útil, escritas em linguagem simples. Gratuito para sempre, sem anúncios.
Um e-mail a cada dia útil. Cancele a inscrição com um clique. Nunca vendemos ou compartilhamos seu endereço.
Teste você mesmo
Feedback instantâneo sobre cada resposta e um certificado compartilhável com um ID verificável assim que você concluir um curso.
Apoie a educação gratuita em IA. O AI Understanding é uma organização sem fins lucrativos 501(c)(3) — sem anúncios, sem paywall, nunca. Faça uma doação
A ética da IA é o estudo e a prática de garantir que os sistemas de IA tratem as pessoas de forma justa, respeitem a privacidade, sejam responsáveis perante os humanos e não causem danos que superem os seus benefícios. É importante porque a IA agora ajuda a decidir quem é contratado, sinalizado, aprovado ou vigiado, e casos documentados mostram que os erros e preconceitos nestes sistemas recaem de forma desigual em diferentes grupos.
O guia diz que a avaliação ética é contextual e não pode ser reduzida a uma métrica.
O guia recomenda a identificação das pessoas afetadas e o poder sobre o design.
O guia diz que os princípios devem traduzir-se em decisões e informações concretas.
O guia observa que o envolvimento humano é ineficaz sem autoridade e recursos.
O guia traduz responsabilidade em responsabilidade e caminhos de ação.
Continue aprendendo
Mais guias escolhidos para este tópico
A seguirPróximo em Política e sociedade de IA
Viés de IA
Sociedade