Primeiro, o que entra no modelo
«Dados proibidos e, sobretudo, variáveis que os aproximam. É um exercício estatístico, não uma revisão documental.»
Três normas apontam para o mesmo modelo: a CCD2 dá ao consumidor o direito à intervenção humana, a uma explicação compreensível e a pedir revisão; o Regulamento de IA classifica a avaliação de solvência como alto risco; e o RGPD limita as decisões automatizadas.
Seu modelo resiste às três normas? Diagnóstico gratuito
Conte-nos como você decide uma concessão de crédito, e nós revisamos o modelo e sua governança.
O trabalho não é auditar o algoritmo. É demonstrar que a decisão que ele produz se sustenta diante de três regimes diferentes ao mesmo tempo.
Revisão do processo de concessão diante das três normas: quais dados ele usa, como decide, quem pode revisar e o que é explicado ao cliente. Com o mapa de lacunas.
Identificação e eliminação de categorias especiais de dados e de fontes vedadas (redes sociais, dados de saúde), bem como das variáveis que funcionam como sua aproximação.
Gestão de riscos, governança de dados, documentação técnica, registros, transparência, supervisão humana e robustez. O pacote de obrigações do alto risco.
Desenho do processo pelo qual um cliente que teve o crédito negado obtém uma explicação compreensível, expressa seu ponto de vista e consegue que uma pessoa revise a decisão.
O que guardar de cada concessão e de cada recusa para poder reconstruí-la dois anos depois diante de um supervisor ou de um juiz.
Opinião independente sobre o enquadramento regulatório do sistema de decisão, útil diante do supervisor, de auditores e em operações societárias.
Nenhuma das três basta sozinha, e suas obrigações não coincidem.
Durante anos, a análise regulatória de um modelo de scoring se esgotava na proteção de dados. Hoje há três regimes que se sobrepõem sobre a mesma decisão (conceder ou negar crédito a uma pessoa), e cada um olha para uma coisa diferente:
A consequência prática é que um projeto que tenha trabalhado só uma das três frentes tem, quase com certeza, lacunas nas outras duas. E a lacuna mais comum é a mesma em todos os casos: o modelo funciona, mas não pode ser explicado. Ele pode prever bem e, ao mesmo tempo, ser incapaz de dizer a um cliente por que o crédito foi negado, em termos que ele entenda, ou de demonstrar a um supervisor como foi construído.
Também convém fixar uma ideia que organiza todo o resto. Nenhuma das três normas proíbe automatizar. O que elas fazem é exigir que a automação seja reversível, explicável e supervisionada. Um modelo que decide sozinho, sem possibilidade de revisão humana e sem capacidade de explicar seu resultado, não é um modelo eficiente: é um modelo que não cumpre as normas.
O consumidor deixa de ser um destinatário passivo da decisão.
| Direito | Em que consiste | O que obriga a implantar |
|---|---|---|
| Intervenção humana | Direito de obter intervenção humana por parte do credor. | Um circuito de escalonamento com pessoas capacitadas para revisar e com capacidade real de mudar a decisão. |
| Explicação significativa e compreensível | Direito de obter uma explicação significativa e compreensível da decisão. | Capacidade técnica de traduzir o resultado do modelo em razões concretas, em linguagem que o consumidor entenda. |
| Ponto de vista e revisão | Direito de expressar seu ponto de vista e de solicitar uma revisão. | Um procedimento que registre a alegação do cliente, a incorpore ao processo e produza uma nova decisão fundamentada. |
A capacidade do consumidor de reembolsar o crédito deve ser avaliada e verificada antes da celebração do contrato.
Os três direitos se leem rápido e se implantam devagar, porque cada um toca uma camada diferente do sistema. O de intervenção humana é organizacional: exige pessoas, treinamento e uma definição clara de até onde vai sua capacidade de anular o modelo. O de explicação é técnico: obriga o modelo a produzir razões, e não apenas um número, o que na prática condiciona quais arquiteturas são viáveis. E o de revisão é procedimental: é preciso registrar o que o cliente alega, deixar constância de que isso foi avaliado e fundamentar a nova decisão.
O segundo é o que mais obriga a repensar projetos. Um modelo muito preciso, mas opaco (um ensemble profundo, por exemplo), pode se tornar inutilizável não por seu desempenho, mas porque seu resultado não pode ser traduzido em uma explicação significativa. Essa é uma decisão de arquitetura que convém tomar no desenho, e não quando chega a primeira reclamação.
E há uma conexão que convém não perder de vista: a diretiva de serviços financeiros a distância estabelece, em paralelo, o direito de obter intervenção humana na fase pré-contratual quando são usadas ferramentas automatizadas. São duas normas diferentes apontando para o mesmo lugar (antes de contratar e ao decidir a concessão), de modo que o circuito de escalonamento deve cobrir os dois momentos.
Duas proibições explícitas e uma consequência que não se vê à primeira vista.
A CCD2 delimita quais informações podem sustentar a avaliação de solvência e exclui expressamente duas fontes que até agora apareciam em modelos alternativos de scoring:
A primeira proibição é coerente com o regime geral de proteção de dados e surpreende pouco. A segunda é a que muda projetos: durante anos, o uso de sinais de comportamento digital e de pegada social foi apresentado como o caminho para dar crédito a perfis sem histórico. Esse caminho fica fechado para a avaliação de solvência no crédito ao consumidor.
Mas a consequência que realmente exige trabalho técnico é outra, e não está escrita: as variáveis aproximadas (proxy). Um modelo pode não usar dados de saúde e, mesmo assim, incorporar variáveis que os preveem com alta correlação (padrões de gasto em farmácia, tipo de estabelecimento, frequência de determinadas categorias). Formalmente, o dado proibido não é usado; materialmente, ele entra na decisão. Depurar um modelo dessas aproximações não é uma revisão documental: é um exercício estatístico que precisa ser feito sobre as variáveis reais e ficar documentado.
Essa análise, além disso, serve duas vezes. É o que a CCD2 exige em matéria de dados e é também, em boa medida, o que o Regulamento de IA pede sob o título de governança de dados para os sistemas de alto risco. Convém fazê-la uma vez e aproveitá-la para os dois processos.
Ela está expressamente no Anexo III, e isso ativa um pacote completo de obrigações.
| Obrigação | O que significa para um modelo de concessão de crédito |
|---|---|
| Sistema de gestão de riscos | Identificação e mitigação documentada dos riscos do sistema ao longo de todo o seu ciclo de vida. |
| Governança de dados | Controle sobre os conjuntos de treinamento, validação e teste: origem, qualidade, representatividade e vieses. |
| Documentação técnica | Dossiê que descreva o sistema com detalhe suficiente para avaliar sua conformidade. |
| Manutenção de registros | Rastros que permitam reconstruir o funcionamento do sistema e as decisões que ele produziu. |
| Transparência | Informação suficiente para que quem o utiliza compreenda seu funcionamento e interprete seu resultado. |
| Supervisão humana | Desenho que permita que pessoas supervisionem o sistema de forma efetiva, e não meramente nominal. |
| Precisão, robustez e cibersegurança | Nível adequado de desempenho, resistência a erros e proteção contra manipulação. |
O Anexo III do Regulamento (UE) 2024/1689 inclui, em sua categoria 5, sobre acesso a serviços essenciais, os sistemas destinados a avaliar a solvência creditícia, junto com a avaliação de riscos e a fixação de preços em seguros de vida e de saúde.
A classificação não admite discussão: a avaliação da solvência creditícia de pessoas físicas está expressamente no Anexo III, dentro da categoria de acesso a serviços essenciais. Um credor que use um sistema de inteligência artificial para decidir concessões está operando um sistema de alto risco, com tudo o que isso implica.
Vale a pena se deter em duas das obrigações, porque são as mais mal interpretadas. A supervisão humana não se cumpre com um botão de anulação que ninguém usa: a norma exige um desenho que permita uma supervisão efetiva, o que implica que a pessoa que supervisiona entenda o resultado, tenha tempo hábil para avaliá-lo e capacidade real de se afastar dele. E a manutenção de registros não é o log da aplicação: são os rastros que permitem reconstruir por que o sistema decidiu o que decidiu, em uma operação concreta, meses depois.
A boa notícia é que há sobreposição com o que a CCD2 já exige. O circuito de intervenção humana pedido pela diretiva de crédito é, em boa parte, a supervisão humana pedida pelo Regulamento de IA; e a rastreabilidade que permite explicar uma recusa é a mesma que permite manter registros. Desenhá-los separadamente duplica o trabalho. Se você já está trabalhando o Regulamento de IA por outra via, convém cruzá-lo com a análise do Regulamento de IA.
A camada que a maioria já tinha e que agora precisa ser reexaminada.
O artigo 22 do RGPD reconhece ao titular dos dados o direito de não ficar sujeito a uma decisão baseada exclusivamente no tratamento automatizado que produza efeitos jurídicos sobre ele ou que o afete significativamente de forma similar. Negar um crédito se enquadra plenamente nessa hipótese, e por isso a maioria das instituições já tem uma posição tomada sobre essa questão.
O que muda agora é que essa posição precisa ser reexaminada à luz das outras duas normas, porque o padrão subiu. Muitos modelos se apoiavam na ideia de que a decisão não era «exclusivamente» automatizada porque existia uma revisão humana nominal. A CCD2 e o Regulamento de IA endurecem essa leitura por dois ângulos: a primeira reconhece um direito expresso à intervenção humana, à explicação e à revisão; o segundo exige que a supervisão humana seja efetiva desde o desenho. Uma revisão meramente formal deixa de sustentar o argumento.
O resultado é que as três normas convergem para o mesmo entregável prático, e convém construí-lo uma única vez: um dossiê de decisão por operação que registre quais dados entraram, qual resultado o sistema produziu, quem o revisou, o que o cliente alegou (se alegou algo) e como a decisão final foi fundamentada. Esse dossiê é ao mesmo tempo a prova do cumprimento do RGPD, a evidência da intervenção humana da CCD2 e o registro que o Regulamento de IA pede.
A norma não se limita a proibir dados: ela também diz o que deve ser analisado.
| Fonte | O que exige considerar |
|---|---|
| Diretiva (UE) 2023/2225 | Que a capacidade do consumidor de reembolsar o crédito seja avaliada e verificada antes da celebração do contrato, com base em suas receitas e despesas, incluindo a devida consideração das obrigações atuais. |
| Projeto de Real Decreto espanhol | Que os credores disponham, de modo adequado ao volume de operações, de «políticas, métodos e procedimentos de análise e concessão de créditos» orientados a prevenir o endividamento excessivo, considerando a situação profissional, a renda atual ou esperada, os saldos de poupança e o histórico de pagamentos do consumidor. |
O projeto de Real Decreto que regulamenta a lei espanhola de contratos de crédito ao consumidor está em tramitação.
Dois trechos dessa tabela merecem atenção, porque são os que mais trabalho geram. O primeiro é «a devida consideração das obrigações atuais»: não basta conhecer a renda, é preciso incorporar a carga financeira que o cliente já suporta. Isso obriga a definir de onde vem esse dado (consulta a bureaus de crédito, informações fornecidas pelo cliente, agregação de contas) e a documentar a escolha.
O segundo é «de modo adequado ao volume de operações». É uma cláusula de proporcionalidade, e convém lê-la nas duas direções. Para um credor pequeno, significa que não lhe será exigida a estrutura de uma grande instituição. Para um grande, significa exatamente o contrário: o padrão esperado cresce com o volume, de modo que um procedimento artesanal deixa de ser defensável a partir de certo tamanho. A proporcionalidade nem sempre é um alívio.
O ponto em que o cumprimento se torna concreto.
Imagine a cena, porque é ela que precisa ser resolvida: um cliente que teve o crédito negado liga e pergunta por quê. A resposta «você não passou no nosso sistema de avaliação» já não serve. A diretiva reconhece o direito a uma explicação significativa e compreensível, e esses dois adjetivos têm conteúdo.
Significativa quer dizer que a explicação precisa se referir aos fatores que efetivamente pesaram naquela decisão concreta, e não a uma descrição genérica do modelo. Compreensível quer dizer que ela precisa estar na linguagem do cliente, e não na da equipe de riscos: falar em «percentil da variável de tempo de emprego» não explica nada.
Isso exige três coisas que precisam ser construídas antes de receber o primeiro pedido:
Também convém cuidar de um limite: explicar não é revelar o modelo. Há um equilíbrio entre o direito do consumidor de entender a decisão e o interesse legítimo da instituição em não expor seu sistema de avaliação à engenharia reversa nem à fraude. Esse equilíbrio se resolve no desenho do catálogo de razões (concretas o suficiente para serem úteis, agregadas o suficiente para não virarem um manual de como enganar o modelo), e convém deixá-lo fundamentado por escrito.
O erro mais caro neste terreno é abrir três projetos separados. As obrigações se sobrepõem, e o entregável pode ser comum.
«Dados proibidos e, sobretudo, variáveis que os aproximam. É um exercício estatístico, não uma revisão documental.»
«A capacidade de atribuir a decisão a fatores concretos condiciona quais arquiteturas são viáveis. Melhor saber disso no desenho.»
«Com capacidade real de se afastar do modelo, tempo hábil para avaliar e treinamento para entender o resultado.»
«Dados, resultado, revisor, alegação e fundamentação. Serve ao mesmo tempo para o RGPD, para a CCD2 e para o Regulamento de IA.»
Cinco pontos, e nenhum tem a ver com a precisão preditiva.
O modelo prevê bem e não pode ser explicado. É a lacuna mais comum e a mais cara de corrigir, porque a solução não é documental: obriga a mudar a arquitetura ou a construir uma camada de atribuição por cima.
As variáveis aproximadas. Um modelo pode não usar dados de saúde e, sim, variáveis que os preveem. Formalmente cumpre; materialmente, o dado proibido está decidindo.
A supervisão humana nominal. Um revisor sem tempo, sem treinamento ou sem capacidade real de se afastar do modelo não atende nem ao Regulamento de IA nem ao direito da CCD2.
A recusa sem rastreabilidade. Se não se guarda o que entrou e o que saiu em cada operação, não há como reconstruir a decisão dois anos depois, que é quando ela é pedida.
E três projetos em paralelo. Abrir um processo para dados, outro para IA e outro para crédito multiplica o custo e produz documentação que não se encaixa.
| Norma | O que analisa | Obrigação central |
|---|---|---|
| Diretiva (UE) 2023/2225 (CCD2) | O resultado perante o consumidor | Intervenção humana, explicação compreensível e direito à revisão |
| Regulamento (UE) 2024/1689 (IA) | O sistema | Alto risco: gestão de riscos, governança de dados, documentação, registros, transparência, supervisão humana e robustez |
| RGPD | O tratamento | Limites à decisão baseada exclusivamente em tratamento automatizado |
| Diretiva (UE) 2023/2673 | O canal | Intervenção humana na fase pré-contratual quando há ferramentas automatizadas |
E comprovar isso dois anos depois diante de um supervisor. Revisamos seu modelo e sua governança sem custo.
Dez passos, e os dois primeiros definem o prazo do projeto.
O que entra no modelo, de onde vem e quais variáveis aproximam dados proibidos.
A capacidade de atribuir a decisão a fatores concretos condiciona a arquitetura.
Dados, resultado, revisor, alegação e fundamentação. Construído uma vez, usado três.
O passo três é o que quase ninguém faz e o que mais expõe: eliminar o dado proibido da lista não garante que ele tenha deixado de influenciar a decisão.
Cinco coisas que é preciso conseguir demonstrar, e nenhuma delas é o AUC.
AtribuiçãoNão em média: neste caso concreto, com fatores identificáveis e traduzíveis para linguagem clara.
VariáveisA depuração não se esgota em retirar o dado proibido: é preciso buscar o que o prevê.
PessoasCom treinamento para entender o resultado, tempo para avaliá-lo e capacidade real de se afastar dele.
NormasAs obrigações se sobrepõem mais do que parece. Convém construir o entregável uma única vez.
Olha para o resultado perante o consumidor: intervenção humana, explicação compreensível e direito à revisão.
Olha para o sistema: alto risco do Anexo III, com governança de dados, documentação e supervisão humana.
Olha para o tratamento: limites à decisão baseada exclusivamente em tratamento automatizado.
RastroQue é quando isso é pedido. Sem rastro do que entrou e do que saiu, não há reconstrução possível.
Relação completa das variáveis, sua origem e seu tratamento.
Dicionário de dados e documentação das fontes.
Ausência de categorias especiais e de dados de redes sociais.
Análise de exclusão e certificação do pipeline de dados.
Análise estatística de correlação com dados proibidos e depuração documentada.
Relatório de correlações e decisões de exclusão fundamentadas.
Capacidade de atribuir a decisão a fatores concretos em cada operação.
Documentação técnica do método de atribuição e exemplos reais.
Traduções pré-redigidas de cada fator para linguagem compreensível.
Catálogo aprovado e revisão periódica de sua clareza.
Revisores treinados, com tempo e com capacidade real de se afastar do modelo.
Procedimento, treinamento comprovado e estatística de decisões revertidas.
Dossiê conforme as obrigações do Regulamento de IA.
Gestão de riscos, governança de dados, documentação técnica e registros.
Registro por operação, reconstruível ao longo do tempo.
Dados de entrada, resultado do sistema, revisor, alegação e fundamentação.
Medir o modelo apenas pelo seu desempenho. Um sistema pode ter uma precisão excelente e ser inutilizável assim que lhe pedem para explicar uma decisão concreta ou demonstrar como foi construído. As três normas avaliam coisas que nenhum painel de riscos costuma registrar.
Termos que aparecem nas três normas e que convém não misturar.
Sistema que atribui uma pontuação ao solicitante para estimar sua capacidade ou probabilidade de reembolso.
Categoria do Regulamento de IA que inclui expressamente os sistemas destinados a avaliar a solvência creditícia, dentro do acesso a serviços essenciais.
Direito de não ficar sujeito a uma decisão baseada exclusivamente em tratamento automatizado que produza efeitos jurídicos ou afete significativamente o titular.
Referida aos fatores que pesaram na decisão concreta e expressa na linguagem do consumidor.
Variável que, sem ser o dado proibido, o prevê com alta correlação e permite que ele influencie materialmente a decisão.
Desenho que permita que pessoas supervisionem o sistema de forma real: compreendendo o resultado, com tempo e com capacidade de se afastar dele.
Controle sobre os conjuntos de treinamento, validação e teste: origem, qualidade, representatividade e vieses.
A avaliação deve incluir a devida consideração das obrigações que o consumidor já suporta, e não apenas sua renda.
Cláusula do projeto de Real Decreto: as políticas e os procedimentos devem ser adequados ao volume de operações. O padrão sobe à medida que o volume cresce.
COMPLIANCE CONTROL CENTER · MODELOS DE DECISÃO
Cruze a frente de trabalho com a norma que a impõe. A célula indica a intensidade da exigência.
Verde: exigência indireta. Vermelho: obrigação expressa e central.
Mais perfis do que o rótulo sugere.
Os destinatários diretos dos três regimes, e os que mais terão de refazer se seu modelo não for explicável.
Decidem em segundos e, por desenho, sem intervenção humana. É o modelo que mais tensão tem com o direito à revisão.
Com volumes que ativam o extremo mais exigente da cláusula de proporcionalidade do projeto de Real Decreto.
Quem desenvolve ou fornece o sistema também assume obrigações sob o Regulamento de IA, e não apenas quem o utiliza.
Todos aparecem em projetos que acreditavam ter o assunto resolvido.
O RGPD é apenas uma das três frentes. A CCD2 olha para o resultado perante o consumidor, e o Regulamento de IA olha para como o sistema foi construído. Resolver uma não resolve as outras.
Se restarem variáveis que o aproximam com alta correlação, o dado vedado continua influenciando a decisão. Detectá-las exige análise estatística, não revisão documental.
Um modelo muito preciso, mas opaco, pode se tornar inutilizável assim que se exige dele uma explicação significativa por operação. É uma decisão que convém tomar no desenho.
O Regulamento de IA exige supervisão humana efetiva. Um revisor sem treinamento, sem tempo ou sem capacidade real de se afastar do modelo não a garante.
Se cada atendente explica como pode, a explicação não é homogênea nem comprovável. É preciso um catálogo de razões pré-redigido e revisado.
As obrigações se sobrepõem: o circuito de intervenção humana serve a duas normas, e o dossiê de decisão, a três. Separá-los multiplica o custo e produz documentação incoerente.
Textos normativos publicados no BOE e no Jornal Oficial da UE, e documentação oficial espanhola.
Direitos à intervenção humana, a uma explicação significativa e compreensível e a solicitar revisão; exclusão de categorias especiais de dados e de redes sociais; conteúdo da avaliação de solvência.
JOUEAnexo III, categoria de acesso a serviços essenciais, que inclui os sistemas destinados a avaliar a solvência creditícia, e obrigações dos sistemas de alto risco.
AESIAPágina da Agência Espanhola de Supervisão da Inteligência Artificial (AESIA) com as oito categorias do Anexo III e as obrigações associadas.
MinecoExigência de contar, de modo adequado ao volume de operações, com políticas, métodos e procedimentos de análise e concessão de créditos, e elementos a considerar na avaliação.
JOUEArtigo 22: direito de não ficar sujeito a uma decisão baseada exclusivamente no tratamento automatizado que produza efeitos jurídicos ou afete significativamente de forma similar.
JOUEDireito do consumidor de obter intervenção humana na fase pré-contratual quando o fornecedor utiliza ferramentas automatizadas.
Publicação inicial. Direitos e proibições de dados extraídos da CCD2; classificação como alto risco verificada com base no Anexo III do Regulamento de IA e na AESIA; conteúdo da avaliação confrontado com o projeto de Real Decreto em tramitação.
Aplicação das disposições da Diretiva (UE) 2023/2225. Revisão prevista do regime de explicabilidade e do calendário do Regulamento de IA para sistemas de alto risco.
Conte-nos como você decide hoje uma concessão de crédito: quais dados usa, se há revisão humana e o que diz a um cliente cujo crédito é negado. Com isso, podemos dizer onde estão as lacunas.
Conceder ou negar crédito a uma pessoa é hoje regulado por três ângulos diferentes. A Diretiva (UE) 2023/2225 olha para o resultado perante o consumidor e lhe reconhece direitos. O Regulamento (UE) 2024/1689 olha para o sistema e o classifica como de alto risco. E o RGPD olha para o tratamento e limita as decisões baseadas exclusivamente em tratamento automatizado. Um projeto que tenha trabalhado só uma das três frentes tem, quase com certeza, lacunas nas outras duas.
Três direitos que se leem rápido e se implantam devagar: obter intervenção humana por parte do credor, obter uma explicação significativa e compreensível e expressar seu ponto de vista e solicitar uma revisão. O segundo é o que mais descarta arquiteturas: um modelo muito preciso, mas opaco, pode se tornar inutilizável não por seu desempenho, mas porque seu resultado não se traduz em uma explicação útil. E a diretiva exige, além disso, que a capacidade de reembolso seja avaliada e verificada antes de celebrar o contrato, com «a devida consideração das obrigações atuais».
A diretiva exclui as categorias especiais de dados, com menção expressa aos dados de saúde, e os provenientes de redes sociais. Esta última exclusão fecha um caminho que durante anos foi apresentado como a solução para dar crédito a perfis sem histórico. Mas o verdadeiro trabalho técnico está nas variáveis aproximadas: um modelo pode não usar dados de saúde e, sim, variáveis que os preveem, de modo que formalmente cumpre enquanto o dado proibido continua decidindo. Depurá-las é um exercício estatístico, não uma revisão documental, e serve ao mesmo tempo para a CCD2 e para a governança de dados do Regulamento de IA.
A classificação não admite discussão: o Anexo III do Regulamento de IA inclui, dentro da categoria de acesso a serviços essenciais, os sistemas destinados a avaliar a solvência creditícia. Isso ativa um pacote completo: gestão de riscos, governança de dados, documentação técnica, manutenção de registros, transparência, supervisão humana e precisão, robustez e cibersegurança. Duas nuances costumam ser mal interpretadas: a supervisão humana deve ser efetiva, e não um botão que ninguém usa; e os registros não são o log da aplicação, mas os rastros que permitem reconstruir uma decisão concreta meses depois. O enquadramento geral está na página do Regulamento de IA.
A conclusão operacional é que abrir três projetos separados multiplica o custo e produz documentação que não se encaixa. As obrigações se sobrepõem: o circuito de intervenção humana da CCD2 é, em boa parte, a supervisão humana do Regulamento de IA, e a rastreabilidade que permite explicar uma recusa é a mesma que permite manter registros. O entregável comum é um dossiê de decisão por operação (dados de entrada, resultado do sistema, revisor, alegação do cliente e fundamentação final), que serve de prova nos três regimes. Convém cruzá-lo com a avaliação de solvência e com o regime do canal a distância.
Normas de referência, com link para o texto oficial:
Normas e links revisados em .