Como funciona a Fluentry

O que medimos (e o que não medimos)

A Fluentry mede a literacia em IA: a sua capacidade de reconhecer os resultados de uma IA, avaliar a sua qualidade e raciocinar sobre quando e como é adequado usar a IA. Em concreto: consegue detetar material gerado por IA, compreende como funciona a IA a um nível que lhe permite ler as notícias com sentido crítico e é capaz de raciocinar sobre situações éticas que envolvem a IA?

O que a Fluentry não mede

• A sua capacidade de construir IA. Não somos um teste de programação nem uma certificação de engenharia de aprendizagem automática.
• A sua capacidade de usar uma ferramenta de IA específica. Não certificamos a proficiência com o ChatGPT, o Claude, o Copilot ou qualquer outro produto. As ferramentas mudam a cada trimestre; a literacia permanece.
• A sua capacidade de substituir uma tarefa humana por IA. Não o avaliamos quanto à competência de automação.
• A sua inteligência, a sua empregabilidade ou o seu potencial de rendimento futuro. A literacia em IA é uma competência entre muitas.

Se precisar de uma avaliação de algum dos pontos acima, a Fluentry não é a ferramenta certa. Preferimos dizer-lho a sobrevalorizar o teste.

Como são criadas as perguntas

Cada pergunta de teste da Fluentry é escrita em coautoria. Uma pessoa docente identificada pelo nome encomenda a pergunta. Onde beneficia a qualidade e a rapidez, as ferramentas de IA redigem material. Duas pessoas revêem cada pergunta antes de ser publicada. Quando a resposta depende de juízo, nos nossos cenários de ética, um painel de peritos credenciados fixa os valores pontuados. A IA nunca fixa um valor pontuado.

Divulgamos o papel da IA ao nível do tipo de pergunta. Não o ocultamos nem o exageramos. O processo reside no nosso repositório de conteúdos (content repository), disponível ao abrigo de um acordo de confidencialidade (NDA) para a avaliação de compras.

O que a IA faz, por teste

Can AI Fool You? O lado humano é redigido por uma pessoa colaboradora identificada pelo nome, sem que qualquer ferramenta de IA seja usada na redação ou edição. O lado da IA é gerado através de uma rotação de cinco ou mais modelos de ponta. Ambos os lados são revistos por uma segunda pessoa identificada pelo nome antes de serem combinados.

AI Knowledge: o enunciado e a escolha do conceito são redigidos por autores internos ou por peritos da matéria contratados. A IA pode sugerir as opções erradas, as etiquetas de conceito e as explicações; a pessoa autora humana seleciona, edita e aprova. A IA nunca redige o enunciado nem escolhe a resposta correta.

AI Ethics: os enunciados e a formulação das opções são escritos por pessoas. A IA pode sugerir variantes, mas a versão final é sempre escrita pela pessoa autora humana. O valor pontuado de cada opção é fixado por um painel de peritos de pelo menos dois profissionais. A IA nunca fixa um valor pontuado.

O que a IA nunca faz

• A IA nunca fixa um valor pontuado numa pergunta do tipo Cenário.
• A IA nunca escolhe a resposta correta numa pergunta Knowledge.
• A IA nunca redige um lado humano num teste por pares.
• A IA nunca revê uma pergunta nem a aprova. Ambas as revisões são humanas.
• A IA não é usada para gerar imagens de pessoas reais ou identificadas, nem para imitar o estilo de um fotógrafo específico.
• A IA não é usada para gerar fotografias de autores, revisores, clientes ou da equipa da Fluentry.

De onde vêm as fotografias humanas

O lado humano dos nossos pares de imagens usa fotografias reais tiradas por fotógrafos no ativo. Incluem imagens de Martin Vorel, publicadas através do seu projeto de fotografia livre LibreShot. Creditamos os fotógrafos aqui e não na superfície do teste, porque indicar a fonte junto a um par ativo daria uma pista sobre a resposta.

Como pontuamos cada teste

A sua pontuação é a percentagem de perguntas que respondeu corretamente, com um pouco mais de crédito para as perguntas mais difíceis e um pouco menos para as mais fáceis, numa escala de 0 a 100.

No nosso teste de ética a lógica muda: a sua pontuação de ética é o valor médio das opções que escolheu, numa escala de 0 a 100. As opções de valor mais elevado refletem as posições éticas mais fortes que o nosso painel de peritos ordenou.

Na maioria das perguntas do tipo Cenário não existe uma única resposta correta. A escala de valores reflete o juízo especializado do painel, não uma verdade objetiva. Mais abaixo nesta página explicamos quem compõe o painel.

O que significa um Grade

A Fluentry usa uma escala de Grades inspirada nos Grades dos exames de música: do Grade 1 ao Grade 8, com um nível Diploma acima do Grade 8.

O seu Grade é calculado a partir das pontuações que obteve por teste. Usamos a sua pontuação mais recente em cada teste (e não a melhor), ponderada a favor do desempenho recente, para que um Grade obtido há um ano não ofusque o teste que fez na semana passada.

Os limiares de Grade estão ancorados em milhares de sessões da Fluentry. Não se movem. Um Grade 5 em 2027 significa a mesma competência que um Grade 5 em 2026, a mesma propriedade que torna significativo, ao longo das décadas, o certificado de um violinista de Grade 5.

O que está por trás de cada Grade

Estas são as bandas de percentil no momento da imagem de calibração do lançamento. São depois convertidas em cortes de pontuação fixos e congeladas; não se deslocam à medida que chegam novos participantes. Um Grade obtido em 2027 reflete a mesma competência que um obtido em 2026.

Porquê ancorado e não móvel

Limiares móveis, em que o corte do Grade 5 se desloca todos os meses à medida que chegam novos participantes, produzem inflação ou deflação das classificações consoante o sentido em que a população se desloca. Limiares ancorados produzem uma credencial estável. Escolhemos a credencial. Quando alteramos substancialmente a nossa metodologia, por exemplo ao acrescentar um novo tipo de teste que afeta a forma como os Grades são agregados, voltamos a ancorar de forma explícita e notificamos cada utilizador cujo Grade mude. É a mesma disciplina que os júris de exames de música aplicam há décadas.

O nível Diploma

O Diploma corresponde aos 2 % superiores de todos os Grades da Fluentry. Não é um Grade 9; é um nível distinto com o seu próprio tratamento de credencial. Escolhemos 2 % porque é suficientemente raro para ter significado e não tão raro que desapareça num dado ano de lançamento.

Direção futura: quando a nossa Academy for lançada, o nível Diploma poderá evoluir para exigir a conclusão de um curso além do limiar de pontuação. Anunciaremos essa alteração com antecedência e atualizaremos esta página no mesmo dia em que for lançada.

Quando é lançado um novo teste

Quem fez apenas um teste da Fluentry tem um Grade baseado nesse teste. Quando é lançado um novo teste, o seu Grade não muda de um dia para o outro; mantém o que obteve. Sobe (ou mantém-se, ou desce) ao fazer mais testes. Nunca forçamos uma repetição.

Como o comparamos

Comparar a sua pontuação com a de outros participantes do seu país só funciona quando um número suficiente deles tiver feito o teste. Se o seu país ainda for pequeno, dizemo-lo. O seu cartão de partilha mostra sempre um percentil, nunca o deixaremos sem um número, mas divulgamos de onde o retirámos: o seu país, o conjunto europeu mais amplo ou (enquanto os números mundiais ainda estão a formar-se) o conjunto global.

A imagem de partilha que gera fica congelada no momento da partilha. Se o seu país ganhar mais participantes no mês seguinte e o seu percentil local mudar ligeiramente, a imagem que publicou no LinkedIn não muda de forma retroativa.

Com quem é comparado

Uma ressalva honesta

Quando combinamos pontuações europeias entre países, o resultado é uma aproximação. Os bancos de perguntas diferem: as perguntas de teste por pares em francês não são traduções das inglesas; são redigidas de forma independente segundo uma grelha de dificuldade comum. O número europeu combinado é, por isso, um agregado de testes de dificuldade comparável mas não idêntica. À medida que os números de cada país crescem para além das suas primeiras centenas de participantes, voltamos ao conjunto próprio do seu país, que é a comparação mais limpa.

Saúde das perguntas

As perguntas da Fluentry são avaliadas continuamente face às pessoas que as fazem. Todas as semanas, cada pergunta ativa é classificada quanto ao acerto e ao envolvimento. As perguntas que ficam demasiado fáceis, demasiado difíceis, ou que mostram um salto súbito no acerto (sinal de que a resposta foi divulgada), são assinaladas. As perguntas que de forma consistente não discriminam saem do banco ativo.

Os valores agregados de saúde das perguntas do banco ativo estão disponíveis ao abrigo de um acordo de confidencialidade (NDA) para a avaliação de compras.

Quando uma pergunta deixa de funcionar, por ficar demasiado fácil à medida que a IA melhora, por aparecer num fórum público, ou por simplesmente já não revelar nada de útil, é retirada. Substituímo-la. O banco ativo de perguntas renova-se continuamente. Registamos cada retirada e reportamos as contagens agregadas ao abrigo de um acordo de confidencialidade (NDA) para a avaliação de compras.

Agregamos estes dados por teste e por tipo de teste, nunca por pergunta (a identidade de uma pergunta é propriedade intelectual que não divulgamos).

Quem constrói o banco

O banco de perguntas da Fluentry é construído por uma equipa que combina escrita interna, perícia contratada de especialistas da matéria e uma rede de docentes, especialistas em ética e profissionais de políticas públicas. Cada pergunta é revista por uma segunda pessoa antes de ser publicada. Para os cenários de ética, os valores pontuados são fixados por um painel de peritos de pelo menos dois profissionais.

Não publicamos nomes individuais no sítio público; a maioria das pessoas colaboradoras é contratada por pergunta, e essa é a sua preferência habitual. Divulgamos, no entanto, o padrão segundo o qual contratamos. Para a avaliação de compras, fornecemos a lista completa de autores e revisores ao abrigo de um acordo de confidencialidade (NDA).

O padrão segundo o qual contratamos

• Autores: redatores internos com conhecimento prático da matéria, ou peritos contratados com experiência publicada ou em exercício no domínio do teste. Os lados humanos dos testes por pares são escritos por falantes nativos da língua do teste.
• Revisores: uma segunda pessoa, independente do autor, falante nativa da língua do teste, com conhecimento prático do domínio suficiente para avaliar o acerto e a adequação.
• Painel de peritos (Ética): pelo menos dois membros por pergunta com experiência em exercício ou publicada em ética da IA, política da IA, filosofia ou áreas afins. A mediana do painel fixa o valor pontuado.

Não identificamos pessoas publicamente na v1 porque a maioria das pessoas colaboradoras o prefere, porque quem realiza a avaliação de compras retira mais valor de verificar a lista ao abrigo de um acordo de confidencialidade (NDA), e porque não publicamos dados pessoais de que não precisamos.

Registo de alterações

Quando a forma como a Fluentry mede muda, registamo-lo aqui. São registados três tipos de alterações. Alterações de perguntas: as perguntas são retiradas continuamente à medida que o banco evolui; registamos as renovações trimestrais por lote, não cada retirada individual. Alterações de metodologia: quando acrescentamos um novo tipo de teste, mudamos a forma como os Grades são agregados ou revemos os limiares de percentil, esta página recebe uma entrada com versão, e quem tiver o Grade afetado recebe um e-mail antes de a alteração ser aplicada. Alterações de página: quando esta página é revista de forma significativa, a entrada abaixo regista o que mudou e quando.

Posição quanto ao Regulamento da IA da UE

O Regulamento da IA da UE (EU AI Act) entrou em vigor em fevereiro de 2025. Duas das suas partes são diretamente relevantes para a Fluentry.

O artigo 4.º, a obrigação de literacia em IA. As organizações que utilizam sistemas de IA devem assegurar que o seu pessoal possui literacia em IA suficiente. A Fluentry existe, em parte, para tornar essa obrigação mensurável. A nossa oferta B2B documenta a literacia em IA da organização numa forma adequada a compras e auditoria.

Classificação de risco elevado (anexo III). O Regulamento enumera categorias de sistemas de IA considerados de risco elevado e que desencadeiam obrigações de conformidade mais pesadas. A Fluentry não é de risco elevado ao abrigo do anexo III. Somos uma avaliação de literacia em IA usada por indivíduos sobre si próprios e por organizações sobre o seu próprio pessoal para fins de conformidade. Não somos usados para decisões de contratação, avaliação de crédito, identificação biométrica, atribuição de classificações no sentido regulado escolar ou universitário, nem para qualquer outra categoria do anexo III.

Para que fique claro: um Grade da Fluentry não é um certificado educativo regulado. É uma credencial que emitimos segundo a nossa própria metodologia, inspirada nos Grades dos exames de música, mas que não faz parte de qualquer sistema educativo nacional, entidade certificadora ou quadro de qualificações acreditado. Pertence à mesma categoria conceptual que uma sequência numa aplicação de línguas ou um crachá de velocidade de dactilografia: um sinal real de uma competência real, emitido pela plataforma que a mede, não um diploma académico reconhecido pelo Estado.

Quando um cliente B2B opta por usar a Fluentry de uma forma que efetivamente desencadeia obrigações do anexo III, por exemplo ao tratar a nossa avaliação como critério vinculativo numa decisão de contratação, esse uso é da responsabilidade do cliente ao abrigo do Regulamento, não da Fluentry. Os nossos contratos B2B padrão atribuem essas obrigações através do acordo de tratamento de dados (DPA).

Um memorando interno de conformidade com a análise completa do anexo III está à disposição das equipas de compras ao abrigo de um acordo de confidencialidade (NDA).

LAST REVIEWED 6 de junho de 2026