Metodologia

O censo pergunta a quem trabalha com educação internacional: agências e consultores educacionais, universidades e faculdades, escolas de idiomas e programas de pathway, associações e as empresas de serviços ao redor. Uma pessoa, respondendo por si e pela organização em que trabalha — o instrumento separa as duas coisas o tempo todo, porque “eu uso IA todo dia” e “minha organização implantou IA” são afirmações diferentes.

Esta é uma amostra autosselecionada, não uma amostra probabilística. Não existe um cadastro deste setor — nenhum registro de todas as pessoas que trabalham nele — então nenhuma margem de erro pode ser citada com honestidade, e nenhuma é. Quem aceita passar onze minutos respondendo uma pesquisa sobre IA tende, em média, a se interessar mais por IA do que quem não aceita. Leia cada número como uma descrição de quem respondeu, recortada por tipo de organização, e não como uma projeção sobre o setor inteiro.

Quatro partes, cerca de quarenta perguntas, aproximadamente onze minutos: IA no seu trabalho; IA conectada e agêntica; condições do negócio; políticas e perspectivas. Cada parte é salva ao ser concluída, então uma resposta que para na parte dois ainda conta para a parte dois.

Cada pergunta tem um identificador estável (s1_ai_frequency, e assim por diante). A redação pode melhorar entre edições; os identificadores e os valores de resposta armazenados são congelados no piloto e nunca renomeados, porque a comparabilidade ano a ano é a razão de fazer um censo em vez de uma enquete. Quando uma pergunta muda a ponto de quebrar a comparabilidade, ela ganha um novo identificador e a série anterior se encerra.

O questionário é publicado em inglês, português (Brasil) e espanhol. O inglês é a versão de referência; as traduções são revisadas por falantes nativos que trabalham no setor, e os valores de resposta independem do idioma, então uma resposta é armazenada de forma idêntica em qualquer língua.

As pessoas chegam ao censo por quatro caminhos, e cada um é registrado:

• Convites de parceiros — uma associação, rede ou evento convida seus associados, cada um com seu próprio link. Os parceiros veem quem começou e quem terminou; nunca veem uma resposta.
• A lista do próprio The Brief — assinantes da newsletter do podcast.
• Indicações — alguém que respondeu e passou o link a um colega. A atribuição é do primeiro toque e fica fixa quando a resposta é criada.
• O link público — quem chega por redes sociais, busca ou menção em newsletter.

A origem fica registrada em cada resposta, o que permite testar os números publicados quanto a viés de origem: se um dado principal muda de forma relevante conforme o caminho de chegada, isso é informado junto com ele.

Envios automatizados são barrados na porta. Cada resposta está ligada a um único token, há um envio por endereço de e-mail, e o endereço é verificado como entregável antes de receber resultados. As respostas também são conferidas contra o próprio questionário: um valor que o formulário não poderia ter produzido é recusado, não armazenado.

As respostas são sinalizadas, e não excluídas em silêncio, quando:

• uma parte é concluída mais rápido do que é possível ler — menos de 45 segundos. Uma parte rápida é alguém com pouco a dizer sobre ela; duas ou mais é um padrão, e a resposta sai dos números publicados;
• as respostas se contradizem. Nunca usar IA e ao mesmo tempo relatar IA que age sem aprovação humana não é uma leitura das perguntas que consigamos conciliar, e essa resposta é excluída; contradições mais leves — uso diário sem nenhuma ferramenta acima de “mensalmente” — são registradas e mantidas;
• uma matriz é preenchida de uma tacada só: marcar as quatorze ferramentas como usadas diariamente não é uma semana de trabalho, e essa resposta é excluída. Marcar “nunca” em todas é perfeitamente plausível e não é sinalizado;
• várias respostas vêm da mesma organização. Colegas são respondentes legítimos; o que eles distorcem é a contagem de organizações, então são sinalizados — pelo domínio de e-mail do empregador, e um e-mail gratuito nunca torna duas pessoas colegas — e tratados na análise em vez de bloqueados;
• as indicações têm teto antes que possam ser exploradas: cinco indicações creditadas por respondente, no máximo duas de uma mesma organização, e nada é creditado a partir de uma resposta excluída pelas regras acima.

As sinalizações ficam armazenadas com a resposta e são aplicadas no momento da análise. A quantidade de respostas excluídas, e o motivo, é publicada junto com os resultados.

Estas regras foram definidas antes de a coleta abrir:

• Os números principais não são ponderados e são sempre informados com a própria base. Sem um cadastro de referência para ponderar, a ponderação trocaria um viés visível por um invisível.
• Cada número é informado com o seu próprio n, por parte e por recorte — não com o total de quem começou. As partes finais têm bases menores que as iniciais, e a diferença é declarada em vez de suavizada.
• Os recortes são por tipo de organização (s1_org_type), o eixo em torno do qual o instrumento foi desenhado. País, porte e tempo de setor são recortes secundários.
• Verificação de robustez para organizações duplicadas — cada número principal é recalculado mantendo uma resposta por organização. Quando isso move um número em mais de dois pontos, os dois são publicados.
• “Não sei” é informado, não descartado, e fica fora das perguntas de ranking em vez de contar como nota baixa.

O censo define um número: o The Brief AI Adoption Index, de 0 a 100, para o setor e para cada tipo de organização com amostra suficiente para publicar. É o que faz disto uma série, e não um relatório — o mesmo número, calculado do mesmo jeito, no ano que vem e a cada pulso trimestral no meio do caminho.

A fórmula foi fixada antes de a coleta abrir e está publicada aqui, que é a única coisa que impede um índice de ser escolhido para servir ao seu primeiro resultado. É uma média ponderada de cinco respostas, cada uma pontuada de 0 a 1 e calculada entre todos que responderam àquela pergunta:

Cinco perguntas de escolha única, de propósito: um índice que o pulso trimestral não consegue recalcular é uma estatística anual com passos a mais. “Não sei” fica fora da média em vez de valer zero — incerteza não é ausência de IA — e cada componente informa a própria base, então o Índice é publicado com a menor delas ao lado. Se qualquer componente ficar abaixo da amostra mínima, nenhum Índice é publicado.

Mudar qualquer peso ou escala iniciaria uma nova série com uma nova versão. Não revisaria esta.

Nada é publicado enquanto o censo está aberto. Números coletados pela metade se movem, são citados e não podem ser retirados de circulação.

Nenhum recorte é publicado abaixo de dez respostas. Esse piso vale em todo lugar do mesmo jeito — no relatório público, na comparação que o respondente vê e no recorte privado que uma associação recebe dos próprios associados. Quando um recorte é pequeno demais, a página diz isso em vez de recorrer a um grupo maior sem avisar.

Quem respondeu recebe os próprios resultados antes de todo mundo. Depois da publicação do relatório, uma base anonimizada é liberada para que os números possam ser conferidos; ela é reduzida antes, de modo que nenhuma combinação de respostas identifique um respondente ou uma organização pequena, e as respostas abertas ficam de fora.

O consentimento é pedido em caixas separadas, nunca agrupadas: resultados e sua comparação pessoal; contato do patrocinador; pesquisas curtas trimestrais. Recusar qualquer uma delas não muda o questionário.

As respostas são armazenadas separadamente dos dados de contato, os agregados só são publicados acima da amostra mínima, e uma associação que convida seus associados vê a participação, nunca uma resposta. O aviso de privacidade detalha o que é guardado, por quanto tempo e como pedir a exclusão.

Se um número publicado se mostrar errado, ele é corrigido na página com uma nota datada dizendo o que mudou. Números não são editados em silêncio.

Dúvidas sobre o método, ou pedido de um recorte que não foi publicado: survey@thebriefinternationaleducation.com.