← Todos os guias Como funciona

Porque é que as capturas de ecrã quebram a deteção de IA

Uma captura de ecrã substitui as evidências que um detetor lê por evidências sobre o seu próprio ecrã. O que sobrevive, o que não sobrevive e o que fazer quando uma captura de ecrã é tudo o que tem.

· 10 min de leitura · Best AI Image Detector

Uma captura de ecrã é uma nova imagem feita pelo seu dispositivo a partir do que estava no ecrã. Descarta a codificação original e o ruído do sensor, substituindo-os pelo seu próprio pipeline de visualização, que é a maior parte do que um detetor lê.

O que uma captura de ecrã realmente captura

Parece que se está a copiar, mas não é. O ficheiro original foi descodificado em pixéis, dimensionado para caber numa janela, gerido em termos de cor para o seu ecrã, composto com tudo o resto no ecrã, e depois esse resultado foi capturado e codificado novamente.

Cada um desses passos é o seu dispositivo a operar sobre a imagem e não sobre a imagem em si. A saída é um registo fiel do que viu e um registo pobre do que o ficheiro continha.

A deteção lê a segunda coisa. Os padrões de ruído do sensor, o histórico de compressão e a textura fina que separa a captura de uma câmara de uma imagem gerada são propriedades da codificação original, e a captura de ecrã substituiu essa codificação por completo.

Portanto, o modelo não está a falhar quando interpreta mal uma captura de ecrã. Ele está a ler com precisão o que está à sua frente, e o que está à sua frente é uma renderização produzida por software.

Para que lado pende o erro

De forma previsível, e na direção que causa mais problemas. As capturas de ecrã empurram as fotografias genuínas para cima e as imagens geradas para baixo, comprimindo tudo para o meio, onde nada pode ser concluído.

O que uma captura de ecrã faz a uma pontuação
Fotografia, original
13
Fotografia, com captura de ecrã
52
Gerada, original
94
Gerada, com captura de ecrã
71

Ilustrativo. A direção é consistente mesmo onde a magnitude varia.

As mesmas duas imagens, antes e depois de uma captura de ecrã. Ambas moveram-se em direção ao meio.

Note o quanto as duas barras do meio estão mais próximas do que as duas exteriores. O intervalo que torna um resultado útil estreitou-se de oitenta e um pontos para dezanove, e dezanove pontos não chegam para decidir nada.

É por isso que a reclamação mais comum sobre os detetores, de que uma fotografia real foi sinalizada, se deve tão frequentemente a uma captura de ecrã e não à ferramenta.

O que fazer quando uma captura de ecrã é tudo o que tem

Isto acontece constantemente, e a resposta não é desistir, mas sim mudar o que exige do resultado.

  1. Tente aceder ao original primeiro

    Cole o URL da página, peça o ficheiro ao remetente ou encontre a publicação em vez da imagem da publicação. Isto resolve a maioria dos casos de imediato.

  2. Faça a pesquisa inversa de imagens

    Funciona muito melhor em capturas de ecrã do que a análise de pixéis, porque corresponde à composição e não à textura.

  3. Leia o mapa, não o número

    O calor localizado sobrevive melhor a uma captura de ecrã do que os valores absolutos. Uma região que se destaca do resto continua a ser informativa.

  4. Desconsidere o meio por completo

    Numa captura de ecrã, qualquer valor entre cerca de quarenta e setenta não transporta informação nenhuma.

  5. Olhe para a imagem você mesmo

    A composição, o texto, os reflexos e a geometria sobrevivem completamente a uma captura de ecrã, e é nesses elementos que uma pessoa supera o modelo.

O quinto passo merece mais peso do que o habitualmente recebido. Tudo o que um leitor humano avalia é preservado perfeitamente por uma captura de ecrã, pelo que o peso da evidência se desloca para a inspeção precisamente quando o sinal automatizado enfraquece.

Porque é que isto importa para a forma como as pessoas partilham as coisas

A captura de ecrã é agora a unidade predefinida de partilha. Algo é visto, capturado e reencaminhado e, quando chega a alguém que o quer verificar, já foi frequentemente capturado mais do que uma vez.

Cada passagem agrava a perda. Uma captura de ecrã de uma captura de ecrã passou por dois pipelines de visualização e duas codificações, e o ficheiro original está dois passos mais distante do que a pessoa que o verifica imagina.

A consequência prática para quem faz a verificação é que encontrar o original não é um passo preliminar, é a maior parte do trabalho. Um processo de verificação que começa com o ficheiro que lhe foi entregue obterá um número mediano e nenhuma resposta.

Também vale a pena dizê-lo a quem lhe envia coisas. Pedir o ficheiro em vez de uma fotografia do ficheiro não lhes custa nada e altera o que pode ser apurado a partir dele.

O que sobrevive a uma captura de ecrã
SinalSobrevive?Por quê
Composição e geometriaSimA imagem continua a ser a imagem
Texto visível e sinaléticaSimLegível, a menos que seja fortemente dimensionado
Correspondência de pesquisa inversa de imagensSimCorrespondências por conteúdo, e não por codificação
Estrutura do mapa de regiõesParcialmenteO calor localizado persiste, os valores desviam-se
Pontuação de quadro inteiroNãoMede a captura de ecrã, e não a imagem
Metadados e credenciaisNãoDescartado por completo

O único caso em que uma captura de ecrã é a prova

Há uma exceção que vale a pena mencionar, porque inverte tudo o que antecede. Por vezes, o que está a ser avaliado não é a imagem, mas a interface à sua volta: um fio de mensagens, um saldo de negociação, uma confirmação de transação, uma publicação que entretanto foi eliminada.

Nestes casos, a captura de ecrã é o artefacto e não há nenhum original para encontrar. A análise de pixéis quase não contribui com nada, e as verificações úteis são totalmente diferentes: a interface corresponde à versão atual dessa aplicação? Os números somam o valor correto? O carimbo de data/hora faz sentido?

As capturas de ecrã fabricadas falham habitualmente na consistência interna e não na textura. Um saldo que não é igual à soma das suas linhas, um carimbo de data/hora num dia em que o serviço estava em baixo, um tipo de letra ou espaçamento que não corresponde ao produto real, um ícone de estado que já não existe.

Vale a pena separar isto da verificação de imagens propriamente dita, porque o instinto de passar um detetor por cima de uma captura de ecrã de uma conversa produz um número mediano e uma falsa sensação de que algo foi verificado.

O hábito que vale a pena criar é o de tratar uma captura de ecrã como uma pista e não como uma prova. Indica-lhe o que deve ir procurar, e aquilo que vai procurar é o ficheiro. Um processo de verificação que para na captura de ecrã parou um passo mais cedo.

Para as equipas, vale a pena incluir isto numa regra de receção. Peça ficheiros, e não fotografias de ficheiros, e diga-o no momento em que alguém está a carregar. A maioria das pessoas envia uma captura de ecrã porque era a opção mais rápida, e não porque o original não estava disponível.

Se houver uma frase a reter disto, é que uma captura de ecrã responde a uma pergunta diferente daquela a que o ficheiro responde. Ambos são assuntos legítimos; simplesmente não são intercambiáveis, e a maior parte da confusão aqui surge por os tratarmos como se fossem.

Perguntas que as pessoas fazem

Porque é que uma captura de ecrã é muito pior do que o original?
Porque é uma imagem diferente. O original foi descodificado, dimensionado, gerido a cores, composto com o seu ambiente de trabalho e codificado novamente pelo seu dispositivo. A deteção lê a codificação original e a textura do sensor, e nada disso sobreviveu. O modelo está a ler o seu ecrã, e não o ficheiro.
Posso verificar uma captura de ecrã de todo?
Pode, e deve desconsiderar totalmente o meio da escala. Os dois extremos continuam a conter alguma informação: uma pontuação muito baixa numa captura de ecrã é significativa porque a compressão empurra para cima, e uma pontuação muito alta sobreviveu a um processo que joga contra ela.
O que devo pedir a alguém para enviar em alternativa?
O próprio ficheiro ou uma hiperligação para o local onde foi publicado. Num telemóvel, isso significa guardar o anexo em vez de tirar uma captura de ecrã à conversa. Custa-lhes alguns segundos e altera totalmente o que pode ser apurado a partir da imagem.
O mapa de regiões continua a funcionar?
Em parte. Os valores absolutos desviam-se, mas uma edição localizada mantém-se localizada, pelo que uma região que se destaca dos seus vizinhos continua a ser informativa mesmo numa cópia degradada. Leia a forma do mapa em vez dos números nele contidos.
E quanto a uma fotografia de um ecrã tirada com um telemóvel?
Pior ainda. Isso adiciona um ecrã, uma lente, um sensor e outra passagem de compressão, para além de padrões de moiré e reflexos. Trate qualquer resultado como ruído e apoie-se inteiramente no que uma pessoa consegue ver na imagem.
Porque é que tantos relatórios de falsos positivos envolvem capturas de ecrã?
Porque tirar capturas de ecrã empurra fotografias genuínas para cima na escala por conceção. Alguém tira uma captura de ecrã a uma fotografia de família real, vê uma pontuação na casa dos cinquenta e conclui que a ferramenta está avariada. A ferramenta está a medir a captura de ecrã com precisão, o que é diferente de medir a fotografia.