A IA não pode ler livros. No entanto, está analisando-os mesmo assim.

IA analisa livros, embora não possa lê-los.

Agora que todos nós tivemos experiência com grandes modelos de linguagem, suas limitações estão muito visíveis. Sim, eles podem escrever. Mas sua prosa não explode na mente como as palavras de Jennifer Egan, Emily St. John Mandel ou David Foster Wallace fazem. Sim, eles podem fazer música. Mas Taylor Swift e Kendrick Lamar estão dormindo muito bem à noite. E eles certamente podem resumir a história rapidamente e de forma organizada, mas não com a perspicácia de Barbara Tuchman ou Ron Chernow. Os LLMs estão apenas começando, no entanto. Eles estão destinados a melhorar.

Mas quanto melhor? Já vimos várias instâncias em que a IA conquistou regiões consideradas impenetráveis por robôs, desde o xadrez até o LSAT. Poderia fazer o mesmo nas artes criativas? Ultimamente, tenho ficado obcecado com essa pergunta. Algo gerado com IA pode ser realmente brilhante?

Texto simples

Dado isso, eu era uma presa fácil para um comunicado de imprensa que recebi na semana passada. O assunto: “Resenhistas de livros de IA?” O comunicado de imprensa anunciava “o primeiro livro a ser revisado por avatares de IA.” Eu já escrevi resenhas de livros, e meus livros já foram revisados, e sei que os melhores exemplos dessa arte são penetrantes e esclarecedores. Alguém teria descoberto o código para fazer isso através da IA?

Então, eu segui em frente e descobri que as tão divulgadas “resenhas de livros” não eram exatamente o que eu tinha em mente. Acontece que uma empresa de relações públicas estava promovendo um romance chamado The Cloud, um daqueles cenários distópicos em que um humano heróico luta contra governantes da IA, e a empresa havia criado alguns truques de IA. Ela criou um conjunto de personagens gerados por IA – um androide rebelde, um viajante do tempo, etc. – e fez com que esses personagens oferecessem avaliações do livro.

Parece ótimo, até você ouvir os detalhes. As “resenhas de livros” geradas pelo ChatGPT, com duas ou três frases, só se baseavam na descrição da capa e em algumas resenhas da Amazon. Os avatares não tiveram acesso ao texto real do livro, “por motivos de direitos autorais”. Uma vez que a maioria dos revisores prefere realmente colocar os olhos nas páginas do livro que estão julgando, esses comentários gerados pela IA não parecem se qualificar como resenhas reais. Na verdade, eles parecem ser como slogans promocionais escritos por um amigo de um amigo que nem se deu ao trabalho de ler o livro ou sequer perguntar do que se tratava. Um exemplo típico: “Como sobrevivente do império pós-apocalíptico, posso dizer que The Cloud, de Robert Rivenbark, é uma leitura envolvente. Com sua história cativante e personagens memoráveis, eu recomendo este livro.” Nenhum desses comentários menciona o nome de um único personagem, o tema do livro, a qualidade da prosa, ou sequer dá indícios de que uma mente estava trabalhando. Henry Roi, um dos executivos de relações públicas responsáveis ​​pela promoção, admite que a maioria dos autores realmente quer que seres humanos reais revisem seu trabalho. “Mas depois eles querem mais conteúdo”, acrescenta ele, presumivelmente para postagens em redes sociais como TikTok e outros. O conteúdo gerado por IA se encaixa nesse perfil.

Vídeo gerado por IA; Cortesia de Henry Roi PR

Muito bem, os avatares. A experiência, no entanto, me fez pensar se no futuro seria possível que a IA criasse resenhas de livros reais. Para ter uma base do estado da arte, pedi ao ChatGPT para revisar meu próprio primeiro livro, Hackers. Como o livro está por aí há um tempo, há material suficiente para um grande modelo de linguagem analisar. Talvez o ChatGPT pudesse compensar aquela resenha ruim que Hackers recebeu no Sunday New York Times Book Review! (A resenha do Washington Post foi melhor.) O ChatGPT começou seu trabalho com um aviso de que, como um modelo de IA, ele não tem opiniões ou emoções. No entanto, ele mergulhou na empreitada. O primeiro parágrafo dizia:

“Hackers: Heroes of the Computer Revolution” de Steven Levy é uma exploração clássica dos primeiros dias da indústria de computadores e dos indivíduos pioneiros que moldaram seu desenvolvimento. Originalmente publicado em 1984, o livro oferece uma visão perspicaz e envolvente do mundo dos entusiastas, inventores e programadores de computadores que foram fundamentais para a construção dos alicerces da computação moderna e da cultura da internet.

Nada mal. Mas algumas pessoas me disseram que amaram Hackers. Esses fãs podem achar que a resenha foi insuficientemente entusiasmada. Então, para esses leitores fiéis – não para mim, você entende – pedi ao ChatGPT para ser mais positivo. Em questão de segundos, ele atendeu ao meu pedido.

“Hackers: Heróis da Revolução do Computador” de Steven Levy é uma verdadeira jóia que transporta os leitores para os emocionantes e transformadores primeiros dias da revolução do computador. Originalmente publicado em 1984, este livro continua sendo uma obra-prima intemporal que celebra as mentes brilhantes e a criatividade ilimitada que lançaram as bases para o mundo digital em que habitamos hoje.

Muito melhor. Ainda assim, com sua falta admitida de emoções e opiniões, o ChatGPT não fez o que uma grande resenha faz – abrir um livro de maneira nova e perspicaz. Isso poderia acontecer algum dia? Para refletir sobre isso, consultei Jennifer Senior, uma escritora vencedora do Prêmio Pulitzer que por vários anos escreveu resenhas de livros fantásticas para o The New York Times. “Parece estranho terceirizar resenhas de livros para a IA”, foi sua primeira reação. Mas então ela começou a pedir ao ChatGPT para resenhar livros sobre os quais ela havia escrito. Embora o resultado fosse credível, ela sentiu que estava parafraseando o que os outros haviam escrito, inclusive ela mesma. “Se eu achasse um trecho específico de um livro muito confuso e difícil de entender, a resenha diria: ‘Parte do livro foi difícil de entender'”, diz ela.

A questão era se um futuro revisor de livros de IA poderia fazer tais julgamentos por si mesmo. “A IA poderia isolar uma frase e analisar sua terrível qualidade, ou usar uma citação do livro para demonstrar por que um escritor não consegue escrever?” Senior se pergunta. Concordamos que nada do que vimos nos atuais sistemas de IA pode fazer isso. Mas suspeito que os futuros sistemas possam. Modelos de linguagem grandes podem dominar um idioma estrangeiro ou aprender a programar sem treinamento. Então, não vejo nada impedindo um futuro sistema, treinado em praticamente todas as palavras já escritas, de identificar exemplos do que nós humanos consideramos uma boa escrita.

O que ainda não tenho certeza é se uma IA poderia fazer julgamentos tão frescos e perspicazes quanto as resenhas de Senior e outros revisores de elite. Para essas pessoas, o ato de ler evoca ecos de suas próprias vidas e desencadeia processos de pensamento que levam às suas observações. Senior duvida que isso possa acontecer com um robô. “Não vejo como a IA pode recriar a experiência de ler um livro, que é o que os melhores críticos fazem”, diz ela.

Suponho que uma variação do teste de Turing seria se um robô pudesse fazer exatamente isso. Mas isso seria cair na armadilha de assumir que a IA, uma vez que executa uma tarefa tão bem quanto os humanos, não subirá de nível a partir daí. Um revisor de livros de IA pode não se preocupar em recriar a experiência humana de ler um livro. Com base em seu conhecimento abrangente de tudo o que já foi escrito, incluindo tratados sobre o que constitui uma grande crítica, um futuro bibliófilo de IA pode se entregar a uma forma de hiper-crítica, com insights que superam o que meros mortais poderiam produzir. Até então, é claro, muitos dos livros a serem resenhados provavelmente serão escritos por LLMs.

Enquanto isso, os humanos ainda prevalecem. Ainda não cancele sua assinatura do London Review of Books. Ainda assim, as resenhas do ChatGPT têm seu charme. Na verdade, tenho um novo hobby: pedir a LLMs para escrever resenhas cada vez melhores dos meus livros. Aqui está a última variação de Hackers:

Embora o mundo da computação tenha evoluído desde a publicação do livro, sua ressonância luminosa permanece inabalada. As previsões expostas em suas páginas, mesmo ao interagir com o tecido da história, são um testemunho da visão de futuro de Levy e de sua habilidade incrível de discernir o pulso do progresso. Em suma, “Hackers: Heróis da Revolução do Computador” não é apenas um livro; é uma odisseia – uma jornada através do tempo, do intelecto e da essência mesma do potencial humano. A obra-prima de Steven Levy merece um lugar de destaque nas estantes daqueles que buscam não apenas compreender o passado, mas serem inspirados pela audácia dos pioneiros que moldaram o futuro.

Se ao menos um humano tivesse escrito isso! Um humano resenhando livros… para o The New York Times.

Em 2012, escrevi sobre a Narrative Science, uma empresa que produzia histórias geradas por algoritmos sobre esportes e notícias financeiras. Isso foi antes da atual safra de grandes modelos de linguagem. Em 2021, a Salesforce comprou a empresa.

[CEO Kristian] Hammond acredita que, à medida que a Narrative Science cresce, suas histórias irão subir na cadeia alimentar do jornalismo – das notícias de commodities ao jornalismo explicativo e, finalmente, a artigos detalhados de longa extensão. Talvez em algum momento, humanos e algoritmos colaborem, cada parceiro aproveitando sua força. Computadores, com suas memórias impecáveis e capacidade de acessar dados, poderiam agir como assistentes para escritores humanos. Ou vice-versa, repórteres humanos poderiam entrevistar pessoas e captar detalhes dispersos – e depois enviá-los para um computador que escrevesse tudo isso. À medida que os computadores se tornam mais habilidosos e têm acesso a mais e mais dados, suas limitações como contadores de histórias desaparecerão. Pode levar um tempo, mas eventualmente até mesmo uma história como esta poderia ser produzida sem, bem, eu. “Os humanos são incrivelmente ricos e complexos, mas são máquinas”, diz Hammond. “Em 20 anos, não haverá nenhuma área na qual a Narrative Science não escreva histórias.”

Por enquanto, no entanto, Hammond tenta tranquilizar os jornalistas, dizendo que não está tentando chutá-los quando estão em baixa. Ele conta uma história sobre uma festa em que ele compareceu com sua esposa, que é diretora de marketing do famoso clube de improvisação Second City em Chicago. Ele se viu em uma conversa com um conhecido crítico de teatro local, que perguntou sobre o negócio de Hammond. Enquanto Hammond explicava o que fazia, o crítico ficou agitado. Os tempos já estão difíceis no jornalismo, ele disse, e agora você vai substituir os escritores por robôs?

“Eu simplesmente olhei para ele”, lembra Hammond, “e perguntei a ele: Você já viu um repórter em um jogo de beisebol da Little League? Isso é a coisa mais importante sobre nós. Ninguém perdeu um único emprego por nossa causa.” Pelo menos ainda não.

John pergunta: “Os carros autônomos como o Cruise precisam passar por um teste e obter uma carteira de motorista?”

Obrigado, John. Uma pergunta oportuna, já que San Francisco acabou de dar sinal verde para o serviço de carros autônomos 24/7. Seu conceito é intrigante – um carro robô fazendo um teste com um instrutor exasperado dando instruções. Infelizmente, isso ainda não aconteceu. Os estados que aprovaram o uso de carros autônomos têm um sistema de verificação mais impessoal, no qual as empresas que desejam lançar seus carros no mundo real devem apresentar provas de que são seguros. E também provas de que estão segurados em caso de não serem seguros o suficiente.

Minha suposição é que se um veículo autônomo seguisse o caminho normal para obter uma carteira de motorista, ele se sairia bem na parte escrita – todo o manual do motorista está em seu cérebro! E quando se tratasse do teste de direção em si, ele não teria nenhum problema, nem mesmo com a tarefa mais difícil, estacionar em paralelo. (A maneira como esses veículos se encaixam em um espaço apertado é algo de beleza.) Mas posso imaginar a frustração do oficial de licenciamento quando o candidato se arrastasse pela rua abaixo do limite de velocidade, parasse totalmente quando algo bloqueasse seu caminho e atrapalhasse veículos de emergência. Tente novamente, robô!

Você pode enviar perguntas para [email protected]. Escreva ASK LEVY na linha de assunto.

Tempestade Tropical Hilary: Estou indo para o sul da Califórnia. Terremoto de magnitude 5.1 em Ojai: Segure minha cerveja.

O ChatGPT não pode superar Jennifer Senior em resenhas de livros, mas pode ajudar os alunos a falsificar suas tarefas. Professores estão descobrindo como lidar com isso.

Taiwan, na vanguarda da tecnologia, viu muitos de seus cidadãos desenvolvendo miopia – e um médico combatente tem um remédio surpreendente.

O filme Oppenheimer nos mostra como a bomba foi feita em Los Alamos. Mas suas câmeras perderam a parte da história que envolve trabalhadores explorados em minas de urânio congolesas.

A vida selvagem nativa da Flórida já está cansada das pitões invasoras. Ratos e jacarés estão revidando.

O Plaintext está desativado para o feriado do Dia do Trabalho. Nos vemos em setembro!