O Google deu uma grande atualização às 8 câmeras do seu Pixel. Veja como eles fizeram isso

Google updated Pixel's 8 cameras. See how they did it.

Com seus smartphones Pixel 8 e Pixel 8 Pro, o Google está trazendo suas armas pesadas para a batalha pela liderança em fotografia e vídeo em smartphones. Entre mais de uma dúzia de melhorias notáveis que chegam aos telefones Android, está uma ferramenta chamada Video Boost que usa processamento de IA nos centros de dados lotados de servidores do Google para aumentar drasticamente a qualidade da imagem.

Quando você grava um vídeo pela primeira vez, terá apenas uma versão de visualização em 1080p. Mas, durante algumas horas para upload e processamento, o Google usa novos modelos de inteligência artificial muito grandes para um smartphone para melhorar os detalhes das sombras, reduzir os incômodos pontos de ruído e estabilizar o vídeo. Isso significa que a tecnologia Night Sight do Google, que em 2018 estabeleceu um novo padrão para fotos tiradas em condições de pouca luz, agora também está disponível para vídeos. Pelo menos será quando o Video Boost for lançado no próximo inverno.

“Night Sight significa algo muito importante para nós”, disse Isaac Reynolds, o gerente de produto responsável pelas câmeras do Pixel. “É o melhor vídeo com pouca luz em um smartphone no mercado, incluindo quaisquer telefones que possam ter sido lançados recentemente”, disse ele em uma alfinetada não tão sutil aos modelos iPhone 15 da Apple. Mas o Video Boost também melhora os vídeos diurnos, com mais detalhes e movimentos mais suaves.

Assista a isso:

Reynolds falou durante uma entrevista exclusiva sobre as novas tecnologias de foto e vídeo nos smartphones Pixel 8 de $699 e Pixel 8 Pro de $999, revelados na quarta-feira. Ele detalhou o novo hardware chamado exposição dupla, que torna o vídeo Night Sight possível, juntamente com uma série de avanços na fotografia Pixel: fotos de alta resolução, lentes melhores, um novo aplicativo com controles avançados de fotografia, a capacidade de criar uma foto em grupo onde todos estão sorrindo e um “Audio Magic Eraser” para limpar o som em um vídeo.

• Pixel 8 Pro vs. Pixel 7 Pro, 6 Pro Como o telefone premium do Googl...
• Pixel 8 vs. Pixel 7 vs Pixel 6 Como o telefone principal do Google ...
• O Google promete que os telefones Pixel 8 receberão atualizações de...

As capacidades da câmera são fundamentais para smartphones, mas especialmente para os telefones Pixel do Google. Eles estão ganhando participação de mercado, mas ainda são relativamente raros, representando apenas 4% dos envios de telefones na América do Norte no segundo trimestre. Boas fotos, reforçadas por anos de trabalho em fotografia computacional, são, sem dúvida, o ponto forte da linha Pixel.

Mas os vídeos dos telefones Pixel têm sido fracos quando há pouca luz. Melhorar isso, mesmo que precise de ajuda dos servidores do Google, é crucial para tornar um telefone Pixel digno de compra.

“Onde realmente queríamos fazer uma grande diferença este ano foi no vídeo”, disse Reynolds. O Video Boost é “a coisa mais empolgante que fiz em anos”.

Aqui está uma análise detalhada de como o Google está tentando extrair melhores fotos e vídeos de seus telefones Pixel 8.

Como funciona o Video Boost do Pixel 8

Muitos desenvolvimentos foram necessários para tornar o Video Boost possível.

Na base está uma tecnologia de sensor de imagem mais recente na câmera principal do Pixel 8 chamada ganho de conversão dupla, que melhora o ruído da imagem e a faixa dinâmica – a capacidade de capturar detalhes de sombra e destaque. O Google se refere a sua abordagem como “exposição dupla”, mas, ao contrário da tecnologia HDR (alto alcance dinâmico) convencional, ela não mescla várias fotos separadas.

Em vez disso, a tecnologia de ganho de conversão dupla é capaz de capturar simultaneamente detalhes das áreas com pouca luz e áreas claras de uma cena pixel a pixel, e então combina o melhor dos dois. O resultado: “Seja uma cena de alto contraste ou uma cena com pouca luz, você verá um desempenho drasticamente melhor em comparação com o Pixel 7 e o Pixel 7 Pro”, disse Reynolds. “Você não precisa abrir mão da faixa dinâmica. Isso significa menos subexposição, o que significa menos ruído de sombra.”

Em seguida, temos o novo processador Tensor G3, a terceira geração dos processadores de telefones Pixel do Google. O G3 possui mais circuitos internos do Google para IA e processamento de imagem do que o G2 do ano passado, e o Google o utiliza para produzir dois vídeos. Um é a versão de visualização em 1080p que você pode assistir ou compartilhar imediatamente.

O outro é a versão com Video Boost que é enviada para o Google para mais edição. O G3 pré-processa esse vídeo e, para cada quadro, adiciona até 400 elementos de metadados que caracterizam a cena, disse Reynolds.

A última etapa do Video Boost ocorre nos centros de dados do Google, onde os servidores usam algoritmos recém-desenvolvidos para redução de ruído, estabilização e nitidez com imagens de pouca luz. Esse vídeo processado então substitui o vídeo de visualização em seu telefone, incluindo uma versão em 4K, se essa for a resolução em que você gravou originalmente.

Reynolds defende o desvio do centro de dados do vídeo como algo que vale a pena.

“Os resultados são incríveis”, disse ele. Além disso, as pessoas gostam de relembrar, revisitando um momento por meio de fotos e vídeos horas depois, não apenas meses ou anos depois. “Não acho que haja qualquer desvantagem em esperar algumas horas”, disse ele.

Veja o Pixel 8 e o Pixel 8 Pro de perto e pessoalmente

Pode valer a pena esperar, mas a espera também pode ser maior do que apenas algumas horas para enviar gigabytes de vídeo para o Google. Se você estiver longe do Wi-Fi de casa, pode se preocupar em ultrapassar o limite de dados móveis do seu plano. E quando estiver em casa, você pode fazer parte dos milhões de pessoas cuja banda larga na verdade não oferece velocidades rápidas de upload.

Mais megapixels nas câmeras do Pixel 8

Se você estiver tirando fotos, o sensor não usa a tecnologia de ganho de conversão dupla do sensor de imagem – pelo menos ainda, embora o Google diga que está animado com o potencial dessa tecnologia.

Mas existem outras grandes melhorias: Assim como a Samsung e a Apple, o Google está avançando além da resolução de fotos de smartphone de 12 megapixels que tivemos por anos.

Quando a Apple lançou seu iPhone 14 Pro em 2022, permitiu que os fotógrafos tirassem fotos de 48 megapixels com a câmera principal. A Samsung vai ainda mais longe com um sensor de 200 megapixels, embora os resultados geralmente não sejam impressionantes além de 50 megapixels. Em comparação, mesmo que o Pixel 7 e o 7 Pro tivessem câmeras principais de 50 megapixels, o Google oferecia fotos com apenas 12 megapixels de resolução. (Embora tenha oferecido modos de 2x e 10x que aproveitavam a resolução total de seus sensores.)

Neste ano, o Google está ultrapassando a Apple quando se trata de contagem de pixels no Pixel 8 Pro. Não só você pode tirar fotos com a resolução total de 50 megapixels da câmera principal, mas também pode tirar fotos ultrawide de 48 megapixels (como o OnePlus 11 deste ano) e fotos telefoto de 5x de 48 megapixels. (O Pixel 8 só pode tirar fotos ultrawide de 12 megapixels.)

Assim como todos os fabricantes de smartphones principais, o Google empregou uma tecnologia chamada pixel binning que oferece aos fotógrafos a escolha entre fotos em resolução total e resoluções mais baixas que funcionam melhor em situações de baixa luminosidade. Mas este ano, ele permitirá que você tire fotos em resolução total mesmo em ambientes com pouca luz, se preferir. Isso é diferente da Apple, que muda para o pixel binning e resolução baixa automaticamente quando está escuro.

“Você sempre obterá mais detalhes ativando os 50 megapixels [do que ao fotografar com 12 megapixels], mesmo em ambientes com pouca luz, embora possa haver algum ruído”, disse Reynolds.

Você também pode usar o Modo Noturno para reduzir o ruído. Ele funciona com resolução de 50 megapixels.

A Apple alterou a resolução padrão das fotos da câmera principal de 12 para 24 megapixels nos modelos iPhone 15, lançados no mês passado. Ele também usa o formato de imagem HEIF, que armazena arquivos de forma mais compacta do que o antigo JPEG. Se você é um fotógrafo do Pixel, pode escolher a resolução total ou 12 megapixels, mas nada intermediário. E não há suporte para HEIF, porque o Google prefere a compatibilidade universal do JPEG.

Só saberemos com os testes se as fotos de alta resolução do Google valem a pena. Pixels pequenos são piores quando se trata de ruído de imagem e faixa dinâmica. Mas o Google investiu em hardware melhor, incluindo lentes de abertura mais ampla que captam mais luz.

Atualizações de hardware da câmera Pixel 8

Tanto o Pixel 8 quanto o Pixel 8 Pro recebem a nova câmera principal de ponta com ganho de conversão dupla, que capta 21% mais luz do que na geração Pixel 7.

Ambos os telefones recebem uma nova câmera frontal, mas ela tem foco automático apenas no Pixel 8 Pro. O processamento de imagem melhorado possível com o G3 ajuda a melhorar a cor e reduzir o ruído em ambos os telefones, segundo o Google.

E assim como nos telefones de 2022, apenas o modelo Pro recebe uma câmera telefoto de 5x. Ele usa o mesmo sensor do Pixel 7 Pro, mas este ano, o Pixel 8 Pro recebe uma lente de abertura f2.8 mais ampla para captar 56% mais luz. Essa é a mesma abertura do telefoto de 5x do iPhone 15 Pro Max.

“Estamos focando bastante em fotos com pouca luz”, disse Reynolds. Um benefício secundário: a troca para a câmera 5x é mais rápida porque o telefone pode travar o foco mais rapidamente do que com a lente f3.5 do Pixel 7 Pro.

Apenas o Pro recebe uma câmera ultrawide melhorada. Ela pode capturar 105% mais luz graças a um sensor maior com uma lente de abertura mais ampla. Isso é importante para cenas com pouca luz e para suportar a resolução de 48 megapixels.

A câmera ultrawide do Pro também possui habilidades de autofoco e reduz sua distância de foco próximo de 3cm do ano passado para 2cm – cerca de 0,8 polegadas. Isso significa que as fotos em macro terão um desfoque de plano de fundo muito melhor, disse Reynolds.

O novo aplicativo de câmera do Google possui “controles profissionais”

O Google se orgulha de sua tecnologia “raw computacional”, que combina a mesclagem de várias fotos usada para criar JPEGs com a flexibilidade de edição de fotos em raw. Isso significa mais alcance dinâmico do que com fotos em raw de um único quadro, o que é útil para pessoas que editam suas fotos posteriormente em softwares como o Adobe Lightroom.

Com o aplicativo de câmera dos telefones Pixel 8, o Google está dando aos fotógrafos novos controles para ajustar suas fotos enquanto são tiradas. Ele possui novos “controles profissionais” que expõem opções para velocidade do obturador, duração da exposição, equilíbrio de branco, sensibilidade ISO e foco, disse Reynolds.

A maioria das pessoas não tira fotos em raw ou usa os controles manuais, mas isso não significa que não seja importante. “Isso lhe dá a foto que você precisa quando você absolutamente tem que tê-la de um certo jeito”, disse Reynolds.

Outra grande mudança no aplicativo de câmera do Google já começou a chegar. Durante anos, esse aplicativo apresentava botões com opções de modos como foto, vídeo, panorama, Night Sight e câmera lenta. Agora o Google oferece um interruptor mestre para vídeo e foto, cada um com sua própria gama de botões.

Também é novidade no aplicativo de câmera uma melhoria nos arquivos DNG usados para fotos em raw. Agora eles armazenam mais metadados para que softwares como o Adobe Lightroom exibam uma versão que corresponda melhor às cores e tons do JPEG ajustado do Pixel. Fotos em raw em geral foram ajustadas para melhor cor e sutis diferenças tonais, disse o Google.

Os telefones Pixel 8 são os primeiros smartphones a utilizar o Ultra HDR, um formato de foto para Android que adiciona informações extras a uma foto em JPEG para que softwares compatíveis possam exibir uma versão de alto alcance dinâmico. Por exemplo, o Ultra HDR ilumina estrelas em fotos de astrofotografia, que mostram mais detalhes com resolução de 50 megapixels.

Novos truques de fotografia com o Pixel 8

Os novos Pixels também possuem outras habilidades, muitas usando tecnologia de inteligência artificial. Aqui estão algumas delas:

• Para fotos em grupo, uma nova função chamada Melhor Captura permite que você escolha os rostos que deseja de um grupo de fotos. Ela mostra miniaturas de cada rosto nas fotos e, quando você toca em um, mostra as várias expressões. Você pode escolher os melhores sorrisos de todos ou rostos engraçados para a foto composta que a câmera cria.
• As habilidades de aceleração de IA do G3 automaticamente eliminam ruídos de multidões e vento de vídeos. Mas uma nova ferramenta de edição chamada Apagador Mágico de Áudio isola sons diferentes para permitir que você escolha o que deseja. Controles deslizantes de nível de som ajustam a mistura de som de fala, vento, música, agitação de multidão e ruído de fundo.
• Uma nova ferramenta de Edição Mágica permite que você aumente ou diminua o tamanho de elementos da cena como pessoas. Um toque contorna um elemento da cena e, em seguida, beliscar ou arrastar move-o. Assim como o Video Boost, essa ferramenta vai para o sistema de computação em nuvem do Google para realizar o trabalho pesado de criar qualquer nova imagem que seja necessária. A ferramenta só estará disponível em uma versão de acesso antecipado para começar.
• Uma ferramenta chamada Zoom Aumentado usará IA generativa para criar fotos de alta resolução a partir de originais menores e pixelados.
• O Google tomou algumas medidas para melhorar os problemas de reflexo de lente comuns em smartphones. Entre outras coisas, ao fotografar em direção a fontes de luz brilhantes como o sol, o Pixel pode remover o ponto verde distraído que essas fontes frequentemente produzem.
• O Apagador Mágico, que permite que você apague elementos da cena como pessoas distrativas no fundo, recebe um grande impulso de IA. Agora ele usa IA generativa para que o telefone preencha áreas maiores. Também pode remover sombras de elementos selecionados que você está apagando.

Como bem todas essas características e tecnologias funcionam ainda está por ser visto. Mas está claro que o Google está investindo pesadamente na tecnologia de foto e vídeo do Pixel.

• alphabet inc
• artificial intelligence
• google
• thought leadership