O Adobe Enhance Details mostra que a IA é toda CSI em suas fotos

O Adobe Enhance Details mostra que a IA é toda CSI em suas fotos

A Adobe está soltando uma IA em suas fotos, com o novo recurso Detalhes de aprimoramento adicionado ao Lightroom CC entre outros aplicativos para aumentar automaticamente sua resolução em até 30%. Desenvolvido pelo Sensei, o novo sistema tira fotos não processadas e aplica uma maneira totalmente nova de processá-las.

Para ver o benefício, portanto, você precisará de um arquivo de imagem bruto. A Adobe diz que o Enhance Details funciona bem nos arquivos Bayer – capturados pelas câmeras da Canon, Nikon, Sony e outros – e nos arquivos Fujifilm X-Trans.

O ponto em que difere do processo de desmembramento anterior é como o Enhance Details usa o aprendizado de máquina. Em suma, a Adobe treinou uma rede neural convolucional, ou CNN, com mais de um bilhão de fotos diferentes. Isso permitiu criar práticas recomendadas para lidar com a desmembragem difícil de imagens brutas e reaplicar essas lições a novas fotos.

O desmembramento é o processo pelo qual imagens brutas de uma câmera – que consistem em uma imagem monocromática e, em seguida, em um conjunto de dados sobrepostos sobre a cor de cada pixel, a partir da matriz do filtro de cores. Como apenas um dos três valores de cores é armazenado para cada pixel, o software que está processando precisa descobrir os dois valores restantes.

Embora existam vários métodos tradicionais para fazer isso, a Adobe ressalta que todos compartilham os mesmos problemas comuns. Isso inclui o desafio de lidar com detalhes em pequena escala próximos ao limite de resolução do sensor da câmera; cores falsas, nas quais o software apresenta cores de pixel adjacentes erradas; e zíper ao longo das bordas. O Adobe Sensei, a plataforma de IA da empresa, foi treinado em imagens com um ou mais desses problemas.

Para ser justo, alguns dos métodos existentes para desmosaicing avançado foram impressionantemente adeptos. O problema é que eles também são extremamente intensivos em computação. Onde o Enhance Details tenta se destacar é usar os sistemas de aprendizado de máquina criados nas versões mais recentes do macOS e Windows 10, para aumentar o desempenho.

Existem outras maneiras de ajudá-lo também. Uma GPU mais rápida, aponta a Adobe, pode introduzir uma grande melhoria; se você estiver usando um laptop, uma eGPU “pode ​​fazer uma grande diferença”, diz a empresa.

Enquanto isso, imagens com artefatos e muitos detalhes são as melhores fotos de origem para mostrar o máximo de aprimoramentos. Faça isso da maneira certa, e os detalhes de aprimoramento devem trazer bordas e detalhes mais precisos, menos padrões de moiré e menos cores falsas.

Os detalhes de aprimoramento estão sendo adicionados ao Adobe Camera Raw, Lightroom Classic e Lightroom CC para Windows e Mac. Na verdade, existem dois modelos de IA diferentes, um para a Bayer e outro para o X-Trans, embora o software escolha o correto automaticamente. Você também precisará de um Mac executando o macOS 10.13 ou posterior, ou um PC executando o Windows 10 (1809) ou posterior, pois o novo recurso é baseado no Core ML e no Windows ML, respectivamente.

0 Shares