A AMD disponibiliza discretamente como código aberto um processador de imagem de alto custo para FPGAs

Ao contrário do que alguns possam pensar, os sensores de imagem das câmeras não capturam imagens coloridas prontas por si só. Eles capturam grades de pixels brutos por trás de um padrão de mosaico colorido. Para obter uma imagem utilizável, os fabricantes geralmente contam com processadores de sinal de imagem (ISPs) proprietários e onerosos para converter os dados brutos do sensor em vídeo estruturado, por meio de código criptografado. Assim como os ISPs proprietários, o Mini-ISP lida com todo o fluxo de conversão dentro de uma lógica programável, mas é de código aberto e inspecionável. Ele realiza calibração do nível de preto, demosaicing Bayer para reconstruir a cor RGB completa, balanço de branco e mapeamento global de tons para produzir cores naturais em monitores conectados. Embora os engenheiros da AMD tenham inicialmente divulgado o código de forma discreta, atualizações recentes transformaram o projeto Mini-ISP em um pacote pronto para projetos de hardware no mundo real.

O projeto também se destaca por rejeitar o excesso de recursos comum em IP comercial, a fim de melhorar o desempenho do processamento de imagem. Núcleos ISP de terceiros costumam consumir milhares de portas lógicas de FPGA (LUTs) e fatias de DSP para executar filtros pesados de suavização espacial. O Mini-ISP elimina totalmente o ruído e o pós-enfoque. Ao se concentrar na correção de cor e na reconstrução de pixels essenciais, o núcleo processa 1, 2 ou 4 pixels por ciclo de clock a velocidades de até 500 MHz. Essa arquitetura leve oferece uma taxa de transferência de até 2 gigapixels por segundo, com latência de pipeline inferior a um milissegundo.

Para desenvolvedores de robótica, projetistas de drones e pesquisadores de visão embarcada, o lançamento discreto da AMD oferece uma valiosa ferramenta de processamento de imagens. Ela permite que desenvolvedores que utilizam FPGAs Spartan UltraScale+ ou Artix, de custo-benefício, criem pipelines de câmera personalizados sem ter que arcar com altas taxas de licenciamento dos fornecedores.