Ambarella, Lumentum e ON Semiconductor colaboram na detecção 3D baseada em processamento de IA para dispositivos AIoT de última geração

Ambarella, uma empresa de silício de visão de IA, a Lumentum, designer e fabricante de produtos ópticos e fotônicos inovadores, e a ON Semiconductor, fornecedora de soluções de sensores de imagem CMOS, fizeram uma parceria para produzir dois novos projetos de referência conjuntos que, segundo eles, “ acelerar a implantação de dispositivos de inteligência artificial de coisas em verticais”.

Os projetos se baseiam na solução conjunta anterior das empresas para sistemas de acesso sem contato.

Ao combinar os dados dos iluminadores de matriz VCSEL de alto desempenho da Lumentum e um sensor de imagem ON Semiconductor usando o AI SoC da Ambarella, níveis mais altos de precisão e tomada de decisão mais inteligente podem ser alcançados em dispositivos AIoT de próxima geração para controle de acesso biométrico, fechaduras eletrônicas 3D e outras aplicações de detecção inteligente.

Originalmente destinados ao controle de acesso biométrico e fechaduras eletrônicas, esses novos designs de referência também podem atender às necessidades de cidades inteligentes, edifícios inteligentes, casas inteligentes e assistência médica inteligente.

Além disso, o alto nível de integração fornecido por essas soluções conjuntas reduz significativamente o consumo de energia do sistema e os requisitos de design térmico, permitindo fatores de forma de produto muito menores.

Fermi Wang, presidente e CEO da Ambarella, diz:“A visão da Ambarella é combinar o processamento de IA com 3D e sensor de visão para criar um futuro ambiente inteligente.

“Esta colaboração com a Lumentum e a ON Semiconductor avançará ainda mais na convergência de IA e IoT para permitir uma nova geração de sistemas de controle de acesso, enquanto inspira novas categorias de produtos de detecção de ambiente - todos alimentados pela fusão de sensores usando processadores de visão de IA que interagem de forma inteligente e discretamente com as pessoas para atender às suas necessidades em constante evolução.”

Téa Williams, vice-presidente sênior e gerente geral de sensoriamento 3D da Lumentum, diz:“Nossas novas soluções conjuntas aumentarão muito a precisão dos dispositivos AIoT em todas as aplicações verticais – começando com controle de acesso biométrico e fechaduras eletrônicas – permitindo que eles reconheçam pessoas e prevejam suas necessidades, em vez de exigir uma interface humana direta.

“Muitos desses aplicativos aproveitarão a detecção 3D para injetar uma nova dimensão de entrada de dados para melhorar a tomada de decisões. Como exemplo, o uso de iluminação pontual baseada em VCSEL de alta resolução permite intervalos de detecção mais longos e reconhecimento facial de maior precisão.

“Os arrays VCSEL de alto desempenho e líderes do setor da Lumentum com zero falhas de campo, usados ​​nessas soluções conjuntas, estão impulsionando novos aplicativos e ajudando a realizar o sonho de dispositivos AIoT com recursos de detecção 3D.”

Gianluca Colli, vice-presidente e gerente geral do grupo de divisão de sensores industriais e de consumo (ICSD) da ON Semiconductor, diz:“Os sensores de imagem são os olhos dos dispositivos de detecção inteligentes. Sua capacidade de ver mais longe com mais detalhes fornece muito mais informações para a tomada de decisões do processador de IA em dispositivos AIoT.

“Nossa tecnologia de sensor RGB-IR líder do setor, combinada com os recursos avançados de ISP dos SoCs de visão de IA da Ambarella, pode trazer imagens visíveis e IR para os dispositivos simultaneamente. Para esta segunda geração de nossas soluções conjuntas, aproveitamos o feedback dos clientes para quadruplicar a resolução de nossos sensores de imagem RGB-IR para 4K (8MP).”

As novas soluções conjuntas de AIoT das três empresas consistem em dois projetos de referência e kits de desenvolvimento de detecção 3D adicionais, cada um configurado exclusivamente para atender às demandas específicas de aplicativos para a combinação de processamento de IA, detecção de profundidade 3D e detecção de visão:

Voltado para leitores de controle de acesso biométrico de última geração, o design de referência Vision+ é a primeira solução 4K do setor de AIoT a realizar detecção de luz estruturada de câmera única de 940 nm com base na tecnologia RGB-IR.

Também é a primeira a alavancar uma solução de chip único para processamento em profundidade, processamento de IA e processamento de vídeo. Baseado no processador de visão Ambarella CV22 CVflow AI, ele inclui sensor de luz estruturada de câmera única alimentado pela tecnologia VCSEL da Lumentum, com alcance de 2 metros e um sensor de imagem CMOS RGB-IR 4K (8MP) da ON Semiconductor.

Destinado a fechaduras eletrônicas inteligentes de próxima geração, ou eLocks, para aplicações comerciais e residenciais, o design de referência Saturn é o primeiro do setor de AIoT a integrar o processamento de IA para detecção de luz estruturada de câmera única e processamento de vídeo de inicialização rápida.

Ele é baseado no processador de visão Ambarella CV25 CVflow AI e inclui uma câmera de luz estruturada alimentada pela tecnologia VCSEL da Lumentum e o sensor de imagem AR0237CS 2MP RGB-IR da ON Semiconductor.

Voltado para aplicativos de detecção inteligente e com oportunidades em verticais, os kits de desenvolvimento baseados em processador de visão CVflow AI da série CV2 da Ambarella agora podem ser equipados com adaptadores de sensor ToF que são alimentados pelos arrays VCSEL de ponta da Lumentum. Um adaptador de sensor de imagem RGB-IR 4K opcional também está disponível para esses kits.

O kit de desenvolvimento de software aberto (SDK) para os processadores de visão CVflow AI da Ambarella permite a fácil integração de aplicativos de terceiros, permitindo que os OEMs atendam a diferentes requisitos regionais com uma única plataforma (por exemplo, usando diferentes algoritmos de IA em diferentes regiões).

Além disso, este robusto SDK baseado em Linux expande os recursos dos dispositivos de detecção de borda, simplifica o desenvolvimento de produtos e acelera o tempo de colocação no mercado por meio de:

• Recursos de desenvolvimento de aplicativos personalizados
• Suporte para diferentes modalidades 3D, incluindo luz estruturada e ToF. Excepcionalmente, um único Ambarella SoC fornece processamento de detecção 3D sem a necessidade de um processador de profundidade dedicado ou um processador host separado
• Alta capacidade de inferência de IA no dispositivo da câmera para permitir que várias redes neurais sejam executadas simultaneamente
• Ferramentas robustas de IA para dar suporte ao desenvolvimento e migração de redes neurais profundas
• ISP integrado para lidar com cenas desafiadoras, incluindo alta faixa dinâmica e cenários com pouca luz
• Processadores Arm integrados para executar aplicativos do cliente
• Hardware de segurança integrado, incluindo inicialização segura, OTP para armazenar chaves de criptografia e tecnologia Arm TrustZone para comparações seguras de chaves de criptografia
• Suporte avançado de interface periférica para simplificar os projetos do sistema

Disponibilidade

Espera-se que esses designs de referência conjuntos e kits de desenvolvimento estejam disponíveis em junho. Mais informações estão disponíveis em Ambarella.