Câmeras habilitadas para IA conduzem um teste de cidade inteligente

Um teste de cidade inteligente com IA em Roma, usando imagem da Sony Sensores com capacidade de IA como parte de um sistema de “Dica Inteligente” destinam-se a ajudar a reduzir engarrafamentos e poluição do tráfego, evitar acidentes rodoviários com pedestres e minimizar o congestionamento nos ônibus da cidade.
Um teste de cidade inteligente alimentado por IA em Roma, usando sensores de imagem da Sony com capacidade de IA como parte de um sistema "Smart Tip", tem como objetivo ajudar a reduzir engarrafamentos e poluição do tráfego, evitar acidentes rodoviários de pedestres e minimizar a aglomeração nos ônibus da cidade.

O objetivo do ensaio é abordar três “pontos problemáticos” comuns à maioria das cidades:volume de tráfego e congestionamento, especialmente aqueles relacionados à procura de uma vaga para estacionamento; segurança dos pedestres ao atravessar a via; e otimizar a disponibilidade de transporte público para a era da pandemia e além.

Três sistemas Smart Tip de prova de conceito foram implantados na Cidade Eterna até agora, no topo dos semáforos.

O sistema Smart Tip, com dois módulos de câmera Sony IMX500 AI, fica no topo de um semáforo (Fonte:Sony Semiconductor Europe)

Cada um dos Smart Tips possui dois sensores de imagem Sony IMX500. Esses sensores, lançados há um ano, apresentam principalmente capacidade de processamento de IA que permite que as imagens sejam processadas na borda da rede, sem que saiam do Smart Tip.

O módulo IMX500 possui um sensor de 12,3 megapixels ao lado de um chip lógico com um design Sony DSP dedicado ao processamento de IA, além de memória para armazenar o modelo de IA. A capacidade de processar imagens dentro do dispositivo (sem enviar dados para a nuvem) é crítica para a operação de sistemas de IA de cidades inteligentes, pois permite latência extremamente rápida. Ele também garante a privacidade do consumidor; as imagens não saem do dispositivo, em vez disso, as informações são extraídas via IA e convertidas em metadados. Esses metadados podem incluir a quantidade de pessoas embarcando ou desembarcando em um ponto de ônibus ou a presença de pedestres cruzando a via. (O IMX500 tem a capacidade de produzir imagens inteiras ou regiões de interesse / imagens parciais, se necessário, mas a comunicação de metadados apenas foi selecionada para este teste).

“Não há imagem saindo desse sensor, não é uma câmera, é uma câmera usada como sensor - nenhuma imagem sai”, disse Antonio Avitabile, diretor administrativo de aliança corporativa e investimentos da Sony. “O que sai é apenas um“ sim, veículo ”ou“ nenhum veículo ”ou várias pessoas. A ideia aqui é servir ao propósito e fazer o trabalho, mas sem olhar as pessoas ”.

O processamento das imagens na borda também evita ter que fazer upload de dezenas de imagens de 12 megapixels para a nuvem; os metadados sozinhos são muito mais adequados para transmissão pelo modem celular do Smart Tip.

clique para imagem em tamanho real

Os três aplicativos sendo testados por este projeto (Fonte:Sony Semiconductor Europe)

Três aplicativos

“O congestionamento do tráfego é um grande problema nas grandes cidades”, disse Avitabile. “Uma parte significativa está basicamente relacionada aos motoristas que buscam uma vaga de estacionamento disponível.”

O sistema de IA da cidade inteligente de Roma visa monitorar onde há vagas de estacionamento disponíveis em tempo real. As localizações de GPS dos espaços disponíveis são enviadas para a nuvem por meio do modem celular do sistema. Os locais podem ser comunicados aos motoristas por meio de um aplicativo para celular. A ideia é evitar que os motoristas tenham que dirigir por longos períodos em busca de vaga, reduzindo ao mesmo tempo o congestionamento e a poluição.

A segurança de pedestres é outro dos principais pontos fracos de qualquer cidade; milhares de pedestres morrem nas estradas europeias todos os anos. A distância média entre pedestres e veículos é uma métrica chave usada para medir a segurança de pedestres. O objetivo do julgamento é fornecer uma análise quantitativa disso. Os Smart Tips detectarão pedestres cruzando a estrada e, em seguida, ativarão sinais visuais ou sonoros para veículos quando os pedestres estiverem cruzando.

Tráfego fora do Coliseu de Roma (Crédito:Boris Stroujko)

“Sempre que um pedestre é identificado cruzando a estrada, temos algum tipo de sinal luminoso no cruzamento que alertará o motorista de que alguém está realmente cruzando”, disse Avitabile. “Acreditamos que isso será um impedimento para gerar menos feridos e mortes nas faixas de pedestres.”

O transporte público é a terceira aplicação que o teste vai enfrentar. O exemplo da Avitabile, pontos de ônibus inteligentes, seria capaz de verificar quantas pessoas estavam esperando em cada ponto de ônibus e usar essas informações para controlar a quantidade de pessoas em cada ônibus (particularmente importante durante a pandemia em curso). Os ônibus também podem evitar parar em paradas onde não há passageiros esperando. O sistema também pode monitorar quantas pessoas entram e saem do ônibus em cada parada. Essas informações podem ser usadas para otimizar melhor as rotas e horários dos ônibus.

Sistema de back-end

O sistema Smart Tip da Sony inclui uma plataforma de serviço rodando na nuvem. Esta plataforma irá lidar com o provisionamento e registro dos dispositivos Smart Tip. Esta plataforma também lida com o treinamento dos modelos de IA que serão usados ​​para detectar carros e pessoas, e a produção de modelos que cabem no dispositivo IMX500.

A escalabilidade dos sistemas é garantida minimizando seus requisitos de largura de banda (enviando apenas metadados conforme descrito acima). As dicas inteligentes em si são idênticas nos três casos de uso; apenas o software do modelo AI em cada um é diferente. O modelo de IA pode ser carregado ou atualizado pelo ar para melhorar a eficácia ou acomodar diferentes aplicativos no futuro.

>> Este artigo foi publicado originalmente em nosso site irmão, EE Times Europe.