IA: Configuração

Para configurar o filtro de alerta no Agent DVR, certifique-se de ter um servidor de IA configurado e siga estes passos:

• Configure e habilite um Detector de Movimento. Para uso mínimo da CPU, use o detector simples. Certifique-se de definir pelo menos uma zona para cobrir a área que você deseja monitorar.
• Na guia Alertas, defina o Modo para Apenas Ações e habilite os Alertas.
• Habilite o Reconhecimento de Objetos na guia Reconhecimento de Objetos. Defina o modo para Movimento Detectado, selecione um modelo e clique em Encontrar para escolher objetos para detecção, como Pessoa, Cachorro, Carro, etc.
• Vá para Ações no menu da guia e adicione uma Ação para o evento IA: Objeto Encontrado.

  Selecione zonas para especificar onde detectar objetos, como diferentes zonas para sua entrada de garagem e a rua. Por exemplo, selecionar a zona da entrada de garagem só irá acionar um alerta se um carro for detectado lá.

  Em Tarefas, clique em Adicionar para criar uma tarefa de Alerta. Clique em OK duas vezes para confirmar.

O Agent DVR processará o reconhecimento de objetos de IA após a detecção de movimento. Se detectar um objeto especificado em uma zona escolhida, ele acionará uma ação para gerar um alerta. A ausência de seleção de zona acionará alertas para qualquer zona.

Configure filtros de alerta de forma semelhante para Reconhecimento de LPR, Reconhecimento Facial ou Reconhecimento de Áudio.

Para reconhecimento constante de objetos de IA sem um gatilho de detecção de movimento, defina o Modo em Reconhecimento de Objetos para Intervalo. Monitore o impacto nos recursos de hardware e ajuste conforme necessário.

Você pode configurar várias ações para diferentes objetos em várias zonas. Use a tag {AI} nas ações para fazer referência ao objeto detectado.

Se a IA não estiver filtrando efetivamente suas gravações, considere o seguinte:

• Verifique se a configuração Encontrar corresponde a uma das opções disponíveis.
• Verifique se a chave de alerta mestre no canto superior esquerdo do Agent mostra um cadeado fechado, indicando alertas ativos.
• Confirme se o modo de gravação está definido como Alerta e não Detecção.
• Verifique se o modo de alerta está definido como Apenas Ações.
• Tente diminuir o nível de confiança em Reconhecimento de Objetos.
• Verifique /logs.html em busca de mensagens de erro, possivelmente indicando problemas no servidor ou bloqueios de rede.
• Monitore o desempenho do servidor de IA e verifique se não está causando sobrecarga ou tempo limite do sistema.
• Se a IA detectar todas as classes de objetos, isso pode indicar problemas com a GPU. Verifique os drivers da GPU ou mude para um módulo de IA baseado em CPU.

O Reconhecimento de Cena no Agent DVR utiliza um servidor de IA (recomendado CodeProject.AI) para reconhecer a cena geral que sua câmera está visualizando e pode gerar eventos, emitir alertas ou atuar como um filtro em alertas de movimento.

• Ativado: Alternar para habilitar ou desabilitar o processo de IA.
• Servidor de IA: Selecione entre seus servidores configurados, ou use a opção padrão.
• Modo: Escolha o gatilho para o processo de IA. Acione via API apenas configurando isso para Nenhum e chamando triggerScene.
• Passagem de Movimento: Se o servidor de IA estiver inativo e filtrando alertas, isso permite que os alertas passem sem filtragem.
• Usar URI de Snapshot: Use um quadro de alta resolução de sua câmera em vez do quadro atual da transmissão ao vivo.
• Modo de Redimensionamento: Redimensione imagens antes de enviá-las para o servidor de IA para reduzir a carga e melhorar os tempos de resposta.
• Sobreposição: Exibir os resultados de IA na transmissão de vídeo ao vivo.
• Intervalo Mínimo: Defina o tempo mínimo entre as solicitações ao servidor.
• Confiança: Defina o nível mínimo de confiança para reconhecer um objeto.

Cenas a procurar

Clique no botão para escolher entre 365 cenas disponíveis para procurar. Você pode selecionar várias cenas para acionar alertas.

Ações

O Reconhecimento de Cena gera eventos IA: Cena Reconhecida para uso em Ações.

Fotos

Para informações sobre fotos, consulte fotos.

O Agent DVR utiliza servidores de IA (OpenAI/Claude etc) para responder a perguntas legíveis por humanos sobre as imagens das suas câmeras. Isso pode gerar eventos, disparar alertas ou atuar como um filtro em alertas de movimento. Você precisará completar as configurações em Configurações do Servidor - Servidores de IA - Perguntar à IA.

Você pode verificar os Logs em /logs.html no servidor local para ver quando as solicitações são enviadas. Defina as Configurações do Servidor - Registro - Nível de Registro para Info.

• Ativado: Alterne para ativar ou desativar o processo de IA.
• Provedor: Escolha qual provedor de IA deseja usar para processar imagens. O provedor precisará ser configurado nas configurações do servidor - Servidores de IA. Se você selecionar Padrão, então o primeiro provedor configurado será usado.
• Modo: Escolha o gatilho para o processo de IA. Acione via API apenas configurando isso para Nenhum e chamando triggerAskAI
• Passagem de Movimento: Se o servidor de IA estiver inativo e filtrando alertas, isso permite que os alertas passem sem filtragem.
• Usar URI de Instantâneo: Use um quadro de alta resolução da sua câmera em vez do quadro atual da transmissão ao vivo.
• Modo de Redimensionamento: Redimensione imagens antes de enviá-las para o servidor de IA para reduzir a carga e melhorar os tempos de resposta.
• Sobreposição: Exiba os resultados da IA na transmissão de vídeo ao vivo.
• Intervalo Mínimo: Defina o tempo mínimo entre as solicitações ao servidor.

Mensagens de IA

• Mensagem: Insira sua pergunta para a IA aqui. Alguns exemplos:
  • Se você ver fogo nesta imagem, responda com FOGO. Se você ver um cachorro sentado em um sofá, responda com CACHORRO. Se a porta estiver aberta, responda com PORTA. Se várias condições forem atendidas, separe-as com uma ,
  • Se a luz da máquina no banco estiver vermelha, responda com ALERTA
  • Se um carro de polícia estiver estacionado na entrada, responda com POLÍCIA
  • Se houver correspondência ou pacotes no chão, responda com CORRESPONDÊNCIA
  • Se parecer que alguém invadiu minha casa, responda com INVASÃO
• Encontrar: Insira as tags que você instruiu a IA a responder. Por exemplo FOGO, CACHORRO, PORTA
• Sem Repetições: Ignore as tags que foram retornadas na última chamada para a IA

Como mencionado acima, você pode solicitar que várias condições sejam atendidas na mensagem e configurar ações para lidar com cada resultado.

Ações

O Reconhecimento de Cena gera eventos Perguntar à IA: Resultado Positivo para uso em Ações.

Fotos

Para informações sobre fotos, consulte fotos. Note que a IA ainda não retorna dados espaciais sobre onde as coisas estão na imagem, então o recorte e a detecção estática não estão funcionando atualmente.

A partir de v5.8.2.0+, você pode usar IA para descrever as imagens capturadas pelo Agent DVR das suas câmeras em eventos de Alerta. Essa descrição é então armazenada com o alerta na interface do usuário. Para configurar isso, configure Perguntar à IA para sua câmera e veja a opção na parte inferior em Descrever.

• Prompt: Insira o prompt a ser enviado ao servidor de IA com suas imagens. O padrão é "Descreva em uma frase curta o que está acontecendo nesta imagem". Você também pode se divertir com isso, por exemplo, "Descreva o que está acontecendo em fala de pirata", como usamos na imagem acima.
• Em seguida, vá para a aba Alertas e marque a opção Descrever.

Observe que você precisará ter Perguntar à IA habilitado. Defina o Modo como Nenhum se você quiser apenas que descreva as imagens de alerta.

Depois de configurar a anotação das suas imagens, você pode integrá-la com o sistema de Ações para IA: Descrição Recebida. Você pode usar {MSG} e {AIJSON} em tarefas desta ação para outras integrações.

Para alterar o idioma de exibição para rótulos e marcação no Agent DVR, vá para o Menu do Servidor - Configurações - Reprodução - Idioma Padrão.

O Agent DVR gera eventos através de processos de IA, que podem acionar Ações. Por exemplo, o Reconhecimento de Objetos gera eventos de "Objeto Encontrado" e "Objeto Não Encontrado". Cada sistema de IA no Agent produz eventos únicos.

Esses eventos podem acionar várias ações, como emitir alertas, chamar URLs com rótulos de objetos, executar programas ou publicar mensagens em servidores MQTT. Use as tags {AI} para rótulos ou {AIJSON} para a resposta JSON completa do CodeProject.AI nas ações.