Como usar a detecção de imagem em plataformas de webinar

(Przemek Shemmy Majewski) (5 de julho de 2020)

A popularidade das plataformas de webinar e software de reunião online disparou nos últimos meses, com muitas empresas e instituições educacionais remotas e online. Se você estiver construindo uma plataforma de webinar (ou pensando nisso), a IA pode ser útil com a detecção de imagens que pode aprimorar a experiência do usuário durante uma transmissão ao vivo. Vejamos o que você pode fazer usando a detecção de imagem em sua plataforma de reunião online.

Resumindo, a detecção de objetos é usada para detectar instâncias de objetos semânticos de uma determinada classe (como pessoas, edifícios ou carros) em imagens e vídeos digitais. Hoje, ele tem vários aplicativos de negócios como:

Mas um dos usos que agora é altamente relevante é a detecção de objetos em tempo real para aprimorar o vídeo ao vivo em plataformas de webinar ou fluxos de vídeo ao vivo. Algo que muitas das plataformas de videoconferência e mídia social existentes têm apresentado, especialmente nos últimos meses, com o aumento da demanda de usuários.

As pessoas usam webinars e reuniões online mais do que nunca

Por causa da pandemia COVID-19, muitos de nós ficaram presos em casa. Trabalhar e estudar remotamente na maior parte do tempo e reunir-se online, não podendo visitar o escritório ou a escola. Os fornecedores de software existentes que vendem webinar e plataformas de reunião online se beneficiaram enormemente com isso.

De acordo com MarketWatch, a contagem de usuários ativos diários da Zoom em março 2020 foi 378% em relação ao ano anterior, enquanto a Microsoft relatou um 775% aumento no uso de seus aplicativos em nuvem em geral (incluindo equipes), devido ao aumento no volume de trabalho remoto e aprendizado online. E o Webex da Cisco hospedou 50 milhões de reuniões somente em março deste ano.

Devido à alta demanda e Com o aumento da competição no espaço, a maioria das plataformas foi forçada a reforçar suas medidas de segurança e aumentar seu desempenho. Mas eles também começaram a procurar outras maneiras de impulsionar a experiência do usuário e atrair mais usuários, percebendo corretamente uma oportunidade bem ali.

Uma das maneiras de fazer isso era se concentrar no desenvolvimento da detecção de imagem algoritmos para introduzir recursos novos, úteis e muitas vezes divertidos.

Felizmente, com os avanços recentes em aprendizado profundo, modelos de visão de computador e processamento de imagens, os aplicativos de software que usam detecção de objetos em tempo real tornaram-se muito mais fáceis de construir e desenvolver atualmente, e com um desempenho muito melhor ao mesmo tempo.

Maneiras de usar a detecção de objetos em tempo real em vídeo ao vivo

O desafio para software que lida com videoconferências, webinars, ou transmissões ao vivo detectam e classificam objetos em tempo real – enquanto mantém o alto desempenho, o que é crucial para a produtividade e eficiência das reuniões online.

Hoje, o software pode detectar uma pessoa no quadro e classificar o objetos em uma pessoa em primeiro plano e objec ts em segundo plano. Isso abre caminho para a criação de recursos úteis para plataformas de videoconferência, mas também para jogos ou aplicativos de mídia social.

Substituir o plano de fundo por uma imagem, vídeo ou GIF selecionado

Isso se tornou todo o raiva recentemente, quando mais equipes ao redor do mundo começaram a trabalhar remotamente e precisavam de uma maneira de tornar inúmeras reuniões on-line mais divertidas.

Mas o que é mais importante, também dá às marcas a chance de usar seu logotipo ou imagens e vídeos de marca no fundo. Isso ajuda a aumentar o reconhecimento da marca durante, por exemplo, uma demonstração do produto e causar uma impressão melhor no visualizador.

Os participantes da reunião podem selecionar um fundo de foto disponível ou escolher um na pasta da área de trabalho ou no rolo da câmera do telefone. O software detecta o rosto, posicionando-o perfeitamente contra o fundo, de preferência sem afetar muito o desempenho geral da reunião.

Veja como remover o fundo para substituí-lo por uma imagem ou vídeo de marca pode ter a seguinte aparência:

Desfocar o plano de fundo

Isso ajuda a focar a imagem apenas na pessoa em o primeiro plano. É novamente um recurso muito popular introduzido recentemente, por exemplo, pelo Skype, permitindo que as pessoas se sintam mais confortáveis ​​durante chamadas de negócios com vídeo, sem prestar atenção ao que (ou quem) está por trás delas.

Dessa forma, os usuários podem permanecer profissionais e não se preocupar com o ambiente, especialmente quando não podem trabalhar em um ambiente de escritório organizado.

(E qualquer pessoa que já fez um negócio online, hoje em dia, liga com os filhos ou cônjuge / parceiro em casa, ou com pilhas de roupa suja no fundo, vai gostar.)

É também um recurso útil usado em jogos para imergir o alto-falante / jogador no universo dos jogos de computador ao jogar ao vivo.

Como construir seu próprio sistema de reconhecimento de imagem

Publicamos recentemente um e-book que mostra precisamente o que é necessário para construir software de ponta usando algoritmos de reconhecimento de objeto. Faça download aqui e descubra, passo a passo, como:

  • Definir o escopo e as métricas do projeto
  • Colete dados e use dados sintéticos
  • Treine modelos e teste seu desempenho
  • Implante os modelos para produção
  • Monitore e otimize seu desempenho ao longo do tempo

E se você está procurando conselhos de especialistas sobre como usar a detecção de objetos em seu software – converse com um especialista em IA da DLabs hoje . / p>

Originalmente publicado em https://dlabs.ai em 5 de julho de 2020.

Deixe uma resposta

O seu endereço de email não será publicado. Campos obrigatórios marcados com *