Hur man använder bilddetektering i webinarplattformar

(Przemek Shemmy Majewski) (5 jul 2020)

Populariteten hos webinarplattformar och mötesprogramvara online har gått igenom taket under de senaste månaderna, med många företag och utbildningsinstitutioner som har gått fjärran och online. Om du bygger en webinar-plattform (eller tänker på den) kan AI komma till nytta med bilddetektering som kan förbättra användarupplevelsen under en livestream. Låt oss titta på vad du kan göra med bilddetektering i din online-mötesplattform.

I ett (mycket litet) nötskal används objektdetektering för att upptäcka instanser av semantiska föremål av en viss klass (som människor, byggnader eller bilar) i digitala bilder och videor. Idag har den flera affärsapplikationer som:

Men en av de användningar som nu är mycket relevant är detektering av objekt i realtid för att förbättra livevideo i webinarplattformar eller livevideoströmmar. Något mycket av de befintliga videokonferens- och sociala medieplattformarna har introducerats, särskilt de senaste månaderna, med den ökade användarnas efterfrågan.

Människor använder webinarier och onlinemöten mer än någonsin tidigare

På grund av COVID-19-pandemin har många av oss fastnat hemma. Arbeta och studera på distans för det mesta och träffas online, inte kunna besöka kontoret eller skolan. Befintliga programvaruleverantörer som säljer webinar och mötesplattformar online har gynnats av detta.

Enligt MarketWatch, Zooms dagliga aktiva användarantal i mars 2020 steg 378% från föregående år, medan Microsoft rapporterade en 775% stöter på användningen av sina molnapplikationer totalt (inklusive Teams) på grund av den ökade volymen fjärrarbete och online-lärande. Och Ciscos Webex var värd för 50 miljoner möten bara i mars i år.

På grund av den höga efterfrågan och ökad konkurrens i rymden har de flesta plattformar tvingats skärpa sina säkerhetsåtgärder och öka deras prestanda. Men de har också börjat leta efter fler sätt att öka sin användarupplevelse och locka fler användare, med rätta avkänning av en möjlighet där.

Ett av sätten de kunde göra det var att fokusera på att utveckla sin bilddetektering. algoritmer för att introducera nya, hjälpsamma och ofta roliga funktioner.

Lyckligtvis har de senaste framstegen inom djupinlärning, datorvisionsmodeller och bildbearbetning, mjukvarutillämpningar som använder objektidentifiering i realtid blivit mycket lättare att bygga och utveckla dessa dagar, och mycket bättre prestanda samtidigt.

Sätt att använda realtidsdetektering av objekt i livevideo

Utmaningen för programvara som hanterar videokonferenser, webbseminarier, eller livestreamar upptäcker och klassificerar objekt i realtid – samtidigt som den bibehåller hög prestanda, vilket är avgörande för produktiviteten och effektiviteten i onlinemöten.

Idag kan programvara upptäcka en person i ramen och klassificera objekt i en person i förgrunden och objekt ts i bakgrunden. Detta ger sätt att skapa användbara funktioner för videokonferensplattformar, men också appar för spel eller sociala medier.

Ersätta bakgrunden med en vald bild, video eller GIF

Detta har blivit allt ilska nyligen när fler lag runt om i världen började arbeta på distans och behövde ett sätt att göra otaliga online-möten mer underhållande.

Men vad som är viktigare, det ger också varumärken chansen att använda sin logotyp eller märkesbilder och videor i bakgrunden. Detta hjälper till att förbättra varumärkesigenkänning under t.ex. en produktdemo och göra ett bättre intryck på tittaren.

Mötesdeltagare kan välja en tillgänglig fotobakgrund eller välja en från skrivbordsmappen eller telefonens kamerarulle. Programvaran upptäcker ansiktet och placerar det snyggt mot bakgrunden, helst utan att påverka det övergripande mötesprestandan.

Så här kan du ta bort bakgrunden för att ersätta den med en bild eller video från ett märke:

Oskärpa bakgrunden

Detta hjälper till att fokusera bilden på bara personen i förgrunden. Det är återigen en mycket populär funktion som nyligen introducerades, t.ex. av Skype, som gör att människor kan vara bekvämare under affärssamtal med video, utan att uppmärksamma vad (eller vem) som ligger bakom dem.

På det här sättet, användare kan vara professionell och inte oroa sig för sin omgivning, särskilt när de inte kan arbeta i en ordnad kontorsmiljö.

(Och alla som någonsin har gjort ett online-affärssamtal idag med sina barn eller make / partner hemma, eller högar med tvätt i bakgrunden, kommer att uppskatta det.)

Det är också en användbar funktion som används i spel för att fördjupa högtalaren / spelaren i datorns speluniversum när du spelar live.

Hur man bygger ditt eget bildigenkänningssystem

Vi har nyligen publicerat en e-bok som visar exakt vad som behövs för att bygga avancerad programvara med hjälp av algoritmer för objektigenkänning. Ladda ner det här och ta reda på steg för steg hur du gör:

  • Definiera projektomfång och mätvärden
  • Samla in data och använd syntetiska data
  • Träna modeller och testa deras prestanda
  • Distribuera modellerna till produktion
  • Övervaka och optimera deras prestanda över tiden

Och om du letar efter expertråd om hur du använder objektdetektering i din programvara – chatt med en DLabs AI-specialist idag .

Ursprungligen publicerad på https://dlabs.ai den 5 juli 2020.

Lämna ett svar

Din e-postadress kommer inte publiceras. Obligatoriska fält är märkta *