Sådan bruges billeddetektering på webinarplatforme

(Przemek Shemmy Majewski) (5. jul 2020)

Populariteten af ​​webinarplatforme og online mødesoftware er gået gennem taget i de seneste måneder, hvor mange virksomheder og uddannelsesinstitutioner er gået fjernt og online. Hvis du bygger en webinar-platform (eller tænker på det), kan AI komme godt med billeddetektering, der kan forbedre brugeroplevelsen under en live stream. Lad os se på, hvad du kan gøre ved hjælp af billedregistrering i din online mødeplatform.

I en (meget lille) nøddeskal bruges objektregistrering til at opdage forekomster af semantiske objekter af en bestemt klasse (som mennesker, bygninger eller biler) i digitale billeder og videoer. I dag har den flere forretningsapplikationer som:

Men en af ​​de anvendelser, der nu er meget relevant, er detektion i realtid af objekter til forbedring af livevideo i webinarplatforme eller live videostreams. Noget meget af de eksisterende videokonference- og sociale medieplatforme er blevet introduceret, især i de sidste par måneder, med den øgede brugerefterspørgsel.

Folk bruger webinars og online møder mere end nogensinde før

På grund af COVID-19-pandemien har mange af os siddet hjemme. Arbejder og studerer eksternt det meste af tiden og mødes online uden at kunne besøge kontoret eller skolen. Eksisterende softwareudbydere, der sælger webinar og online mødeplatforme, har haft stor fordel af dette.

Ifølge MarketWatch, Zooms daglige aktive antal brugere i marts 2020 steg 378% fra det foregående år, mens Microsoft rapporterede en 775% støder på brugen af ​​dets skyapplikationer generelt (inklusive Teams) på grund af stigningen i omfanget af fjernarbejde og online læring. Og Ciscos Webex var vært for 50 millioner møder alene i marts i år.

På grund af den store efterspørgsel og øget konkurrence i rummet er de fleste platforme blevet tvunget til at stramme deres sikkerhedsforanstaltninger og øge deres præstationer. Men de er også begyndt at kigge efter flere måder til at øge deres brugeroplevelse og tiltrække flere brugere, der med rette registrerer en mulighed lige der.

En af de måder, de kunne gøre på, var at fokusere på at udvikle deres billedregistrering. algoritmer til at introducere nye, hjælpsomme og ofte sjove funktioner.

Heldigvis med de seneste fremskridt inden for dyb læring, computervisionmodeller og billedbehandling er softwareapplikationer, der bruger realtidsgenkendelse af objekter, blevet meget lettere at bygge og udvikle disse dage, og meget bedre resultater på samme tid.

Måder at bruge realtidsobjektdetektion i live video

Udfordringen for software, der beskæftiger sig med videokonferencer, webinars, eller live streams opdager og klassificerer objekter i realtid – samtidig med at den opretholder høj ydeevne, hvilket er afgørende for produktiviteten og effektiviteten af ​​online møder.

I dag kan software registrere en person i rammen og klassificere objekter ind i en person i forgrunden og indvender ts i baggrunden. Dette giver mulighed for at skabe nyttige funktioner til videokonferenceplatforme, men også apps til spil eller sociale medier.

Udskiftning af baggrunden med et valgt billede, video eller GIF

Dette er blevet alt det raser for nylig, da flere hold rundt om i verden begyndte at arbejde eksternt og havde brug for en måde at gøre utallige online-møder mere underholdende.

Men hvad der er vigtigere, det giver også brands mulighed for at bruge deres logo eller brandede billeder og videoer i baggrunden. Dette hjælper med at forbedre brandgenkendelsen under f.eks. en produktdemo og gøre et bedre indtryk på fremviseren.

Mødedeltagere kan vælge en tilgængelig fotobaggrund eller vælge en fra deres desktopmappe eller telefonens kamerarulle. Softwaren registrerer ansigtet og placerer det pænt mod baggrunden, helst uden at påvirke den samlede mødes ydeevne for meget.

Sådan kan du fjerne baggrunden for at erstatte det med et mærkebillede eller en video:

Sløring af baggrunden

Dette hjælper med at fokusere billedet på kun den person i forgrunden. Det er igen en meget populær funktion, der for nylig blev introduceret, fx af Skype, der giver folk mulighed for at være mere komfortable under forretningsopkald med video uden at være opmærksomme på hvad (eller hvem) der ligger bag dem.

På denne måde brugerne kan forblive professionelle og ikke bekymre sig om deres omgivelser, især når de ikke kan arbejde i et velordnet kontormiljø.

(Og enhver, der nogensinde har foretaget et online-forretningsopkald i disse dage med deres børn eller ægtefælle / partner derhjemme eller bunker af tøjvask i baggrunden, vil sætte pris på det.)

Det er også en nyttig funktion, der bruges i gaming til at fordybe højttaleren / afspilleren i computerspiluniverset, når du spiller live.

Sådan bygger du dit eget billedgenkendelsessystem

Vi har for nylig udgivet en e-bog, der viser præcist, hvad der er nødvendigt for at opbygge avanceret software ved hjælp af objektgenkendelsesalgoritmer. Download det her , og find ud af, trin for trin, hvordan du gør:

  • Definer projektomfang og metrics
  • Indsaml data og brug syntetiske data
  • Træn modeller og test deres ydeevne
  • Implementér modellerne til produktion
  • Overvåg og optimer deres ydeevne over tid

Og hvis du leder efter ekspertrådgivning om brug af objektdetektering i din software – chat med en DLabs AI-specialist i dag .

Oprindeligt offentliggjort på https://dlabs.ai den 5. juli 2020.

Skriv et svar

Din e-mailadresse vil ikke blive publiceret. Krævede felter er markeret med *