Nieuwe Teams-functies gebruiken AI en machine learning om video- en audio-ervaringen te verbeteren

Op 13 juni heeft Microsoft uitgebracht tal van nieuwe functies voor zijn communicatieplatform Teams, gericht op de verbetering van de spraak- en videokwaliteit. Deze nieuwe Teams-functies omvatten met name echo-onderdrukking, "de-reverberation", onderdrukking van achtergrondgeluid, "interruptibility"-mogelijkheden, realtime schermoptimalisatie, AI-gebaseerde optimalisatie en helderheid- en focusfilters.

"Verstorende echo-effecten, slechte kamerakoestiek en schokkerige video zijn enkele veelvoorkomende problemen die de effectiviteit van online gesprekken en vergaderingen belemmeren", zegt Nicole Herskowitz, vicepresident van Microsoft Teams, en gaat in op de belangrijkste zorgen die de ontwikkeling van de nieuwe Teams-functies hebben gestimuleerd. “Dankzij AI en machine learning, die fundamenteel zijn geworden voor onze strategie voor continue verbetering, hebben we innovatieve verbeteringen in Microsoft Teams die dergelijke audio- en video-uitdagingen verbeteren op een manier die zowel gebruiksvriendelijk als schaalbaar is in verschillende omgevingen.”

De nieuwe echo-onderdrukkingsmogelijkheid van Teams is niet de enige functie die zich richt op de echo-problemen die gebruikers tegenkomen bij communicatie binnen het platform. Enkele van de audiofuncties geïntroduceerd door Microsoft richt zich ook op andere echo-gerelateerde problemen veroorzaakt door de omgeving en audio-apparaten. De nieuwe de-galmfunctie maakt bijvoorbeeld gebruik van een machine learning-model dat vastgelegde audiosignalen kan omzetten in geluid, waardoor wordt voorkomen dat het geluid weerkaatst of dat de gebruiker klinkt alsof hij in een grot spreekt.

Een andere functie lost ook het echogerelateerde probleem op dat wordt veroorzaakt door audioapparaten die dicht bij elkaar zijn geplaatst. "Een natuurlijk element van een gesprek is de mogelijkheid om te onderbreken voor verduidelijking of validatie", zegt Herskowitz. “Dit wordt bereikt door middel van full-duplex (tweerichtings) transmissie van audio, waardoor gebruikers tegelijkertijd kunnen spreken en anderen kunnen horen. Wanneer u geen headset gebruikt, en vooral wanneer u apparaten gebruikt waarbij de luidspreker en microfoon heel dicht bij elkaar staan, is het moeilijk om echo te verwijderen met behoud van full-duplex audio. Microsoft Teams gebruikt een model dat is "getraind" met 30,000 uur aan spraakvoorbeelden om gewenste stemmen te behouden en ongewenste audiosignalen te onderdrukken, wat resulteert in een vloeiendere dialoog."

Volgens Herskowitz kunnen gebruikers met de nieuwe onderbreekbaarheid van de Teams soepele uitwisselingen tot stand brengen zonder zich onderbroken of gestoord te voelen, wat vaak voorkomt op online communicatieplatforms. Daarnaast heeft het bedrijf aangekondigd dat het zijn op machine learning gebaseerde technologie voor ruisonderdrukking standaard maakt voor Teams (Windows, Mac en iOS en binnenkort voor Android- en webclients van Teams), waardoor duidelijkere oproepen zonder ongewenste geluiden mogelijk zijn.

Microsoft breidt het gebruik van AI ook uit naar de videoprestaties van Teams om relevante visuele aanpassingen te maken, vooral in gevallen waarin gebruikers problematische bandbreedte-omstandigheden tegenkomen bij het delen van inhoud tijdens presentaties. De realtime functie voor schermoptimalisatie van Teams, die gebruikmaakt van machine learning, kan bijvoorbeeld inhoudskenmerken detecteren en aanpassen, wat resulteert in een geoptimaliseerde leesbaarheid van documenten en een soepele videoweergave. Ondertussen voorkomt de op AI gebaseerde optimalisatie door de videoweergave aan te passen de drastische effecten van schokkerige video's die worden veroorzaakt door een slechte netwerkbandbreedte. Ten slotte stellen de nieuwe AI-aangedreven filters in Teams gebruikers in staat om de helderheid aan te passen en soft focus te gebruiken wanneer ze vergaderingen hebben in gebieden met weinig licht.

Volgens Microsoft worden de genoemde functies momenteel uitgerold en zullen ze de komende maanden algemeen beschikbaar zijn.