Weblectures en automatisch volgen

Via Twitter  kwam er een oproep van Sandra Passchier (@sanpas) dat SURF bezig was met  een pilot over het automatisch volgen van sprekers tijdens presentaties. Daarbij was mijn interesse gelijk gewekt want ondersteuning bij weblectures, dat kost  bakken vol geld. Daar moet vast iets op te verzinnen zijn. Dan ga je uiteraard eerst zelf op onderzoek uit en dan blijken er eigenlijk twee systemen zijn: automatisch volgen door middel van RFID (radio)  en op basis van beeldherkenning.

Bij RFID kan een spreker automatisch worden gevolgd door de camera door middel van een radio signaaltje dat door de camera wordt opgepikt. Dit zit meestal ook ingebouwd bij de draadloze microfoon. Diti systeem is prijzig en werkt nog zeker niet vlekkeloos zo werd mij verteld door mensen van de RUG.
Beeldherkenning heeft de laatste jaren een zeer grote vlucht gemaakt binnen Gaming. De sensors voor de Xbox-Kinect en de PS3 zijn nu zeer betaalbaar. De software wordt ook steeds beter. Beeldherkenning, dat is de toekomst!

Dus ik stond helemaal vooraan toen ik vernam dat SURF beeldherkenning had gekozen als basis om sprekers automatisch te volgen. Zo kwam ik in contact met Francois Kooman, een enthousiast medewerker / programmeur die namens SURF met deze pilot bezig was. Hij had samenmet een compaan een applicatie gebouwd waarmee de opnamecomputer door middel van een Kinect (XBox) automatisch de spreker kan volgen. Ook hadden ze al enkele videootje gemaakt over dit onderwerp. Dat zag er veel belovend uit en moest getest worden in de praktijk! Wij gingen enthousiast aan de slag. En lol hebben we gehad. Maar of het systeem nu zo goed werkte....

Na behoorlijk wat gehannes om de Kinect uberhaupt om het systeem aangesloten te krijgen was het tijd om in de collegezaal een test-presentatie te verzorgen. Hierbij hebben we eerst stil gestaan op het podium waarbij ik netjes werd herkend. Een lichte beweging naar links of rechts ging prima, maar bij een beetje rondlopen werd het al wat lastiger. Helemaal wanneer dit ook nog eens voor een scherm gebeurde of ik - als spreker- naar het scherm draaide om iets aan te wijzen. De sensor was je dan al snel uit het oog verloren, maar slaagde soms om mij terug te vinden.

Wanneer ik aan het presenteren was en er liep een student voor het podium langs werd deze meestal opgepikt en gevolgd. Een bewegend opject in voor een Kinect kennelijk toch interessanter dan een stilstaande spreker. Of was mijn verhaal gewoon erg saai...
Leuker werd het bij presentaties door twee personen. De Kinect kan in principe twee personen herkennen, maar wie is nu wie? Wanneer twee presentatoren op het podium bij elkaar staan gaat het nog best goed! Maar wanneer er iemand gaat lopen begint de ellende. Dan moet de sensor beslissen wie te volgen. Geen gemakkelijke opgave. Het gevolg was eigenlijk altijd dat beide presentatoren niet meer werden herkend en de Kinect volledig van slag raakte. 

Het was een zeer vermakelijk dag, waarbij vele situaties zijn uitgeprobeerd om het automatisch volgen met Kinect te testen. De conclusie was echter al snel helder. Besparen op camerabediening? Nu even niet. De Kinect kan bovendien nog geen spreker opvangen, schakelen van stream bij vertonen van media, metadata invullen en opnamen publiceren. Voorlopig zitten onze student-assistenten nog wel goed.

Door: Menno de Vos, NHTV Breda
onderwijskundige, weblectures, elearning