Het moet gezegd worden dat de robottechnologie de afgelopen jaren grote vooruitgang heeft geboekt: ze zijn slimmer door de aanwezigheid van kunstmatige intelligentie, vaardiger dankzij mechanische precisietechnologie en automatisering. Als het echter om diepgaande taken gaat, zoals het classificeren van objecten op kleur, kunnen niet veel robotsystemen dit doen.
De verwarring van de robot bij kleurherkenning, vooral bij transparante objecten zoals glazen flessen en plastic flessen, komt vaak voort uit het uitgeruste dieptecamerasysteem. Deze camerasystemen schijnen infrarood licht op een object om de vorm ervan te detecteren. Dit werkt redelijk correct op ondoorzichtige items. Maar als ze voor een transparant object worden geplaatst, zal het licht er recht doorheen schijnen en de reflecterende oppervlakken verstrooien, waardoor het berekenen van de vorm van het item veel moeilijker wordt en de nauwkeurigheid dus ook aanzienlijk afneemt.
Om het bovenstaande probleem op te lossen hebben onderzoekers van Carnegie Mellon University een vrij eenvoudige oplossing gevonden: gebruik een extra AI-geïntegreerde kleurencamera. Concreet maakt dit nieuwe systeem gebruik van een combinatie van kleurencamera's en machine learning-algoritmen om de vorm van objecten te herkennen op basis van hun kleur.
Het team heeft het systeem getraind om dieptecamerabeelden van wazige objecten en kleurenafbeeldingen van hetzelfde item te kunnen combineren. Hierdoor kan het AI-algoritme verschillende 3D-vormen afleiden uit beelden die door de camera zijn vastgelegd, en vervolgens kenmerken aanwijzen die helpen objecten te onderscheiden.
Dankzij deze methode kan de robot glimmende, transparante voorwerpen onderscheiden en oppakken, zelfs als ze op een rommelige stapel liggen, zoals je kunt zien in de onderstaande video:
Het onderzoeksteam geeft toe dat hun systeem nog niet compleet is, omdat de nauwkeurigheid nog steeds niet op een perfect niveau is. Dit kan echter in de loop van de tijd volledig worden verbeterd.