Разработан ручной проектор, способный создавать виртуальные персонажи и объекты, взаимодействующие с внешним миром. Анимированные объекты распознают тип поверхности, по которой они движутся, и могут реагировать на препятствия, изменение рисунка и т.п.
Устройство получило название Twinkle. Оно проецирует анимированную графику, реагирующую на структуру, форму и цвет поверхности. Более того, устройство способно изобразить 3D-объекты, например руку.
Для отслеживания элементов, например начерченной на стене линии, используется камера, а датчик ускорения гарантирует правильное передвижение луча проектора.
Устройство «оживляет» объекты в соответствии со структурой, формой или цветом поверхности.
Данные с камеры обрабатываются в специальной программе, управляющей графическим объектом. Изображение выводится с учетом поправок на угол проекции и расстояние до поверхности. Многие исследователи пытались создать виртуальную графику, взаимодействующую с реальной поверхностью, но пока только Twinkle распознает такой широкий круг поверхностей.
По словам Такуми Йошида из Токийского университета, устройство имеет очень маленькие размеры и могло бы поместиться в мобильном телефоне. Его прототип, проецирующий мультипликационного героя, который бегает вдоль рисунков на стене или по периметру предметов (см. фото), был представлен на недавней конференции Virtual Reality 2010 (США).