Опираясь на опыт игр, искусственного интеллекта и взаимодействия человека с роботом, основатели MATSUKO Мария Вирчикова и Матус Кирхмайер хотят, чтобы пользователи ощутили магию реалистичного голографического присутствия. Для достижения этой цели команда разработала первое в мире приложение голографического присутствия, которое использует простой поток для захвата и потоковой передачи людей в виде голограмм в режиме реального времени.
Захват камеры смартфона или компьютера передает трехмерное голографическое изображение человека в реальном времени перед обработкой с помощью усовершенствованного механизма 3D-рендеринга. Затем он обеспечивает иммерсивный опыт «виртуального присутствия» и отображает его в виртуальной среде или накладывает на реальный мир. Запатентованные алгоритмы глубокого обучения преобразуют 2D-потоки в 3D попиксельно. Собственные нейронные сети компании учатся реконструировать человека даже по невидимым частям. В режиме реального времени или предварительно записанные голограммы можно масштабировать до их истинного размера и отображать естественные выражения лица и другие невербальные сигналы, которых часто не хватает в обычных онлайн-коммуникационных средствах.
В сочетании с функциональностью SDK Snapdragon Spaces™ MATSUKO предоставляет пользователю захватывающий опыт голографических встреч. Пользователи могут видеть объемные голограммы, захватывать и перемещать их по своему усмотрению (благодаря функции отслеживания рук). Обнаружение плоскостей позволяет сканировать среду пользователя, поэтому голограмму можно легко расположить в соответствии с реальной средой. Подняв реалистичное взаимодействие на новый уровень, голограммы MATSUKO можно было расположить через стол — так же, как это сделал бы настоящий аналог.
Запатентованная технология MATSUKO привлекла внимание ведущих европейских операторов мобильной связи, включая Deutsche Telekom, Orange, Telefónica и Vodafone. После успешного подтверждения концепции планируется разработать европейскую платформу для голографической связи, которая использует возможности 5G для создания реалистичных 3D-изображений.
Источник
Уникальность
