ИИ-сопроцессор нового HoloLens будет встроен в голографический процессор (Holographic Processing Unit, HPU). Последний обрабатывает данные со всех сенсоров устройства, включая датчик отслеживания головы и инфракрасные камеры. Чип искусственного интеллекта будет анализировать данные с помощью глубоких нейронных сетей.
Работа искусственного интеллекта прямо на устройстве имеет ряд преимуществ. Одно из них, по словам Microsoft — более высокая производительность, поскольку шлему не нужно загружать данные на удалённые серверы. Также устройство становится более дружелюбно к пользователю — ему не приходится поддерживать постоянное подключение к Интернету. К тому же такой тип обработки данных более защищённый, потому что пользовательская информация никогда не покидает HoloLens.
Есть два способа реализовать такую работу ИИ. Можно создавать особые легковесные нейронные сети, которые не требуют высоких вычислительных мощностей. Над этим работают Facebook и Google. Второй вариант — разработка специальных процессоров, архитектур и вспомогательного программного обеспечения. Этим занимаются ARM и Qualcomm. Предположительно, Apple создаёт собственный процессор искусственного интеллекта для iPhone. Теперь то же самое делает Microsoft для своего шлема смешанной реальности.
Параллельно с этим идёт гонка по созданию специальных ИИ-чипов для серверов. В этом направлении работают Intel, NVIDIA, Google и Microsoft. Так они планируют обслуживать новые мобильные процессоры, которые в основном будут продаваться напрямую предприятиям.
Дата выхода нового HoloLens пока не была анонсирована. Предположительно, он выйдет в 2019 году.