Объединение четырех моделей искусственного интеллекта для достижения несравненного опыта в иммерсивной визуализации и моделировании.
Объединение четырех моделей искусственного интеллекта создавая уникальный опыт в иммерсивной визуализации и моделировании.
Узнайте больше о том, как эта новая бесплатная программа под названием HandMol достигает погружного совместного визуализации и моделирования молекулярных структур, интегрируя 6 современных компьютерных технологий – все на веб-странице и множественных устройствах
![HandMol интегрирует WebXR, а также AI-приводящуюся в действие отслеживание рук, являющееся индивидуальным для VR-очков, AI-приводящуюся в действие распознавание речи, поддерживаемое моделью большого объема естественного языка, AI-базированную молекулярную механику и WebRTC для погружающего, двухпользовательского взаимодействия с графикой и моделированием молекул. Рисунок составлен автором из снимков, сделанных на его собственном программном обеспечении.](https://ai.miximages.com/miro.medium.com/v2/resize:fit:640/format:webp/1*DmvOv43JO6sxnDdoio_DBQ.png)
В этой новой записи блога я описываю, как мы создали веб-инструмент под названием HandMol, который интегрирует различные AI-инструменты и технологии, чтобы позволить одному или нескольким пользователям просматривать и манипулировать молекулярными системами в погружной 3D-среде с помощью рук и устных команд. Моя цель не состоит в описании мощности HandMol для химиков (об этом говорится в соответствующем предварительном отчете), но в объяснении того, как он объединяет шесть очень современных компьютерных технологий, четыре из которых базируются на искусственном интеллекте: WebXR, AI-приводящуюся в действие отслеживание рук, AI-приводящуюся в действие распознавание речи, поддерживаемое моделью большого объема естественного языка, AI-системы для быстрого и точного моделирования молекулярной физики и WebRTC для коммуникации между несколькими пользователями. Более того, весь программный комплекс полностью работает в сети Интернет, конкретно на клиенте, что имеет множество преимуществ, о которых будет рассказано.
Помимо многочисленных технических объяснений, которые вы найдете в этой статье, я надеюсь, что она достигнет своей общей цели – вspirirovat подобное объединение всех этих современных технологий, достойных научно-фантастического шоу высоких технологий, чтобы создать революцию, расширяющую взаимодействие человека и компьютера для повышения продуктивности, обучения, тренировки, работы и развлечений.
Оглавление
- Вступление
- Почему развивать HandMol и приложения с аналогичными функциональными возможностями? В основе HandMol – шесть современных технологий– Технология 1 и 2. WebXR для визуализации в VR и AR и отслеживание рук для естественной манипуляции молекулами- Технологии 3 и 4. Распознавание речи с поддержкой большой модели естественного языка- Технология 5. Молекулярная механика с использованием машинного обучения, в частности ANI-2x и обычное использование силового поля AMBER- Технология 6. Возможности совместной работы с использованием WebRTC
- Заключение и перспективы