Концепция аудиомоста: вдохновляющие рабочие процессы двунаправленного звука и искусственного интеллекта
Концепция «Аудио-моста» Виры Пендялы, проверенная практическими экспериментами, породила дальновидные идеи для двунаправленного звука и искусственного интеллекта на базе Jetson на Mini-KVM. Будучи старшим инженером-программистом в NVIDIA с более чем 15-летним опытом работы в разработке программного обеспечения, Вира исследовала концепцию: внедрение хоста ↔ целевого аудио, диалогового искусственного интеллекта и рабочих процессов домашней автоматизации в USB KVM.
Вира Пендьяла представил дальновидную идею на конкурсе USB-KVM DIY Challenge 2024. Его концепция обеспечения двунаправленного звука с помощью Openterface Mini-KVM направлена на улучшение дистанционного управления и приложений, управляемых искусственным интеллектом, особенно для одноплатных компьютеров, таких как Jetson Nano. Эксперименты Виры с USB-аудиоключами и его интервью вызвали вдохновляющие дискуссии о потенциале аудиомоста в домашней автоматизации и рабочих процессах диалогового искусственного интеллекта.
Вызов
-
Однонаправленный звук HDMI от Mini-KVM передает только цель → хост аудио, нет пути для подключения хост-микрофона к удаленному устройству
-
Цель отсутствия инфраструктуры Любое решение должно работать без Интернета, внешнего источника питания или громоздких дополнений.
-
Примеры использования искусственного интеллекта и автоматизации Veera представляет живую речь на безголовом устройстве для разговорного искусственного интеллекта, удаленной помощи и домашнего мониторинга.
Предлагаемая архитектура моста
-
Двойные звуковые адаптеры USB
- Переходник на стороне хоста захватывает локальный микрофон/аудио.
- Переходной ключ передает этот звук в микрофонный разъем удаленного компьютера.
-
Jetson Nano в качестве аудиомаршрутизатора
- Запускает ALSA/PulseAudio для сопоставления двух ключей.
- Хостинг OpeninterfaceQT для управления KVM и потенциального вывода AI.
-
Мини-KVM для видео и управления
- HDMI передает видео и целевой звук обратно на хост
- Одно USB-соединение позволяет управлять клавиатурой/мышью и (в будущем) аудиоканалами.
-
Программное сопоставление каналов
- Предлагает расширить OpenterfaceQT для предоставления нескольких интерфейсов USB.
- Переключатель пользовательского интерфейса для включения хост-микрофона → целевая маршрутизация вместе с потоками KVM.
Влияние и сообщество
Эксперименты Виеры подчеркивают широту вариантов использования, которые ждут своего раскрытия путем добавления звука в экосистему Mini-KVM. Его концепции тесно связаны с нашей дорожной картой по рабочим процессам на базе искусственного интеллекта, домашней автоматизации и более широкому использованию удаленных ИТ-технологий.
Особая благодарность Вире Пендяле за то, что она поделилась своим видением и вдохновила наше следующее поколение функций Mini-KVM. Узнайте больше и изучите другие записи на странице USB-KVM DIY Challenge 2024:
Погрузитесь в нашу беседу о потоковой передаче на YouTube «Crowd Supply Teardown» с Хелен Ли, Билли Р. Б. Вангом и Кевином Пенгом, чтобы узнать больше об Openterface Mini-KVM и блестящих идеях конкурса: https://youtu.be/Tp4f_uxEo6E