مفهوم جسر الصوت: صوت ملهم ثنائي الاتجاه وسير عمل الذكاء الاصطناعي

أثار مفهوم Veera Pendyala “Audio Bridge”، الذي تم إثباته من خلال التجارب العملية، أفكارًا تطلعية للصوت ثنائي الاتجاه والذكاء الاصطناعي المدعوم من Jetson على Mini-KVM. بصفته مهندس برمجيات أول في NVIDIA مع أكثر من 15 عامًا في هندسة البرمجيات، اكتشف Veera رؤية: جلب الصوت المضيف والمستهدف والذكاء الاصطناعي للمحادثة وسير عمل التشغيل الآلي للمنزل إلى USB KVM.

قدم Veera Pendyala فكرة مستقبلية لتحدي USB-KVM DIY 2024. ويهدف مفهومه لتمكين الصوت ثنائي الاتجاه باستخدام Openterface Mini-KVM إلى تعزيز التحكم عن بعد والتطبيقات التي تعتمد على الذكاء الاصطناعي، خاصة لأجهزة الكمبيوتر ذات اللوحة الواحدة مثل Jetson Nano. أثارت تجارب Veera مع وحدات توصيل الصوت USB ومقابلته مناقشات ملهمة حول إمكانية ربط الصوت في التشغيل الآلي للمنزل وسير عمل الذكاء الاصطناعي للمحادثة.

##التحدي

• صوت أحادي الاتجاه HDMI من Mini-KVM يبث target → host الصوت فقط، ولا يوجد مسار لميكروفون المضيف للوصول إلى الجهاز البعيد

• هدف البنية التحتية الصفرية يجب أن يعمل أي حل بدون إنترنت أو طاقة خارجية أو إضافات ضخمة

• حالات استخدام الذكاء الاصطناعي والأتمتة تتصور Veera التحدث المباشر إلى جهاز مقطوع الرأس من أجل الذكاء الاصطناعي للمحادثة والمساعدة عن بعد وسيناريوهات مراقبة المنزل

هندسة الجسر المقترحة

1. ** محولات صوت USB مزدوجة **

   • دونجل من جانب المضيف يلتقط الميكروفون/الصوت المحلي
   • يقوم دونجل الجانب المستهدف بإدخال هذا الصوت في مقبس الميكروفون الخاص بالجهاز البعيد

2. جيتسون نانو كموجه صوتي

   • تشغيل ALSA/PulseAudio للتخطيط بين جهازي الدونجل
   • يستضيف OpenterfaceQT للتحكم في KVM واستدلال الذكاء الاصطناعي المحتمل

3. Mini-KVM للفيديو والتحكم

   • ينقل HDMI الفيديو والصوت المستهدف إلى المضيف
   • وصلة USB واحدة تتعامل مع لوحة المفاتيح/الماوس وقنوات الصوت (المستقبلية).

4. ** تعيين قنوات البرامج **

   • يقترح توسيع OpenterfaceQT للكشف عن واجهات USB المتعددة
   • تبديل واجهة المستخدم لتمكين ميكروفون المضيف → توجيه الهدف جنبًا إلى جنب مع تدفقات KVM

التأثير والمجتمع

تسلط تجارب Veera الضوء على اتساع نطاق حالات الاستخدام التي تنتظر أن يتم فتحها عن طريق إضافة الصوت إلى النظام البيئي Mini-KVM. تتوافق مفاهيمه بشكل وثيق مع خريطة الطريق الخاصة بنا لسير العمل المدعوم بالذكاء الاصطناعي، والأتمتة المنزلية، وتجارب تكنولوجيا المعلومات عن بعد الأكثر ثراءً.

شكر خاص لـ Veera Pendyala لمشاركته رؤيته وإلهام الجيل القادم من ميزات Mini-KVM. تعرف على المزيد واستكشف الإدخالات الأخرى على صفحة USB-KVM DIY Challenge 2024:

• Crowd Supply Challenge

انغمس في حديثنا المتدفق على YouTube، Crowd Supply Teardown مع Helen Leigh وBilly R.B. Wang وKevin Peng، لمعرفة المزيد حول Openterface Mini-KVM والأفكار الرائعة من المسابقة: https://youtu.be/Tp4f_uxEo6E