قامت شركة Renesas Electronics Corp و Syntiant Corp بتطوير حل ذكاء اصطناعي متعدد الوسائط يتم التحكم فيه صوتيًا (AI) يتيح التشغيل بدون تلامس منخفض الطاقة لمعالجة الصور في أنظمة إنترنت الأشياء القائمة على الذكاء الاصطناعي وأنظمة الحافة. تشمل تطبيقات حل الذكاء الاصطناعي متعدد الوسائط آلات السحب الذاتي والكاميرات الأمنية وأنظمة مؤتمرات الفيديو والأجهزة الذكية مثل أجهزة التنظيف الروبوتية.
من خلال توفير إمكانات معالجة الصوت والصورة ، يجمع الحل بين وحدة المعالجات الدقيقة AI للرؤية من سلسلة Renesas RZ / V (MPU) ومعالج القرار العصبي متعدد الوسائط المتزامن منخفض الطاقة NDP120. يتميز الحل المشترك بوظائف التشغيل الدائم مع التنشيط الصوتي السريع من وضع الاستعداد لأداء التعرف على الأشياء والتعرف على الوجه والمهام الأخرى القائمة على الرؤية.
(المصدر: Renesas Electronics)
أحد الأمثلة على التطبيقات المذكورة هو الإشارات الصوتية التي يحددها المستخدم والتي تدفع التنشيط وتشغيل النظام ، بينما يتتبع التعرف على الرؤية بالذكاء الاصطناعي سلوك المشغل ويتحكم في التشغيل أو يصدر تحذيرًا عند اكتشاف الإجراءات المشبوهة.
(الصورة: Renesas Electronics)
قال رينيساس: "تسهل البنية متعددة الوسائط إنشاء تجارب مستخدم بدون تلامس للأنظمة القائمة على الرؤية والذكاء الاصطناعي". "يؤدي استخدام شريحة مخصصة موفرة للطاقة للتعرف على الصوت إلى تقليل استهلاك الطاقة الاحتياطية مع تسريع عملية تطوير النظام لأنه من الممكن تطوير البرامج بشكل مستقل عن وظيفة الذكاء الاصطناعي للرؤية."
تتضمن سلسلة Renesas RZ / V MPU للرؤية AI مسرع الشركة الذي يمكن إعادة تشكيله ديناميكيًا والمعالج AI (DRP-AI) ويجمع بين استدلال الذكاء الاصطناعي عالي الدقة وكفاءة الطاقة العالية. قال رينيساس إن أداء الطاقة هذا يلغي الحاجة إلى أجهزة الإدارة الحرارية مثل المشتتات الحرارية أو مراوح التبريد ، مما يقلل من تكلفة فاتورة المواد (BOM) ويجعل من الممكن دمج الرؤية AI في مجموعة واسعة من التطبيقات المدمجة.
(الصورة: Renesas Electronics)
تشتمل شريحة Syntiant NDP120 على إمكانات متقدمة للذكاء الاصطناعي يمكن استخدامها لتنفيذ وظائف صوتية عالية الدقة بدون استخدام اليدين ، بما في ذلك التعرف على السماعات واكتشاف الكلمات الرئيسية وكلمات التنبيه المتعددة والتعرف على الأوامر المحلية. يمكن لـ NDP120 ، المعبأ بمحرك استدلال الشبكة العصبية Syntiant Core 2 ، تشغيل تطبيقات متعددة في وقت واحد مع تقليل استهلاك الطاقة إلى 1 ميجاوات من طاقة البطارية.
يستخدم حل الذكاء الاصطناعي متعدد الوسائط الذي يتم التحكم فيه صوتيًا العديد من الأجهزة المتوافقة بشكل متبادل من محفظة Renesas وهو جزء من التصميمات المرجعية لـ Winning Combinations الخاصة بالشركة والتي تتميز بمجموعات منتجات المعالجة التناظرية والطاقة والمدمجة. التصميم المرجعي لحل الذكاء الاصطناعي متعدد الوسائط متاح الآن ، بما في ذلك مخططات الدوائر وقوائم قائمة مكونات الصنف.
حول شركة Renesas Electronics America