โซลูชัน Multimodal AI ช่วยลดการออกแบบเสียงอัจฉริยะในระบบวิชันซิสเต็มแบบฝังตัว

อัปเดต: 4 สิงหาคม 2021

Renesas Electronics Corp. และ Syntiant Corp. ได้ร่วมกันพัฒนาโซลูชันปัญญาประดิษฐ์หลายรูปแบบ (AI) ที่ควบคุมด้วยเสียง ซึ่งช่วยให้การทำงานแบบไม่ต้องสัมผัสที่ใช้พลังงานต่ำสำหรับการประมวลผลภาพในระบบ IoT และระบบ Edge ที่ใช้ AI แบบมีวิสัยทัศน์ แอปพลิเคชันสำหรับโซลูชัน AI หลายรูปแบบ ได้แก่ เครื่องชำระเงินอัตโนมัติ กล้องรักษาความปลอดภัย ระบบการประชุมทางวิดีโอ และเครื่องใช้อัจฉริยะ เช่น อุปกรณ์ทำความสะอาดหุ่นยนต์

นำเสนอความสามารถในการประมวลผลเสียงและภาพ โซลูชันนี้รวมเอายูนิตไมโครโปรเซสเซอร์ (MPU) ที่มีวิสัยทัศน์ Renesas RZ/V Series และโปรเซสเซอร์ Syntiant NDP120 Neural Decision Processor แบบมัลติโมดอลที่ใช้พลังงานต่ำ โซลูชันร่วมมีฟังก์ชันการทำงานตลอดเวลาพร้อมการเปิดใช้งานการสั่งงานด้วยเสียงอย่างรวดเร็วจากโหมดสแตนด์บายเพื่อทำการจดจำวัตถุ การจดจำใบหน้า และงานอื่นๆ ที่อิงจากการมองเห็น

(ที่มา: Renesas Electronics)

ตัวอย่างแอปพลิเคชันหนึ่งที่อ้างถึงคือสัญญาณเสียงที่ผู้ใช้กำหนดเองซึ่งกระตุ้นการเปิดใช้งานและการทำงานของระบบ ในขณะที่การรู้จำ AI แบบมองเห็นจะติดตามพฤติกรรมของผู้ปฏิบัติงานและควบคุมการทำงานหรือออกคำเตือนเมื่อตรวจพบการกระทำที่น่าสงสัย

(ภาพ: Renesas Electronics)

“สถาปัตยกรรมหลายรูปแบบทำให้ง่ายต่อการสร้างประสบการณ์ผู้ใช้แบบไม่ต้องสัมผัสสำหรับระบบที่ใช้วิสัยทัศน์ด้วย AI” Renesas กล่าว “การใช้ชิปเฉพาะที่ประหยัดพลังงานสำหรับการจดจำเสียงช่วยลดการใช้พลังงานขณะสแตนด์บายในขณะที่เร่งการพัฒนาระบบ เนื่องจากสามารถพัฒนาซอฟต์แวร์โดยไม่ขึ้นกับฟังก์ชันการทำงานของ AI ของวิชันซิสเต็ม”

Renesas RZ/V Series MPU สำหรับวิสัยทัศน์ AI รวมตัวเร่งความเร็วโปรเซสเซอร์ AI (DRP-AI) ที่กำหนดค่าใหม่ได้แบบไดนามิกของบริษัท และรวมการอนุมาน AI ที่มีความแม่นยำสูงเข้ากับประสิทธิภาพการใช้พลังงานสูง ประสิทธิภาพด้านพลังงานนี้ขจัดความจำเป็นสำหรับอุปกรณ์จัดการระบายความร้อน เช่น ฮีตซิงก์หรือพัดลมระบายความร้อน ลดต้นทุนค่าวัสดุ (BOM) และทำให้สามารถผสานรวม AI ด้านการมองเห็นเข้ากับแอพพลิเคชั่นฝังตัวที่หลากหลาย Renesas กล่าว

(ภาพ: Renesas Electronics)

ชิป Syntiant NDP120 รวมเอาความสามารถ AI ขั้นสูงที่สามารถใช้เพื่อใช้งานฟังก์ชันเสียงแบบแฮนด์ฟรีที่มีความแม่นยำสูง รวมถึงการรู้จำลำโพง การตรวจจับคำหลัก คำปลุกหลายคำ และการรู้จำคำสั่งในเครื่อง NDP120 ซึ่งมาพร้อมกับเอ็นจิ้นการอนุมานเครือข่ายประสาทเทียม Syntiant Core 2 ยังสามารถเรียกใช้แอพพลิเคชั่นหลายตัวพร้อมกันในขณะที่ลดการใช้พลังงานให้เหลือพลังงานแบตเตอรี่ 1 mW

โซลูชัน AI หลายรูปแบบที่ควบคุมด้วยเสียงใช้อุปกรณ์ที่ทำงานร่วมกันได้หลายตัวจากกลุ่มผลิตภัณฑ์ของ Renesas และเป็นส่วนหนึ่งของการออกแบบอ้างอิง Winning Combinations ของบริษัทที่มีการผสมผสานผลิตภัณฑ์การประมวลผลแบบแอนะล็อก กำลัง และการประมวลผลแบบฝัง การออกแบบอ้างอิงสำหรับโซลูชัน AI หลายรูปแบบพร้อมให้ใช้งานแล้ว ซึ่งรวมถึงแผนภาพวงจรและรายการ BOM

เกี่ยวกับ Renesas Electronics America