Multimodal yapay zeka çözümü, gömülü görüntü sistemlerinde akıllı ses tasarımını kolaylaştırıyor

Güncelleme: 4 Ağustos 2021

Renesas Electronics Corp. ve Syntiant Corp., görsel yapay zeka tabanlı IoT ve uç sistemlerde görüntü işleme için düşük güçte temassız çalışmayı mümkün kılan, ses kontrollü çok modlu bir yapay zeka (AI) çözümünü ortaklaşa geliştirdi. Çok modlu yapay zeka çözümüne yönelik uygulamalar arasında otomatik ödeme makineleri, güvenlik kameraları, video konferans sistemleri ve robotik temizleme cihazları gibi akıllı cihazlar yer alıyor.

Ses ve görüntü işleme yetenekleri sunan çözüm, Renesas RZ/V Serisi görüntü yapay zeka mikroişlemci birimi (MPU) ile düşük güçlü çok modlu Syntiant NDP120 Sinir Karar İşlemcisini birleştiriyor. Ortak çözüm, nesne tanıma, yüz tanıma ve diğer görüş tabanlı görevleri gerçekleştirmek için bekleme modundan sesle tetiklenen hızlı aktivasyonla her zaman açık işlevselliğe sahiptir.

(Kaynak: Renesas Elektronik)

Bahsedilen uygulama örneklerinden biri, aktivasyonu ve sistem çalışmasını yönlendiren kullanıcı tanımlı ses ipuçlarıdır; vizyon yapay zeka tanıma ise operatör davranışını izler ve işlemi kontrol eder veya şüpheli eylemler tespit edildiğinde uyarı verir.

(Resim: Renesas Elektronik)

Renesas, "Çok modlu mimari, görsel yapay zeka tabanlı sistemler için temassız kullanıcı deneyimleri oluşturmayı kolaylaştırıyor" dedi. "Ses tanıma için özel, güç açısından verimli bir çip kullanmak, sistem geliştirmeyi hızlandırırken beklemedeki güç tüketimini azaltır çünkü görsel yapay zeka işlevinden bağımsız olarak yazılım geliştirmek mümkündür."

Vizyon yapay zekasına yönelik Renesas RZ/V Serisi MPU, şirketin dinamik olarak yeniden yapılandırılabilir işlemci yapay zeka (DRP-AI) hızlandırıcısını içerir ve yüksek hassasiyetli yapay zeka çıkarımını yüksek güç verimliliğiyle birleştirir. Renesas, bu güç performansının, ısı emiciler veya soğutma fanları gibi termal yönetim cihazlarına olan ihtiyacı ortadan kaldırdığını, malzeme listesi (BOM) maliyetini azalttığını ve görsel yapay zekanın çok çeşitli gömülü uygulamalara entegre edilmesini mümkün kıldığını söyledi.

(Resim: Renesas Elektronik)

Syntiant NDP120 yongası, konuşmacı tanıma, anahtar kelime algılama, çoklu uyandırma sözcükleri ve yerel komut tanıma dahil olmak üzere yüksek hassasiyetli, eller serbest ses işlevlerini uygulamak için kullanılabilecek gelişmiş yapay zeka yeteneklerini içerir. Syntiant Core 120 sinir ağı çıkarım motoruyla birlikte gelen NDP2, aynı anda birden fazla uygulamayı çalıştırırken, güç tüketimini 1 mW pil gücüne kadar en aza indirir.

Sesle kontrol edilen çok modlu yapay zeka çözümü, Renesas'ın portföyündeki karşılıklı olarak uyumlu birden fazla cihazı kullanıyor ve şirketin analog, güç ve gömülü işlem ürünü kombinasyonlarını içeren Kazanan Kombinasyonlar referans tasarımlarının bir parçası. Çok modlu yapay zeka çözümüne yönelik referans tasarım, devre şemaları ve BOM listeleri de dahil olmak üzere artık mevcut.

Renesas Electronics Amerika hakkında