Arka Plan
Gelişmiş kamera teknolojilerine olan talep, dinamik içerik oluşturmanın çok önemli olduğu kendine medya döneminde artmıştır. Yeni bir fikir ortaya çıkıyor: otomatik kamera takip yeteneklerini artırmak için ses kaynağı konumlandırmasını bilgisayarla görme (CV) teknolojileri ile entegre etmek. Bu entegrasyon, hızlı hareket eden nesneleri takip etmede CV’nin sınırlamalarını ele almayı amaçlıyor, özellikle görsel ipuçlarının yetersiz olduğu senaryolar için. Ses konumlandırmasını tamamlayıcı bir mekanizma olarak kullanarak, sistem zorlu koşullarda bile, düşük görünürlük veya hızlı hareket gibi, gerçek zamanlı olarak nesneleri doğru bir şekilde takip edebilir. Bu yenilikçi yaklaşım, içerik oluşturmayı devrim niteliğinde değiştirme vaadi sunuyor ve canlı yayın, video prodüksiyonu ve etkileşimli medya gibi dinamik doğaya ayak uyduran kesintisiz takip çözümleri sunuyor.
Ana Bilgiler
Seeed Çözümü: ReSpeaker USB Mikrofonağı – Seeed Studio
Sektör: Medya / AI Kamera
Ana Bileşenler
Basit bir örnek olarak, ihtiyacınız olan donanımın listesi:
- Ses ve görsel verileri işlemek için merkezi işlem birimi olarak hizmet vermek.
- Takip algoritmalarını ve veri birleştirme mantığını çalıştırmak.
2D Gimbal (İki Eksenli Gimbal):
- Kameranın dikey ve yatay hareket yeteneklerini sağlamak.
- Takip algoritmasının çıktısına göre kameranın yönünü ayarlamak.
Mikrofon Dizisi:
- Sesi yakalamak ve ses kaynağı konumlandırması yapmak için.
- Raspberry Pi ile uyumlu olmalı ve işleme için bağlanabilmelidir.
Pil Paketi:
- Sistemin hareketliliğini sağlamak ve bağımsız bir güç kaynağı oluşturmak için.
- Pil, sistemin çalışmasını yeterli süre destekleyecek kapasiteye sahip olmalıdır.
Kablolar ve Bağlantı Elemanları:
- Tüm bileşenleri (Raspberry Pi, gimbal, mikrofon dizisi) bağlamak için.
- Güç kabloları, veri kabloları ve gerekli adaptörleri içerir.
Montaj Donanımı:
- Kamerayı gimbal ve mikrofon dizisine en uygun pozisyonda güvenli bir şekilde sabitlemek için.
- Braketler, vidalar ve diğer montaj aksesuarlarını içerir.
Listeye karşı test:
“““html
- STorM32 3 eksenli gimbal
- Raspberry Pi 4B
- ReSpeaker USB Mikrofonağı & PiSugar 3 artı batarya modülü
- Lipo batarya (1000mAh)
Çözüm/Nasıl inşa edilir?
Introlab ODAS
Introlab ODAS, ses kaynağı yerleştirme, ses kaynağı takibi ve ses kaynağı ayırma için açık kaynaklı bir kütüphanedir. F. Grondin tarafından geliştirilmiş ve GitHub’da yayımlanmıştır. Kütüphane tamamen C dilinde yazılmıştır ve düşük güç tüketen gömülü sistemler için optimize edilmiştir. Küçük hesaplama gereksinimi ve hızlı yürütme hızı avantajlarına sahiptir.
Gimbal kontrolü
STorM32 kontrol kartı, esasen hava görüntüleme için tasarlanmıştır. Kartta uzaktan kumanda sinyallerini girmek için bir pin arayüzü sağlanmıştır ve S-Bus, Sum-PPM ve PWM protokollerinin sinyallerini destekler. Bu kontrol kartı bilgisayara bağlanabilir ve ilgili grafik kullanıcı arayüzü (GUI) kullanılarak pan modu, döndürme hızı, PID parametreleri vb. ayarlanabilir.
ReSpeaker USB Mikrofonağı
- ReSpeaker mikrofonağında, farklı açılardan ses toplayan 4 MEMS mikrofonu bulunmaktadır. Bu mikrofonlar sesleri çok boyutlu ses sinyallerine dönüştürerek USB kablosu aracılığıyla Raspberry Pi’ye iletir. Daha fazla bilgi almak isterseniz, resmi wiki‘ye başvurabilirsiniz.
Daha Fazla Kaynak
“Başlangıçta, piyasada mevcut olan birkaç mikrofon dizisini de değerlendirdim. Onları karşılaştırdıktan sonra, reSpeaker‘ın daha kapsamlı belgelere sahip olduğunu ve geliştirmesi daha kolay olduğunu gördüm. Ayrıca, Seeed’in wiki web sitesi kullanıcılar için aydınlatıcı bazı basit eğitimler ve demolar sağladı. Raspberry Pi‘nin kullanıcı dostu geliştirme ekosistemi ile birleştirildiğinde, istediğim işlevleri hızlı bir şekilde uygulayabildim. Sonuç olarak, reSpeaker dizisini seçtim. Gimbal’ı doğrudan DJI‘dan satın almak da başlangıçta düşündüğüm seçeneklerden biriydi; ses kaynağı yerleştirme işlevselliği geliştirmek için SDK’larını kullanmayı amaçlıyordum. Ancak, o dönemde Osmo SDK’sındaki gimbal işlevlerinin geliştirme için yeterince açık olmadığını ve zorluklar çıkardığını keşfettim. Bu nedenle, açık kaynaklı storm32 gimbal‘a geçtim. Bu faktörlere dayanarak, mevcut durumu oluşturdum.” dedi yenilikçi yaratıcı Weijie Yu, aynı zamanda Maker Faire Shenzhen’de Raspberry Pi Meetup’a katılan ve projelerini orada Raspberry Pi ekibine sergileyen bir Çinli Raspberry Pi meraklısı.
“““html
Seeed Studio’nun Raspberry Pi Ekosistemi
Seeed Studio, 2013 yılından beri Raspberry Pi kullanıcı topluluğuna hizmet vermekte ve onaylı satıcı ve tasarım ortağı olma konusunda öncülük etmiştir. 2021’deki reTerminal ilk versiyonundan bu yana, reRouter, edge controller serisi dahil olmak üzere bir dizi ürün geliştirdik ve bu yıl reTerminal DM ile yaratıcılar, yapımcılar, meraklılar, öğrenciler, mühendisler, işletmeler ve her Raspberry Pi’ye ihtiyaç duyan senaryo için hizmet vermekteyiz.
Daha Fazla Kaynak
- Daha fazla ürün, tam sistem cihazları, özelleştirme hizmetleri ve kullanım senaryolarını keşfetmek için Seeed Raspberry Pi sayfasını ziyaret edin.
- Seeed ve Seeed’in Raspberry Pi destekli ürün ve çözümlerinin gerçek dünya zorluklarını nasıl aştığını öğrenmek için en son Raspberry Pi başarı hikayeleri broşürünü indirin. Raspberry Pi tabanlı herhangi bir özelleştirme ihtiyacınız varsa, lütfen özelleştirme hizmetlerimizi kontrol edin.
- İhtiyaçlarınıza uygun ürünleri bulmak için en son ürün kataloğumuzu indirin.
- Seeed Raspberry Pi cihazınızla başlamak için Seeed’in Raspberry Pi wiki sayfasına dalın.
- Daha fazla özelleştirme olasılıklarını tartışmak isterseniz, lütfen özelleştirme hizmetlerimizi kontrol edin ve daha derin bir tartışma ve değerlendirme için inquiry@seeed.cc adresine talebinizi gönderin.