Ses Kaydı ve İletişimi

Ses kaydı, mikrofon, analog ön uç ve analog-sayısal dönüştürücü ile başlar. Ortaya çıkan örnek dizisi dosyada saklanabilir, sıkıştırılabilir veya ağ üzerinden gerçek zamanlı taşınabilir.

Analogdan Sayısala Dönüşüm

Mikrofon, hava basıncındaki değişimi elektriksel işarete dönüştürür. Analog ön uç kazanç ve gerekli filtrelemeyi uygular; analog-sayısal dönüştürücü ise işareti belirli zaman aralıklarında örnekleyip sonlu sayısal seviyelere nicemler.

Bu zincir iki ayrı çözünürlük taşır:

• zaman çözünürlüğü: örnekleme frekansıyla,
• genlik çözünürlüğü: bit derinliğiyle

belirlenir.

Örnekleme frekansını yükseltmek nicemleme çözünürlüğünü, bit derinliğini artırmak ise zaman çözünürlüğünü doğrudan artırmaz. İki parametre farklı hata mekanizmalarını etkiler.

Sayısallaştırma öncesindeki analog bant sınırlama önemlidir. Nyquist frekansının üzerindeki bileşenler yeterince bastırılmazsa örnekleme sonrasında aliasing oluşabilir; bu bozulma daha sonra yalnız sayısal filtreyle bütünüyle geri alınamaz.

Örnekleme ve kanal yapısı

Örnekleme frekansı saniyede kaç örnek alındığını belirler. Bit derinliği nicemleme çözünürlüğünü ve kullanılabilir dinamik aralığı etkiler. Kanal sayısı ise mekânsal veya kaynak ayrımı açısından ek bilgi taşıyabilir.

Çok kanallı kayıtların doğrudan mono'ya indirgenmesi bazı uygulamalarda yararlı bilgiyi ortadan kaldırabilir.

PCM ve codec'ler

WAV çoğunlukla PCM taşır; ancak yalnız dosya uzantısı gerçek kodlamayı kesin olarak belirtmez. MP3, AAC ve Opus farklı kayıplı kodlama yöntemleri ve farklı bozulma karakterleri üretir.

Makine öğrenmesi uygulamalarında eğitim ve üretim verisinin codec, örnekleme frekansı ve kanal özelliklerinin uyuşması model kararlılığını etkiler.

Gerçek zamanlı aktarım

Paket süresi, kayıp telafisi ve jitter buffer davranışı süreklilik ile gecikme arasındaki dengeyi belirler. Büyük tampon ağ dalgalanmalarını gizlerken etkileşim gecikmesini artırır.

Uzun kayıtlarda saat kayması da önemlidir. İki cihaz nominal olarak aynı frekansta örnekleme yapsa bile gerçek saatleri küçük farklarla ilerleyebilir.

Ses hattında codec, örnekleme frekansı, kanal düzeni ve zaman damgaları veri sözleşmesinin parçası olarak ele alınır.

Üst konu: Görüntü ve Ses İşleme

Kaynakça

• Alan V. Oppenheim; Ronald W. Schafer. Discrete-Time Signal Processing, Third Edition. Pearson, 2010.

• Lawrence R. Rabiner; Ronald W. Schafer. Theory and Applications of Digital Speech Processing. Pearson, 2011.