From Birdsong to Music

Somutlaşan bir soru.

Bir karatavuk cümlesi sentetik, flüt ve piyano seslerine dönüşüyor. Bu hesaplamalı pilot, modelin sesteki değişimlere ve karşılaştırma için seçilen referansa nasıl cevap verdiğini inceliyor.

Bu pilot 2,45 saniyelik tek bir karatavuk cümlesiyle başlıyor. İzlenen frekanslar bir transkripsiyona ve örneklerden yeniden sentezlenen çalgı seslerine dönüşüyor. Farklı referanslar altında model cevaplarını karşılaştırmak, bir dönüşümün değerlendirilmesinde referansın rolünü görünür kılıyor.

Tek cümlelik hesaplamalı bir pilot. İnsan veya sinirsel ölçüm toplanmadı. Sesler tek bir kaynağın dönüşümleridir; bağımsız katılımcılar değildir.

Makaleyi oku↗Denemeyi aç↗

Ses kaynakları.

Çalgı sesleri örneklerden yeniden sentezlenmiştir. Olağan çalgı aralıklarının dışındaki notalar da dâhil, transkripsiyonun G6–F8 ses bölgesini korurlar.

3D görünüm her zaman özgün kaydı gösterir. Üst kenarlar sekiz izlenen frekans eğrisini takip eder; derinlik doğrusal RMS genliğidir. Dolu yüzeyler izleri görünür kılmak için tabana bağlar; ek frekans veya harmonik değildir. RMS, algılanan gürlük değil sinyal genliğidir.

Karatavuk: Oona Räisänen (2007), Turdus merula ↗. Kamu malı. 2,45 saniyelik bir kesit.

Flüt: Versilian Studios / Sam Gossner, VSCO 2 Community Edition ↗, CC0. Perdeler kaydırıldı, ataklar hizalandı ve kazanç normalize edildi.

Piyano: Alexander Holm, Salamander Grand Piano v3 ↗, CC BY 3.0 ↗. Velocity katmanı 8; örnek atakları hizalandı, kazanç normalize edildi, yeniden örneklendi, ölçülen kök perdelere akort edildi ve cümleye göre perde kaydırıldı.