Stones’un son gitaristi Keith Richards, müziğin belirli kelimeler kullanmayan bir dil olduğunu söylemiştir. Eğer kemiklerimizde bulunuyorsa, kemiklerin içindedir çünkü duygularla iletişim kurar.
Keith müziğin farkında, ancak Google ve Japonya’daki Osaka Üniversitesi’ndeki bilim insanları beyin aktivitesinin farkında ve kemik taramaları yerine insan beyin dalgalarını kullanarak müziği yeniden yapılandırma konusunda ilerleme kaydettiler. 20 Temmuz’da grubun “Brain2Music” başlıklı araştırması yayınlandı: İnsan Beyin Aktivitesinden Müziğin Yeniden Yapılandırılması” başlıklı araştırma arXiv ön baskı sunucusunda yayınlandı.
Beş gönüllüye rock, klasik, metal, hip-hop, pop ve caz dahil olmak üzere 10 farklı türden müzik örnekleri verildi ve araştırmacılar beyin aktivitelerini takip etti. Onlar dinlerken, fonksiyonel MRI (fMRI) değerleri alındı. (fMRI ölçümleri zaman içindeki metabolik aktiviteyi takip eder; MRI verileri bunu yapmaz).
Daha sonra, tür, ruh hali ve enstrümantasyon gibi çeşitli müzikal niteliklerle ilgili davranışları tanımlamak için okumalar üzerinde eğitilmiş derin bir sinir ağı kullanıldı.
MusicLM çalışmaya bir ön aşamanın sonucu olarak girdi. Google tarafından oluşturulan bu model, metin açıklamalarından müzik oluşturuyor. Tıpkı fMRI’ların yaptığı gibi enstrümantasyon, ritim ve duygular gibi şeyleri değerlendiriyor. “Gitarlar ve flütlerle sakinleştirici ve yatıştırıcı meditatif şarkı,” metin girdisinin bir örneğidir.
Sakinliği ve huzuru teşvik etmek amacıyla yavaş müzik çalınıyor.
MusicLM veri tabanı, araştırmacılar tarafından fMRI sonuçlarına bağlandı ve bu da yapay zeka modellerinin deneklerin duyduğu müziği yeniden yaratmasına olanak sağladı. Beyin aktivitesi, müzikal üretim için metin talimatları yerine bağlam sağladı.
Makalenin yazarlarından biri olan Google’dan Timo Denk, yeniden yaratılan müziğin “anlamsal olarak orijinal müzik uyaranına benzediğini” söyledi.
Yapay zeka modellerine Brain2Music takma adını uygun gördüler.
“Üretilen müzik, tür, enstrümantasyon ve ruh hali gibi anlamsal özellikler açısından insan deneklerin deneyimlediği müzikal uyaranlara benziyor” dedi. Ayrıca, müzikle ilgili dil tanımlarından gelen verileri işleyen beyin bölgelerini de belirlediler.
Ekip tarafından verilen örnekler, Brain2Music tarafından deneklerin beyin dalgalarına dayalı olarak, kulağa oldukça benzer gelen müzik parçacıklarının nasıl tercüme edildiğini göstermektedir.
2000 yılının ilk Top 10 single’larından biri olan “Oops!” örneklenen parçalardan biriydi. Britney Spears’ın “I Did It Again.” Sözler anlaşılmaz olmasına rağmen, şarkının temposu ve enstrümanların sesi gibi müzikal bileşenleri oldukça iyi eşleşti. Uzmanlara göre Brain2Go şarkı sözlerinden ziyade enstrümantasyon ve stili vurguluyor.
Denk, “Bu çalışma, biyolojik bir perspektiften nicel bir yorumlama sağlayan ilk çalışmadır” dedi. Metinden müziğe modelleri gelişmiş olsa da, “iç süreçlerinin hala tam olarak anlaşılamadığını” itiraf etti.
Yapay zeka henüz tam olarak düzenlenmiş şarkıları notaya dökmeye hazır olmasa da, o zaman çok uzak olmayabilir.
Denk’e göre, müzik üretme modelleri üzerine gelecekte yapılacak araştırmalar “yeniden yapılandırma ile uyarıcı arasındaki zamansal uyumu” geliştirecek. Denk, gelecekte “saf hayal gücünden doğan” müzikal yaratımların her zamankinden daha doğru bir şekilde yeniden yaratılacağını öngördü.
Belki de gelecekte bestecilerin, işitsel beyne bağlı kablosuz bir yazıcı partisyonu doldururken bir şarkının nakaratını görselleştirmeleri yeterli olacaktır. 20’li yaşlarında işitme duyusunu kaybetmeye başlayan Beethoven, işitme duyusunu geliştirmek için tuşlara vurarak piyanoları tahrip etmiştir. Brain2Music’in keyfini çıkarır ve birkaç piyanodan daha fazlasını bağışlardı.
Paul McCartney, 1999 yılında BBC tarafından yapılan bir ankette 20. yüzyılın en iyi şarkısı seçilen “Yesterday” şarkısının ilhamının kendisine bir rüyada geldiğini söylemiştir. Ancak tüm eksik parçaları tamamlaması bir buçuk yılını almıştır. Brain2Go tipi bir model, gelecekteki bir McCartney böyle bir rüya görseydi, muhtemelen yazarın olası küresel hitinin kapsamlı, hızlı ve doğru bir tasvirini kahvaltıda hazır bulundurmasını sağlardı.
Kaynak: techxplore.com/news/2023-07-brain2music-thoughts-music.html
