خط بحث · 2005–2019
هل يمكن اكتشاف طريقة وصف الصوت آليًا؟
تحليل الصوت بالذكاء الاصطناعي. وصف إشارة الصوت بصيغ رياضية — أي الواصفات — يتطلب معرفة بمعالجة الإشارات؛ ويتناول هذا الخط الاكتشاف الآلي للواصفات وتحسين مصنِّفات الصوت المدرَّبة مسبقًا عن طريق البحث. يبدأ في دكتوراه Giordano Cabral مع نظام EDS التابع لـ Sony CSL، ويشمل التحليل الهارموني في HarmIn ومصنِّفات الصوت للأمن العام في UFRPE، ودراسة عن تقدم المجال نفسه (2016).

01 · تحليل الصوت بالذكاء الاصطناعي: استرجاع المعلومات الموسيقية
المساهمات
EDS في التعرف على الأوتار · 2005–2006
يقترح EDS (Extractor Discovery System) التابع لـ Sony CSL اكتشاف واصفات الصوت آليًا. أجرى Cabral، مع François Pachet وJean-Pierre Briot، الجزء الأول من التحقق: تقارن Automatic X Traditional Descriptor Extraction: the Case of Chord Recognition (ISMIR 2005، لندن؛ zenodo.1415701، hal-01416436) بين المقاربات التقليدية والنظام حين يشغّله مستخدم بلا خبرة، إذ يبني مُعرِّفًا لأوتار الغيتار. وتتمة ذلك هي Recognizing Chords with EDS: Part One (CMMR 2005، بيزا؛ LNCS 3902، Springer، 2006؛ doi.org/10.1007/11751069_17، hal-01336914). والعمل الشقيق في العام نفسه هو Impact of Distance in Pitch Class Profile Computation (SBCM العاشر 2005؛ hal-01416428، PDF في وقائع المؤتمر). وهو أول أعمال الدكتوراه في مؤتمر دولي.
واصفات تحليلية للهارموني والإيقاع · 2007
مع Luiz Velho من IMPA، ومع Pachet وPierre Roy وBriot: Analytical Features to Extract Harmonic or Rhythmic Information (SBCM الحادي عشر 2007؛ hal-01305977، PDF في وقائع المؤتمر) والتقرير التقني Some Case Studies in Automatic Descriptor Extraction (ريو دي جانيرو، 2007).
HarmIn · 2007
أداة لتحليل المتتاليات الهارمونية، طُبقت على أعمال Tom Jobim انطلاقًا من Cancioneiro Jobim، مع عالم الموسيقى Robert Willey (University of Louisiana at Lafayette). تتحول المتتاليات إلى رسم بياني للانتقالات بين الأوتار موزَّع على دائرة الخامسات، وسماكة كل حافة متناسبة مع تكرارها في المدوَّنة؛ وبذلك تظهر المسارات الهارمونية المتكررة لدى المؤلف. نالت Analyzing Harmonic Progressions with HarmIn: the Music of Antonio Carlos Jobim جائزة أفضل ورقة تقنية لطالب في SBCM الحادي عشر (ساو باولو، من 1 إلى 3 سبتمبر 2007؛ صفحة الندوة). PDF في وقائع المؤتمر. وفي 2026 عادت الأداة على هيئة skill محمولة، تبني مصفوفة الانتقال على دائرة الخامسات لأي فنان يُطلب.


الصوت كأمر للعبة · 2008–2010
Mapping Sounds into Commands (AES 35th International Conference: Audio for Games، لندن، 2008) وThe Acoustick: Game Command Extraction from Audio Input Stream (SBGames 2010)، مع Roberto Cássio Júnior.
المراقبة الصوتية للأمن العام · 2010–2014
في UFRPE أصبحت المشكلة هي الكشف التلقائي عن إطلاق النار والصراخ والطرق والصوت المحيط والصمت انطلاقًا من الميكروفونات. كان هذا موضوع منحة الإنتاجية في التطوير التكنولوجي من CNPq (2011–2014)، ومشروع CNPq "Audio Monitoramento para Segurança Pública" (2010–2013)، ومشروع FACEPE "Classificação Automática de Áudio para Monitoramento de Espaços Públicos" (الإعلان 11/2011، 2012–2014). نتج عن ذلك رسالة الماجستير لدالتون فرانسيسكو دي أراوجو، Busca como sistema de apoio à melhoria de classificadores automáticos de áudio (UFRPE، 2012، منحة FACEPE)، والبرنامجان المسجلان باسم Audio Alerta (2012) وAudio Alerta para segurança privada (2013)، بمشاركة Márcio Dahia وRoberto Cássio Júnior وIvo Frazão وRaphael Holanda. واستمر Audio Alerta لاحقًا كمشروع منبثق عن D'Accord.
التوليد التطوري للخصائص الصوتية · 2014–2019
تناول مشروع الإنتاجية "Meta-Busca em Classificadores de Áudio e de Dados para Segurança, Entretenimento e Educação" (2014–) توليد الخاصية الصوتية بدلًا من اختيارها يدويًا. وبالتعاون مع José Antonio Alves Menezes وBruno Gomes، كانت النتيجة المنشورة في دورية هي Feature Learning with Multi-objective Evolutionary Computation in the generation of Acoustic Features (Inteligencia Artificial، IBERAMIA، المجلد 22، العدد 64، 2019؛ doi.org/10.4114/intartif.vol22iss64pp14-35).
قياس تقدم MIREX · 2016
MIREX هو ميدان تقييم استرجاع المعلومات الموسيقية منذ عام 2005. يجمع هذا العمل، بالتعاون مع Ricardo Scholz وGeber Ramalho، نتائج ست سنوات، ويقترح مؤشرًا قابلًا للضبط لاتجاه التطور في كل مهمة، ويناقش فرضيات لتفسير ركود بعضها: Cross Task Study on MIREX Recent Results: an Index for Evolution Measurement and Some Stagnation Hypotheses (ISMIR 2016، نيويورك؛ zenodo.1416898). وهو العمل الوحيد في السيرة الذاتية الذي يتناول ما وراء علم المجال نفسه.
المقطع المتكرر والتفريغ الموسيقي والبودكاست · 2014–2021
الكشف عن المقطع المتكرر بحسب الشدة الصوتية، مع Renato Celso Santos Rodrigues (SBCM الخامس عشر 2015؛ رسالة ماجستير بإشراف مشترك في 2016)؛ المعالجة اللاحقة لتفريغ الأكوردات، مع Uraquitan Cunha (AES Brasil الثاني عشر، 2014)؛ التنبؤ بشعبية البودكاست انطلاقًا من البيانات الوصفية والمحتوى والصوت، رسالة ماجستير لـ Luiz Delando Santos Moreira Júnior (2021).
02 · تحليل الصوت بالذكاء الاصطناعي: استرجاع المعلومات الموسيقية
أين يستمر
Chord Detection Challenge لعام 2021 بالتعاون مع Moises.ai، ومقرر Computação Musical الذي يشكل فيه استرجاع المعلومات الموسيقية إحدى الكتل الأربع في البرنامج.
