كيف يولّد نظام ذكاء اصطناعي الموسيقى والصوت في الزمن الحقيقي؟

D'Accord Guitar · 2001

كانت المسألة الانتقال من سلسلة الأوتار إلى العزف: اختيار المواضع على عنق الجيتار، ونمذجة يد العازف، وتحريك الأداء لمن يتعلم. خرج النظام من مشروع "Agentes Inteligentes para Ambientes Complexos: estudo do acompanhamento musical em tempo real" (1999–2001) وأنتج أطروحة الماجستير لـ Giordano Cabral في CIn، D'Accord Guitar: um Sistema de Execução Violonística (2002، المشرف Geber Ramalho، منحة CNPq). تصف أربعة أعمال النظام، مع Izabel Zanforlin وHugo Santana وRodrigo Lima وGeber Ramalho: Da Cifra para o Braço وPlaying Along with D'Accord Guitar (VIII SBCM 2001، Fortaleza)، وModelagem da Execução Musical em Violão e Guitarra (ENIA 2001)، وD'Accord Guitar: an Innovative Guitar Performance System (Journées d'Informatique Musicale، Bourges، 2001؛ hal-02987455). ومنه خرج برنامج D'Accord Violão Player (2001) وشركة D'Accord Music Software. ملفات PDF الخاصة بـ SBCM متاحة في أعمال المؤتمر: البحث والنقاش.

المرافقة الإيقاعية بالأنماط · 2004

Using Patterns to Generate Rhythmic Accompaniment for Guitar يولّد المرافقة انطلاقًا من أنماط مستخرجة من عزف حقيقي. ضم الفريق عالم إثنوموسيقى، Carlos Sandroni، إلى جانب Márcio Dahia وHugo Santana وErnesto Trajano وGeber Ramalho. Sound and Music Computing / JIM 2004، باريس؛ hal-03354323، zenodo.849240. العمل سابق للأطروحة وينطلق من D'Accord Guitar.

التحليل التزايدي · 2005–2006

مع Jean-Pierre Briot وFrançois Pachet، كيّف Cabral خوارزمية IP، الخاصة بمواصلة العبارات الموسيقية في الزمن الحقيقي، مع أنظمة المرافقة: Parsing incremental para acompanhamento em tempo real (10º SBCM، Belo Horizonte، 2005؛ hal-01416429، PDF في أعمال المؤتمر) وIncremental Parsing for Real-Time Accompaniment Systems (FLAIRS 2006، مسار الذكاء الاصطناعي في الموسيقى والفن؛ hal-01338563، PDF).

Harmonisation automatique en temps réel، الأطروحة · 2008

دكتوراه في الذكاء الاصطناعي التوليدي، بإشراف Jean-Pierre Briot (LIP6) وFrançois Pachet (Sony Computer Science Laboratory, Paris)، من 2003 إلى 2008، في LIP6، Université Pierre et Marie Curie (Paris 6)، ضمن فريق SMA (Systèmes Multi-Agents)، بمنحة من CAPES؛ ومن 2003 إلى 2007 أُنجز العمل بالتعاون مع فريق Sony CSL. تعرّف الأطروحة système d'harmonisation automatique en temps réel: نظامًا يولّد تلقائيًا، صوتيًا وفي الزمن الحقيقي، توافقًا هارمونيًا للحن قد يكون مرتجلًا فوق إيقاع ثابت، بمعلومات جزئية وتأثير متبادل بين النظام والمستخدم. تمدّ الطريقة تقنيات استرجاع المعلومات الموسيقية لتعمل مباشرة على الإشارة الصوتية، عبر تجارب في كل دورة تطوير؛ والنتيجة إطار عمل من الحلول جرى تقييمه مقابل موسيقيين بشريين، وتفوّق فيه حلّ بسيط على جميع الحلول الأخرى، بما فيها الأكثر تعقيدًا. نوقشت الأطروحة في 09/07/2008 بتقدير très honorable؛ وتألفت لجنة التحكيم من Jean-Pierre Briot وFrançois Pachet وMyriam Desainte-Catherine وSergi Jordà (مقرّرون) وJean-François Perrot وGeber Ramalho. رقم التسجيل NNT 2008PA066236 في theses.fr؛ الملخص ولجنة التحكيم في صفحة LIP6.

Ramin · 2008–2009

حصل إطار العمل الوارد في الأطروحة على اسم وبرنامج: Ramin: A Framework for Real-Time Improvised Accompaniment and Harmonization (IEEE International Symposium on Multimedia, Berkeley, 2008) والبرنامج "Ramin, um Sistema de Harmonização em Tempo Real" (2008). وفي العام التالي، قارن Comparing Techniques for the Automatic Accompaniment of Audio Improvisation (IEEE ISM 2009, San Diego)، مع Briot وPachet وRamalho، بين تقنيات المرافقة.

Capturing a Musician's Groove · 2015

بعد سبع سنوات من الأطروحة، عاد التعاون مع Sony CSL في عرض تطبيقي في IJCAI 2015 في بوينس آيرس: Capturing a Musician's Groove: Generation of Realistic Accompaniments from Single Song Recordings، مع Mathieu Ramona. يتلقى محرّك تركيب تسلسلي تسجيلًا لعازف يؤدي أغنية، ويولّد مرافقة أي أغنية أخرى بذلك المحتوى. وتتركز العناية على الانحرافات الزمنية عند حواف المقاطع المقتطعة، وهي التي تصنع الـgroove: تُصحَّح العرضية منها وتُحفَظ المقصودة. الملخص في IJCAI · PDF.

Brazyle · 2017

الجزء البرازيلي من مشروع Flow Machines التابع لـ Sony CSL للذكاء الاصطناعي في الإبداع الموسيقي: قاعدة للأسلوب البرازيلي. وقد صدر عن Flow Machines الألبوم Hello World (2018)، وهو من أوائل الألبومات التي أُنشئت بالذكاء الاصطناعي في العالم (أسماء المشاركين في الألبوم)؛ والتفاصيل في الصحافة.

Chord Detection Challenge · 2021

تحدٍّ مفتوح لكشف الأوتار الموسيقية أُجري مع Moises.ai، بدأ في 16/03/2021 وصدرت نتيجته في يونيو (بوابة CIn، 09/06/2021). وصدر في SBCM 2021 البحث الذي يقيّم مهمتَي تقدير الأوتار ومواءمتها، مع Valter Jorge da Silva (doi.org/10.5753/sbcm.2021.19425).

شارك Cabral في الإشراف على دكتوراه Uraquitan Sidney Cunha حول النسخ التلقائي للأوتار (سجلان من 2010 و2015 في Lattes)، وأشرف على مشروعَي التخرج لـ Arthur Lubambo Peixoto Accioly (نسخ الأوتار بمصادر هجينة، 2017) وBruno Tavares de Melo Gomes (chord following باستخدام dynamic time warping، 2018).

وخط المنتج المرتبط بذلك هو iChords: محرّك للتعرف على اللحن والهارمونيا (RHAE/CNPq، 2008–2010)، وiChords.Net (2008–2010)، وiChords Station (2011)، والتطبيق (2019)، مع مشروعَي Banco do Nordeste وFACEPE/Tecnova لعام 2019، تحت مسؤولية Rodrigo Pereira. وهو تطوير تقني في Daccord، التي Cabral شريك مؤسس فيها.

يستمر في: استرجاع المعلومات الموسيقية وفي مقرر Computação Musical (الحوسبة الموسيقية).