Computação Musical

Computação Musical は、音、音楽、コンピュータを扱うCIn/UFPEの学部科目で、1999年からGeber Ramalhoが担当しています。Giordano Cabralは、同センターの教員になる前の2009.1にこの科目で3回の授業を行い(2009.1の計画)、2015.1からGeber Ramalhoとともに担当し、2018年からは単独で運営しています。2025.2にはFilipe Calegárioの補助教員を務めました。プログラムは www.cin.ufpe.br/~musica の従来のシラバスに基づき、4つのブロックで構成されます。基礎(音、音響学、心理音響学)、処理と合成、記号表現とMIDI、音楽情報のインデックス化と検索。受講に音楽家である必要はありません。

12回開講:2015.1、2016.1、2016.2(Computação Musical 2)、2017.2、2018.1(大学院生のクラスと合同、IN1132)、2019.1、2020.1(パンデミックのため中断し、2021年に再開)、2020.3(遠隔)、2021.1、2021.2(Computação Musical 2、IF760)、2022.1、2025.2(IF754、Filipe Calegárioと共同)。

この科目はプロジェクトを軸に構成されている。各チームが音を生み出すシステムを作る。流れは毎回同じである。着想を与えるシステムの紹介、アイデア創出(インスピレーションカード、635法、モルフォロジカルボックス)、グループ編成、プロジェクト計画、コード・アーキテクチャ・担当分担を含む技術提出、デモンストレーションを伴う最終提出、およびチーム内の360度評価。MusTICとDaccordのゲストが講演を行い、市場からのフィードバックを与える。2020.3には科目のプレイリストの動画18本を収録し、Notionに90件のコンテンツのキュレーションをまとめ、以降のクラスで使用した。2022.1には科目を3つのトラック(コンテンツ、プロジェクト、音楽体験)で実施し、学生自身が作成したクイズを用いた。

• https://www.cin.ufpe.br/~musica/2016-1/
• https://www.youtube.com/playlist?list=PLJPHMEs-jiwM5p3d11vM3m_5lZAVtDGNa
• https://github.com/mustic-cin/computacao-musical-ufpe

2015.1 · Computação Musical(音楽計算)、Geber Ramalhoと共同

3月に基礎を扱い、その後、信号処理と合成をMatlabの実習で学ぶ(スペクトログラム、正弦波および鋸歯状波ジェネレーターのコードを受講生に配布)。続いて記号表現とMIRを扱う。

• Plom — 最終プロジェクト。チーム:Rafael Nunes, Lucas Tenório, Bruno de Assis, Thiago Tenório, Rafael Marinheiro。
• Passarinho, que som é esse? — 最終プロジェクト。チーム:Marina Haack, Maria Gabriela Toledo, Leonardo Santos, Raissa Andrade。
• Subtitle Sync — 最終プロジェクト。チーム:Danilo Ribeiro, Hugo Melo。
• Square Play — 最終プロジェクト。チーム:Antonio Marino, Luiz Fernando Sotero, José de Arimateia Neto, Arthur Mendonça。
• Drumsmith — 最終プロジェクト。チーム:Felipe Magalhães, Matheus Alencar, Pedro Araújo。
• Drawusic — João Pedro Cordeiroの個人プロジェクト。
• Leap Overtone — Igor Calábriaの個人プロジェクト。
• Tracking da beat — Rafael Acevedo, Rafael Monteiro, Lucas Netto, João Pedro Magalhães。
• Sample Swap — Gustavo Figueiredo, Igor Ryan, André Luiz, Igor Calábria, Diogo Moraes, Diogo Ribeiro。
• Starship — Adalson Castro, Augusto Costa, Romero Barata, Jorge Vinícius。
• Videokê — Brunno Barros, Bruno Tavares, Artur Lubambo, Franklin Accioly, Paulo Vitor。
• リンク: https://www.cin.ufpe.br/~musica/2015-1/

2016.1 · Computação Musical(音楽計算)、Geber Ramalho と共同

前回と同じ内容: Matlab の演習、授業のコードをもとにした加算合成の実装、LFO とコムフィルターの雛形、João Tragtenberg による Pure Data、音楽情報検索、そして 6 月に資料持ち込み可の試験。

• Karaokê com voice matching — 歌い手の声が利用者の声に似ている曲を提案する: 声を抽出し、マッチングを行い、ボーカルを除去して曲を提示する。チーム: Matheus Dornelas Rodrigues, Vinicius Carneiro Pereira Souza。(プロジェクト提案)
• リンク: https://www.cin.ufpe.br/~musica/2016-1/

2016.2 · Computação Musical 2 (Tópicos Avançados em Mídias)(音楽計算 2〈メディア特論〉)

継続クラス。Filipe Calegário が共同担当教員を務め、João Tragtenberg が教育実習として参加した。

• Patins Musical — 2016.2 に発表された最終プロジェクト。チーム: Carlos Henrique, Chrystian José, Gerson Ferreira, Israel Costa, Priscila Thyfani。

2017.2 · "Computação, Música & Áudio"(計算、音楽、オーディオ)

2018.1 · Computação Musical(音楽計算、学部・大学院 IN1132)、Geber Ramalho と共同

3 月に受講生がインスピレーションとなる事例(Song Maker, Guitar Hero, Rocksmith, Reactable, Tenori-on, Web Audio API, トラッカー、ゲームのオーディオ開発日誌)を持ち寄り、のちにボード上で DAW、学習、歌唱、AI(MIR、アルゴリズム作曲)、制作、デジタル楽器、ゲームのカテゴリーに分類した。

• Spoofy — ストリーミングデータにもとづくユーザーとジャンルの関係グラフ。
• MusicGeo — MIR グループ(Moabe Renato)のプロジェクト案。2018年4月24日に発表。
• Desenvolvimento e Análise de Mercado para sintetizadores móveis — 手に取りやすいシンセサイザーに関する Pedro Torchio の調査。
• Música e distúrbios mentais — MIR グループの提案。
• ゲームのグループ(「Grupo de Jogos A」: José Guilherme, Rute Moura, Samuel Martins, Thiago Bastos、「Super Grupo de Jogos」)と DMI グループ(Hilton Pinto, Victor Miranda, Ricardo Barioni, Bruno Henrique, Daniele Sales, Luiz Henrique, Isabelly Damascena, Pedro Rossi, Victor Augusto, Tainã)。

2019.1 · Computação Musical

受講生の一部は遠隔で参加した。受講生の Willams de Lima が授業を YouTube で配信し、動画は 14 本(https://www.youtube.com/playlist?list=PL_ldlLYkxXTz32y10GR8c1-KM3e29c5NC)。

• SongVerse — バーチャルリアリティによる作曲: 利用者は楽器や音を表す惑星と衛星を操作する。環境は宇宙空間を思わせる。発表: https://www.youtube.com/watch?v=3YsbPDdWaas。
• RatMania — 『ハーメルンの笛吹き男』(O flautista de Hamelin)に基づくランナー型の音楽ゲームで、記憶、反射、リズム、聴覚を鍛える。Godot 3.0 で制作、楽曲は Helena Gama が編曲・作曲。チーム: Jeffson Simões, Helena Gama, Édipo Andersen, Jéssica Oliveira, Bruno José, Isaac Douglas, Wellington Almeida, Guilherme Calland。コード: https://github.com/Guilherme-Calland/RatMania。発表: https://www.youtube.com/watch?v=ICOYLaKlBSE。
• Play Me Something — 書籍向けのサウンドトラック推薦アルゴリズム(テキスト → 感情 → 属性 → 楽曲)。実験用プラットフォーム付き。発表: https://www.youtube.com/watch?v=1G9xKMkzsA4。
• Korora: Monitoramento de Áudio — ラジオとテレビのストリームで繰り返し現れるイベントを検出し、放送されている内容を特定する。チーム: Douglas Soares, Jônatas Clementino, Lucas Rufino, Malu Menezes, Ramon Saboya, Ullayne Fernandes。発表: https://www.youtube.com/watch?v=HaBoTtaylTE。
• LED Sound Visualizer (Music LED) — 音をリアルタイムで解析し、各瞬間を色に分類して LED ライトに送信する。チーム: João Adherval Carvalho de Barros, Renato Gabriel Ferreira。
• Spotify Club — Álvaro Arthur, Cristiano Oliveira, Jailson Gomes。「Playlists Geolocalizadas」グループから生まれた。発表: https://www.youtube.com/watch?v=HApk6izo8HA。
• Magic Hits、DeeJai、そして拡張現実を用いた音楽のプロジェクト — いずれも 2019年7月に発表された。

2020.1 · 2020年3月に中断され、2021年1月から5月に再開されたクラス

クラスは 2020年3月3日に、着想源となるシステムとモルフォロジカル・ボックスで始まった。

• PodAnalytics — 音声からポッドキャストを分析するプロジェクト。チーム: Anderson Henrique Batista da Silva, Gabriel Amancio da Silva, Geraldo de Medeiros Galvão Neto, Lucas Albuquerque, Pedro Fellip Farias da Silva, Saulo Alexandre de Barros。
• Creative Sounds — リモートライブとプロデューサー支援のプロジェクト。Spleeter (Deezer) の音源分離を OSC プロトコルと統合しており、Probatio に着想を得ている。チーム: Arthur Pires, Mario Wessen, Matheus Deodato, Pedro Santos, Renato Joaquim。
• DoCin — 音声から抽出した特徴量に反応する「docinhos」(小さなお菓子)を使った音楽ビジュアライゼーション。Windows Media Player のビジュアライザーの発想に倣っている。チーム: Gabriel Melo, Nathalia Paiva, Marina Barros, Magnon Souza, Lucas Santana。コード: https://github.com/magsouza/docin/。
• Songs — Spleeter で分離し Audacity で加工したトラックを聴いて曲を当てるゲーム (Vue.js, Python, Librosa)。チーム: Andreza Dantas Layme Pifano de Moura, Filipe de Melo Silva, Ismael Rufino Alves Júnior, Jefferson Elder da Mota Nascimento, Mikahel Leal Dias。コード: https://github.com/adlpm/songs および https://github.com/fmelosilva/songs-api。
• Unity + API do Spotify — Spotify の API を利用する Unity プロジェクト。チーム: Douglas Santos, Lucas Aurélio, Lucas Thierry, João Victor。
• Mir-ar-e-acertar — MIR のグループ (アイデア創出の準備段階)。

2020.3 · Computação Musical(コンピュータ音楽)、リモート学期 (2020年8月–12月)

このクラスでは、科目の動画プレイリスト (音楽理論、記譜法、MIDI、音、音響学、信号、保存、処理、合成、MIR) を録画し、Notion で教材のキュレーションを整理した。

• Accord — グループ参加者の好みに基づいて曲を推薦・再生する Discord ボット。Spotify の API を使用。
• Set — 音楽学習のコンテンツを整理するプラットフォーム。まず音楽制作から始める。チーム: Alecsandro Silva, Gabriel Barbosa, Henrique Gonçalves, Italo Soares, Kennedy Melo, Matheus Hopper, Victor Aguiar。
• PianoHero (.MPG3) — MIDI ファイルから Guitar Hero 風のボタン列を生成する。当初は音声からプラットフォームゲームのステージを生成する構想だった。チーム: César Bulhões, Igor Poncell, Jadson Lucena, Paula Vaz。
• Feel It — 音をスマートフォンの振動で感じるモバイルゲーム。
• Note Brain — Adson Paulo da Silva Ramos, Thiago Henrique Lopes da Silva。
• Dismorph — Augusto Sales de Queiroz, Danilo Vasconcelos de Freitas, Erik de Gouveia Zambom, Hugo Lispector, José André Carneiro Neto, Pedro Kempter Brant, Yuri Monteiro Rufino。
• Aprendizado Musical — 例題、問題、音符や楽器をはめ込む演習を備えた、ゲーム化された音楽理論のプラットフォーム。チーム: Alessandro Silva, Gabriel Barbosa, Italo Soares, Henrique Gonçalves, Kennedy Melo, Matheus Hopper, Victor Aguiar。
• 個人のアイデア: 顔の追跡でページをめくる楽譜リーダー (Lucas Valença) と Lickify (Danilo Vasconcelos de Freitas)。

2021.2 · Computação Musical 2 (IF760)(コンピュータ音楽2)、2022年2月から5月まで

ハイブリッド形式のクラス。

• Tune It! — 各ステージのコースを進みながら、プレイヤーが音楽のリズムに合わせるマルチプレイヤーゲーム。リズム感と楽器の音色の感覚を養う。
• MelodyIA — 楽譜 (記号的言語) から、LSTM 再帰型ニューラルネットワークを用いて単旋律のメロディを生成する。
• Vocalizar — 声の音域 (バス、アルト、テノール、ソプラノ) 別のヴォカリーズ練習サイト。練習が正しいかどうかを色で示す。チーム: Eduardo Silva, Filipe França, Pedro Arruda, Renata Albuquerque, Sheyla Souza。
• トラック分離による音楽当てゲーム — AI で分離した伴奏の一部だけを聴いて曲を当てる。
• 楽器のプラットフォームゲーム — 舞台は楽器でできており、プレイヤーの動きが音を出す。次のステージに進むにはメロディを再現する必要がある。チーム: Evaldo Garcia de Souza Júnior, Felipe Gomes de Santana, Guilherme Calland Rosa Borba, Rebeca Oliveira Silva。
• Termus と Universe Music Experience — 360度評価を提出したグループ。

2022.1 · Computação Musical(コンピュータ音楽)、2022年6月から11月まで

• NoteGuesser — 耳を鍛えるゲーム。音が鳴り、プレイヤーは制限時間内に4つの選択肢から選ぶ(または楽器でその音を弾く)。LAG(ゲーム)グループ: Amanda Santiago, Amanda Nunes, Gislayne Vitorino, Lucas Souza, Bruno Martins。
• CifraShare — バンドのコード譜(cifra)を整理・編集・共有するウェブシステム。全員が「演奏できる」レパートリーを持てる。チーム: Felipe França, Henrique Sakane, Lucas Mendonça, Matheus Leça, Ramom Santos。
• Cifra Club Colaborativo — 曲を選ぶと、複数人で共有する画面に歌詞とコードが表示される。チーム: Bianca Iz Sarabia, Gabriel Nogueira, Lucas Dias, Mateus Cavalcanti, Matheus Alves。
• Music to Image — 曲のメタデータ(Spotifyのaudio features)とテキストから、AIで一連の画像を生成し、クリップを作る。チーム: Guilherme Melo, Henrique Mariz, Ivan Neves, Matheus Lima。
• Guia Prático de Computação Musical — Douglas de Moura Cavalcante, Evaldo Garcia de Souza Junior, Maria Eulália Aires。

• YouTubeの発表プレイリスト

2025.2 · IF754 Computação Musical(音楽計算)、Filipe Calegário と共同

Filipe Calegário のクラス。彼の依頼により、Giordano Cabral が2025年8月から補助教員として参加。

• WatheverSong — 創造的な再楽器化。曲のリズム要素とメロディ要素を、ユーザーが提供した環境音のサンプルに置き換える。チーム: João Victor de Melo Bezerra, Victor Luiz de Paula Lima, João Victor Soares, Pedro Henrique Boa Hora da Silva, Marcelo Anderson Oliveira de Santana, Gabriel Araujo Uchoa de Andrade。
• Voice Meter — AIを用いた話し方トレーニングのフルスタックアプリケーション。
• Jogo Solfejo — リアルタイムのピッチ検出を用いた教育ゲーム。プレイヤーは指示された音を歌って先に進む。チーム: Daniel Nascimento, Henrique Melo, Luis Eduardo, Mader Gabriel, Pedro Calheiros, Pedro Lucas。
• WebChord — ナッシュビル・ナンバー・システムを用いた、ブラウザ上のコード・シンセサイザー。コード: https://github.com/lgs4/webchord。
• Piano roll com transcrição — MIDIのアップロード、またはYouTube音声の採譜をピアノロールで表示する(https://reef-tiles-production.up.railway.app/)。
• ChordBot — 和声進行を探索するツール(Flask + React)。
• Synesthesia Studio — 音と映像を結びつけるスタジオのプロトタイプ。