Criatividade Computacional

Criatividade Computacional (IF866) ist eine Lehrveranstaltung, die von Filipe Calegário geschaffen und von 2020.3 bis 2023.1 gemeinsam mit Giordano Cabral unterrichtet wurde. Es handelt sich um ein Wahlfach mit 60 Stunden, das seit 2020 vom CIn angeboten wird und seit 2022.2 der gesamten UFPE offensteht. Es gibt keine Klausur: Die Note ergibt sich aus einem Projekt und einem Reflexionsbericht über den eigenen Prozess. Zwischen dem Jahrgang 2020 und dem Jahrgang 2023 verlagerten sich die behandelten Werkzeuge von StyleGAN2 und DeepDream hin zu ChatGPT und GPT-4, und die Projekte nutzten Werkzeuge, die erst im Vormonat veröffentlicht worden waren.

Sechs Durchgänge in Co-Lehre: 2020.2 (IF760), 2020.3 (IF767, remote), 2021.1, 2021.2, 2022.2 und 2023.1 (IF866). Da Giordano Cabral für das Postdoktorat freigestellt war, wurde die Lehrveranstaltung ab 2023.2 nur noch von Filipe Calegário weitergeführt; sein Repositorium enthält die Projekte von 2023.2 bis 2024.2.

Jede Studierende und jeder Studierende dokumentiert Beispiele aus dem Feld in einer gemeinsamen Vorlage und erstellt Inhalte zum Thema Kreativität; probiert die Werkzeuge des Semesters aus (StyleGAN, VQGAN+CLIP, DALL·E 2, Stable Diffusion, GPT-3, LangChain, je nach Jahr); führt ein eigenes Projekt „in der Haut des Künstlers“ mit öffentlicher Galerie durch; und erarbeitet im Team ein Abschlussprojekt (ein Werkzeug der computergestützten Kreativität) mit Pitch, Low-Fidelity-Prototyp und Architektur, teilweise funktionierendem System, Präsentation, Post-mortem und 360-Grad-Bewertung. In 2022.2 wurden die dreizehn Abschlussprojekte in öffentlich zugänglichen Sitzungen im Amphitheater des CIn präsentiert.

• https://github.com/filipecalegario/criacomp
• https://portal.cin.ufpe.br/2022/11/18/disciplina-de-criatividade-computacional-e-ofertada-para-alunos-da-graduacao-de-toda-ufpe/

2020.2 · IF760 Criatividade Computacional (Computerkreativität; Fortgeschrittene Themen in Informationssystemen 3), Mai bis August 2021

Kurs von Filipe Calegário, mit Giordano Cabral als Co-Dozent auf dessen Einladung, ab Mai 2021.

• Xilogravuras com StyleGAN2-ADA — abstrakte Bilder, die aus Holzschnitten (Xilogravuras) erzeugt und anschließend per Stilübertragung in ein Artefakt umgewandelt wurden, das die Kreativität der Künstlerin bzw. des Künstlers anregt. Team: Alyson Tabosa, Josenildo Vicente de Araújo, Vinícius Padilha Garcia, César Bulhões, Renato Joaquim de Miranda Ferreira.
• Gerador de camisas com Style Transfer — T-Shirts, die aus einer leeren Maske und einem oder zwei Stilbildern erzeugt werden. Team: Aldiberg Gomes, Arthur de Castro, Christian Moura, Rodrigo Albuquerque, Ruy Ovídio.
• PombaYorquenses (ou pessoas-abacaxi) und Expression Transfer — FFHQ-Modell von StyleGAN2-ADA, trainiert mit 297 Ananasbildern, um dieses Merkmal in Gesichter einzufügen. Team: Anderson Henrique, Gabriel Amancio, Geraldo de Medeiros, Lucas Albuquerque, Saulo Alexandre.
• LombraDream — Colab-Werkzeug, das DeepDream anwendet, um psychedelische Muster auf einem Eingabebild zu erzeugen (Team 5).
• Deep Creep — Simulation von DeepDream mittels Stilübertragung in Google Colab. Team: Germano Carvalho, Douglas Santos, Arthur Santos, Gabriel Barbosa, Lucas Emanuel.

2020.3 · IF767 Criatividade Computacional (Computational Creativity), August bis Dezember 2020 (remote)

Erste Ausgabe mit Giordano Cabral, im Zusatzsemester während der Pandemie.

• Moodinator — Anderson Henrique Batista da Silva, Gabriel Amancio da Silva, Geraldo de Medeiros Galvão Neto, Hitallo Cavalcanti da Silva, Lucas Alexandre Figueiredo Albuquerque, Matheus de Andrade Lima, Mateus Nunes Galdino da Silveira.
• Gerador de imagens de "bom dia" — erzeugt die Grußbilder, die in Messenger-Gruppen kursieren. Team: Cláudio Carvalho, Douglas Cavalcante, Evaldo Júnior, Lucas Silva, Luan Brito, Marina Barros, Rodrigo Ferreira.
• Funkfy — erstellt aus zwei bestehenden Musikstücken ein neues. Gruppe 8 (Musik): Daniel Bastos, Felipe Araújo, Gabriela Heimer, José Gabriel, Lucas Mendonça, Pedro Souza, Ruy Ovídio.
• CreativeSoundtrack — Werkzeug für Unity, das anhand der Stimmung personalisierte Soundtracks erzeugt. Gruppe 2: André De' Carli, Daniel Filgueira, Danilo Freitas, João Moura, Lucas Valença, Rodrigo Cunha, Victor Miranda.
• Comfeats — Generator für Verse im Stil von Künstlern mit textgenrnn und Python. Team: Alecsandro Silva, Arthur Moreira, Eulália Aires, Igor Poncell, Isabel Lima, Pamella Bezerra, Victor Aguiar.
• Gerador aleatório de personagens de RPG — Zufallsgenerator für Rollenspielfiguren — André Carneiro, Andrey Moutelik, Arthur Pires, Jonathan Santos, Victor Brayner.
• Gerador de terrenos aleatórios — Zufallsgenerator für Gelände — Guilherme Afonso Galindo Padilha, Lucas Thierry Chaves Muniz.
• Pet que muda com as fotos do usuário — Haustier, das sich mit den Fotos der Nutzerin bzw. des Nutzers verändert — Gruppe 1: Aline Gouveia, Daniel Perazzo, Leão Liu, Mário Wessen, Mayara Gomes, Nara Souza, Rebeca Silva.
• Rolê dos gregos antigos — Ausflug der alten Griechen — Gruppe 7.

2021.1 · IF866 Criatividade Computacional (Computational Creativity), Kurs I9 (September bis Dezember 2021)

Kurs im Remote-Format.

Eigene Projekte:

• Mostra de Obras Autorais — virtuelle Landschaften, erstellt mit Nvidia Canvas. Team: Bruno, Luis, Matheus, Ramon, Rodrigo, Lucas.
• Cadeiras Surrealistas und Arte Cultural (letzteres weitergeführt als OutfitAfrica).

Abschlussprojekte (Werkzeuge):

• OutfitAfrica — neues StyleGAN-Modell, trainiert mit afrikanischen Mustern. Team: Rodrigo de Lima Oliveira, Matheus Hopper Jansen Costa, Lucas Florêncio de Sousa. Code: https://github.com/luucaslfs/outfit-africa-stylegan.
• Easy Sonic Dreams — Schnittstelle zur Audioerzeugung. Team: Bruno Nunes de Mesquita, Lucas Nascimento Tavora, Luis Carlos Lacerda Durans, Matheus Jose Mota de Oliveira, Ramom Jose Correia Santos, Rodrigo Brayner Lyra.
• RPG text generator — Generator für RPG-Texte mit GPT-3. Team: Anderson Rufino, André Luiz, Hiago Almeida Dias, Lucas Vinicius, Débora Dias, Filipe Samuel. Code: https://github.com/debfdias/rpg-text-generator.
• Bot de trocadilhos para Discord — ein mit Witzen feinabgestimmtes GPT-2 antwortet auf den Befehl "$trocadalho". Team: Matheus Borba, Lucas Barros, Ítalo Ribeiro, Tiago Moraes, Saulo Guilhermino.
• Beat Generator — Generator für Lo-Fi-Beats auf Glitch. Team: Laís Bandeira, Maria Júlia Feitosa, Rafael Jesus de Araujo Vasconcelos.
• Projekt mit OpenAI Jukebox. Team: André Ferreira, André Luís, Antônio Netto, Heitor Santos, João Vítor Valadares, Marcos Prysthon, Robson Pereira.

2021.2 · IF866 Criatividade Computacional (Computational Creativity), Februar bis Mai 2022

Eigene Projekte:

• Weird Hal I.A.kovich: generative Parodien — Galerie von KI-generierten Parodien zu Ehren von Weird Al Yankovic. Team: Pietro Masur, Gabriel Nogueira, Anderson Cesar, André Valença, Pedro Basílio.
• Kpopifier — Bruno Martins, Eduardo Silva, José Lima, Magnon Souza, Tiago Campêlo.
• abbey.sloth — ein vollständig künstlicher Künstler mit generierten Werken und Texten, veröffentlicht auf Instagram (Gruppe 1).
• Na pele do autor (In der Haut des Autors) — Sammlung von Bildern im Stil von Malern (Romero Britto, Dalí, Portinari, Anita Malfatti, Monet, Miró, Munch) mittels Stilübertragung.

Abschlussprojekte:

• Antonoffer — „der perfekte Musikproduzent“: nimmt eine MP3-Datei und den gewünschten Stil entgegen und liefert den Song gemischt mit Stilübertragung zurück. Team: Bruno Martins, Magnon Souza, Tiago Campêlo. Code: https://github.com/tiago-ds/style-transfer-criatividade-computacional.
• Cluster Art — Bilder, texturiert durch k-means-Clustering der Farbkanäle. Team: Charles Gabriel Carvalho Cristóvão, Heitor da Rocha Coimbra, Pedro Didier Maranhão, Pedro Tenório Lemos.
• Cegonha — Empfehlung von Babynamen, die mit jeder Auswahlrunde verfeinert wird. Team 3: Anderson Cesar, André Valença, Gabriel Nogueira, Pedro Basílio, Pietro Masur.
• Gerador de Frases Desmotivacionais (Generator für demotivierende Sprüche) — BERT, GPT-2 und GPT-3 mit Fine-Tuning. Team: Antonio Paulino, Eduardo Luiz Silva, José Lima, Thiago Henrique Lopes da Silva, Wellisson Franklin Cordeiro.
• Web-DSCRIPT — kodiert Text in eine „außerirdische“ Schrift (Dimensional Script), um Bücher, Spiele und Schmuck zu inszenieren.
• Gerador de linhas sobre imagens (Generator für Linien auf Bildern) — zeichnet animierte Linien über ein Bild, mit Reglern für Geschwindigkeit, Farbe und Größe (Gruppe 1). Code: https://github.com/FactorMouk/CC-ProjetoFinal.

2022.2 · IF866 Criatividade Computacional (Computational Creativity), November 2022 bis April 2023

Für die gesamte UFPE geöffnete Ausgabe, mit 70 Plätzen, in Präsenz.

• FearflixAI — erzeugt Horrorkurzfilme aus einem einzigen Text-Prompt (Gruppe 1).
• DSDoc — Hilfsmittel zur Erzeugung von Softwaredokumentation. Team: Erik de Gouveia Zambom, Felipe Durant Freire, Júlia Monteiro Cardouzo, Mateus Gomes de Melo, Matheus Marinho de Morais Leca, Matheus Victor Alves da Silva. Code: https://github.com/dejardim/dsdoc.
• FlickTunes — Browsererweiterung, die Text auf Basis von Voicemod Text-to-Song in Musik umwandelt. Team: Elaine Cruz, Leonardo dos Anjos, Marco Antônio, Maria Augusta, Matheus Felipe, Rafael Rodrigues. Code: https://github.com/leonardoAnjos16/FlickTunes.
• Narrative Genie — Erschaffung fiktiver Welten (Figuren, Orte, Geopolitik und Bilder) mit GPT-3 und Stable Diffusion (Team 5).
• Harmonização publicitária (Werbeharmonisierung) — José Wilson, Mateus Alves, Mateus Costa.
• LogoMAIker — Erzeugung von Logos anhand der Bedürfnisse der Kundschaft. Gruppe 10: Artur Leal Brito Sales, Carlos Frederico Pereira Júnior, Carlos Eduardo Mendonça Clark, Cauê Addae da Silva Gomes, João Marcos Lyra Vieira (Autorenprojekt der Gruppe: „Coleção Magic Brasil“).
• Demixagem com acordes de violão (Demixing mit Gitarrenakkorden) — trennt die Spuren eines Musikstücks und erzeugt die Akkorde zur Begleitung. Gruppe 8 (BSI): Alexsandro Henrique, Daniel Moraes, Gustavo Nascimento, Luis Gabriel, Vinicius Luiz.

• Links: https://portal.cin.ufpe.br/2022/11/18/disciplina-de-criatividade-computacional-e-ofertada-para-alunos-da-graduacao-de-toda-ufpe/ · https://portal.cin.ufpe.br/2023/04/12/disciplina-pioneira-de-criatividade-computacional-do-cin-apresenta-projetos-inovadores-em-ia-gerativa/

2023.1 · IF866 Criatividade Computacional (Computational Creativity), Mai bis September 2023

Das Programm: Experimente, Zeitleiste der Bildsynthese, ethische Fragen, LangChain und Flowise, Stable Diffusion (Web UI und Deforum), DALL-E 2 und Midjourney, Prompt Engineering für Bild und Text mit ChatGPT und GPT-4, weitere Modalitäten, im Juli vorgestelltes Autorenprojekt, Ideenfindungsmethoden, morphologischer Kasten mit drei Wegen sowie das Abschlussprojekt in Etappen: Pitch, Prototyp mit sehr geringer Detailtreue und Architekturdiagramm, teilweise funktionierendes System, Präsentation, Post-mortem und 360-Grad-Bewertung.

Eigene Projekte:

• Visual Novels com IA — vom ChatGPT aus Liedtexten generierte Geschichten, mit von KI generierten Schauplätzen und Figuren (Gruppe 10).
• Passo a Passo: Vocais da Loirinha — Alice Oliveira, Ana Letícia, Guilherme Morone, Williams Santiago, Matheus Godinho, Enrique Laborão, Marcello Menezes.
• Sammlung eigener, von generativer KI erstellter Artefakte — David Mateus Leite da Silva, Gilberto Medeiros de Oliveira Junior, Jailson Soares da Silva Junior, Lucas Luis de Souza, Maria Paula Perazzo Sampaio, Mateus da Silva Olegario, Maurício Alves da Silva Junior.

Abschlussprojekte:

• Flashi — Karteikarten-App zum Erlernen einer Sprache, mit von KI generierten Sätzen. Team: Camila Xavier, Breno Cavalcanti, Felipe Souza, Bianca Duarte, Luísa Mendes, Maike Menezes, Roseane Oliveira. Code: https://github.com/maikermenezes/flashi-app-front.
• Real-Time Visual Novel — kurze, interaktive Geschichten, die in Echtzeit mit der API von GPT-3.5 generiert werden, mit Bildern von DALL-E auf Grundlage von Schlüsselwörtern jeder Szene (Gruppe 10).
• Synk Dive — immersive Erfahrung der „multisensorischen Harmonie“ auf Grundlage visueller und textlicher Eingaben.
• iNOVE — Erzeugung überzeugender Produktseiten. Team: Luan Eustáquio, Luís Felipe Oliveira, Maria Luiza, Matheus Lafayette, Matheus Paixão, Pedro Basílio.
• Erzeugung von Musik-/Albumcovern — analysiert die Stimmungen des Liedtextes und erzeugt ein neues Cover (Gruppe 5).

Spätere Ausgaben (Filipe Calegário)

• Links: https://github.com/filipecalegario/criacomp