musik klassifikation - tu clausthal · 2017-07-17 · musicovery. title: musical classification...

22
Musik Klassifikation Hayyan Helal; 450 100

Upload: others

Post on 22-Jun-2020

1 views

Category:

Documents


0 download

TRANSCRIPT

Page 1: Musik Klassifikation - TU Clausthal · 2017-07-17 · Musicovery. Title: Musical Classification Author: hian marima Created Date: 7/16/2017 9:48:04 AM

Musik Klassifikation

Hayyan Helal; 450 100

Page 2: Musik Klassifikation - TU Clausthal · 2017-07-17 · Musicovery. Title: Musical Classification Author: hian marima Created Date: 7/16/2017 9:48:04 AM

Struktur

1. Problemstellung: Musik einordnen.

2. Musikalischer Hintergrund.

3. Verfahren: neuronale Netzwerke.

4. Ergebnisse: Beispiele.

Page 3: Musik Klassifikation - TU Clausthal · 2017-07-17 · Musicovery. Title: Musical Classification Author: hian marima Created Date: 7/16/2017 9:48:04 AM

1. Problemstellung

Musik elektronisch gespeichert.

Große Anzahl von Dateien.

Musik für eine bestimmte Party.

Musik für eine bestimmte Person.

Musik für eine bestimmte Stimmung.

Page 4: Musik Klassifikation - TU Clausthal · 2017-07-17 · Musicovery. Title: Musical Classification Author: hian marima Created Date: 7/16/2017 9:48:04 AM

Lösung: Lieder klassifizieren nach …

Genre: Jazz, Klassisch, Rap, ... .

Ruhig gegen aufregend.

Passioniert gegen froh.

Style: Arabisch, Spanisch, …

usw…

Page 5: Musik Klassifikation - TU Clausthal · 2017-07-17 · Musicovery. Title: Musical Classification Author: hian marima Created Date: 7/16/2017 9:48:04 AM

2. Musikalischer Hintergrund

Page 6: Musik Klassifikation - TU Clausthal · 2017-07-17 · Musicovery. Title: Musical Classification Author: hian marima Created Date: 7/16/2017 9:48:04 AM

Physikalisch (1)

Frequenz (Note)

Volumen (Stärke)

Klangfarbe (Instrument)

Länge (Ganze, Halbe, …)

Page 7: Musik Klassifikation - TU Clausthal · 2017-07-17 · Musicovery. Title: Musical Classification Author: hian marima Created Date: 7/16/2017 9:48:04 AM

Physikalisch (2)

Page 8: Musik Klassifikation - TU Clausthal · 2017-07-17 · Musicovery. Title: Musical Classification Author: hian marima Created Date: 7/16/2017 9:48:04 AM

Kombinationen

Horizontal: Tonleiter (Dur, Moll, …)

Vertikal: Harmonie (Intervalle, …)

Rhythmus: Volumen, Länge.

Tafel …

Page 9: Musik Klassifikation - TU Clausthal · 2017-07-17 · Musicovery. Title: Musical Classification Author: hian marima Created Date: 7/16/2017 9:48:04 AM

Elementary Theory of Form (Gestalt)

Relation zwischen dem einen Abschnitt und dem

ganzen Stück.

Relation zwischen den verschiedenen

Abschnitten miteinander.

Beispiel: Rap Musik kann durch zwei nacheinander

folgende Abschnitte, die jeweils ein bestimmtes Rhythmus

haben, sofort erkannt werden.

Page 10: Musik Klassifikation - TU Clausthal · 2017-07-17 · Musicovery. Title: Musical Classification Author: hian marima Created Date: 7/16/2017 9:48:04 AM

3. Verfahren

Page 11: Musik Klassifikation - TU Clausthal · 2017-07-17 · Musicovery. Title: Musical Classification Author: hian marima Created Date: 7/16/2017 9:48:04 AM

Klassifizieren formal

𝑓: 𝑋 → 𝑌 : eine Funktion

𝑋: Was zu klassifizieren ist (Lieder).

𝑌: Kategorien (Genres, Styles, …).

Page 12: Musik Klassifikation - TU Clausthal · 2017-07-17 · Musicovery. Title: Musical Classification Author: hian marima Created Date: 7/16/2017 9:48:04 AM

Audio zu Wellen

Audio-Datei analysieren und physikalische Wellen

bestimmen.

Page 13: Musik Klassifikation - TU Clausthal · 2017-07-17 · Musicovery. Title: Musical Classification Author: hian marima Created Date: 7/16/2017 9:48:04 AM

Von Lied zu Klasse.

1. Ebene: die physikalische Ebene.

2. Ebene: Ebene der Kombinationen.

3. Ebene: Ebene der Gestalt.

4. Ebene: Ebene der Verbesserung durch

Feedback.

Page 14: Musik Klassifikation - TU Clausthal · 2017-07-17 · Musicovery. Title: Musical Classification Author: hian marima Created Date: 7/16/2017 9:48:04 AM

Neuronale Netzwerke 1

Input: Lieder.

Output: Style oder Genre (Klasse).

Page 15: Musik Klassifikation - TU Clausthal · 2017-07-17 · Musicovery. Title: Musical Classification Author: hian marima Created Date: 7/16/2017 9:48:04 AM

1.1. Ebene (Bestimmte Programme)

Input: Physikalische Wellen.

Output: Noten, Volumen.

Page 16: Musik Klassifikation - TU Clausthal · 2017-07-17 · Musicovery. Title: Musical Classification Author: hian marima Created Date: 7/16/2017 9:48:04 AM

1.2. Ebene (Neuronale Netzwerke)

Input: Physikalische Wellen.

Output: Instrument.

Tafel …

Page 17: Musik Klassifikation - TU Clausthal · 2017-07-17 · Musicovery. Title: Musical Classification Author: hian marima Created Date: 7/16/2017 9:48:04 AM

2.1. Ebene (Bestimmte Programme)

Input: Volumina.

Output: Rhythmus.

Page 18: Musik Klassifikation - TU Clausthal · 2017-07-17 · Musicovery. Title: Musical Classification Author: hian marima Created Date: 7/16/2017 9:48:04 AM

2.2. Ebene (Bestimmte Programme)

Input: Noten.

Output: Harmonien, Tonleiter.

Page 19: Musik Klassifikation - TU Clausthal · 2017-07-17 · Musicovery. Title: Musical Classification Author: hian marima Created Date: 7/16/2017 9:48:04 AM

3.1. Ebene (Neuronale Netzwerke)

Abschnitte bestimmen (meistens Rhythmus und Tonleiter verändert -> Neuer Abschnitt).

Input: Rhythmus, Tonleiter, Instrumente, Harmonien von Abschnitt i.

Output: Klasse des Abschnittes i.

Beispiel: Gitarre Solo in E Dur.

Beispiel: Jazz Abschnitt.

Page 20: Musik Klassifikation - TU Clausthal · 2017-07-17 · Musicovery. Title: Musical Classification Author: hian marima Created Date: 7/16/2017 9:48:04 AM

3.2. Ebene (Neuronale Netzwerke)

Input: Klassen der Abschnitte.

Output: Klasse des Liedes.

Page 21: Musik Klassifikation - TU Clausthal · 2017-07-17 · Musicovery. Title: Musical Classification Author: hian marima Created Date: 7/16/2017 9:48:04 AM

4. Ebene (Feedback)

Ergebnis von den 1.-3. Ebenen: n% für Klasse k.

Nochmal nach bestimmten Eigenschaften suchen:

falls gefunden: m% für Klasse k, mit m > n.

falls nicht gefunden: Klasse k` versuchen.

Beispiel: 60% für Rock -> Gitarre? -> Ja: 70% für Rock.