„Picasso“ nutzt die handwerkliche Kunst von Kino-Regisseuren aus: Die neue Software wählt automatisch die passende Musik für Fotos und Bildserien. Die dazugehörigen Smartphone-App nennt sich „PicasSound“.
„Filmregisseure wissen und achten in der Regel sehr genau darauf, welche Melodie auf eine Szene passt“, erklärt Sebastian Michel, der am Saarbrücker Exzellenzcluster eine Forschungsgruppe leitet. Zusammen mit dem Doktoranden Aleksandar Stupar hat er die Software „Picasso“ entwickelt. Sie nutzt das Wissen der Filmregisseure, um für ein oder mehrere Bilder den passenden Soundtrack vorzuschlagen. Anwender finden so ohne großen, zeitlichen Aufwand genau die Musikstücke, die zu ihren Aufnahmen vom vergangenen Badeurlaub oder Städtetrip passen.
Möglich macht dies ein dreistufiges Verfahren, das Michel und Stupar ersonnen haben. Für das ausgewählte Bild werden in einer Datenbank eine festgelegte Anzahl von Filmszenen bestimmt, die in mehreren Merkmalen mit dem Suchbild übereinstimmen. Die Datenbank haben die beiden Forscher selbst aufgebaut, indem sie 50 Filme in Bilder und dazugehörige Soundtracks zerlegten und diese abspeicherten. In der zweiten Stufe bestimmt die Software für jeden Soundtrack einer gefundenen Filmszene eine Liste ähnlicher Lieder. Diese Vielzahl von Listen und Liedern werden dann in der dritten Phase mittels eines ausgeklügelten Rechenverfahrens auf ein Paar der stimmigsten Lieder reduziert, die dann der Anwender als Vorschläge erhält.Eine Liste von Vorschlägen mache auch deswegen Sinn, weil einzelne Fotos bei Anwendern unterschiedliche Assoziationen hervorriefen, so Michel. „Das Bild eines einzelnen Haus in der Natur verbinden manche mit einem romantischen Wochenende, andere dagegen mit Einsamkeit“, erklärt Michel.
Neugierige können sich auf der Demo-Webseite von „Picassos“ Trefferquote selber überzeugen. Sie können aber auch die App „PicasSound“ nutzen, die für iPhone und Android-Smartphones kostenlos erhältlich ist. Diese sucht den passenden Soundtrack unter den Musikstücken, die man selber auf seinem Smartphone abgespeichert hat. Des Weiteren können sich Interessierte vom 6. bis zum 10. März in Hannover, auf der Computermesse Cebit, am Stand F34 in Halle 9 von den Forschern des Exzellenzclusters für „Multimodal Computing and Interaction“ an der Universität des Saarlandes die Software präsentieren lassen.
Michel und Stupar wollen nun „Picasso“ dahingehend erweitern, dass es nicht nur automatisch Videos, sondern auf der Grundlage von Text auch Hörbücher und Hörspiele vertont. Darüber hinaus planen die Forscher, in ihr Vorschlagsystem noch mehr den Musik- und Filmgeschmack des jeweiligen Anwenders zu integrieren.
Weitere Informationen: picasso.mmci.uni-saarland.de/demo/ qid3.mmci.uni-saarland.de/people/sebastian.html
Unsere Webinar-Empfehlung
Erfahren Sie, was sich in der Medizintechnik-Branche derzeit im Bereich 3D-Druck, Digitalisierung & Automatisierung sowie beim Thema Nachhaltigkeit tut.
Teilen:
