Ihre Lieblings-Roman ist jetzt ein Soundtrack

(Inside Science)--beim Lesen eines Romans ist es üblich, seine Gedanken in den imaginären schweifen zu lassen: Was könnten diese Zeichen aussehen oder klingen? Jetzt nutzt ein neues Projekt Algorithmen übersetzen die Emotionen vermittelt innerhalb eines Textes in Musik, die die gleichen Gefühle widerspiegelt.

TransProse, ist wie das Projekt genannt wird, eine Zusammenarbeit zwischen Hannah Davis, ein New Yorker Programmierer und Künstler und Saif Mohammad, ein Research Officer bei der National Research Council Canada in Ottawa.

Die Inspiration für das Projekt kam Davis in einen Master Studiengang für kreative Kommunikations-Technologie. Als eine Klasse-Projekt war sie die Grammatik der Romane in Klang übersetzt.

"Hemingway war wirklich kurz und staccato", sagte sie. Er führte sie zu Fragen, wie die Musik eine viel größere Datenmenge – Emotion in Romanen angehen könnte.

Das ist, wenn sie fand die Arbeit von Mohammad, die eine massive 14.000-Wort-Lexikon erstellt hatte, die Worte mit Emotionen verbunden sind. Eis ist verbunden mit Glück, während Tränen mit Trauer verbunden. Zusammengearbeitet, Mohammad und Davis um einen Algorithmus zu erstellen, der Musik auf dieser Verbände bauen konnte. Sie präsentierten ihre Ergebnisse in einem Papier in der Europäischen Vereinigung für Computational Linguistics Workshop on Computational Linguistics für Literatur letzten Monat in Schweden.

Die musikalische Werke, die sie vorgenommen haben, mit dem Algorithmus wurden große Teile der Literatur inspiriert. Einige dieser Werke, einschließlich Conrads Novelle "Herz der Finsternis" (höchste Emotion: Angst; zweite höchste Emotion: Trauer) und Harper Lees Roman "Zu Kill A Mockingbird" (höchste Emotion: Vertrauen; zweite höchste Emotion: Angst), sind interessant und ein wenig seltsam.

Davis und Mohammad verweisen auf die Computer erstellte Musik basierend auf dem Roman "Peter Pan" als einer ihrer Favoriten.

"Es ist ein einfaches kleines Liedchen, aber es fühlt sich an wie"Peter Pan",", sagte Davis. Sie merken in der Zeitung, das gibt es nicht nur einen richtigen Weg zu Musik aus Text erstellen. "Es ist ein wenig künstlerische", sagte Mohammad. "Was ich mag ist, dass wenn man denkt, über die Erzeugung von Musik ist es wie eine Geschichte... es gibt so viele Möglichkeiten."

Der Algorithmus hat Probleme mit komplexen Storylines und allegorischen Bücher, die doppelte Bedeutung haben.

"'1984 ' und"Brave New World"sind schwierig,", sagte Davis. "Auch in"A Clockwork Orange,"haben wir hier ein Zeichen durchläuft der Welt schreckliche Dinge zu tun, sondern glücklich darüber zu sprechen."

Die Herausforderung der Computer analysieren von realen Texten, wo Emotionen tiefer als glückliche und traurige laufen, ist eine, die in Zukunft in Angriff genommen werden. Die Forscher sagen, dass die Verarbeitung natürlicher Sprache hat noch einen langen Weg zu gehen, bevor es den Mainstream trifft, und dieses Projekt nur ein Anfang ist.

"Das Lexikon sagt Ihnen nur, was die Worte zugeordnet sind, aber ein Satz ist nicht nur die Summe von Wörtern,", sagte Saif. "Wir haben diese lernfähige Algorithmen und [Technologie] versucht zu verallgemeinern, was es gelernt hat." Wir haben viel Arbeit in den letzten 10 Jahren auf Sentiment-Analyse gemacht, aber der Emotionsarbeit ist immer noch in ihren Anfängen."

Text und Musik verbinden, ist keine triviale Aufgabe.

"Wir haben seit Tausenden von Jahren Geschichten gelesen, aber habe keine Verbindung zur Musik in einer automatischen Weise", sagte Rada Mihalcea, Associate Professor für Ingenieurwissenschaften und Informatik an der University of Michigan in Ann Arbor. Sie weist darauf hin, dass das Projekt auch wichtig ist, die Aufmerksamkeit auf das Feld, aber es hat Folgen für die Forschung in Bezug auf die Emotion Analyse in Text und Musik zu verbinden.

In der Zukunft möglicherweise Emotionen in Text um herauszufinden, wie eine Gruppe von Menschen, vor allem während einer emotional erhöhte Situation wie eine Naturkatastrophe oder anderen Notfällen geht zu analysieren. Diese Informationen kann möglicherweise Vorhersagen, wie die Menschen in diesen Situationen reagieren.

Darüber hinaus sagte Mihalcea, Verständnis Emotionen besser Empfehlungen für Produkte oder Dienstleistungen führen könnte.

"Sie können statt empfehlen etwas basierend auf Geschlecht und Alter einer Person, die Gefühle, die eine Person hat auf Standorte, Ziele oder in einem bestimmten Moment reicher Benutzerprofile erstellen einfügen" sagte sie.

Davis und Mohammad sagen, dass sie melodische Linien für Charaktere erstellen, die im ganzen Roman oder Motive für bestimmte Orte in einem Buch ändern möchten. Sie können auch eine mobile Anwendung oder sogar die Technologie in einem Online-Buchladen integrieren.

"Gerade jetzt seht ihr die vordere Abdeckung des ein Buch, aber was ist, wenn Sie den emotionalen Ton des Buches hören könnte und entscheiden, ob Sie es kaufen möchten," fragt Davis.

Diese Geschichte wurde von innen Wissenschaft-News-Service bereitgestellt. Katharine Gammon (@kategammon) ist ein freier Wissenschaftsjournalist mit Sitz in Santa Monica, Kalifornien, und schreibt für eine Vielzahl von Zeitschriften über Technologie, Gesellschaft und Tierwissenschaften.