Skip to main content

Microsoft verwendet Karaoke-Funktion für chinesisches Bing-Wörterbuch

Microsoft hat seinem Bing-Wörterbuch in China eine Karaoke-ähnliche Funktion hinzugefügt, die Englischlernern eine neue Möglichkeit bietet, ihre Aussprache online zu üben.

Die sogenannte "KTV-Funktion" funktioniert über Videos für ausgewählte Beispielsätze aus dem Wörterbuch. Ähnlich dem Karaoke-Format zeigen die Videos den Satz auf dem Bildschirm an, während ein Modell es laut ausspricht und den Benutzern beibringt, wie sie die Wörter korrekt aussprechen.

Die Funktion ist eine der neuesten Methoden, mit denen Microsoft versucht hat, Bing zu verbessern Wörterbuch für China, das noch in einer Beta-Version ist und als Chinesisch-Englisch-Wörterbuch funktioniert. Karaoke, auch bekannt als KTV, ist ein großer Zeitvertreib unter Chinesen, mit KTV-Clubs an vielen Straßenecken des Landes.

[Lesen Sie weiter: Beste Soundbars]

"Es bringt ein Maß an Benutzer Engagement das macht es persönlicher ", sagte Matt Scott, der Projektleiter für das Bing Dictionary. "Sie haben das Gefühl, dass Sprachenlernen Spaß machen kann."

Aber die KTV-Funktion verwendet auch eine Spitzentechnologie, um die Videos für die Beispielsätze zu erstellen. Anstatt wiederholt eine Person aufzunehmen, die die verschiedenen Beispielsätze immer und immer wieder spricht, hat Microsoft einen Weg gefunden, die Klänge zu synthetisieren und die Gesichtsbewegungen des Models, die in den Videos sprechen, künstlich zu öffnen.

Es funktioniert durch das Aufnehmen von Aufnahmen aller verschiedene Aussprachen, die das Modell in einem fünfstündigen Prozess ausdrücken kann, der die Lippen der Person abbildet, sagte Scott. Die Technologie findet dann die beste Übereinstimmung zwischen den Lippen und dem, was die Programmierer dem Modell sagen wollen, um eine genaue Lippensynchronisation zu erzeugen. Das Endergebnis ist ein Video des Modells, das die Wörter des Beispielsatzes mouthing, während eine computerisierte Stimme es laut vorliest.

Die Videos, die zurzeit online sind, zeigen, dass Scott als das Modell dient, und die Wörter zu dem Beispielsatz mouthing. "Ich habe nie einen dieser Sätze gesagt", sagte Scott, als er eines der Videos spielte. "Es ist eine komplexe Art von Matchmaking", fügte er hinzu.

Derzeit hat das Wörterbuch 10 Millionen Beispielsätze mit Videos. "Etwa alle paar Wochen werden mehrere tausend neue Videos hochgeladen", sagte Scott.

Die KTV-Funktion wurde im September hinzugefügt. Aber letzte Woche kündigte Microsoft das offizielle neue Modell an, das in den Videos gezeigt werden wird, nachdem es einen amerikanischen Idol ähnlichen Wettbewerb online gehalten hat. Microsoft hoffte, eine Person mit einer klaren Aussprache, einem guten Lächeln und einer Persönlichkeit zu finden, die das Interesse der Nutzer wecken könnte.

Cissy Wong wurde zum Gewinner erklärt. Das Video, das sie einreichte, wo sie die Benutzer anwies, die eine Mahlzeit auf Englisch zubereiten sollten, zog mehr als 1,8 Millionen Aufrufe auf der chinesischen Video-Website Ku6.com an. Für das nächste Jahr wird sie als "Mundmodell" von Bing Dictionary vorgestellt.

"Die Bing-Wörterbuch-KTV-Funktion ist wirklich erstaunlich", sagte Wong, der sich nach einer Empfehlung durch einen Freund für den Wettbewerb entschied. Sie dachte ursprünglich, dass der Prozess der Erfassung ihres Gesichtsausdrucks komplexer sein würde. "Aber eigentlich muss ich nur vor der Kamera sitzen und ein paar Sätze lesen", sagte sie in einer E-Mail. "Der Computer kann meinen Mund erfassen und der Gesichtsausdruck ändert sich automatisch."

Das Bing-Wörterbuch für China ist ein Data-Mining-Projekt, das auf das Internet zugreift, um präzise Chinesisch-Englisch-Übersetzungen zu finden. Viele der Beispielsätze werden online aus anderen Quellen gefunden, was den Nutzern mehr Abwechslung und ein aktuelles Verständnis über die Verwendung der Wörter bietet. Das Wörterbuch erhält mehr als 1 Million Seitenaufrufe pro Tag. Microsoft-Forscher planen, irgendwann in der Zukunft ein Japanisch-Englisch-Wörterbuch für Bing zu entwickeln.