マイクロソフトは中国版Bing辞書にカラオケのような機能を追加し、英語学習者にオンラインで発音を練習する新しい方法を提供した。
いわゆる「KTV機能」は、辞書から選んだ例文を動画で再生する機能です。カラオケのように、動画では画面に例文が表示され、モデルが音声で読み上げ、ユーザーに正しい発音を教えます。
この機能は、マイクロソフトがBing辞書（中国版）の改善に取り組んだ最新の取り組みの一つです。Bing辞書はまだベータ版で、中国語から英語への辞書として運用されています。カラオケ（KTV）は中国人にとって主要な娯楽であり、中国各地の街角にはKTVクラブが数多くあります。
「Bing辞書のプロジェクトリーダーであるマット・スコット氏は、「ユーザーエンゲージメントのレベルが上がり、よりパーソナルな体験が得られます。言語学習が楽しいと感じられるようになるのです」と述べています。
KTV機能は、サンプル文の動画を作成するために最先端の技術も活用しています。異なるサンプル文を話す人物を何度も繰り返し録画するのではなく、マイクロソフトは音声を合成し、動画内で話すモデルの顔の動きを人工的に再現する方法を考案しました。
スコット氏によると、この技術は、モデルが表現できるあらゆる発音を5時間かけて撮影し、人物の唇をマッピングすることで実現する。そして、この技術は、プログラマーがモデルに発音させたい単語と唇の最適な組み合わせを見つけ出し、正確なリップシンクを実現する。最終的に、モデルがサンプル文の単語を口パクで発音し、コンピューターの音声がそれを読み上げる動画が完成する。
現在オンラインに投稿されている動画では、スコット氏がモデルとなり、サンプル文を口パクで練習している様子が映されている。「僕はこれらのフレーズを一度も言ったことがありません」とスコット氏は動画を再生しながら言った。「複雑なマッチングなんです」と彼は付け加えた。
現在、この辞書には動画付きのサンプル文が1,000万件収録されています。「数週間ごとに数千本の新規動画が追加される予定です」とスコット氏は語ります。
KTV機能は9月に追加されました。しかし先週、マイクロソフトはアメリカンアイドルのようなオンラインコンテストを開催し、動画に登場する新モデルを正式に発表しました。マイクロソフトは、発音が明瞭で笑顔が素敵で、ユーザーの興味を引くような個性を持った人物を探していました。
優勝者はシシー・ウォンさんです。彼女が投稿した動画は、ユーザーに英語で料理の作り方を教えるもので、中国の動画サイトKu6.comで180万回以上再生されました。今後1年間、彼女はBing辞書の「口元モデル」として登場します。
「Bing辞書のKTV機能は本当に素晴らしいです」とウォンさんは言います。彼女は友人に勧められてコンテストに参加することを決めました。当初、彼女は自分の表情を捉えるプロセスはもっと複雑だと思っていました。「でも、実際にはカメラの前に座っていくつかの文章を読むだけでいいんです」と彼女はメールで述べています。「コンピューターが私の口元を捉え、表情も自動的に変化します。」
Bing中国辞書は、Webを活用して正確な中国語から英語への翻訳を検索するデータマイニングプロジェクトです。多くの例文はオンライン上の他のソースから収集されているため、ユーザーはより多様な表現を利用でき、単語の使い方に関する最新の情報を得ることができます。この辞書は1日あたり100万ページビュー以上を記録しています。マイクロソフトの研究者は、将来的にBing向けの日本語から英語への翻訳辞書を開発する予定です。
