コロンビア大学の絵文字ロボットは、人間の顔の表情をすばやく予測し、模することができます

ジャカルタ - ロボットと対話する世界に住みたいのであれば、非常に迅速に顔の表情を読んで反応できる必要があります。今、科学者たちはそのような洗練された機械を作ることに近づいた。

ニューヨークのコロンビア大学の専門家によって構築されたEmoロボットは、人の表現を模する世界最速のヒューマノイドロボットです。

実際、彼は顔の筋肉の細かい兆候を探して、同時に効果的に微笑むようにエミュレートすることによって、人の笑顔を「予測」することができます。

見事なビデオは、ロボットが研究者の顔の表情を不気味な精度と信じられないほどの速度でリアルタイムでコピーすることを示しています。

emoは、ニューヨークのクリエイティブ・マシーンズ・ラボ・コロンビア大学の研究者の作品で、Scientific Reportsの新しい研究で彼らの研究を提示しています。

「私たちは、ロボットは、より自発的で独立した表現型コミュニケーションに発展する前の第一歩として、人間の表現を予測して模することを学ぶべきだと信じています」と研究者らは述べた。

今日、世界中で開発されているほとんどのロボット(英国のボットAmecaなど)は、人の顔を模するように訓練されています。しかし、Emoは、人がほぼ同時に笑顔になれるように、いつ笑顔になるかを「予測」するという利点があります。

それは、2つの間で人間に似た「より本物の」相互作用を作り出します。研究者たちは、人間やロボットが「フトゥラマ」のベンダーやフリーのように話したり、関係したりできる未来に向かっています。

「ロボットとのやり取りが自然で快適に感じられる世界を想像してみてください」と、クリエイティブ・マシーンズ・ラボのディレクター、ホド・リプソンは述べています。研究者らは、ロボットの非言語的コミュニケーションスキルは無視されていると考えています。

エモは優しい青いシリコンの皮膚で覆われていますが、この層の下には、人間の顔の筋肉に似た、人間に似た動きを動かす26の小さなモーターがあります。

眼鏡には高解像度カメラもあり、これは人間の顔の表情を予測するために必要です。

emoを訓練するために、チームはロボットが数時間フレームごとにフレームを観察するために人間の顔の表情ビデオを実行しました。

訓練後、Emoは、笑顔の意図を形成し始めるにつれて顔の小さな変化を観察することによって、人々の顔の表情を予測することができます。

エモは人の笑顔を真似るだけでなく、彼らの笑顔を予測することもできます - 両者はほぼ同時に笑顔になることができることを意味します。Huによると、笑顔に加えて、Emoは悲しみ、怒り、驚きなどの他の顔の表情も予測できます。

「この予測された表情は、共同表現に使用されるだけでなく、人間とロボットの相互作用の他の目的に使用することもできます」と彼は言いました。

emoは26の顔の「筋肉」しかないため、人間の表情をフルにすることができませんでしたが、チームはさらに「追加し続ける」。

研究者たちは現在、ChatGPTなどの大規模な言語モデルを使用した口頭通信をEmoに統合することに取り組んでいます。

このようにして、Emoは質問に答え、アメカやアイダなどの他のヒューマノイドが今日構築されているのと同じように会話をすることができるはずです。