音声から顔を再現する印象的な人工知能プログラム

Speech2Faceは、声のほんの一部で人の顔がどのように見えるかを知ることができることを示した研究です

Guardar

テクノロジーは飛躍的に成長し続け、新しい機能を探求するためにいくつかの分野を利用しています。その一つは、声の断片を通して人の顔を「再構築」できるようにすることです。

2019年にビジョンと認識パターンの会議で発表されたSpeech2Face の研究は、人工知能(AI)が短いオーディオセグメントを通して人の外見を解読できることを示しました。

MITリサーチアンドサイエンスプログラムのテヒョン・オン、タリ・デケル、チャンギル・キム、インバー・モッセリ、ウィリアム・T・フリーマン、マイケル・ルービンスタインの研究者の目標は、人々の顔を同じように再構築することではなく、関連する身体的特徴を持つイメージを作ることであると説明しています。分析されたオーディオ。

これを実現するために、彼らは人々が話しているYouTubeから撮影された何百万もの動画を分析するディープニューラルネットワークを使用、設計、トレーニングしました。トレーニング中に、モデルは声と顔の相関を学習し年齢、性別、民族など、話者に似た身体的属性を持つ画像を生成できるようにしました

Infobae

トレーニングは、顔の詳細な物理的特性をモデル化する必要なく、インターネットビデオの顔と声の同時性を利用して、監督下で実施されました。

彼らは、この研究にはプライバシーだけでなく民族性にも敏感な側面がある可能性があるため、顔の再現に特定の物理的側面が追加されておらず、他の機械学習システムと同様に、時間の経過とともに改善されることを保証していると詳述しました。ナレッジライブラリを増やします。

示されているテストでは、Speech2Faceには顔と声の一致が多数あることが示されていますが、民族、年齢、性別が使用された音声サンプルと一致しないという欠陥もありました。

Infobae

このモデルは、顔の特徴と声の間に存在する統計的相関を示すように設計されています。AIは、世界中の人口の実際のサンプルを表していないYouTubeビデオを通じて学習したことを覚えておく必要があります。たとえば、一部の言語では、トレーニングデータとの不一致を示しています。

この意味で、研究自体は、結果の最後に、システムを調査して近代化することを決定した人が、機械学習が顔のマッチングと再作成の幅広いレパートリーを持つように、人々と声のより広いサンプルを検討することを推奨しています。

このプログラムは、分析されたオーディオの声に非常に似ている漫画の声を再現することもできました。

このテクノロジーは悪意のある目的にも使用される可能性があるため、顔の再現は人の近くにとどまり、顔全体は表示されません。これは人々のプライバシーの問題になる可能性があるためです。それでも、オーディオサンプルからテクノロジーで何ができるのかは驚くべきことです。

読み続ける:

Más Noticias

Gluten: cómo pasó de proteína esencial en la historia humana a un reto digestivo

Este conjunto de proteínas ha formado parte de la dieta humana por milenios, transformó alimentos y técnicas culinarias mientras generó desafíos para el sistema digestivo en ciertas personas

Gluten: cómo pasó de proteína

Tragedia en Real Plaza Trujillo por caída de techo del patio de comidas: tres fallecidos, 70 heridos y personas atrapadas

La noche del viernes, mientras personas de toda edad disfrutaban de las instalaciones, la estructura colapsó, dejando a varias personas atrapadas, entre ellos adultos y niños, ya que en el lugar había unos juegos infantiles. Las víctimas mortales son dos hombres y una mujer

Tragedia en Real Plaza Trujillo

Tragedia en Real Plaza Trujillo: impactantes fotos y videos tras el colpaso del techo en este centro comercial

Al menos 10 unidades de bomberos y cerca de 100 agentes de la PNP han llegado hasta el lugar para socorrer a los heridos. Se ha confirmado que hay gente atrapada

Tragedia en Real Plaza Trujillo:

¿Ganaste el Tris? Descubre aquí los resultados de los sorteos del 21 de febrero

Aquí los resultados de todos los sorteos de Tris dados a conocer por la Lotería Nacional y averigue si ha sido uno de los ganadores

¿Ganaste el Tris? Descubre aquí

El instituto forense Abu Kabir de Tel Aviv confirmó que el cuerpo entregado el viernes por la noche por parte de Hamas corresponde a Shiri Bibas

La Cruz Roja declaró que las Brigadas Al-Qasam, uno de los brazos armados de la agrupación terrorista, habían transferido otro cadáver. Esta mañana, se confirmó que los restos sí pertenecen a la rehén argentina

El instituto forense Abu Kabir