レビュー 自然言語技術、ホログラムはホロコーストの証言をどのように保存しているか

自然言語技術、ホログラムはホロコーストの証言をどのように保存しているか

ビデオ: Je m'appelle Funny Bear - Full French Version - Gummy Bear Song (10月 2024)

ビデオ: Je m'appelle Funny Bear - Full French Version - Gummy Bear Song (10月 2024)
Anonim

1990年代、USC Shoah Foundationは、数千人のホロコースト生存者にビデオインタビューを実施し、彼らの話が決して忘れられないようにしました。 現在、非営利団体のデジタルライブラリには53, 000件のビデオの証言があり、近年では、1994年のルワンダツチ虐殺、1937年の南京大虐殺、および第一次世界大戦と同時に起こったアルメニア人虐殺を目撃した人々の証言を収集するために拡大しています。

しかし、ロボットや仮想アシスタントは言うまでもなく、仮想現実と拡張現実の台頭を見ている時代に、組織は証言をキャプチャするためのより現代的な方法を探求してきました:対話し、質問に答えることができる生存者の対話型のホログラムのような表現未来の世代。

この基金は、USC Institute of Creative Technologies(ICT)およびプロジェクトのConscience Display(証言の新次元として知られる)と協力しています。 2012年から開発が進められており、最終的には世界中の博物館や学習機関で利用できるようになります。 PCMagは最近、カリフォルニア州プラヤビスタを訪れ、アウシュビッツの生存者であるエヴァコールがサウンドステージで証言をするのを見ました。

USCショーア財団のエグゼクティブディレクターであるスティーブンD.スミス博士は、「ジェノサイドを経験した人々と話し、証人から直接話を聞くのではなく、彼らが歴史の統計となるのを見る機会を望んでいました。 」

5日間、スミスのチームは、第二次世界大戦が始まった8歳のコーにインタビューしました。 「彼女の反応を記録することで、将来の世代のための生きた資源を作り出すことができます」と彼は言いました。

Conscience DisplayのマネージングディレクターであるHeather Maioは、ICTでの仕事について学ぶ前に、博物館や教育環境向けにさまざまなテクノロジーを試し、歴史を共有していました。

「2台のカメラを使用して3Dでテストを行いましたが、ホログラフィックタイプテクノロジーに最も近いテクノロジーを探していました。2010年にICTを見つけ、プロジェクト全体をUSC Shoah Foundationに持ち込みました。」

マイオは、伝統的な物語の証言を超えたいと考え、自然言語処理を研究することを決定しました。そのため、博物館の訪問者は、記録された目撃者と実際の対話ができます。

音声認識の多くはまだ開発中です。 「GoogleのASR(自動音声認識)をプラグインしました。これは、特に最大の自然な会話の語彙とフレージングを持ち、コンテキストを理解しているため、世の中にある最高の言語ソフトウェアです。」 「しかし、私たちの目撃者は、第二次世界大戦時代から今日ではあまり使われていない言葉、特にポーランド語とイディッシュ語を使用しています。

デジタルキャプチャスタジオに行く時が来ました。 クルーは広大なリグを設置し、スペースの3分の2にグリーンスクリーンの背景を敷き、後で被インタビュー者をあらゆる環境や背景に配置できるようにしました。

チームは、112台のカメラ、Ximea MQ042MG-CM、Red Epic M Dragons、およびPanasonic HC-X900sを組み合わせたリグを介して360度で撮影します。 「これは複雑なプロジェクトであるため、ICTは、ICTのNatural Languageチームが作成したソフトウェアを組み込んだ編集プロセスのために、SonyのVegas Proで実行されるカスタムシステムを開発しました」とMaio氏は言います。

全員が配置された状態で、Eva Korはカメラのセットアップの中央に席を取りました。 エヴァが選ばれた理由は、1984年にCANDLES(Auschwitz Nazi Deadly Lab Experiments Survivorsの子供たち)という組織を設立し、1995年にCANDLES博物館を開設したためです。現在83歳で、まだタックとして鋭い彼女は、彼女の胴体を同じ位置に保ち、彼女のデジタルレンダリングが後で連続性を持つようにします。 それはまるで本物の映画セットのようでした。

「セットで静か。」

"音!"

「ロールパナソニック。」

「すべてのパナソニックをチェック!」

「ロールレッド。」

「スレートください。」

カチンコは、編集チームに注釈を与えるためにバタバタし、全員がその日のスクリプトを見下ろし、スミスはカメラリグの外側のマイクに寄りかかった。

「あなたの両親は、ヒトラーと占領について何を言ったのですか?」 彼は尋ねた。

コルは深く息を吸い、ルーマニアのトランシルヴァニアの村でハンガリー人兵士が彼女の家族の小さな農場にどのようにやってきたかを詳しく述べました。

証人アカウントが作成された後、オーディオトリガーが適用されるため、将来の視聴者はさまざまな方法で質問をしたり、Korから説得力のある応答を得ることができます。 これは、ソフトウェアが応答を正しく分類し、キーワードを意味理解で適用することを保証するために、Korがさまざまな方法で同じ質問に答えなければならないことを意味しました。

見ている人から最も感情を引き出した質問は、子どもたちが尋ねるようなものでした。 実際、彼らは持っていました。 2, 000以上の質問は、研究トライアルからクラウドソーシングされたもので、多くは当時の日常生活の詳細についてでした。 コーは子供の頃の思い出を思い出し、家族がアウシュヴィッツに連れて行かれる前に成長しました。 彼女は母親の料理、学校でのいじめの問題、双子の妹ミリアムのお気に入りのペットについて説明しました。

それは、エヴァとミリアムが双子であり、キャンプで行われた恐ろしい実験の一部であったためです。 家族の残りは到着時に殺されました。

1時間の録音の後、Korは休息を必要としました。 そのため、訴訟の一時停止中に、スミスは私たちを完全な証言を示すために私たちを横部屋に連れて行きました。 ICTの出力により、インタビュー対象者を2D HD、3D、VR内、または任意のディスプレイモニターまたはデバイスを介して投影できます。

ラップトップで、スミスはブラウザウィンドウを引き上げ、もう1人のホロコーストの生存者であるピンチャスガターがいて、両手を優しく足で休ませ、目を覚まし、私たちを待っていたようです。

スミスはラップトップのキーに指を置いて、ガターが反応するようにトリガーしました。 ガターの顔が光りました。 スミスは質問をし、指を離し、ガターは別の町で電話会議に座っているかのように答えました。

私たちは皆、質問をしました。異なる国籍やアクセントを持つ私たちの数人です。 彼はすべてを得て、説得力のある答えを与えました。 説得力がありました。 信念の停止は完了しました。

Eva Korは、スタジオに戻る次の100の質問の準備ができていました。 しかし、このプロジェクトで驚くべきことは、Korが物理的な領域に私たちを残した後、彼女に何が起こったのかについての人々の質問に答えることです。

自然言語技術、ホログラムはホロコーストの証言をどのように保存しているか