เทคโนโลยีภาษาธรรมชาติโฮโลแกรมกำลังรักษาคำให้การของความหายนะอย่างไร

ในปี 1990 มูลนิธิ USC Shoah ดำเนินการสัมภาษณ์ทางวิดีโอกับผู้รอดชีวิตจากการฆ่าล้างเผ่าพันธุ์นับพันเพื่อให้เรื่องราวของพวกเขาไม่มีวันลืม ปัจจุบันห้องสมุดดิจิตอลขององค์กรไม่แสวงหาผลกำไรมีพยานวิดีโอ 53, 000 รายการและในช่วงไม่กี่ปีที่ผ่านมาได้ขยายขอบเขตการจับพยานจากผู้ที่เห็นการฆ่าล้างเผ่าพันธุ์ Rwandan Tutsi ในปี 1994 การสังหารหมู่นานกิง 1937 และการฆ่าล้างเผ่าพันธุ์อาร์เมเนียที่ใกล้เคียงกับสงครามโลกครั้งที่ 1

แต่ในยุคที่เห็นการเพิ่มขึ้นของความเป็นจริงเสมือนจริงและเพิ่มขึ้นไม่ต้องพูดถึงหุ่นยนต์และผู้ช่วยเสมือนองค์กรกำลังสำรวจวิธีการที่ทันสมัยกว่าในการจับพยานหลักฐาน: การโต้ตอบเป็นตัวแทนโฮโลแกรมเหมือนผู้รอดชีวิตที่สามารถโต้ตอบและตอบคำถามจาก คนรุ่นอนาคต.

มูลนิธิกำลังร่วมมือกับ USC Institute of Creative Technologies (ICT) และการแสดงความรู้สึกผิดชอบชั่วดีในโครงการหรือที่เรียกว่ามิติใหม่ในประจักษ์พยาน มันเริ่มทำงานมาตั้งแต่ปี 2012 และในที่สุดจะวางจำหน่ายที่พิพิธภัณฑ์และสถาบันการเรียนรู้ทั่วโลก PCMag เดินทางไปที่พลายาวิสต้าแคลิฟอร์เนียเมื่อเร็ว ๆ นี้เพื่อดูผู้รอดชีวิตจากค่ายเอาชวิตซ์ Eva Kor ให้การเป็นพยานของเธอบนเวที

หัวหน้าโครงการดร. สตีเฟ่นดี. สมิ ธ ผู้อำนวยการบริหารมูลนิธิ USC Shoah กล่าวว่าเขา "ต้องการโอกาสที่จะพูดคุยกับคนที่มีประสบการณ์การฆ่าล้างเผ่าพันธุ์ด้วยตนเองเพื่อรับฟังโดยตรงจากพยานแทนที่จะเห็นพวกเขาถูกส่งเป็นสถิติประวัติศาสตร์ ."

เป็นเวลาห้าวันทีมงานของสมิ ธ สัมภาษณ์คอร์ซึ่งอายุแปดขวบเมื่อสงครามโลกครั้งที่สองเริ่มขึ้น “ จากการบันทึกคำตอบของเธอเราสามารถสร้างทรัพยากรที่มีชีวิตสำหรับคนรุ่นต่อไปในอนาคต” เขากล่าว

Heather Maio กรรมการผู้จัดการของ Conscience Display ได้ทดลองใช้เทคโนโลยีที่แตกต่างกันสำหรับพิพิธภัณฑ์และสภาพแวดล้อมทางการศึกษาเพื่อแบ่งปันประวัติศาสตร์ก่อนที่เธอจะเรียนรู้เกี่ยวกับการทำงานที่ ICT

"ฉันทำการทดสอบด้วย 3D - โดยใช้การตั้งค่ากล้องสองตัว - แต่ฉันกำลังมองหาเทคโนโลยีที่ล้ำสมัยที่สุดในเทคโนโลยีโฮโลกราฟิกฉันพบเทคโนโลยี ICT ในปี 2010 และนำโครงการทั้งหมดมาสู่ USC Shoah Foundation"

Maio อยากจะไปไกลกว่าคำให้การเล่าเรื่องแบบดั้งเดิมและตัดสินใจที่จะวิจัยการประมวลผลภาษาธรรมชาติเพื่อให้ผู้เข้าชมพิพิธภัณฑ์สามารถมีการโต้ตอบจริงกับพยานที่บันทึกไว้

การรู้จำเสียงพูดส่วนใหญ่ยังอยู่ในการพัฒนา "เราเชื่อมต่อ ASR (การรู้จำเสียงอัตโนมัติ) ของ Google ซึ่งเป็นซอฟต์แวร์ภาษาที่ดีที่สุดออกมาโดยเฉพาะเพราะมีคำศัพท์และประโยคที่ใช้สนทนาได้เป็นธรรมชาติมากที่สุดและเข้าใจบริบท" Maio กล่าว "แต่พยานของเรากำลังใช้คำเฉพาะภาษาโปแลนด์และภาษายิดดิชซึ่งใช้กันน้อยกว่าในสมัยสงครามโลกครั้งที่สองอย่างไรก็ตามฉันสังเกตเห็นว่ามันเรียนรู้ได้อย่างรวดเร็วและกำลังเก็บคำศัพท์ใหม่ ๆ และเข้าใจมากขึ้นทุกวัน"

ได้เวลาเข้าไปในสตูดิโอถ่ายภาพดิจิตอลแล้ว ลูกเรือกำลังสร้างแท่นขุดเจาะขนาดใหญ่โดยมีฉากหลังสีเขียวคลุมอยู่สองในสามของพื้นที่เพื่อให้ผู้ให้สัมภาษณ์สามารถวางในสภาพแวดล้อมหรือฉากหลังใด ๆ ในภายหลัง

ทีมงานภาพยนตร์ 360 องศาผ่านแท่นขุดเจาะด้วยกล้อง 112 ตัวรวมกันของ Ximea MQ042MG-CMs, Red Epic M Dragons และ Panasonic HC-X900s “ มันเป็นโครงการที่ซับซ้อนดังนั้น ICT จึงได้พัฒนาระบบที่กำหนดเองซึ่งทำงานอยู่ด้านบนของ Vegas Pro โดย Sony สำหรับกระบวนการแก้ไขที่ผสมผสานซอฟต์แวร์ที่สร้างขึ้นโดยทีมภาษาธรรมชาติที่ ICT” Maio กล่าว

ทุกคนในสถานที่อีวาคอร์นั่งตรงกลางของการตั้งค่ากล้อง อีวาได้รับเลือกเพราะเธอก่อตั้งองค์กร CANDLES (Children of Auschwitz Nazi Deadly Lab Experiments Survivors) ในปี 1984 และเปิดพิพิธภัณฑ์ CANDLES ในปี 1995 ตอนนี้อายุ 83 ปีและยังแหลมอยู่ รักษาเนื้อตัวของเธอให้อยู่ในตำแหน่งเดียวกันดังนั้นการแสดงผลดิจิทัลของเธอจะมีความต่อเนื่องในภายหลัง จากนั้นมันก็เหมือนฉากภาพยนตร์เรื่องจริง

"เงียบในชุด"

"เสียง!"

"Roll Panasonics"

"ตรวจสอบความตื่นตระหนกทั้งหมด!"

"ม้วนแดง"

"กระดานชนวนโปรด"

clapperboard กระแทกลงเพื่อให้ทีมแก้ไขทุกคนมองดูสคริปต์ในวันนั้นและสมิ ธ ก็เอนตัวไปที่ไมโครโฟนด้านนอกกล้อง

"พ่อแม่ของคุณบอกอะไรคุณเกี่ยวกับฮิตเลอร์และอาชีพ" เขาถาม.

กอสูดหายใจลึก ๆ และให้รายละเอียดว่าทหารฮังการีมาที่ฟาร์มเล็ก ๆ ของครอบครัวของเธอในหมู่บ้านหนึ่งใน Transylvania ประเทศโรมาเนียได้อย่างไร

หลังจากวางบัญชีพยานแล้วจะมีการใช้ทริกเกอร์เสียงเพื่อให้ผู้ชมในอนาคตสามารถถามคำถามได้หลายวิธีและได้รับการตอบสนองที่ตรงประเด็นจาก Kor นั่นหมายความว่ากอต้องตอบคำถามเดียวกันด้วยวิธีการต่าง ๆ เพียงเพื่อให้แน่ใจว่าซอฟต์แวร์จัดหมวดหมู่คำตอบของเธออย่างถูกต้องและใช้คำหลักด้วยความเข้าใจเชิงความหมาย

คำถามที่นำเสนออารมณ์ความรู้สึกมากที่สุดจากการรับชมคือเด็ก ๆ จะถาม ในความเป็นจริงพวกเขามี คำถามมากกว่า 2, 000 คำถามนั้นเป็นที่มาของการทดลองวิจัยและอีกมากมายเกี่ยวกับรายละเอียดของชีวิตประจำวันในสมัยนั้น กอเล่าถึงความทรงจำในวัยเด็กที่เติบโตขึ้นมาก่อนที่ครอบครัวของเธอจะถูกพาไปที่ค่ายเอาชวิตซ์ เธอเล่าถึงการปรุงอาหารของแม่ของเธอปัญหาการรังแกที่โรงเรียนและสัตว์เลี้ยงตัวโปรดของมิเรียมน้องสาวฝาแฝดของเธอ

มันเป็นเพราะอีวาและมิเรียมเป็นฝาแฝดดังนั้นส่วนหนึ่งของการทดลองที่น่ากลัวในค่ายซึ่งทั้งคู่รอดชีวิตมาได้ ส่วนที่เหลือของครอบครัวถูกฆ่าตายเมื่อมาถึง

หลังจากการบันทึกหนึ่งชั่วโมง Kor ต้องการการพักผ่อน ดังนั้นในระหว่างที่หยุดในการดำเนินคดีสมิ ธ พาเราเข้าไปในห้องด้านข้างเพื่อแสดงประจักษ์พยานที่สมบูรณ์ การส่งออกของ ICT ช่วยให้ผู้สัมภาษณ์ได้รับการคาดการณ์ในรูปแบบ 2D HD, 3D, ภายใน VR หรือผ่านจอภาพหรืออุปกรณ์แสดงผลใด ๆ

บนแล็ปท็อปสมิ ธ ดึงหน้าต่างเบราว์เซอร์ขึ้นมาและมี Pinchas Gutter ผู้รอดชีวิตจากการฆ่าล้างเผ่าพันธุ์อีกคนมือของเขาวางอยู่บนขาของเขาเบา ๆ ตื่นตารอเราดูเหมือน

สมิ ธ วางนิ้วมือบนคีย์แล็ปท็อปเพื่อกระตุ้นให้กัตเตอร์ตอบสนอง ใบหน้าของรางน้ำสว่างขึ้น สมิ ธ ถามคำถามปล่อยนิ้วของเขาและกัตเตอร์ก็ตอบเช่นเดียวกับที่เขานั่งอยู่ที่การประชุมทางไกลในเมืองอื่น

เราทุกคนถามคำถามพวกเราหลายคนมีสัญชาติที่แตกต่างกัน เขาได้ทุกคนและให้คำตอบตรงจุด มันน่าสนใจ การระงับความเชื่อเสร็จสมบูรณ์

Eva Kor พร้อมสำหรับคำถาม 100 ข้อถัดไปที่เธอกลับมาในสตูดิโอ ทุกคนกลับเข้ามา แต่สิ่งที่น่าทึ่งเกี่ยวกับโครงการนี้ก็คือคจะตอบคำถามของผู้คนเกี่ยวกับสิ่งที่เกิดขึ้นกับเธอหลังจากที่เธอจากเราไปในอาณาจักรทางกายภาพ