ภายในสุเมเรียนการเดิมพันครั้งใหญ่ของ amazon เกี่ยวกับความเป็นจริงที่เพิ่มขึ้นและเสมือนจริง

อเมซอนกำลังสร้างทางเข้าสู่พื้นที่เสมือนจริงที่เพิ่มขึ้นด้วย Sumerian แพลตฟอร์มการพัฒนาแบบครบวงจรที่สามารถสร้างแอพ AR และ VR สำหรับสมาร์ทโฟนและชุดหูฟังและ - เร็วพอ - แอป AR / VR ที่จะทำงานทันที ในเบราว์เซอร์ของคุณ

จากประสบการณ์เหล่านี้สุเมเรียนสามารถสร้างโลกเสมือนจริงที่เต็มไปด้วย "เจ้าภาพ" - ตัวละคร 3 มิติที่มีชีวิตขึ้นมาด้วยเทคโนโลยีปัญญาประดิษฐ์เดียวกับอเล็กซ์

สุเมเรียนเป็นผู้ไม่เชื่อเรื่องพระเจ้าบนแพลตฟอร์ม แทนที่จะเลือกใช้อุปกรณ์หรือหูฟังแบรนด์เนมของตนเอง Amazon เลือกที่จะรวมเข้ากับข้อเสนอที่มีอยู่ Sumerian สร้างขึ้นบนมาตรฐานเว็บแบบเปิดและรองรับทั้ง ARKit ของ Apple และ ARCore ของ Google ซึ่งหมายความว่าผู้สร้างแอปสามารถสร้างแอป Sumerian หนึ่งแอปที่ทำงานบน Android, iOS, Oculus Rift, HTC Vive และอื่น ๆ

ในฐานะสมาชิกใหม่ของ Amazon Web Services Sumerian มีการกำหนดราคาโดยใช้รูปแบบการใช้งานของบริการนั้นแทนการสมัครและเชื่อมต่อกับบริการ AWS อื่น ๆ

Amazon เปิดตัว Sumerian พรีวิวในเดือนพฤศจิกายนเมื่อมีการประกาศครั้งแรก แต่ก่อนเปิดตัวพฤษภาคมคาดว่า PCMag มีลักษณะพิเศษภายใน Sumerian และแอพลูกค้าสองสามรายแรก

Kyle Roche ผู้จัดการทั่วไปของ Amazon Sumerian พาฉันผ่านตัวอย่างของแพลตฟอร์มการสร้างแอป 3D ฉันได้เยี่ยมชมโปรแกรมแก้ไขแอปลากและวางของ Sumerian และห้องสมุดวัตถุ 3 มิติเครื่อง Visual State สำหรับการเขียนสคริปต์ฉากอัตโนมัติที่ซับซ้อนและเข้าสู่กระบวนการสร้างโฮสต์อัจฉริยะที่ดุ้งดิ้งซึ่งคุณสามารถสนทนาเต็มรูปแบบด้วยประสบการณ์เสมือนเหล่านี้ .

ฉันยังได้พูดคุยกับ Marco Argenti รองประธานที่ไม่เพียงดูแล AR / VR เท่านั้น แต่ยังรวมถึง AWS Mobile, Serverless Computing และ IoT อเมซอนมีแผนทะเยอทะยานสำหรับสุเมเรียนและวิสัยทัศน์ที่ยิ่งใหญ่ยิ่งขึ้นสำหรับบทบาทที่เพิ่มขึ้นและความเป็นจริงเสมือนรวมกับ AI จะเล่นในอนาคตที่เชื่อมต่อของเรา

• เหตุใด Amazon จึงวางเดิมพันบน AR / VR

  การลุยเป็นอุตสาหกรรมหรือสาขาใหม่ไม่เคยหยุดที่ Amazon มาก่อน เพียงแค่ดู Whole Foods, Amazon Video หรือความพยายามในอุตสาหกรรมการดูแลสุขภาพและเภสัชกรรม

  Roche พูดติดตลกว่าชื่อ Sumerian มาจากหนังสือ Sci-Fi Snow Crash (ซึ่ง Amazon ดัดแปลงมาเป็นชุด) และแนวคิดสำหรับ "โฮสต์" มาจาก Westworld ของ HBO แต่จากข้อมูลของ Argenti การตัดสินใจของ Amazon ที่จะเข้าสู่พื้นที่ AR / VR นั้นจริง ๆ แล้วลดลงมาเป็นสามปัจจัยหลัก: การเกิดขึ้นของความเป็นจริงยิ่งขึ้นบนสมาร์ทโฟน โอกาส VR ที่ไม่ได้ใช้ในตลาดธุรกิจกับธุรกิจ (B2B); และช่วยให้ลูกค้า AWS แก้ปัญหาความเจ็บปวดด้วยสิ่งที่พวกเขาพยายามทำอยู่แล้ว

  “ สัญญาณเหล่านี้แข็งแกร่งเพียงพอที่เราจะเริ่มเข้าสู่กระบวนการออกแบบ Sumerian ในแบบดั้งเดิมของ Amazon เราเริ่มทำงานย้อนกลับจากกรณีการใช้งานของลูกค้าและในที่สุดก็ระดมทุนทีมพัฒนาเพื่อสร้างผลิตภัณฑ์” Argenti อธิบาย

  แอปพลิเคชั่น B2B ประกอบด้วยสถานการณ์เช่นป้ายดิจิตอลแบบอินเทอร์แอคทีฟ (คิดว่าเป็นโฆษณาโฮโลแกรมพูดถึงขนาดใหญ่จาก Blade Runner: 2049 ) การฝึกอบรมเสมือนจริงและโฮสต์ของอุตสาหกรรมอินเทอร์เน็ตของสิ่งต่าง ๆ ใช้กรณีเช่นการใช้เซ็นเซอร์เพื่อสร้างฝาแฝดดิจิตอล อาร์เจนติยังเน้นย้ำถึงความสำคัญของ AR ที่อิงกับสมาร์ทโฟนจนถึงจุดผันผ่าน ARKit และ ARCore

  “ กล้องกำลังกลายเป็นเครื่องมือที่ทรงพลังมากในการโต้ตอบกับความเป็นจริงและสำรวจโลกรอบ ๆ ตัวคุณ” เขากล่าว "ตัวประมวลผลกราฟิกที่รวดเร็วสามารถซ้อนทับข้อมูลแบบเรียลไทม์และเซ็นเซอร์สามารถช่วยสร้างความเป็นจริง 3 มิติความคิดคือคุณมีเซ็นเซอร์คุณภาพสูงที่มีความคมชัดสูงและรับรู้บริบทในมือของผู้คนนับพัน"



อเมซอนสร้างสุเมเรียนได้อย่างไร

อเมซอนเริ่มคิดว่า AR และ VR จะเป็นอย่างไรสำหรับลูกค้า AWS ในปลายปี 2016 และภาพตัวอย่างเปิดตัวที่ AWS เรื่อง: ประดิษฐ์ประมาณหนึ่งปีต่อมา ในระหว่างนั้นมีบางสิ่งเกิดขึ้น

ครั้งแรกอเมซอนซื้อการเริ่มต้นที่ล้มละลายของสวีเดนที่เรียกว่า Goo Technologies; Goo Create เป็นสภาพแวดล้อมการสร้าง 3 มิติซึ่งเป็นรากฐานของสภาพแวดล้อมการพัฒนาแบบรวม (IDE) ของสุเมเรียน

การสร้างแบบจำลองภาพ 3 มิติของ Goo Create เป็นบริการคลาวด์บนเว็บ แต่ Amazon ก็ก้าวไปอีกขั้นด้วยการย้ายแบ็คเอนด์ไปยัง AWS มีประโยชน์มากมายในการสร้างโครงสร้างพื้นฐานคลาวด์ที่ปรับขนาดได้ที่คุณมีอยู่แล้ว แต่โครงข่ายขนาดใหญ่กำลังลดความล่าช้าลงอย่างมาก Roche กล่าวว่าหนึ่งในจุดขายที่ใหญ่ที่สุดของ Sumerian คือแม้ว่าตัวแก้ไขจะมีประสิทธิภาพ แต่ก็ไม่มีอะไรให้ดาวน์โหลดหรือติดตั้ง ในระหว่างการสาธิต Sumerian โหลดจาก URL เบราว์เซอร์ในไม่กี่วินาที แม้แต่การประมวลผลภาษาธรรมชาติแบบเรียลไทม์ (NLP) และการสร้างภาพเคลื่อนไหวที่ซับซ้อนก็ไม่ได้ทำให้ช้าลงเท่าไหร่

เช่นเดียวกับแพลตฟอร์มการพัฒนาที่มีรหัสต่ำทำให้ Sumerian สามารถใช้งานในระดับพื้นฐานโดยแทบไม่มีประสบการณ์ในการพัฒนา อย่างไรก็ตามนักเขียนโค้ดและนักวิทยาศาสตร์ข้อมูลสามารถเจาะลึกลงไปได้มากขึ้นด้วย APIs ที่ตั้งโปรแกรมได้และอินเตอร์เฟสบรรทัดคำสั่งของ Sumerian เพื่อกำหนดฉากและเขียนตรรกะแอปที่ซับซ้อน

“ เราต้องการประสบการณ์ที่คุณคลิกและคุณจะเข้าฉากทันที” อาร์เจนติกล่าว "จากนั้นคุณมีเครื่องมือกราฟิก 3 มิติที่คุณสามารถลากและวางวัตถุได้ Sumerian เป็นเครื่องมือแสดงผลที่สามารถเชื่อมโยงสิ่งที่เกิดขึ้นเมื่อมีการกระทำหรือเหตุการณ์เกิดขึ้นโดยไม่ต้องเขียนโค้ด"



สร้างแอป Sumerian 3D

ปรัชญาการออกแบบที่กว้างขึ้น Amazon ตามมาด้วย Sumerian คือการรวบรวมประสบการณ์การสร้างสรรค์ให้ได้มากที่สุด Roche กล่าวว่าแนวคิดคือการปกปิดงานพัฒนาซ้ำ ๆ มากมายดังนั้นกระบวนการพื้นฐานสำหรับการสร้างแอป Sumerian ก็เหมือนกันโดยไม่คำนึงถึงแพลตฟอร์ม AR และ VR ที่คุณเผยแพร่ในท้ายที่สุด

มันเริ่มต้นด้วยการเลือกแม่แบบหรือกระโดดเข้าสู่การสร้างฉากใหม่ เทมเพลตเริ่มต้นของ Sumerian ประกอบด้วยฉากต่างๆเช่นพื้นที่สำนักงานห้องฝึกอบรมและคลังสินค้าเรือบรรทุกสินค้าและกองไฟกลางแจ้ง เครื่องมือแก้ไขหลักรองรับ WebGL และ WebVR และวางในลักษณะเดียวกับเครื่องมือต่ำที่เราทดสอบ

ด้านซ้ายเป็นแผงเอนทิตี เอนทิตีคือตารางในฐานข้อมูลที่ช่วยให้คุณจัดการข้อมูลที่ถูกดึงเข้าไปในแอพของคุณ ด้านล่างคือหน้าต่างสินทรัพย์ซึ่งเป็นที่ที่คุณสามารถค้นหาวัตถุที่คุณต้องการดึงเข้าสู่ฉากหรือเปิดคลังเนื้อหาทั้งหมดของโมเดล 3 มิติของ Sumerian ทั้งหมด Roche กล่าวว่า Sumerian ได้ดึงไลบรารีวัตถุโอเพนซอร์ซจำนวนหนึ่งและรวมเข้ากับ Sketchfab API อเมซอนยังสนใจที่จะรวมกับแพลตฟอร์มเช่น TurboSquid และคลังวัตถุ Poly AR / VR ของ Google เขากล่าว คุณสามารถนำเข้าสินทรัพย์ของคุณเองไปยังสุเมเรียนและวางลงในฉาก

"แผงสินทรัพย์สามารถทำหน้าที่เป็นโซนปล่อยสำหรับการปรับไปป์ไลน์" Roche อธิบาย "คุณสามารถลากรูปแบบไฟล์ 3D ทั่วไปส่วนใหญ่เราจะแปลงเพิ่มประสิทธิภาพและจัดเก็บให้คุณหนึ่งในสิ่งที่เราทำในส่วนหลังคือถ้าคุณใช้เนื้อหาเดียวกันในหลาย ๆ ฉากเรา จะสร้างลิงค์อ้างอิงให้คุณจริง ๆ "

ตรงกลางของหน้าจอคือผืนผ้าใบหลักที่คุณสามารถลากและวางเนื้อหาและโมเดล 3 มิติลงในฉาก ที่มุมของผืนผ้าใบจะมีปุ่มสำหรับเปิดหน้าตัวอย่าง WebVR สำหรับฉากของคุณ

ด้านล่างนี้เป็นเครื่องมือแก้ไขไทม์ไลน์ซึ่งทำงานคล้ายกับเครื่องมือตัดต่อวิดีโอ เมื่อคุณดึงภาพเคลื่อนไหวและเสียงไปยังเฟรมและใช้ Visual State Machine เพื่อสร้างการกระทำพฤติกรรมของโฮสต์และความก้าวหน้าของเหตุการณ์มันจะปรากฏขึ้นในไทม์ไลน์ซึ่งคุณสามารถปรับวิธีการเปลี่ยนสถานะหนึ่งไปสู่อีกสถานะหนึ่ง

คอลัมน์ทางขวาคือแผงตรวจสอบซึ่งจะแสดงรายละเอียดเกี่ยวกับส่วนประกอบใด ๆ ที่คุณกำลังดูและวิธีที่คุณสามารถปรับแต่งได้ สำหรับโมเดลที่มีความแตกต่างกันหลายร้อยแบบคุณสามารถปรับเปลี่ยนสิ่งต่าง ๆ เช่นคุณลักษณะและพื้นผิวโดยไม่ต้องสัมผัสกับฉากจริง



กลยุทธ์ของ Amazon: ผสานรวมกับทุกคน

Sumerian ไม่เพียงเล่นในพื้นที่พัฒนาสามมิติด้วยแพลตฟอร์มอย่าง Unity, Unreal Engine และ Vuforia เท่านั้น แต่ยังอยู่ในระบบนิเวศ AR / VR ที่กว้างขึ้นพร้อมกับ ARKit, ARCore และ Windows Mixed Reality Roche กล่าวว่า Sumerian ใช้ปรัชญา "สร้างครั้งเดียวทำงานได้ทุกที่" กับแอพ AR / VR และโดยเฉพาะอย่างยิ่งสำหรับนักพัฒนาองค์กร

“ นักพัฒนามืออาชีพ 3D หรือนักสร้างภาพเคลื่อนไหวมืออาชีพมีสตูดิโอที่ทำงานร่วมกับพวกเขา แต่ส่วนใหญ่เป็นนักพัฒนาเว็บหรือมือถือที่เรียนรู้สิ่งที่เป็นเอกภาพในงาน” โรชกล่าว “ ความเป็นเอกภาพนั้นยอดเยี่ยม แต่การเก่งจริง ๆ มันยากกว่าการใช้ทักษะที่พวกเขามี - เช่นถ้าพวกเขาเก่งจาวาสคริปต์ - และทำให้พวกเขาง่ายขึ้นในแบบ 3 มิติดังนั้นเราจึงตัดสินใจที่จะมุ่งเน้นไปที่ ส่วนหนึ่งของตลาด "

ซูเมเรียนรองรับมาตรฐานเปิดหลายแกน: WebGL, WebAR, WebVR และเฟรมเวิร์ก WebXR ที่จะนำแอป AR / VR ไปยังอุปกรณ์และเบราว์เซอร์ทั้งหมดในทุกแพลตฟอร์ม World Wide Web Consortium (W3C) จะลงคะแนนให้สัตยาบัน WebXR ในไม่กี่เดือนข้างหน้า ณ จุดนั้นแอป Sumerian จะสามารถเรียกใช้โดยตรงในเบราว์เซอร์

ระหว่าง WebGL, WebVR และ WebXR นั้น Sumerian เป็นแพลตฟอร์มที่ไม่เชื่อเรื่องพระเจ้าอย่างสมบูรณ์และ Sumerian ได้ทำการตีพิมพ์ wraps ดั้งเดิมเพื่อรวมเข้ากับ ARKit และ ARCore โดยตรงสำหรับแอพ AR บนสมาร์ทโฟน Roche กล่าวว่า Sumerian สามารถสร้างแอพพลิเคชั่นสำหรับแพลตฟอร์มใดก็ได้ที่รองรับ WebVR ซึ่งหมายความว่าไม่เพียง แต่ Oculus Rift และ HTC Vive เท่านั้น แต่ยังรวมถึง Samsung Gear VR, Google Daydream View และอื่น ๆ สุเมเรียนทำงานอย่างใกล้ชิดกับทีม Google Chrome บน WebXR สำหรับแอปที่ใช้เบราว์เซอร์

ผู้เล่นหลักอื่น ๆ ในห้องคือ Microsoft ในขณะที่อเมซอนไม่ได้พูดถึงซู่ว่า Sumerian จะรวมเข้ากับระบบปฏิบัติการ Windows Mixed Reality แต่โรชก็บอกว่า Microsoft HoloLens รุ่น RS4 รุ่นล่าสุดมีการรองรับ WebAR ซึ่งหมายความว่า Sumerian สามารถใช้งานฉาก HoloLens ได้ อเมซอนกำลังดูชุดหูฟังอื่น ๆ จาก บริษัท เช่น Magic Leap และ Meta แต่วิธีการดังกล่าวทำให้ Sumerian ได้รับประโยชน์จากความยืดหยุ่น

“ เราเลือกได้เราสามารถลงมือทำสิ่งที่เป็นกรรมสิทธิ์ของเราเองและผลักดันนักพัฒนาไปสู่สิ่งนั้น” อาร์เจนติกล่าว "สิ่งที่เราตัดสินใจแทนจะต้องกว้างที่สุดเท่าที่จะเป็นไปได้ในการสนับสนุนสิ่งที่เราคิดว่าจะเป็นตลาดที่ใหญ่มากเมื่อทุกอย่างเปลี่ยนไปสู่ ​​WebXR ระบบนิเวศของอุปกรณ์ทั้งหมดจะมาพร้อมกัน

• โฮสต์ AI ของ Sumerian เป็นตัวเปลี่ยนเกม

  โฮสต์เป็นหนึ่งในจุดขายที่ไม่เหมือนใครที่สุดของ Sumerian โฮสต์เป็นตัวละครภาพเคลื่อนไหวสามมิติที่คุณสามารถใส่เข้าไปในฉาก AR หรือ VR ผู้ใช้สามารถถามคำถามโฮสต์และนักพัฒนาสามารถเขียนสคริปต์ชุดของการกระทำที่ซับซ้อนพฤติกรรมท่าทางและการเคลื่อนไหวที่โฮสต์สามารถทำได้เมื่อพวกเขามีการสนทนาและเดินไปรอบ ๆ ฉาก อเมซอนดึงแรงบันดาลใจสำหรับโฮสต์จากทุกสถานที่รวมถึงเกมออนไลน์เช่น Second Life และ The Sims, Roche กล่าว

  ปัจจุบัน Sumerian มีโฮสต์เริ่มต้นสองแห่งคือ Cristine และ Preston แต่จะเปิดตัวโฮสต์ทั้งหมดในช่วงปีนี้ อเมซอนสร้างความแตกต่างมากมายให้กับตัวละคร AI เหล่านี้ โรชแสดงให้ฉันเห็นตัวอย่างของคริสตินที่ซึ่งเขาลากโฮสต์เข้าไปในฉากแล้วดึงแผงเปิดสารวัตรออกมาเพื่อกำหนดอารมณ์การแสดงออกทางสีหน้าและท่าทางของเธอ อเมซอนจะสร้างท่าทางอัตโนมัติโดยการพูดคุยกับโฮสต์โดยอาศัยการประมวลผลภาษาธรรมชาติของการสนทนา ดังนั้นหากคริสตินพูดว่า "สวัสดี" มันอาจทำให้เกิดท่าทางโบกมือ

  ด้วยสิ่งที่เรียกว่าระบบจุดสนใจคุณสามารถทำเครื่องหมายที่กล่องในเครื่องมือแก้ไขเพื่อให้ดวงตาของโฮสต์ให้ความสนใจกับกล้องเสมอ ดังนั้นหากคุณกำลังสวมใส่ HTC Vive Pro เดินไปรอบ ๆ พื้นที่ 360 องศาโฮสต์สามารถติดตามคุณได้ ถ้าเป็นแอพ AR ที่เชื่อมต่อกับกล้องสมาร์ทโฟนของคุณ Roche อธิบายว่าระบบเรียนรู้ลึกของ Rekognition ของ Amazon สามารถรันการวิเคราะห์ใบหน้าทั้งในที่ที่คุณอยู่และที่ใบหน้าของคุณอยู่ในกรอบเพื่อให้ดูเหมือนว่าโฮสต์มองผ่านหน้าจอของคุณ โดยตรงที่คุณ มันทำให้คุณเห็นภาพลวงตา

  ลูกค้ายังสามารถสร้างโฮสต์ที่กำหนดเองของตัวเองตั้งแต่เริ่มต้นโดยใช้ Maya SDK ของ Amazon แต่ Amazon มีโครงกระดูกพื้นฐานที่คุณสามารถปรับรูปลักษณ์ของโฮสต์ภาษาและการผันคำภาษาและอื่น ๆ ในระยะยาวอเมซอนกำลังคิดหาวิธีที่จะสร้างโฮสต์ได้ง่ายขึ้น Argenti พูดคุยเกี่ยวกับความคิดของตัวสร้างโฮสต์สำหรับอวตารคนแรกหรือใช้การจดจำใบหน้าเพื่อจับคู่อักขระที่แสดงผลกับคนจริง

  "ร่วมกับ Rekognition หากเราสร้างตัวละครเหล่านี้ให้มากที่สุดเราสามารถลองจับคู่คุณกับอวตารที่ใกล้เคียงที่สุดเราจะถ่ายภาพของคุณและรันการจดจำใบหน้าแบบย้อนกลับและจับคู่กับตัวละครแบบสุ่มเพื่อให้คุณ โฮสต์ที่ดูเหมือนเวอร์ชั่นของคุณ "

  อาร์เจนติอธิบายว่าการรวมบริการ AWS อื่น ๆ เช่นบริการประมวลผลภาษาธรรมชาติของ Amazon Comprehend สามารถทำให้โฮสต์เหมือนจริงมากขึ้นได้อย่างไร เข้าใจการวิเคราะห์ข้อความเพื่อดึงข้อมูลเมตาในสิ่งต่าง ๆ เช่นการวิเคราะห์อารมณ์และความเชื่อมั่น ดังนั้นโฮสต์อาจมีการแสดงออกทางสีหน้าหรือท่าทางที่แตกต่างกันหรือพูดตามอารมณ์ของบุคคลที่พวกเขากำลังโต้ตอบด้วย

  “ หากพวกเขากำลังโกรธเจ้าภาพอาจสงบลงได้” อาร์เจนติกล่าว “ มีวิวัฒนาการไม่เพียง แต่ในวิธีที่เราถ่ายทอดข้อมูลเท่านั้น แต่ยังนำเสนอวิธีการวิเคราะห์ความรู้สึกลึก ๆ ”



ดึงในบริการเสียงเบื้องหลัง Alexa

โฮสต์ไม่ค่อยดีถ้าพูดไม่ได้ คุณไม่สามารถพูดว่า "Hey Alexa" ในแอป Sumerian เช่นเดียวกับที่คุณสามารถเปิดใช้งาน Cortana ภายใน Windows Mixed Reality แต่ Amazon ใช้การรู้จำเสียงอัตโนมัติและ API การทำความเข้าใจภาษาธรรมชาติที่อยู่เบื้องหลัง Alexa เพื่อให้โฮสต์มีการสนทนา

Sumerian รวมเข้ากับ Amazon Lex และ Amazon Polly Polly เป็นบริการเปลี่ยนข้อความเป็นคำพูดที่เปลี่ยนข้อความเป็นสคริปต์ที่โฮสต์สามารถพูดได้ Lex เป็นเอ็นจิ้น NLP สำหรับสร้างอินเตอร์เฟสการสนทนาซึ่งเป็นวิธีที่โฮสต์สามารถเข้าใจและตอบสนองต่อสิ่งที่ผู้ใช้พูดในแอป AR หรือ VR ปัจจุบัน Sumerian รองรับมากกว่าสองภาษาผ่าน Polly และมีคุณลักษณะการซิงค์ริมฝีปากที่จะจับคู่การเคลื่อนไหวของปากโฮสต์กับจังหวะของภาษาหรือคำพูด

"เสียงเป็นสื่อที่เข้าใจได้ง่ายในขณะที่คุณกำลังดื่มด่ำกับ AR หรือ VR" Argenti กล่าว "ฉันอยากคุยกับตัวละครถ้าฉันเห็นมันยืนอยู่ตรงนั้นดังนั้นเราจึงหยิบเครื่องมือสองอย่างนี้จากกลุ่ม AI และพยายามทำให้เป็นจริงพวกเขาจริง ๆ เราต้องการให้ฉากนั้นสามารถฟังและตอบสนองเราได้ดังนั้น คุณสามารถไหลลื่นของไฟแนนเชี่ยลเหมือนอย่างที่คุณต้องการสำหรับแชทบ็อตและแค่ลากมันเข้าไปในตัวละครในหลาย ๆ วิธีมันง่ายกว่าการสร้างทักษะ Alexa "



ตรรกะการเขียนสคริปต์ในโลกเสมือนจริง

Visual State Machine ของ Sumerian เป็นที่ที่คุณสามารถจัดลำดับที่ซับซ้อนและการจำลองเสมือน การใช้ตัวแก้ไขเส้นเวลาแบบวิชวลหรืออินเทอร์เฟซ JavaScript แบบเต็มผู้สร้างแอปและนักพัฒนาสามารถใช้ลอจิกสคริปต์เพื่อควบคุมวิธีที่โฮสต์หรือวัตถุอื่น ๆ ในฉากของคุณตอบสนองต่อการกระทำที่แตกต่างกัน ตัวอย่างเช่น Sumerian มีวัตถุประเภทเสียงหึ่งๆที่คุณสามารถบินได้

ทั้งหมดนี้มีความซับซ้อนมากขึ้นเมื่อคุณแนะนำวัตถุจริงในสมการ ตั้งแต่อาร์เจนติยังดูแลการคำนวณแบบไร้เซิร์ฟเวอร์และแผนก IoT ที่ AWS เขาพูดถึงวิธีการเชื่อมต่อ Sumerian กับบริการ AWS เช่นแลมบ์ดาและกรีนกราสส์สามารถเปิดโอกาสในการจำลองที่ซับซ้อนมากขึ้น Greengrass เป็นวิธีสำหรับโมเดลการเรียนรู้ของเครื่องเพื่อใช้งานบนอุปกรณ์ IoT ด้วยตนเอง คิดเกี่ยวกับการฝึกอบรมโมเดล ML เกี่ยวกับข้อมูลที่ได้รับจากเครื่องจักรบนพื้นโรงงานแล้วดึงอัลกอริทึมนั้นไปที่ Sumerian เพื่อจำลองเครื่องเดียวกันโดยใช้ AI

“ อาจมีโลกจำลองใน AR และ VR ที่ตัวละครหรือวัตถุแต่ละตัวนั้นฉลาดจากการเรียนรู้ด้วยเครื่องในโลกแห่งความเป็นจริง” อาร์เจนติกล่าว “ ในที่สุดคุณต้องการที่จะพยายามสร้างความเป็นจริงขึ้นมาใหม่ในแบบที่เป็นจริงมากที่สุดเท่าที่จะเป็นไปได้ในวันนี้เราสามารถเข้าใกล้ได้ แต่ก็ยังไม่ถึงจุดเปลี่ยนพฤติกรรมไปจนถึงการจำลองวิธีการทำงานจริง ๆ ”



นักอุตุนิยมวิทยาจำลองของ Weatherbug

เมื่อ Amazon พาฉันไปที่การสาธิตลูกค้า Sumerian สองสามครั้งฉันรู้สึกประหลาดใจเมื่อครั้งแรกคือแอปพยากรณ์อากาศ

แต่ตามที่ผู้จัดการทั่วไปของ WeatherBug Olivier Vincent อธิบายความเป็นจริงเสมือนนั้นเป็นเรื่องที่สมเหตุสมผลสำหรับข้อมูลสภาพอากาศมากกว่าที่คุณคิด เมื่อผู้คนเริ่มตรวจสอบสภาพอากาศของพวกเขาในแอพต่างจากการดูการคาดการณ์ทางทีวี Vincent บอกว่ารายงานสภาพอากาศได้สูญเสียการสัมผัสที่ดีที่สุดอย่างหนึ่ง: นักพยากรณ์อากาศในหน้าจอสีเขียว

"สภาพอากาศเป็นเรื่องเกี่ยวกับการบอกคุณว่าเกิดอะไรขึ้นในเวลาที่กำหนดในสถานที่ที่กำหนดคุณสามารถทำมันด้วยวิธี 2D ในแอพของคุณเพื่อให้ดูได้อย่างรวดเร็ว แต่เรารู้ว่านักพยากรณ์อากาศและผู้หญิงได้รับความนิยมในช่วงหลายปีที่ผ่านมา" Vincent กล่าว "ดังนั้นความคิดคือการรื้อฟื้นสภาพอากาศให้ผู้คนได้รับประสบการณ์ที่สมจริงยิ่งขึ้นในแอพ"

WeatherBug สร้างฉาก Sumerian ด้วยสตูดิโอเสมือนจริงพร้อมโต๊ะยึดและหน้าจอสีเขียวและโฮสต์ Cristine เริ่มต้นของ Amazon ในฐานะนักอุตุนิยมวิทยา แอพจะดึงข้อมูลสภาพอากาศปัจจุบันสำหรับตำแหน่งของคุณที่โฮสต์จะอ่านกลับไปหาคุณซึ่งเป็นส่วนหนึ่งของการพยากรณ์อากาศส่วนบุคคล จากแอพ WeatherBug หลัก Vincent เปิดตัววิวเวอร์ VR ที่ซูมผ่านโมเดล 3 มิติของแมนฮัตตันขณะที่ Cristine ให้การพยากรณ์สมบูรณ์ด้วยอุณหภูมิสูงและต่ำและเกล็ดหิมะที่ตกลงมา



แอดดิสันผู้ดูแลเสมือนจริง

บริษัท ผู้ดูแลด้านอิเล็กทรอนิกส์ในเม็กซิโกผู้ดูแลระบบอิเล็กทรอนิกส์มีประสบการณ์สุเมเรียนที่แตกต่างกันมาก

บริษัท นำเสนอเทคโนโลยีสำหรับผู้สูงอายุเช่นสวมใส่ได้ด้วยปุ่มช่วยเหลือทางการแพทย์ แต่มันก็สร้างโซลูชันที่เรียกว่า Addision Care ซึ่งจะช่วยลดค่าใช้จ่ายในการดูแลที่บ้านและใช้การสนทนา AI เพื่อประเมินความเสี่ยงของผู้ป่วยสูงอายุ บริษัท กำลังปล่อยตู้ไปที่ร้านขายยาโรงพยาบาลและแพทย์ที่วิเคราะห์การเดินของผู้ป่วยโดยใช้การเรียนรู้ของเครื่อง ซอฟต์แวร์นี้ยังใช้ Addison โฮสต์ Sumerian แบบกำหนดเองเพื่อนำผู้ใช้ไปยังแบบสอบถามด้วยวาจาเกี่ยวกับประวัติการล่มสลายของพวกเขา

“ การให้ผู้สูงอายุนำเทคโนโลยีมาใช้นั้นไม่ใช่เรื่องง่าย” ไบรอันแคร์กิวองอิเล็กทรอนิกส์ CTO กล่าว "เมื่อมันดีขึ้นเทคโนโลยีเสียงก็จะเข้ามามีส่วนร่วมในตลาดนั้นคุณจะไม่มีวันยอมให้พวกเขานั่งหน้าคีย์บอร์ดและเมาส์ แต่ด้วย Addison พวกเขาก็สามารถคุยกันได้"

Electronic Caregiver ทำงานกับ Addison มาหลายปีพัฒนาตัวละคร 3 มิติโดยใช้ Amazon Lex และ Polly บริษัท เป็นหนึ่งในลูกค้าของ AWS ที่ช่วยให้อเมซอนคิดในเรื่องความเจ็บปวดที่สามารถแก้ไขได้ด้วย Sumerian และวิธีการสร้างแอปสร้าง AR / VR อัตโนมัติ

Judah Tveito ผู้พัฒนาเสมือนจริงของ Electronic Caregiver กล่าวว่า Sumerian ใช้กระบวนการที่พวกเขาใช้งานมาหลายเดือนและเปลี่ยนให้เป็นการคลิกเพียงไม่กี่ครั้ง บริษัท ยังทำงานกับแอพมือถือ Addison

ผู้ดูแลอิเล็คทรอนิคส์ในท้ายที่สุดวาดภาพแอดดิสันเป็นเสมือนผู้ดูแลในบ้าน Chasko กล่าว สำหรับผู้ใช้สูงอายุที่อาศัยอยู่ด้วยตัวเอง AI สามารถทำสิ่งต่าง ๆ เช่นเตือนพวกเขาให้กินยาหรือโทร 911 โดยอัตโนมัติหากมีการล่มสลายหรือเหตุฉุกเฉินทางการแพทย์อื่น ๆ

“ หนึ่งในประเด็นที่ใหญ่ที่สุดที่เรารู้สึกว่าสามารถรับมือได้คือความโดดเดี่ยวที่ผู้อาวุโสรู้สึกเมื่ออยู่คนเดียว” ชาสโซ่กล่าว "เราต้องการมีสภาพแวดล้อมในบ้านแบบถาวรตลอด 24 ชั่วโมงทุกวันที่คุณไม่ได้พูดคุยกับแอดดิสันคุณอยู่ในห้องน้ำและล้มลงเพียงแค่ตะโกนออกมา 'ฉันต้องการความช่วยเหลือ' สามารถช่วยชีวิตได้มากมาย ."



ผู้ผลิต: B2B และ IoT

อเมซอนได้พูดคุยกันมากมายเกี่ยวกับวิธีที่แอพ Sumerian สามารถใช้ชีวิตในป้ายดิจิตอลแบบโต้ตอบได้ ลองนึกภาพใครบางคนที่เดินผ่านล็อบบี้ของโรงแรมห้างสรรพสินค้าหรือสนามกีฬาและเห็นเจ้าบ้านเดินเคียงข้างพวกเขาบนหน้าจอ อาจฟังดูน่าขนลุก แต่โฮสต์ก็สามารถประมวลผลข้อมูลตามบริบทเช่นสถานที่เพื่อเปลี่ยนโฆษณาให้เป็นการสนทนาส่วนตัว Argenti มองว่าโฮสต์เป็นเสมือนส่วนขยายของแบรนด์ของ บริษัท ที่สามารถเปลี่ยนแปลงได้ตามความต้องการของธุรกิจ

“ หากคุณวางแอพเหล่านี้ไว้ที่ใดที่หนึ่งด้วยกล้องคุณสามารถจินตนาการถึงตัวละคร 3 มิติที่มีส่วนร่วมกับคุณเป็นการส่วนตัว: รู้ว่าคุณเป็นใครบางทีครั้งสุดท้ายที่คุณอยู่ในสถานที่จัดงานหรือแม้แต่สิ่งสุดท้ายที่คุณสั่ง” Argenti กล่าว

"เรือสำราญเป็นตัวอย่างที่ดีเจ้าภาพอาจพูดว่า 'เฮ้ตามที่คุณอยู่บนเรือตอนนี้การจองของคุณใน 20 นาทีคุณจะไม่ทำคุณต้องการให้ฉันผลักมันกลับ 15 นาทีอีกทั้งยังมีมุมมองที่ชัดเจนเกี่ยวกับประสบการณ์ที่คุณกำลังสร้างขึ้นใหม่โฮสต์ที่พูดกับคุณเกี่ยวกับการเดินทางจะดูแตกต่างจากการพูดคุยกับคุณเกี่ยวกับกลยุทธ์ทางการเงินของคุณการเพิ่มข้อมูลตำแหน่งที่ตั้งอาจมีการเปลี่ยนแปลงตัวละคร พวกเขาพบว่าตัวเองวิธีที่พวกเขาแต่งตัวและวิธีที่พวกเขาย้าย

Amazon กำลังสำรวจแอพพลิเคชั่น B2B และ IoT สำหรับลูกค้า Sumerian ในหน้าอุตสาหกรรม Argenti กล่าวว่า Nokia รวบรวมระบบที่มีเซ็นเซอร์และการสร้างภาพเพื่อตรวจสอบสภาพแวดล้อมภายในตู้คอนเทนเนอร์เพื่อวัดสิ่งต่าง ๆ เช่นอุณหภูมิภายในและการดูดซับแรงกระแทกโดยไม่ต้องเปิดขึ้นจริง

“ คุณสามารถจินตนาการโลกแห่ง AR ที่เราเชื่อมต่ออุปกรณ์หลายล้านเครื่องกับ AWS และรับข้อมูลทางประสาทสัมผัสจำนวนมากที่มาจากโลกแห่งความจริง” เขากล่าว "จากนั้นเราสามารถใช้ AR ด้วยการระบุตำแหน่งเพื่อระบุวัตถุและแสดงข้อมูลที่เกี่ยวข้องด้านบนของมันมีการบังคับใช้อย่างมากในทุกสิ่งที่มีตั้งแต่การบริการและการซ่อมแซมไปจนถึงการตรวจสอบความปลอดภัยและอื่น ๆ "

นอกจากนี้ยังมีความเป็นไปได้ทางอีคอมเมิร์ซในวงกว้างเมื่อคุณทำงานกับสินทรัพย์เสมือน โมเดล 3 มิติใด ๆ ในซูเมเรียนที่มาจากแคตตาล็อกการซื้อของอเมซอนมีศักยภาพที่จะได้รับค่าธรรมเนียมการอ้างอิงจากผู้พัฒนาหากคุณเพิ่มไปยังฉาก AR / VR เป็นวิธีสำหรับทั้งองค์กรและธุรกิจขนาดเล็กและนักพัฒนาอิสระบน AWS เพื่อสร้างรายได้จากแอป Sumerian

Argenti วาดภาพโอกาสข้ามภูมิภาคจำนวนมากระหว่าง Sumerian และ Amazon ของแผนกค้าปลีก

“ เราสามารถเชื่อมโยงงานบางอย่างที่ทีมค้าปลีกของเรากำลังทำการตกแต่งบ้านเครื่องใช้ไฟฟ้าภายในบ้านและสินค้าราคาสูงอื่น ๆ เพื่อสร้างแบบจำลอง 3 มิติ” เขากล่าว "จากนั้นคุณสามารถใช้พวกมันสำหรับการส่งผ่านพื้นที่ที่เหมือนจริงของภาพถ่ายฉันจะตั้งค่าห้องใต้หลังคาที่ทันสมัยได้อย่างไรเราจัดเฟอร์นิเจอร์ประเภทใด?"



ทุกอย่างกลับมาที่ AWS

การสร้างสะพานเชื่อมต่อกับอุปกรณ์ AR / VR และแพลตฟอร์มทั้งหมดนั้นเป็นวิธีที่ชาญฉลาดในการลดอุปสรรคในการเข้าสู่การพัฒนา AR / VR ไม่ใช่แค่สำหรับ บริษัท B2B แต่สำหรับนักพัฒนาที่มีขนาดใหญ่ ในขณะเดียวกันแรงจูงใจทางธุรกิจที่น่าสนใจที่สุดของสุเมเรียนก็เป็นเครื่องมือในการขับเคลื่อนการใช้งาน AWS ในวงกว้าง นั่นเป็นความจริงทั้งสำหรับลูกค้าปัจจุบันที่ลองใช้บริการใหม่และสำหรับผู้ใช้ Sumerian ใหม่ที่เริ่มใช้ที่เก็บข้อมูลของ Amazon การคำนวณการประมวลผล AI และบริการอื่น ๆ ของ Amazon เพราะพวกเขาทั้งหมดรวมเข้ากับประสบการณ์ รูปแบบการกำหนดราคาก็น่าสนใจเช่นกันเพราะ Amazon ไม่มีการคิดค่าธรรมเนียมล่วงหน้า AWS คิดค่าใช้จ่ายเฉพาะสิ่งที่คุณใช้

มันเป็นส่วนหนึ่งของสิ่งที่อเมซอนมองว่าเป็นวงที่ใหญ่ขึ้นซึ่งทุกอย่างไหลผ่าน AWS ข้อมูลมาจากอุปกรณ์ IoT ได้รับการประมวลผลโดยฟังก์ชั่น AWS Lambda ติดตั้งบน AWS Greengrass เพื่อไปยัง AWS IoT ที่จะทำการฝึกอบรมโมดูลการเรียนรู้ของเครื่อง



วิสัยทัศน์ของ Amazon สำหรับอนาคต AR / VR ของเรา

Amazon หวังว่า Sumerian สามารถมีส่วนร่วมในการกระตุ้นอุตสาหกรรมเพื่อสร้างผลิตภัณฑ์ตลาดมวลชน 3 มิติและลดต้นทุน ในด้าน AR, Argenti กล่าวว่าเครื่องมือพื้นฐานอยู่ในสถานที่ต้องขอบคุณ ARKit และ ARCore เขากล่าวว่าจุดเปลี่ยนจะมาเมื่อมีแอพและเนื้อหาวิดีโอจากนักพัฒนาเพียงพอ ในด้าน VR การเปลี่ยนแปลงครั้งใหญ่ของอเมซอนที่หวังว่าจะเห็นคือราคาของฮาร์ดแวร์ที่ลดลงทำให้ผู้สวมใส่น้อยลงและไร้สายมากขึ้น

“ เมื่อเกิดเหตุการณ์เช่นนี้ขึ้นและคุณสามารถสวมใส่ประสบการณ์ VR เหมือนกับแว่นตาหนึ่งคู่ VR จะถอดออกจริง ๆ ” อาร์เจนติกล่าว “ ฉันคิดว่ามันต้องเป็นเรื่องธรรมดาเหมือนการดูวิดีโอบนแท็บเล็ตหรือการเปิดทีวีก่อนที่มันจะพร้อมสำหรับการบริโภคกระแสหลักในระดับเดียวกับหน้าจออื่น ๆ ที่เรามีในปัจจุบัน การพัฒนาระบบนิเวศโดยรอบของผู้สร้างเนื้อหาผู้โฆษณาผู้ใช้ปลายทางและ บริษัท ที่ให้บริการแก่ผู้ใช้เหล่านั้นเป็นวิธีที่คุณทำ”

อาร์เจนติยังเน้นย้ำถึงความสำคัญของการดื่มด่ำในประสบการณ์เสมือนจริงและผสม อีกหนึ่งกรณีการใช้งานเป้าหมายของ Amazon สำหรับแอพ Sumerian คือการศึกษาและการฝึกอบรม ไม่ว่าคุณจะเรียนรู้วิธีการใช้อุปกรณ์การแพทย์บริการยานพาหนะหรือเรียนรู้ภาษาใหม่เขากล่าวว่ามันเกี่ยวกับการทิ้งคุณในสภาพแวดล้อมที่ให้ความรู้สึกราวกับเป็นไปได้มากที่สุดในโลกแห่งความเป็นจริง

“ คุณสามารถนั่งในร้านอาหารฝรั่งเศสและเรียนรู้ภาษาโดยไม่ต้องอยู่ที่นั่น” เขากล่าว “ อวตารของโฮสต์พูดภาษาฝรั่งเศสกับคุณ เมนูเป็นภาษาฝรั่งเศส จากนั้นในความเป็นจริงนั้นคุณสามารถสัมผัสเมนูโดยอัตโนมัติและเห็นมันแปลผ่านนิ้วของคุณไปด้านบนของรายการเพื่อดูคำที่เปลี่ยนเป็นภาษาอื่น การศึกษาส่วนใหญ่เป็นบริบทและในฐานะที่เป็นเครื่องมือการเรียนรู้การมีประสบการณ์ที่เกี่ยวข้องกับความรู้สึกทั้งหมดของคุณนั้นทรงพลัง”