นวัตกรรม

Microsoft เปิดตัว VASA เอไอสร้างวิดีโอสมจริงจากไฟล์รูปภาพและเสียง

23 เม.ย. 2024 เวลา 17:05 น.

VASA โมเดลเอไอ ‘สร้างวิดีโอเสมือนจริง’ ใช้เพียงแค่ไฟล์รูปภาพและเสียง จุดเด่นคือ สามารถทำงานได้แบบเรียลไทม์ ปรับแต่งใบหน้าได้ เทคโนโลยีที่กำลังพัฒนาของไมโครซอฟท์

ไมโครซอฟท์ รีเสิร์ช ได้เผยแพร่โมเดลVASA-1 เอไอสร้างวิดีโอสมจริงใช้เพียงแค่รูปภาพและเสียงประกอบเพียงอย่างละ 1 ไฟล์ ซึ่งริมฝีปากของตัวละครที่เอไอสร้างสามารถขยับพูดได้แบบเรียลไทม์ สามารถปรับใบหน้าด้วยความหน่วง latency ที่ต่ำมาก

VASA ย่อมาจาก Visual Affective Skills Animator โมเดลปัญญาประดิษฐ์ตัวนี้ สามารถเรียนรู้ด้วยตนเอง (Machine Learning) กล่าวคือ เมื่อป้อน input เข้าไป เอไอจะวิเคราะห์รูปภาพใบหน้า จากนั้นจะนำไปสร้างเป็นภาพเคลื่อนไหวที่สอดคล้องกับเสียงประกอบ โดยซิงโครไนซ์การขยับปากให้ตรงกับเสียงพูด 

นอกจากนี้ VASA-1 ยังสามารถจำลองการแสดงออกทางสีหน้า การเคลื่อนไหวศีรษะ และแม้กระทั่งการเคลื่อนไหวร่างกายที่มองไม่เห็นในภาพถ่ายได้อีกด้วย โดยสามารถสร้างวิดีโอด้วยความละเอียด 512x512 45fps ได้หากรันออฟไลน์แบบ batch ส่วนแบบออนไลน์สตรีมมิ่งได้สูงสุดที่ 40fps

ในงานวิจัยได้ทอดสอบใช้ VASA กับรูปวาด เช่น รูปวาดของ Mona Lisa ให้พูดภาษาอื่นที่ไม่ใช่ภาษาอังกฤษ ซึ่งทั้งหมดไม่มีในชุดข้อมูลเทรน ปรากฎว่าผลลัพธ์ออกมาดีเกินความคาดหมาย 

อย่างไรก็ตาม โมเดลตัวนี้ยังอยู่ในขั้นตอนของการพัฒนา มีจุดที่ต้องปรับกันต่อ เช่น รายละเอียดยิบย่อยของนิ้วมือ ฟัน ที่ยังไม่มีความสมจริง

ไมโครซอฟท์ไม่มีแผนจะเผยแพร่เดโม่หรือเผยแพร่ API ตลอดจนข้อมูลอื่นๆ ของเทคโนโลยีนี้ เพราะกังวลเรื่องของการนำไปใช้ในทางที่ผิด จนกว่าจะมีกฎหมายกำกับดูแลด้านจริยธรรมเอไออย่างเหมาะสม

อ้างอิง: microsoft techspot

เนื้อหาที่เกี่ยวข้อง

• 

  อาลีบาบา เปิดตัว EMO เอไอสร้างวิดีโอร้องเพลงจากภาพบุคคล หวังสู้ศึก GenAI

  01 มี.ค. 2567 | 15:30
• 

  ‘กูเกิล’ เร่งเครื่องหนุนธุรกิจ ใช้ Gen AI เสริมแกร่งองค์กร

  19 เม.ย. 2567 | 10:30
• 

  องค์กรชั้นนำใช้ ‘GEN AI’ ทำอะไร? สรุปกรณีจาก Google Cloud Next 2024

  18 เม.ย. 2567 | 14:03

แท็กที่เกี่ยวข้องเอไอไมโครซอฟท์ปัญญาประดิษฐ์MicrosoftGenerative AIGen AITechAIVASAVASA เอไอสร้างวิดีโอสมจริง

คุณภาพอากาศดี ค่าฝุ่นวันนี้ ฝุ่น PM 2.5 ไม่เกินมาตรฐาน อากาศกทม. มีฝนร้อยละ 10

25 เม.ย. 2567 | 8:21

อาคารสำนักงานไตรมาสแรกปี67 ซัพพลายทะลักอัตราดูดซับลดลง

25 เม.ย. 2567 | 8:45

‘ปรับครม.‘ ดีเดย์ 26เม.ย. ‘รทสช.’ ขอเคลียร์ศึกใน ชิง 1 รมช.

25 เม.ย. 2567 | 8:38

‘สว.ผลัดใบ’4สัญญาณเปลี่ยน ‘แก้รธน.-องค์กรอิสระ’ไพ่ตาย

25 เม.ย. 2567 | 8:30

ทำไมธุรกิจสร้างแบรนด์ถูกต้อง จึงสร้างยอดขายได้ดี

25 เม.ย. 2567 | 8:30

คุณภาพอากาศดี ค่าฝุ่นวันนี้ ฝุ่น PM 2.5 ไม่เกินมาตรฐาน อากาศกทม. มีฝนร้อยละ 10

25 เม.ย. 2567 | 8:21

อาคารสำนักงานไตรมาสแรกปี67 ซัพพลายทะลักอัตราดูดซับลดลง

25 เม.ย. 2567 | 8:45

‘ปรับครม.‘ ดีเดย์ 26เม.ย. ‘รทสช.’ ขอเคลียร์ศึกใน ชิง 1 รมช.

25 เม.ย. 2567 | 8:38

‘สว.ผลัดใบ’4สัญญาณเปลี่ยน ‘แก้รธน.-องค์กรอิสระ’ไพ่ตาย

25 เม.ย. 2567 | 8:30

ทำไมธุรกิจสร้างแบรนด์ถูกต้อง จึงสร้างยอดขายได้ดี

25 เม.ย. 2567 | 8:30

คุณภาพอากาศดี ค่าฝุ่นวันนี้ ฝุ่น PM 2.5 ไม่เกินมาตรฐาน อากาศกทม. มีฝนร้อยละ 10

25 เม.ย. 2567 | 8:21

ข่าวล่าสุด

• 

  อาคารสำนักงานไตรมาสแรกปี67 ซัพพลายทะลักอัตราดูดซับลดลง

  25 เม.ย. 2567 | 8:45
• 

  ‘ปรับครม.‘ ดีเดย์ 26เม.ย. ‘รทสช.’ ขอเคลียร์ศึกใน ชิง 1 รมช.

  25 เม.ย. 2567 | 8:38
• 

  ‘สว.ผลัดใบ’4สัญญาณเปลี่ยน ‘แก้รธน.-องค์กรอิสระ’ไพ่ตาย

  25 เม.ย. 2567 | 8:30
• 

  ทำไมธุรกิจสร้างแบรนด์ถูกต้อง จึงสร้างยอดขายได้ดี

  25 เม.ย. 2567 | 8:30