ผู้ช่วยที่เหมือนมนุษย์จะช่วยเพิ่มการสนทนาให้กับผู้สมัครงาน ผู้ที่มีความผิดปกติของพัฒนาการ
กลุ่มอักขระดิจิทัลที่สนทนา อ่านใบหน้า และติดตามภาษา สล็อตแตกง่าย กายที่เพิ่มขึ้นเรื่อยๆ ช่วยให้มนุษย์สื่อสารกันได้ดีขึ้น ในขณะที่ผู้ช่วยเสมือนที่ปฏิบัติงานจริง เช่น การจัดการกับปัญหาการบริการลูกค้า กำลังแพร่หลาย นักวิทยาศาสตร์คอมพิวเตอร์ M. Ehsan Hoque อยู่ในระดับแนวหน้าของการเคลื่อนไหวที่รอบรู้ด้านอารมณ์มากขึ้น เขาและทีมของเขาที่มหาวิทยาลัยโรเชสเตอร์ในนิวยอร์กสร้างซอฟต์แวร์สำหรับตัวแทนดิจิทัลที่รับรู้เมื่อบุคคลประสบความสำเร็จหรือล้มเหลวในการโต้ตอบทางสังคมบางประเภท ข้อมูลจากการสนทนาแบบเห็นหน้าและข้อเสนอแนะจากที่ปรึกษามืออาชีพและผู้สัมภาษณ์ที่มีความเชี่ยวชาญที่เกี่ยวข้องจะแจ้งให้ที่ปรึกษาคอมพิวเตอร์สายพันธุ์นี้ทราบ
หนึ่งในผู้ช่วยดิจิทัลของ Hoque ฝึกฝนผู้คนให้เป็นนักพูดในที่สาธารณะที่ดีขึ้น ด้วยคำพูดบนหน้าจอ แอพที่เอาใจใส่นี้บันทึก ตัวอย่างเช่น กี่ครั้งในการฝึกฝนที่คนพูดว่า “อืม” ท่าทางที่ไม่เหมาะสมหรือเปลี่ยนโทนเสียงอย่างเชื่องช้า ด้วยความช่วยเหลือของ Google Glass แอปนี้ยังมีการแจ้งเตือนที่เป็นประโยชน์ในระหว่างการกล่าวสุนทรพจน์ ผู้ช่วยคอมพิวเตอร์อีกคนหนึ่งซึ่งอยู่ในรูปของอวาตาร์ช่วยให้ผู้คนฝึกฝนทักษะการสัมภาษณ์งาน ทำเครื่องหมายคำตอบที่ยืดยาว หรือการสบตาที่ไม่สอดคล้องกันในการสัมภาษณ์ภาคปฏิบัติ ในงานมีโค้ชการสนทนาทางคอมพิวเตอร์ที่สามารถพัฒนาทักษะการพูดและการสื่อสารในหมู่ผู้ที่มีภาวะการพัฒนาเช่นออทิสติกและไกล่เกลี่ยการประชุมทางธุรกิจในลักษณะที่กระตุ้นให้ทุกคนมีส่วนร่วมในการตัดสินใจ
“ปัญญาประดิษฐ์มีความคืบหน้าบ้าง แต่ไม่มากในการพัฒนาด้านอารมณ์ของ AI” Hoque กล่าว “เราเพิ่งแตกผ่านพื้นผิว ณ จุดนี้”
กระทรวงกลาโหมสหรัฐฯ และกองทัพสหรัฐฯ ได้รับทราบแล้ว ด้วยการสนับสนุนทางการเงิน Hoque กำลังพัฒนาอวาตาร์ที่ร่วมมือกับมนุษย์ในการแก้ปัญหาที่ซับซ้อน และผู้สังเกตการณ์ทางดิจิทัลที่ตรวจสอบภาษากายเพื่อตรวจจับเมื่อมีคนโกหก
นี่เป็นเรื่องน่าปวดหัวสำหรับเด็กอายุ 35 ปีที่ได้รับปริญญาเอกเมื่อสี่ปีที่แล้ว Hoque ซึ่งเกิดในบังคลาเทศและอพยพมาอยู่ที่สหรัฐอเมริกาในช่วงวัยรุ่น ทำงานจบการศึกษากับกลุ่มวิจัยด้านคอมพิวเตอร์ที่มีผลต่อ MIT Media Lab โรซาลินด์ พิการ์ด ผู้อำนวยการกลุ่ม ได้ช่วยเปิดสาขา “การประมวลผลเชิงอารมณ์” ในปี 1990 ซึ่งเน้นที่การศึกษาและพัฒนาคอมพิวเตอร์และหุ่นยนต์ที่รับรู้ ตีความ และจำลองอารมณ์ของมนุษย์
แนวทางของ Hoque ทำให้บริการมีการประมวลผลทางอารมณ์
เมื่อเป็นนักศึกษาระดับบัณฑิตศึกษา เขาได้พัฒนาซอฟต์แวร์ที่เขาขนานนามว่า MACH ซึ่งย่อมาจาก My Automated Conversation coacH ระบบนี้จำลองการสนทนาแบบตัวต่อตัวกับชายหรือหญิงสามมิติที่สร้างด้วยคอมพิวเตอร์ซึ่งมองเห็น ได้ยิน และตัดสินใจในขณะที่สนทนากับคู่ชีวิตจริง การวิเคราะห์คำพูดของคู่หูที่เป็นมนุษย์และพฤติกรรมอวัจนภาษาแบบดิจิทัลจะแจ้งคำตอบของอวาตาร์ในระหว่างเซสชัน ตัวอย่างเช่น โค้ชจำลองอาจแจ้งให้ผู้ใช้ทราบว่ารอยยิ้มในระหว่างการสัมภาษณ์ดูเหมือนถูกบังคับหรือถูกจับเวลาผิด หลังจากเซสชั่น ผู้ใช้จะเห็นวิดีโอของการโต้ตอบพร้อมกับแสดงให้เห็นว่าพวกเขาทำได้ดีหรือแย่แค่ไหนในทักษะการโต้ตอบต่างๆ เช่น สบตาและพยักหน้าในเวลาที่เหมาะสม
MACH เริ่มต้นในการทดลองที่ฝึกอบรมนักศึกษาระดับปริญญาตรีของ MIT ให้รู้จักการปฏิบัติตนในระหว่างการสัมภาษณ์กับที่ปรึกษาด้านอาชีพ ประการแรก Hoque วิเคราะห์รอยยิ้มและพฤติกรรมอื่น ๆ ที่ช่วยหรือทำร้ายความประทับใจที่ผู้สมัครงานทิ้งไว้ให้กับที่ปรึกษาที่มีประสบการณ์ในการสัมภาษณ์จำลอง ในการศึกษาติดตามผลชุดหนึ่ง ทีมของเขาได้พัฒนาระบบอัตโนมัติที่รับรู้พฤติกรรมที่ช่วยเพิ่มความประทับใจในระหว่างการสัมภาษณ์จำลอง MACH รุ่นนำร่องนั้นถูกนำไปทดสอบ ผู้หญิง แต่ไม่ใช่ผู้ชายที่ได้รับการฝึกอบรม MACH และได้รับคำติชมจากโค้ชดิจิทัลของพวกเขาขณะดูวิดีโอการสัมภาษณ์ครั้งแรกกับที่ปรึกษาได้แสดงให้เห็นถึงการปรับปรุงอย่างมากในการสัมภาษณ์ติดตามผล ผู้เข้ารับการฝึกอบรม MACH ที่ดูวิดีโอสัมภาษณ์แต่ไม่ได้รับคำติชมพบว่ามีการปรับปรุงเพียงเล็กน้อย กำลังดำเนินการทดสอบกับชายและหญิงกลุ่มใหญ่
ขณะที่เขาพัฒนา MACH นั้น Hoque ได้ปรึกษากับ Sherry Turkle นักสังคมวิทยาจาก MIT และนักจิตวิทยาคลินิก นั่นเป็นการเคลื่อนไหวที่กล้าหาญ เนื่องจาก Turkle ได้เตือนมา 30 ปีว่า แม้จะมีข้อดี วัฒนธรรมดิจิทัลก็กีดกันการเชื่อมต่อระหว่างบุคคล โดยเฉพาะอย่างยิ่ง โซเชี่ยลโรบ็อตเป็นวิธีที่ผู้คนจะหลีกหนีจากความท้าทายในการสร้างความสัมพันธ์ที่แท้จริง Turkle โต้แย้ง
แต่เธอกลับรู้สึกประทับใจกับ Hoque ซึ่งเป้าหมายที่เธอเรียกว่าเจียมเนื้อเจียมตัวและโปร่งใส “อวตารของเขาจะเป็นผู้ช่วยเหลือและผู้อำนวยความสะดวก” เธอกล่าว “ไม่ใช่เพื่อน เพื่อน นักบำบัด และแสร้งทำเป็นว่าเป็นคน”
วิธีการของ Hoque เกิดขึ้นจากประสบการณ์ส่วนตัว เขาเป็นผู้ดูแลหลักของ Eshteher น้องชายวัย 16 ปีของเขา ซึ่งมีอาการดาวน์และไม่พูด เอสเทเฮอร์สามารถเปล่งเสียงเพื่ออ้างถึงบางสิ่ง เช่น อาหาร และจำกัดการใช้ภาษามือ “ฉันใช้เวลามากมายกับเขาและสามารถอ่านสิ่งที่เขาประสบได้ เช่น เมื่อเขาหงุดหงิดหรือสำนึกผิด” Hoque กล่าว
ดังนั้นจึงไม่น่าแปลกใจที่ MACH รุ่นต่อไปของ Hoque ที่มีชื่อเรียกว่า LISSA for Live Interactive Social Skill Assistance เป็นอวาตาร์ที่ดำเนินการสนทนา “ทำความคุ้นเคย” ที่ยืดหยุ่น ในขณะที่ให้ข้อเสนอแนะเกี่ยวกับการสบตา ระดับเสียงพูด รอยยิ้ม และการเคลื่อนไหวของร่างกายของผู้ใช้ผ่านการกะพริบ ไอคอน สล็อตแตกง่าย
