Tinutulungan ng Ibm watson ang mga mag-aaral sa unibersidad na matuto ng mandarin

Ang mga unibersidad ay napakalayo ng kanilang pag-aaral sa wika, na lumilipas nang higit sa tradisyonal na mga klase lamang sa isang bulwagan sa lektura at mga paunang natukoy na mga aralin nang walang pakikipag-ugnay. Ngayon ang mga mag-aaral ay may access sa mga teknolohiya tulad ng artipisyal na intelektwal (AI) at natural na pagproseso ng wika (NLP) sa isang nakaka-engganyong kapaligiran sa pagkatuto. Iyon ang nangyayari sa Cognitive and Immersive Systems Lab (CISL) sa Troy, New York, campus ng Rensselaer Polytechnic Institute (RPI). Narito na ang instituto ay nakipagtulungan sa IBM Research upang lumikha ng tech para sa isang anim na linggong tag-araw ng tag-init kung saan nakikipag-ugnay ang mga mag-aaral sa mga ahente ng AI sa mga kapaligiran na kinabibilangan ng mga merkado sa kalye at restawran.

Ang kurso, na pinamagatang "AI-assisted Immersive Chinese, " ay nagtatampok ng isang 360-degree na panoramic na display ng system ng mga eksena na nilikha ng computer sa Cognitive Immersive Room (CIR), na tinatawag ding "Sitwasyon ng Silid." Nagaganap ang mga virtual na eksena sa China. Ang mga mag-aaral ay nakikipag-usap sa mga avatar na pinalakas ng Watson Assistant at nakuha na naitama sa kanilang pagsasalita at pagbigkas. Sa CIR, ang mga mag-aaral ay gumagamit ng pakikipagtalastasan AI, salaysay na henerasyon, kamalayan sa spatial na konteksto, at kilos at tech na pagkilala sa facial.

Ang CIR ay isang halimbawa ng magkakaibang hanay ng potensyal para sa IBM Watson sa ilang mga industriya bilang karagdagan sa edukasyon. Kasama sa mga industriya na ito ang agrikultura, mapagkukunan ng tao (HR), at pamamahala ng armada.

Sa RPI, bilang karagdagan sa Watson Assistant, ang mga mag-aaral ay gumagamit ng Watson Speech to Text, Watson Text to Speech, at Language translator sa kanilang pag-aaral.

Natutunan ng mga mag-aaral ang Mandarin sa pamamagitan ng paggamit ng AI sa RPI campus. (Credit ng larawan: IBM Research / RPI)

Isang Aktibong Karanasan sa Pagkatuto

Para kay Julian Wong, isang junior sa RPI, ang nakaka-engganyong karanasan sa AI ay isang nakakaakit na paraan upang malaman ang Mandarin dahil binibigyan ito ng mas aktibong paraan upang matuto. Sapagkat ang Mandarin ay isang tonal na wika kung saan ang pagbabago ng pitch ay maaaring mabago ang kahulugan ng mga salita, ang mga avatar sa karanasan ng AI ay nagbibigay ng puna sa tono upang matiyak na sina Wong at ang iba pang mga mag-aaral ay nakakakuha ng tama ng mga pagbigkas.

Ang pagtatrabaho sa AI sa CIR ay nagbibigay ng isang magandang balanse sa regular na oras ng silid-aralan, ayon kay Wong. "Ang pagpupulong upang makipag-usap sa computer … tiyak na nakakatulong sa maraming mga aspeto ng pag-aaral ng wika, lalo na ang mga kasanayan sa pandiwang, " sabi ni Wong.

Ang klase ng Mandarin ng Wong ay nakakatugon ng apat na beses sa isang linggo. Sa Lunes at Biyernes, dumalo siya sa isang klase sa isang tradisyonal na silid-aralan kasama si Helen Zhou, Associate Professor sa RPI. Doon siya natututo ng bagong bokabularyo at nakakakuha ng isang pagpapakilala sa mga parirala at istruktura ng gramatika. Sa Martes at Huwebes, ang klase ay nakakatugon sa CIR, kung saan ang mga mag-aaral ay nagsasagawa ng mga pag-uusap sa mga virtual na ahente. Sa isang kapaligiran sa restawran, sinabi ni Wong na ang mga mag-aaral ay maaaring dumaan sa buong proseso ng pag-upo sa restawran, pagtingin sa isang menu, pag-order ng pagkain, pakikipag-usap sa isang waiter kung paano inihanda ang pagkain, at binabayaran ang bayarin. Ang iba pang mga kapaligiran ay may kasamang hardin, merkado, at isang campus campus.

Ang klase ng Mandarin sa nakaka-engganyong silid-aralan ay naiiba sa isang tradisyunal na kapaligiran dahil nagbibigay ito ng isang multimodal na karanasan ng wika at video, ayon kay Zhou. Sinabi niya na ang isang tradisyonal na klase ay hindi gaanong nakaka-engganyo at interactive. "Sa kunwa sa silid-aralan na nakaka-engganyo, mayroon kaming dalawang ahente upang labanan ang bawat isa, upang subukang hikayatin ang mga mag-aaral na bumili ng produkto, " sabi ni Zhou. "Kaya ang mga mag-aaral ay maiintindihan sa pamamagitan ng personal na karanasan kaysa sa panonood ng mga video o pakikinig lamang sa mga lektura. Naniniwala ako na mas madali nila itong makuha ang kultura kaysa sa pag-aaral lamang mula sa mga aklat-aralin o pakikinig sa mga teyp.

Sa CIR, ang mga mag-aaral ay kumukuha ng mga pagsusulit na may kaugnayan sa mga eksena kung saan sila nakipag-ugnay at nakataas ang kanilang mga kamay upang magbigay ng kanilang mga sagot. Ang computer vision tech mula sa mga camera sa silid ay nakakakuha ng kanilang mga kilos. Nagbibigay ang katulong ng AI ng isang pagsusulit na may kaugnayan sa eksena at ang mga mag-aaral ay dapat sumagot nang may isang parirala sa wikang Tsino.

"Kung nais mong pumili ng isa sa mga pop-up na nasa screen, pagkatapos ay maaari mong hawakan ang iyong kamay, bukas ang iyong palad, at pagkatapos mong isara ang iyong kamay, " paliwanag ni Wong. "Pinipili mo ang anuman ang nandiyan sa kasalukuyan. Para sa maliit na pagsusulit, kung alam mo kung ano ang tamang sagot, pagkatapos ay maaari mong ilipat ang iyong kamay sa mga character na nais mong piliin, at pagkatapos isara ang iyong kamay upang piliin ang mga ito. ipapaalam sa iyo kung nakuha mo ito ng tama o hindi. "

Nauunawaan ng virtual na ahente ang mga mag-aaral sa halos lahat ng oras, maliban kung kailan maaaring hindi nila malapit sa kanilang bibig ang kanilang mikropono. Ang system ay may iba't ibang mga setting ng pagkilala sa boses na pumipili ng mga mag-aaral kung sila ay nasa kanilang pagbigkas. Nagbibigay din ito ng agarang puna sa isang pag-uusap kung wala kang isang propesor na naroroon. Sa kanilang sariling oras, ang mga mag-aaral sa klase ng Mandarin ay pumunta sa isang website upang ma-access ang mga clip ng boses upang magsanay.

Ang isang cool na tampok ng nakaka-engganyong karanasan sa RPI ay spatial na kamalayan sa konteksto, kung saan masasabi ng maramihang mga virtual na ahente sa screen kung alin ang nakikipag-ugnayan sa mata. "Kung may sasabihin ka habang tinitingnan ang isang ahente, pagkatapos ang ahente na iyon ay tutugon at hindi ang iba pa, " sabi ni Wong.

Ang isang mag-aaral ay gumagamit ng IBM Watson kilos at facial pagkilala tech bilang bahagi ng isang Mandarin klase sa RPI. (Credit ng larawan: IBM Research / RPI )

Paano Naunlad ang Karanasan sa Kalusugan

Ang nakaka-engganyong karanasan sa RPI ay dumating ay nilikha kapag ang mga propesor ng wika at mga propesyunal sa disenyo ng laro ay nagtagpo upang talakayin ang isang mas mahusay na paraan upang magturo ng wika. Ang isang plano upang bumuo ng isang laro ng paglalaro ng papel sa lalong madaling panahon ay nai-veered sa isang talakayan kung paano ituro ang Mandarin sa pamamagitan ng isang kunwa ng mga sitwasyon sa totoong buhay, ayon kay Hui Su, na parehong Direktor ng Kognitibo na Karanasan ng Gumagamit sa IBM Research at Direktor ng CISL. Ang IBM at ang RPI ay nagsimulang pagbuo ng kurso sa katapusan ng 2015, at itinatag nila ang magkasanib na lab sa oras na iyon. Ang CISL pagkatapos ay kumuha ng hugis sa lalong madaling panahon pagkatapos.

"Ang layunin ng lab ay upang mabuo ang nagbibigay-malay at nakaka-engganyong kapaligiran upang mapagbuti ang mga aktibidad ng pangkat, upang mapalaki ang intelektwal ng grupo sa konteksto ng pag-aaral at paggawa ng desisyon, " sabi ni Su. "Nakatuon din kami sa pagbuo ng cognitive immersive boardrooms … upang tingnan ang data ng isang kritikal na sitwasyon at subukan na magkaroon ng kahulugan ng impormasyon at lumikha ng mga pagpapasya o rekomendasyon para sa mga gumagawa ng desisyon."

Bilang bahagi ng programa ng pag-aaral ng wika ng AI, ang IBM at ang RPI ay nag-eeksperimento sa pagtatasa ng pitch contour. Inilarawan ni Su kung paano gumagana ang teknolohiyang ito. "Kapag nagsasalita ka ng isang pantig, kapag binibigkas mo ang isang pantig, kukuha ng pinagbabatayan na tech ang boses, at bumubuo ito ng isang visual na tabas kung paano mo binibigkas ang pantig, " sabi ni Su. "Pagkatapos ay gumagamit ito ng visual na tabas at inihambing ang visual na tabas na may visual na contour ng katutubong nagsasalita."

Ang mga mag-aaral ay maaaring gumawa ng mga pagsasaayos sa kanilang pagbigkas upang maabot ang tamang tono. Malalaman nila na kailangan nilang baguhin ang mga pagbigkas ng ilang mga pantig. Sa pamamagitan ng kaalaman na nakuha ng mga mag-aaral sa pamamagitan ng pag-aaral ng Mandarin sa nakaka-engganyong silid-aralan gamit ang Watson tech, magkakaroon sila ng higit na kumpiyansa na pag-uusap sa totoong buhay, ayon kay Su.

"Ang buong ideya ay upang magbigay ng sapat na konteksto ng kultura sa pamamagitan ng aming nakaka-engganyong kapaligiran at AI tech upang paganahin ang mga mag-aaral na magsanay ng isang ehersisyo, " sabi ni Su. "Kaya hindi sila magkakaroon ng takot tulad ng pakikipag-usap sa mga tao sa totoong buhay."

Ang isang mag-aaral ay nagsasagawa ng Mandarin sa isang virtual na kapaligiran sa restawran sa pamamagitan ng paggamit ng IBM Watson tech. (Credit ng larawan: IBM Research / RPI )

Isang Bridge sa pagitan ng Tech Industry at Academia

Ang IBM at ang RPI ay nakapagtatayo ng tulay sa pagitan ng mga mananaliksik ng IBM at mga miyembro ng guro, kasama ang IBM na naglalagay ng isang mananaliksik sa campus, lalo na si Su. Samantala, si Zhou, ang propesor ng klase sa RPI, ay nagbibigay din ng puna sa mga taga-disenyo, gumagamit, at guro kung paano mapapabuti ang nakaka-engganyong karanasan sa silid-aralan.

"Kailangan kong bigyan sila ng agarang puna sa pag-debug o pagbutihin ang disenyo upang maaari kaming mag-alok ng isang mas natural na silid-aralan sa mga mag-aaral, " sabi ni Zhou. "Kaya maraming mga kasangkot sa trabaho ngunit sulit."

Ang Hinaharap ng Learning sa Wika

• Ang Pinakamahusay na Software sa Pag-aaral ng Wika para sa 2019 Ang Pinakamahusay na Software ng Pag-aaral ng Wika para sa 2019
• Inilabas ng IBM ang Nakasusulat na Watson AI Mga Tool sa Ilang Mga Industriya Ang IBM ay naglalabas ng Pretrained Watson AI Tools sa Ilang Mga Industriya
• Totoo bang Sinasalita ng AI ang Ating Wika? Totoo bang Sinasalita ng AI ang Ating Wika?

Ang ganitong uri ng nakaka-engganyong kapaligiran ay mahalaga dahil sa kakayahang magbigay ng isang tila tunay na buhay na kapaligiran, ayon kay Zhou. "Ang kapaligiran ng nakaka-engganyong AI ay hindi lamang maaaring mapahusay ang pagsasalita at pakikinig ng mga mag-aaral, kundi pati na rin ang mga pragmatiko ng paggamit ng wikang iyon sa mga sitwasyon sa buhay na totoo, " sabi ni Zhou. "Iyon ang dahilan kung bakit ang AI ay mas mainam para sa akin bilang isang tagapagturo upang ang mga mag-aaral ay makakuha ng isang pakiramdam ng paggamit ng wika nang maaga, kahit na para sa mga nagsisimula ng mag-aaral, nang hindi naglalakbay sa bansa."

Ang maraming mga kapaligiran sa pag-aaral tulad ng mga inaalok sa RPI ay palawakin ang papel ng AI sa silid-aralan. Sa pamamagitan ng karanasan na ibinibigay ng AI sa pamamagitan ng mga virtual na ahente, ang mga mag-aaral ay handa na upang harapin ang iba't ibang mga sitwasyon sa totoong mundo ng mga kinakailangang kasanayan sa wika.