多模態(tài)交互已經(jīng)成為教育科技行業(yè)探索的方向。
可視化交互式AI教師系統(tǒng)ChatTutor來了,可邊講解邊繪制動態(tài)圖
多知11月18日,最近,一款可視化交互式AI教師系統(tǒng)ChatTutor發(fā)布,打破傳統(tǒng)AI問答“純文字輸出”的局限,可以實時同步畫板,實現(xiàn)“邊講解、邊繪制、邊推演”的類人教學體驗。
在真實課堂中,教師會運用粉筆、電腦、黑板等多種教具來幫助學生更好地理解知識。對聊天機器人而言,純文本傳遞的信息量非常有限,尤其在STEM(科學、技術、工程、數(shù)學)學科中更為明顯。由此,ChatTutor 應運而生。

多知觀察到,ChatTutor 是GitHub 上一款開源產(chǎn)品,通過設置配置API密鑰和模型,然后可以在線頁面訪問。
根據(jù)介紹,ChatTutor 不再是僅文字的交互,還有動態(tài)圖形。例如,當用戶提問“二次函數(shù)如何平移”,AI可以口述原理,還可以在畫板上動態(tài)繪制曲線、標注頂點、演示變換過程。
根據(jù)介紹,ChatTutor依托多模態(tài)生成技術,構(gòu)建起覆蓋多領域的智能教學矩陣:
數(shù)學可視化:函數(shù)圖像、幾何構(gòu)造、統(tǒng)計圖表一鍵生成,支持動態(tài)推導與參數(shù)調(diào)節(jié);
物理實驗模擬:即時繪制力學受力圖、運動軌跡、波動傳播等,將抽象定律具象化;
邏輯電路交互:可拖拽門電路元件,實時驗證時序邏輯與狀態(tài)轉(zhuǎn)換;
編程逐行教學:支持Python、JavaScript等語言,邊寫代碼邊解釋執(zhí)行流程與錯誤排查;
思維導圖生成:將復雜概念自動結(jié)構(gòu)化,一鍵導出用于復習或團隊協(xié)作。
可以看到,ChatTutor賦予AI使用教具的能力,讓AI成為真正能動手教學的老師。該產(chǎn)品針對于有編程能力的教師來說,有一些輔助作用,但對大眾來說,還是有些不方便。
實際上,多模態(tài)交互亦是整個教育科技行業(yè)探索的方向,例如,學而思學習機軟硬一體化小思AI 1對1,就是多模態(tài)的交互方式,集批改和講題為一身;多知曾報道的VideoTutor則是通過視頻化的方式進行講解,也融入了動態(tài)圖形。
媒體商務合作:夏女士18614077531(微信同號)