音樂筆記主要的做的是以技術驅動的在線鋼琴服務。

音樂筆記CEO閆文聞:用AI重構鋼琴教學場景

2017-12-17 17:02:07發(fā)布     來源:多知網    作者:Alice  

  ?多知網12月16日,在2017ACE素質教育行業(yè)峰會上,音樂筆記的創(chuàng)始人兼CEO閆文聞分享了在人工智能技術下,鋼琴陪練機器人和共享教室的實際運用情況。

  以下為閆文聞的分享內容,經多知網整理:

  音樂筆記主要的做的是以技術驅動的在線鋼琴服務。

  我們是一個從技術領域去切入到音樂教育的典型公司,主要邏輯是將人工智能技術與真人的服務相結合,把機器人或傳感器放到一個特定的垂直的應用場景里面,讓其替人去做最基礎的判斷,達到高度整合數(shù)據(jù),提高人的工作效率的目的。

  音視頻算法的本質功能,即瞬間對用戶行為進行判斷與反應,包括在毫秒內判斷用戶觸鍵鍵位、按鍵時長甚至進行單音的識別等等。

  在鋼琴學習“找錯”或“標記”這件事上,機器現(xiàn)在已經比人做的好。

  機器在平均1.5-2秒之內將自動建立一個模型,對鍵盤的每一個鍵、每一個位置進行精準切割。通過自動化的標記、自動化的判斷,機器會自動產生的決策。同時機器通過先前的感知與決策來判斷演奏的對錯和演奏的情況,直接反饋到通俗易懂,能被使用者理解的曲譜的譜面上。比如紅色的是音準的錯誤,黃色是結構的錯誤,基本上可以細化的標注到每一個音符。同時,演奏的音視頻內容對應到每一個小節(jié)、每一次觸鍵,都由算法做好了精確的切割。所有演奏的音示范的曲譜都可以精準的演奏音視頻,是最基礎的升級版的DVD。

  當一個孩子日常的練習曲子,平均在20秒或者是一兩分鐘。沒有人能夠去一直盯著孩子,關注孩子演奏的狀態(tài)。

  在行業(yè)里,重復性的勞動首先應該交給機器,機器不會介意做最瑣碎的臟活累活,并且現(xiàn)在機器做這類型的工作比人更得心應手。

  音樂筆記后臺有300多萬條演奏音視頻的數(shù)據(jù),樣本也是通過300多萬條的標注去實現(xiàn)的,目前識別精度超過了99.5%以上。

  基于核心技術,我們有最直接的硬件產品——陪練機器人,陪練機器人最主要是對音準和節(jié)奏的實時的反饋、對錯的反饋,精度達到了99.5%以上。

  陪練機器人產品,可以為整個行業(yè)提供最基礎的功能,可以讓任意鋼琴,包括電鋼琴、原生鋼琴,變成智能鋼琴。

  教鋼琴和教K12的其他的學科不一樣的,鋼琴教學要同時看到孩子的臉和手、鍵盤。做遠程教學時,鋼琴教室對傳輸?shù)囊蟾?,對音色、聲音還原有更高級別的需求。

  基于同樣的硬件,我們又有了在線教室,可以讓任何一臺琴瞬間可以上網。

  音樂筆記的在線直播的鋼琴課,有三個主要的元素,真人老師、機器人的老師、直播的在線教室。

  課程產品主要是兩種,第一是四對一的陪練產品,第二是和中國人保一起推出的“考級效果保險”。

  “四對一”是四個老師對一個學生,四個老師包括授課老師、班主任老師, 7×24小時陪孩子的機器人老師,還有通過互聯(lián)網、直播教室去聯(lián)系到全球的名師。

  在陪練課程服務里面,能夠通過機器人的輔助以及人的參與,全程將孩子練琴這件事的數(shù)據(jù)采集上來,并透明化、實時的給家長進行傳遞。因為有全程的孩子的練習數(shù)據(jù),所以我們也很榮幸的跟中國人保去推出基于數(shù)據(jù)的效果險。如果平時對著機器練習效果不錯,但是考試沒有發(fā)揮好,人保會賠償全額學費。

  我們覺得技術應該是開放的。最近,珠江鋼琴做了云學堂的發(fā)布會,也是圍繞我們這套核心的技術和核心產品建立起來的,我們也希望通過和珠江的合作方式,能推介給整個行業(yè),用AI技術賦能整個行業(yè)的互聯(lián)網化發(fā)展。

  合作方式非常直接,第一,在線教室,通過把一部分課程改到晚上,減輕琴房的負擔。第二,陪練機器人,與大家合作做機器陪練課,商業(yè)模式會更優(yōu)一些。