9月19-21日,2024云棲大會在杭州市西湖區(qū)云棲小鎮(zhèn)舉行。20日,云棲通道如約開放。
這是一個為廣大AI產(chǎn)業(yè)從業(yè)者、創(chuàng)業(yè)者以及大模型開發(fā)者提供的專屬交流平臺。來自教育、智能體應(yīng)用、智能駕駛、人形機器人等多個AI應(yīng)用領(lǐng)域的科學家、開發(fā)者、技術(shù)代表等現(xiàn)場分享最新行業(yè)動態(tài),與現(xiàn)場嘉賓進行深入交流,共同見證AI技術(shù)的發(fā)展與應(yīng)用。
超擬人一對一AI老師,幫助教育更智能
輔導(dǎo)孩子作業(yè)心太累?請家教不僅費用高、效果也難以保證?別擔心,這些都不是問題。
云棲通道剛開啟,精準學AI科學家張寧就為家長、老師群體帶來了“減負神器”——超擬人一對一AI老師。
這位“老師”不僅能像GPT一樣講題目,更關(guān)鍵的是,TA就像你花2、300元一個小時請的一對一私人老師一樣,能有規(guī)劃、有體系地對孩子進行一對一學習輔導(dǎo),還能運用不同的教學技巧,實時調(diào)整教學內(nèi)容。
那么,靠譜嗎?究竟是何原理?
張寧介紹,超擬人一對一AI老師是在通義千問的基礎(chǔ)大模型上,利用私有數(shù)據(jù),訓(xùn)練出了精準學自己的教育垂直大模型——心流大模型。同時面向?qū)W科知識教學優(yōu)化了語音識別與語音合成技術(shù)。“為了做到更好的情緒識別,我們還在通義千問開源大模型上重新訓(xùn)練了語音-語音端到端的大模型,不經(jīng)過語音-文字的互轉(zhuǎn),這將成為未來我們的主要模型。”
推向市場方面,目前,超擬人一對一AI老師主要是以學習機為載體,在各大電商平臺銷售,并且與釘釘教育有深度合作。
為何會想到研究這樣一款產(chǎn)品呢?
張寧表示,不論是成人還是兒童,都會遇到被授課、被指導(dǎo)、被答疑的過程,這一過程過去是由真人來完成,而技術(shù)沒有能力做到。“但是從2023年之后,隨著通義千問等大模型的發(fā)展,技術(shù)逐漸有能力做到這一點,所以我們研發(fā)了這一產(chǎn)品,是對市場上教育產(chǎn)品的有益的補充。”
全新智能座艙AI技術(shù),讓車生活更聰明
今年的云棲大會,“自動駕駛”無疑是最熱門的話題之一,特斯拉、小鵬、零跑等國內(nèi)外頭部車企“組團”參展。而在云棲通道開放現(xiàn)場,斑馬智行首席產(chǎn)品官蔡明,則帶來了車生活的相關(guān)分享。
蔡明介紹,此前斑馬智行聯(lián)合通義發(fā)布了全新智能座艙AI技術(shù)品牌:元神AI,同時展示了基于英偉達OrinX平臺、通義端側(cè)多模態(tài)大模型的智艙AI技術(shù)能力。
元神AI旨在推動解決觸控交互/命令式語音交互和APP服務(wù)帶來的座艙體驗不佳、服務(wù)使用低頻問題,通過交互變革和服務(wù)重塑,加速智能座艙“iPhone時刻”到來。元神AI核心建構(gòu)是“1+3”技術(shù)體系,同時以AliOS和廣泛的芯片生態(tài)為基礎(chǔ)設(shè)施底座。1是自然交流,人與車交互如同人與人交流一樣自然;3包含,感知場景(Echo AI),實現(xiàn)車內(nèi)全艙位、車外多視角、時空世界感知,全工況可用;組織服務(wù)(Eco AI):打破APP限制,以用戶為中心組織原子化服務(wù),結(jié)合場景提供給用戶。認知成長(Evo AI):基于用戶畫像圖譜不斷學習實現(xiàn)認知成長,并確保用戶隱私安全。
“有人說未來會‘ALL IN大模型’,我反過來希望是‘AI IN ALL’。”蔡明表示,希望在整個座艙的每一個環(huán)節(jié),AI都能更好地提升用戶體驗,并且增加產(chǎn)品競爭力,“在未來,斑馬智行會推出全自研自然語言交互方案,來代替Touch交互。同時,我們聯(lián)合生態(tài)伙伴一起,推動智能座艙應(yīng)用AI化,打造更多端到端的智艙生活服務(wù)Agent,來替代APP生態(tài),我們一起期待。”
開源大模型靈活運用,給AI機器人注入靈魂
一個指令,人形機器人就能完成唱跳RAP、搬運貨物、巡線避障、花式足球等高難度動作。在云棲大會計算館的通義靈碼展位,“素人”都能掌控的小型機器人,吸引了眾多觀眾的眼球。這項技術(shù)是由個人開發(fā)者、知名技術(shù)博主張子豪研發(fā),他也在云棲通道上展示了這一成果。
“這款用Qwen2開發(fā)的人形機器人,基于幻爾TonyPi人形機器人,通過開源AI推理框架OpenVINO,在輕薄筆記本上本地部署端側(cè)AI開源大模型通義千問Qwen2-7B-Instruct,使用AI編程助手‘通義靈碼’輔助編程開發(fā)和文檔撰寫。”張子豪介紹,人類輸入模糊語音指令,智能體Agent就能自主思考,調(diào)用23種原子動作Function Call,編排生成依次執(zhí)行的動作列表及函數(shù)參數(shù)。
神奇之處在哪?
“其實機器人已經(jīng)是一個非常成熟的行業(yè),為什么最近幾年這么火?因為大模型出現(xiàn)了,能夠真正給機器人注入靈活。”張子豪向現(xiàn)場嘉賓解釋道,之前的機器人,不管它多么復(fù)雜,能打乒乓球也好,能搬東西也好,都是根據(jù)固定的指令去完成固定的動作,沒法實現(xiàn)泛化性、多樣性、通用性操作和對指令的理解。
“而大模型的最大好處就是AGI通用人工智能,它可以把任意指令翻譯成機器人的動作,能夠讓機器人真正理解海量世界的知識。”張子豪說,比如他之前做過一個機器人,讓其機械臂把綠色方塊搬到印有小豬佩奇照片的指定處。之前,要讓機器人認識小豬佩奇,得專門訓(xùn)練一個模型,讓它先認識小豬佩奇。但是現(xiàn)在借助多模態(tài)大模型,機器人天生就具備這個能力,它天生就知道小豬佩奇是誰。如此一來,人類可以跟機器人說任意的指令,它都可以理解,所以泛化性能是當前具身智能大模型之后引爆的一個熱點。
AI提示詞打開大模型無限可能,主流平臺廣泛采用
多位分享者現(xiàn)場提到了給AI下指令,那么這個指令究竟該怎么下?其實也是有講究的。AI 提示詞——打開大模型的無限可能,云中江樹 LangGPT 社區(qū)創(chuàng)始人就分享了他和AI提示詞的故事:“在過去一年多的時間里,我們一直在研究提示詞能夠給大模型帶來怎樣的一些可能性,也做了很多探索。”
據(jù)了解,LangGPT 提示詞社區(qū)成立于2023年,是國內(nèi)首個專注于提示工程的開源社區(qū),也是目前最大最活躍的提示詞工程師交流平臺。自主研發(fā)了提示詞自動化生成優(yōu)化、模板庫、在線編輯器、漢語新解等工具,并構(gòu)建了系統(tǒng)的學習、分享、沉淀高質(zhì)量提示詞知識庫, 在 GitHub 社區(qū)獲得數(shù)萬星標,全網(wǎng)數(shù)百萬瀏覽量,已成為國內(nèi)最流行的提示詞方法論。
該創(chuàng)始人介紹,LangGPT已與多家頭部AI公司合作,如為阿里通義開發(fā)官方提示詞模板,與月之暗面 kimi 共同推出提示詞專家助手,為百度文心一言、書生浦語大模型等分享提示工程進階知識,為華為大模型落地應(yīng)用提供咨詢,為清華北大等985高校學子授課,為多家上市公司開展AI培訓(xùn),聯(lián)合發(fā)起中國提示詞工程師大會等。
截至2024年9月,LangGPT已服務(wù)數(shù)十萬開發(fā)者和AI愛好者,其方法論被百度、字節(jié)、華為、智譜等主流大模型平臺廣泛采用。
“提示詞門檻不高、沒有壁壘的問題,對我來說這不是劣勢,恰恰是優(yōu)勢。”該創(chuàng)始人誠懇地向在場嘉賓發(fā)出了邀請:“這意味著在座各位只要有意愿、有能力,都可以參與進來,更好地感受到AI的魅力。這也是我們過去一直在做的事情,希望讓更多的人用好AI。”
代表中國站上世界舞臺,高中生用AI打國際比賽
更多人參與AI、用好AI,正在成為現(xiàn)實。本場云棲通道最后一位分享者——復(fù)旦大學附屬中學通用技術(shù)教師、復(fù)旦附中FRC機器人戰(zhàn)隊的劉燁老師,現(xiàn)場講述了他和孩子們到美國參加機器人大賽的故事,鼓舞了現(xiàn)場一眾家長培養(yǎng)孩子學習AI的熱情。
劉燁介紹,復(fù)旦附中FRC機器人戰(zhàn)隊成立于2017年,隊號6907,意思是世界上第6907支FRC戰(zhàn)隊。FIRST Robotics Competition(FRC)由美國著名非營利性機構(gòu)FIRST主辦,是目前全球青少年機器人賽事中水平最高且最具觀賞性與挑戰(zhàn)性的賽事,復(fù)旦附中FRC機器人戰(zhàn)隊是一支具有良好建設(shè)基礎(chǔ)的學生創(chuàng)新團隊。
“我們今年機器人視覺用的就是阿里云服務(wù)器的平臺,通過這個訓(xùn)練之后,我們可以做到在攝像頭掃到二維碼標識之后,它可以實現(xiàn)自動化的動作,輔助我們比賽的時候得到更好的效果。”劉燁表示。
依托復(fù)旦大學和上海交通大學豐富的資源,致力于機器人學習與建造,基于每年的賽事,在三維建模、機械加工、工程搭建、程序控制、人工智能、力學原理、基本運動學、工程材料基礎(chǔ)等領(lǐng)域,為學生提供了綜合創(chuàng)新素質(zhì)培育的實踐平臺。團隊多次獲得國內(nèi)外區(qū)域賽冠軍、區(qū)域賽主席獎等獎項,多次代表中國站在世界總決賽舞臺上,培養(yǎng)了一大批富有創(chuàng)新潛力的優(yōu)秀學生。
除了機器人比賽,學校在日常教學中,也已經(jīng)廣泛應(yīng)用了AI。“我們有一門課就叫‘AI+課程’,基于和通義實驗室的合作,比如我們老師出試卷,以前我們是在一個題庫里面找題,老師們?nèi)ジ囊恍?shù)據(jù)、改一些題型、題干等。”劉燁說,但現(xiàn)在,老師們可以直接把知識點、考試范圍告訴通義大模型,題目就可以自動生成,更加智能和科學,“這就是AI的魅力,相信未來,AI還能帶給我們更多改變和驚喜。”
友情鏈接: 政府 高新園區(qū)合作媒體
Copyright 1999-2024 中國高新網(wǎng)chinahightech.comAll Rights Reserved.京ICP備14033264號-5
電信與信息服務(wù)業(yè)務(wù)經(jīng)營許可證060344號主辦單位:《中國高新技術(shù)產(chǎn)業(yè)導(dǎo)報》社有限責任公司