多模態(tài)、AIGC、對齊、涌現(xiàn)、大模型訓練、聯(lián)邦大模型……2023WAIC上一起聊聊
自 ChatGPT 發(fā)布以來,短短半年時間,我們已經(jīng)見證了大語言模型帶來的方方面面的震撼,搜索、創(chuàng)意創(chuàng)作、代碼生成脫胎換骨。國內(nèi)外有實力的大廠、初創(chuàng)公司爭先下場布局,力求在這場角逐中奪得先機。
隨之而來,大模型自身的能力也不斷突破,不再局限于單模態(tài)文本任務(wù),文本生成圖像、視頻、音樂等相關(guān)的研究和應(yīng)用也開始出現(xiàn),多模態(tài)、跨模態(tài)任務(wù)正在得到很好地解決。不過,大模型仍然離不開算力、算法、數(shù)據(jù)三大要素。大模型動輒幾十、上百億參數(shù),算力不夠,支撐不起它們的訓練與推理。數(shù)據(jù)少或質(zhì)量低,也無法保證最終的效果。
與此同時,行業(yè)落地及商業(yè)化部署、應(yīng)用也成了大模型廠商的必爭之地。廠商們有的推出了行業(yè)大模型,還有的通過集大模型訓練、推理、部署應(yīng)用于一體的 AI 開發(fā)平臺,讓企業(yè)基于自身場景需求少壓力甚至無壓力地擁抱大模型能力。
面對大語言模型的飛速發(fā)展,我們不禁要問,在 AI 新時代,如何才能全面掌握并利用大模型的能力,并把握隨之而來的機遇和挑戰(zhàn)呢?
為了助力 AI 技術(shù)從業(yè)者把握時代趨勢、重塑開發(fā)思維、探索 AI 能力邊界,由世界人工智能大會組委會辦公室指導,機器之心主辦,上海張江(集團)有限公司作為戰(zhàn)略合作伙伴的2023 WAIC AI 開發(fā)者領(lǐng)袖論壇將于 7 月 8 日在上海張江科學會堂舉辦。
以「大模型時代的 AI 開發(fā)」為題,論壇將全面探討新時代的「算法革命、算力挑戰(zhàn)、平臺與數(shù)據(jù)、行業(yè)創(chuàng)新」,分享行業(yè)領(lǐng)袖的智慧。如今確認的嘉賓有哪些亮點?屆時又會與大家分享哪些前沿 AI 主題和行業(yè)經(jīng)驗?zāi)?
●加拿大工程院及加拿大皇家學院兩院院士、FATE 開源社區(qū)技術(shù)指導委員會主席楊強是聯(lián)邦學習研究集大成者,著有《遷移學習》、《聯(lián)邦學習》、《隱私計算》等書籍。他認為,如何使聯(lián)邦學習平衡優(yōu)化以達到安全可信和高效高質(zhì)的效果,并且和大模型無縫連接,是今后產(chǎn)業(yè)和學界關(guān)注的重點。
●從京東離職后,知名 AI 學者梅濤院士決定投身 AIGC 創(chuàng)業(yè)之旅,憑借在計算機視覺和多媒體領(lǐng)域的多年積累,創(chuàng)業(yè)方向確定為生成式視覺多模態(tài)基礎(chǔ)模型與應(yīng)用。對于生成式 AI 如何從單模態(tài)邁向多模態(tài),他將分享自己獨到的見解。
●今年 3 月,百度在全球大廠中第一個做出對標 ChatGPT 的產(chǎn)品文心一言,吸引了行業(yè)極大的關(guān)注。在此次大會上,百度技術(shù)委員會主席吳華會為我們帶來哪些洞見?
●科大訊飛的「星火認知大模型」想必大家也不陌生。在這場活動上,科大訊飛 AI 研究院常務(wù)副院長高建清將為我們解讀星火大模型的技術(shù)進展及應(yīng)用創(chuàng)新。
●路特斯科技副總裁、路特斯機器人公司 CEO 李博,他深耕智能駕駛領(lǐng)域多年,具有超過 15 年的智能駕駛量產(chǎn)及預(yù)研項目的主持和開發(fā)經(jīng)驗。大模型時代,他又將為我們帶來哪些新的思考?
●相信大家對新浪微博新技術(shù)研發(fā)負責人張俊林老師都不陌生,知乎上許多有關(guān)大模型的高贊文章正是出自他的筆下。他對大模型可以說有極深的理解。這次他將帶我們了解大語言模型帶來的交互方式變革。
●新加坡國立大學校長青年教授、潞晨科技創(chuàng)始人兼董事長尤洋是 AI 領(lǐng)域的知名青年學者。其公司開源的面向 AI 大模型時代的高效深度學習系統(tǒng) Colossal-AI 也備受開發(fā)者們關(guān)注。此次他演講的主題落在了 AI 大模型的挑戰(zhàn)與系統(tǒng)優(yōu)化,展現(xiàn) Colossal-AI 如何幫助大模型開發(fā)降本增效。
●不久之前,一款名為“元乘象 Chatlmg”的國產(chǎn) AI 模型吸引了眾多關(guān)注,這出自人民大學盧志武教授的團隊。在我們的活動上,他將就「多模態(tài)通用生成模型的基本框架與最新進展」展開探討。
●微軟,是這波大模型浪潮中必須提及的一個關(guān)鍵詞。在大模型產(chǎn)品應(yīng)用的探索上,微軟 Copilot 可以說是標的。此次,我們邀請到了 Office Product Group 技術(shù)負責人蔡瑋鑫,為大家分享大語言模型投入大規(guī)模應(yīng)用生產(chǎn)會面臨哪些挑戰(zhàn)和機遇。過去一段時間,蔡瑋鑫領(lǐng)導開發(fā)了微軟 AI 服務(wù)產(chǎn)品 M365 Copilot,將大語言模型與 Microsoft Graph、Microsoft 365 應(yīng)用程序中,釋放開發(fā)者生產(chǎn)力。
●今年,我們還精心策劃了一場云帆獎得主的圓桌對話,邀請曦智科技聯(lián)合創(chuàng)始人兼首席技術(shù)官孟懷宇、北京航空航天大學助理教授周號益以及新晉云帆獎得主,共同就大模型時代范式轉(zhuǎn)變中的機遇和挑戰(zhàn)展開頭腦風暴。
除了目前公布的這些嘉賓,我們還在積極邀請更多的 AI 領(lǐng)袖參與我們的論壇,敬請期待。
演講及圓桌嘉賓簡介
演講嘉賓:楊強,加拿大工程院及加拿大皇家學院兩院院士、FATE 開源社區(qū)技術(shù)指導委員會主席
嘉賓簡介:加拿大工程院及加拿大皇家學院兩院院士,微眾銀行首席人工智能官,香港科技大學計算機與工程系講座教授和前系主任,AAAI-2021 大會主席,國際人工智能聯(lián)合會(IJCAI)理事會前主席,香港人工智能與機器人學會(HKSAIR)理事長,智能投研技術(shù)聯(lián)盟(ITL)、開放群島開源社區(qū)(OI)以及FATE開源社區(qū)技術(shù)指導委員會(TSC)主席,ACM TIST 和 IEEE TRANS on BIG DATA 創(chuàng)始主編,CAAI、AAAI、ACM、IEEE、AAAS 等多個國際學會 Fellow。領(lǐng)銜全球遷移學習和聯(lián)邦學習研究及應(yīng)用,著作包括《遷移學習》、《聯(lián)邦學習》、《隱私計算》和《聯(lián)邦學習實戰(zhàn)》等。
演講嘉賓:梅濤博士,加拿大工程院外籍院士,IEEE/IAPR/CAAI Fellow,生成式人工智能初創(chuàng)公司 HiDream.ai 創(chuàng)始人兼首席執(zhí)行官
嘉賓簡介:梅博士是人工智能、計算機視覺和多媒體領(lǐng)域的全球知名學者,他發(fā)表的論文被引用超過三萬余次,先后榮獲 15 項最佳論文獎,擁有 70 多項專利,并主導研發(fā)了多款全球數(shù)百萬日活用戶的商業(yè)產(chǎn)品。他曾擔任京東集團副總裁和微軟研究院資深研究員。
演講嘉賓:吳華,百度技術(shù)委員會主席
嘉賓簡介:主要從事自然語言處理領(lǐng)域的研究;曾獲國家科技進步獎二等獎、國家技術(shù)發(fā)明獎二等獎、中國專利金獎;被評為杰出工程師、青年北京學者等。
演講嘉賓:盧志武,中國人民大學教授
嘉賓簡介:2005 年畢業(yè)于北京大學數(shù)學科學學院信息科學系,獲理學碩士學位;2011 年畢業(yè)于香港城市大學計算機系,獲 PhD 學位。主要研究方向為機器學習與計算機視覺。設(shè)計中文通用多模態(tài)預(yù)訓練模型文瀾 BriVL,并發(fā)表于 Nature Communications。
演講嘉賓:李博,路特斯科技副總裁、路特斯機器人公司 CEO
嘉賓簡介:曾先后任職于吉利汽車研究院、阿里巴巴達摩院以及本田技術(shù)研究所。超過 15 年智能駕駛量產(chǎn)及預(yù)研項目的主持和開發(fā)經(jīng)驗,對智能駕駛系統(tǒng) EE 架構(gòu)、軟硬件計算平臺、視覺算法和基礎(chǔ)算子、路徑規(guī)劃及運動控制、智能駕駛系統(tǒng)開發(fā)、仿真及測試驗證等方面有全面深入的研究,具有豐富的工程應(yīng)用以及團隊管理經(jīng)驗。畢業(yè)于東京工業(yè)大學綜合理工學科信息處理專業(yè),獲博士學位。國內(nèi)外專利 20 余篇。
演講嘉賓:高建清,科大訊飛 AI 研究院常務(wù)副院長
嘉賓簡介:先后在語音識別、語音合成、自然語言處理等領(lǐng)域主導完成了多項原創(chuàng)性研究成果,帶領(lǐng)團隊研發(fā)出國內(nèi)首個電話自助客服系統(tǒng),科大訊飛第二、三代語音識別系統(tǒng),成功孵化了以訊飛聽見、智能錄音筆、智能辦公本為代表的多款暢銷辦公產(chǎn)品,主導研發(fā)的技術(shù)成功應(yīng)用于教育、醫(yī)療、汽車、客服、智能硬件等行業(yè)。同時,近年來承擔國家及省部委項目 8 項,并發(fā)表高水平論文 10 余篇,獲得授權(quán)發(fā)明專利 40 余項。
演講嘉賓:張俊林,新浪微博新技術(shù)研發(fā)負責人
嘉賓簡介:中國中文信息學會理事,中科院軟件所博士。目前擔任新浪微博新技術(shù)研發(fā)負責人,在此之前在阿里巴巴擔任資深技術(shù)專家,負責新技術(shù)團隊。他是技術(shù)書籍《這就是搜索引擎:核心技術(shù)詳解》、《大數(shù)據(jù)日知錄:架構(gòu)與算法》的作者,目前主要研發(fā)興趣集中在推薦系統(tǒng)及自然語言處理。
演講嘉賓:尤洋,新加坡國立大學校長青年教授,潞晨科技創(chuàng)始人兼董事長
嘉賓簡介:潞晨科技創(chuàng)始人尤洋教授,是加州伯克利大學博士,新加坡國立大學計算機系的校長青年教授。他曾創(chuàng)造 ImageNet、 BERT、AlphaFold、ViT 訓練速度的世界紀錄,相關(guān)技術(shù)被廣泛應(yīng)用于谷歌,微軟,英特爾,英偉達等科技巨頭。他曾獲 IPDPS 最佳論文、ICPP 最佳論文、AAAI 杰出論文、清華大學優(yōu)秀畢業(yè)生,以及當時清華大學計算機系數(shù)額最高的西貝爾獎學金等。他在 2017 年獲得美國計算機協(xié)會(ACM)官網(wǎng)上唯一頒給在讀博士生的 ACM-IEEE CS George Michael Memorial HPC Fellowship。他獲得頒發(fā)給伯克利優(yōu)秀畢業(yè)生的 Lotfi A. Zadeh Prize 。他被 UC Berkeley 提名為 ACM Doctoral Dissertation Award 候選人(81 名 UC Berkeley EECS 2020 博士畢業(yè)生中選 2 人)。他曾任職于谷歌、微軟、英偉達、英特爾、IBM 等,在 2021 年被選入福布斯 30 歲以下精英榜(亞洲)并獲得 IEEE-CS 超算杰出新人獎。
演講嘉賓:蔡瑋鑫,技術(shù)負責人,微軟 Office Product Group
嘉賓簡介:Weixin Cai is a Tech Lead Manager at Microsoft Office Product Group with over 9 years of experience in researching and productionizing AI models. He has received a Ph.D. in Biostatistics from University of California, Berkeley, and later worked as a Quantitative Researcher at Citadel. He was the scientist #1 of the M365 Copilot feature from Microsoft, where he leads a cross-functional team in developing the LLM applications that transform the productivity of millions of users.His work is published as papers and talks at major NLP, Machine Learning, and Statistics conferences.
對話嘉賓:孟懷宇,曦智科技聯(lián)合創(chuàng)始人、首席技術(shù)官
嘉賓簡介:孟懷宇博士為曦智科技聯(lián)合創(chuàng)始人兼首席技術(shù)官。他擁有麻省理工學院(MIT)電子工程學博士學位,主要研究方向為集成光子學在人工智能、電子通信、數(shù)字通信、生物傳感等方向的應(yīng)用,在頂級期刊發(fā)表論文 10 余篇,申請全球?qū)@?200 項,已獲授權(quán)超 30 項。博士期間,他參與研發(fā)了全球首個片上光互聯(lián)技術(shù),其學術(shù)成果發(fā)表于《自然》雜志上。孟懷宇博士于 2018 年作為聯(lián)合創(chuàng)始人加入了全球光電混合計算領(lǐng)軍企業(yè)曦智科技,現(xiàn)任公司首席技術(shù)官,致力于利用集成硅光技術(shù)突破目前由于摩爾定律停滯帶來的算力提升瓶頸,為大數(shù)據(jù)和人工智能提供更高效、更節(jié)能的算力升級解決方案。
對話嘉賓:周號益,北京航空航天大學助理教授
嘉賓簡介:面向國家重大需求,長期從事人工智能、序列大數(shù)據(jù)研究。在 AIJ、NeurIPS、KDD、IJCAI 等累計發(fā)表 20 篇論文,獲 AAAI 2021最佳論文獎、IEEE IWQoS 2022 最佳論文獎、WAIC 2022 青年優(yōu)秀論文提名獎。主持國家自然科學青年基金、科技部重點研發(fā)課題、CAAI-華為學術(shù)獎勵基金等項目;成果獲國家電網(wǎng)大數(shù)據(jù)中心科技進步一等獎、網(wǎng)信辦中國開源創(chuàng)新大賽一等獎、工信部工業(yè)互聯(lián)網(wǎng)創(chuàng)新成果轉(zhuǎn)化一等獎。入選 CAAI 學會優(yōu)博、CCF 青年發(fā)展計劃、ACM China 北京優(yōu)博、WAIC「云帆獎」等。
(世界人工智能大會)