8月21日，2024火山引擎 AI 創(chuàng)新巡展在上海舉辦，帶來豆包大模型的一系列產(chǎn)品升級。豆包語音模型和視覺模型再升級，對話式 AI 實時交互解決方案進一步強化 AI 交互體驗。此外，火山引擎攜手多點 DMALL 成立了零售大模型生態(tài)聯(lián)盟，同時介紹了汽車大模型生態(tài)聯(lián)盟最新進展，宣布 AI 創(chuàng)造者大賽開賽。來自沐瞳、浙江大學等單位的嘉賓就與火山引擎合作、落地大模型的實踐進行了分享。

火山引擎總裁 譚待

火山引擎總裁譚待表示，豆包大模型獲得眾多行業(yè)客戶青睞，模型能力也在持續(xù)提升。最新版豆包大語言模型的綜合能力相比三個月前首次發(fā)布時提升了20.3%，豆包·文生圖模型、豆包·語音識別模型等模型也有大幅升級，對話式 AI 實時交互解決方案整合了豆包大模型和實時音視頻（RTC）技術(shù)，為用戶提供更順暢、自然的交互體驗。

 01.

 豆包大模型使用量爆發(fā) 

 綜合能力提升20.3% 

“大的使用量，才能打磨好模型，好的模型又會吸引更多人使用”。據(jù)譚待介紹，自5月15日正式對外發(fā)布以來，豆包大模型的日均 tokens 使用量已經(jīng)超過5,000億，平均企業(yè)客戶使用量增長了22倍。期待越來越多的 AI 原生企業(yè)、越來越多的 AI 轉(zhuǎn)型企業(yè)在豆包大模型上快速發(fā)展。

基于內(nèi)外客戶廣泛、真實的業(yè)務(wù)需求，豆包大模型在關(guān)鍵能力上不斷迭代優(yōu)化。公開及內(nèi)部測評集顯示，最新版豆包大語言模型相比發(fā)布初期綜合能力提升了20.3%。其中，角色扮演能力提升了38.3%，具備了更強的上下文感知，讓對話情境更連貫、角色更擬人化。語言理解能力提升了33.3%，讓豆包大模型在信息分類、抽取、摘要、理解和問答等 NLP 方面都有了顯著提升，能夠在更多生產(chǎn)力場景中得到應(yīng)用。此外，模型在長文任務(wù)、數(shù)學、專業(yè)知識、代碼能力上也有不同程度的增強。

會上還公布了多個豆包垂類模型的最新升級。其中，豆包·文生圖模型對長文本有更精準的圖文匹配能力，多主體、多位置、手部結(jié)構(gòu)等復(fù)雜場景的生圖能力更強，更善于理解中國特色元素，創(chuàng)造更具美感的中國風圖片。豆包·語音識別模型基于大語言模型豐富的知識和推理能力，通過上下文感知，提升語音識別準確性，在多個公開測試集中，與國內(nèi)公開發(fā)布的語音識別大模型相比，錯誤率最高降低40%；支持一個模型識別普通話和粵語、上海話、四川話、西安話、閩南語等方言。豆包·語音合成模型升級了流式語音合成能力，能夠?qū)崟r響應(yīng)、精準斷句，支持“邊想邊說”。

此外，火山引擎發(fā)布對話式 AI 實時交互解決方案，該方案整合了豆包大模型和實時音視頻（RTC）技術(shù)，提供端到端的大模型實時對話方案。企業(yè)可以輕松地在自己 AI 應(yīng)用中嵌入該實時語音功能，用戶不僅能用語音與 AI 進行交談，還能像平時說話一樣，在對話過程中適時打斷或插話，經(jīng)過升級后的 AI 聲音具備較好表現(xiàn)力和感情色彩，對話更自然、更真實、更流暢，讓大模型交互體驗更強。

除了模型效果，針對企業(yè)生產(chǎn)環(huán)境對 AI 高并發(fā)需求出發(fā)，豆包通用模型pro 提供了國內(nèi)最高標準的 800k 初始 TPM（每分鐘處理 tokens 數(shù)量），保障了企業(yè)不僅用得便宜，還用得放心。例如，在客戶高并發(fā)的對話場景要求下，火山引擎幫助客戶完成多輪提示詞優(yōu)化，并且提供高并發(fā)保障，幫助客戶應(yīng)對高峰場景。

 02.

 零售大模型生態(tài)聯(lián)盟成立 

 汽車大模型生態(tài)聯(lián)盟持續(xù)壯大 

大模型應(yīng)用落地不僅需要技術(shù)成熟度，還要有適配的商業(yè)組織和商業(yè)生態(tài)。為此，火山引擎攜手多點 DMALL 成立零售大模型生態(tài)聯(lián)盟，通過融合豆包大模型與 AI 能力，讓零售企業(yè)能夠以極低的試錯成本將大模型技術(shù)應(yīng)用到業(yè)務(wù)場景中，推動零售行業(yè)的智能化升級，提升行業(yè)的整體效能和創(chuàng)新能力，以適應(yīng)不斷變化的市場需求和消費者行為，加速零售行業(yè)的創(chuàng)新步伐。

譚待表示，火山引擎致力于與行業(yè)伙伴共同建立一個零售大模型生態(tài)聯(lián)盟，探索更多場景的 AI 重構(gòu)，將大模型應(yīng)用推廣到零售產(chǎn)業(yè)鏈各環(huán)節(jié)中，加速零售業(yè)的運營和周轉(zhuǎn)效率，全面提升消費者的購物體驗。

零售大模型生態(tài)聯(lián)盟正式發(fā)布

物美集團、抖音電商、抖音生活服務(wù)、百勝、麥當勞、中國飛鶴、海底撈、居然之家、南7-11、重慶百貨、百果園、波司登、天虹、三得利、絕味、名創(chuàng)優(yōu)品、NielsenIQ、電通共18家零售聯(lián)盟首批成員單位出席了當天的聯(lián)盟啟動儀式。

多點 DMALL 創(chuàng)始人、物美集團創(chuàng)始人 張文中博士

多點 DMALL 創(chuàng)始人、物美集團創(chuàng)始人張文中博士指出，零售大模型生態(tài)聯(lián)盟對于零售企業(yè)來說是抱團取暖，共享聯(lián)盟內(nèi)的技術(shù)成果和最佳實踐，降低企業(yè)成本，是當下零售企業(yè)擁抱 AI 的最好選擇。“我們必須全面擁抱 AI，不僅是為了更好的未來，而且是為了生存”，張文中博士說。

火山引擎汽車行業(yè)總經(jīng)理 楊立偉

除零售大模型生態(tài)聯(lián)盟外，汽車大模型生態(tài)聯(lián)盟也迎來了領(lǐng)克汽車、吉利銀河、幾何汽車、上汽榮威、上汽名爵、雄獅科技、大圣科技等多位新成員。火山引擎汽車行業(yè)總經(jīng)理楊立偉介紹，當前，火山引擎正與聯(lián)盟成員就新一代 AI 汽車行業(yè)定義、行業(yè)評測標準發(fā)布以及跨終端行業(yè)交流和共創(chuàng)等方向進行密切協(xié)作。

火山引擎 AI 創(chuàng)造者大賽啟動

此外，火山引擎還宣布首次舉辦 AI 智能體商業(yè)賽事“火山引擎 AI 創(chuàng)造者大賽”，本次大賽由火山引擎攜手領(lǐng)克汽車與英特爾聯(lián)合主辦、吉利研究院協(xié)辦，鼓勵開發(fā)者及技術(shù)愛好者利用豆包大模型和扣子專業(yè)版，針對領(lǐng)克汽車的真實業(yè)務(wù)場景，開發(fā)出具有實際應(yīng)用價值的智能體解決方案。

吉利汽車集團營銷數(shù)字中心負責人 沈穩(wěn)杰

吉利汽車集團營銷數(shù)字中心負責人沈穩(wěn)杰介紹，在豆包大模型幫助下，領(lǐng)克汽車實現(xiàn)了智慧邀約坐席、AI 對練&內(nèi)訓、AI 銷售助手、智慧經(jīng)營報表以及 AI 用車說明書等多項基于模型能力的功能，以大模型為銷售顧問提供諸如實時數(shù)據(jù)分析、客戶行為預(yù)測、客戶對練和評價總結(jié)以及個性化銷售策略建議等服務(wù)，通過模擬銷售場景中客戶對話，幫助銷售顧問提升問題應(yīng)對能力，全面提升了銷售能力。

  03.

 全棧AI服務(wù)升級 

 大模型落地再提速 

為了幫助企業(yè)將大模型能力與業(yè)務(wù)場景需求進行適配，火山引擎公布一系列產(chǎn)品升級，幫助企業(yè)更便捷地落地大模型。

火山引擎智能算法負責人、火山方舟負責人 吳迪

火山引擎智能算法負責人、火山方舟負責人吳迪介紹，一站式大模型服務(wù)平臺火山方舟最新推出全周期安全可信方案，支持身份認證、數(shù)據(jù)保密、環(huán)境隔離等，構(gòu)建大模型安全“堡壘”。聯(lián)網(wǎng)、內(nèi)容插件能力再升級，提升搜索能力、可獲取更多優(yōu)質(zhì)內(nèi)容，RAG 知識庫插件進一步強化，更強知識庫文檔解析與檢索能力，支持豐富場景，令企業(yè)應(yīng)用更為靈活自如。

智能體將是企業(yè)未來應(yīng)用的關(guān)鍵載體，大模型時代，只有讓不同類型的企業(yè)快速、靈活的構(gòu)建企業(yè)級智能體，模型才能真實在業(yè)務(wù)中落地。扣子專業(yè)版讓企業(yè)實現(xiàn)一句話“捏個 Bot”的對話型智能體，也能實現(xiàn)通過低代碼編排構(gòu)建復(fù)雜的專家型 Bot。同時，扣子專業(yè)版還為企業(yè)用戶提供專業(yè)級 SLA、接入更多模型、以及更高配額。扣子專業(yè)版發(fā)布1個月時間，共計新增1萬多用戶開通服務(wù)，日均調(diào)用量達到50萬次。

沐瞳智能服務(wù)負責人 張文文

沐瞳智能服務(wù)負責人張文文提到，沐瞳與火山引擎攜手探索 AI+智能應(yīng)用服務(wù)化方向，將豆包大模型能力應(yīng)用于旗下游戲的 AI 實時判罰場景，基于游戲內(nèi)聊天文本對辱罵/攻擊性發(fā)言進行識別。在此過程中，豆包大模型表現(xiàn)出效果好、成本省、收益正、服務(wù)優(yōu)等明顯優(yōu)勢。沐瞳將會繼續(xù)與火山引擎合作，以大模型能力優(yōu)化游戲開發(fā)、提升游戲品質(zhì)，為玩家創(chuàng)造更多激動人心的體驗。

火山引擎副總裁 張鑫

火山引擎副總裁張鑫介紹了企業(yè)專屬 AI 應(yīng)用創(chuàng)新平臺 HiAgent 的最新能力。HiAgent 支持通過混合部署方案讓知識庫留在本地，企業(yè)可以根據(jù)業(yè)務(wù)需求選擇調(diào)用云上或本地的模型，還能通過其內(nèi)置的大模型防火墻和數(shù)據(jù)防泄密機制確保數(shù)據(jù)安全；HiAgent 還為客戶提供了企業(yè)專屬的定制擴展能力，支持將開發(fā)出來的 Agent 與原有的業(yè)務(wù)系統(tǒng)進行靈活集成。

浙江大學求是特聘教授、信息技術(shù)中心主任 陳文智

浙江大學求是特聘教授、信息技術(shù)中心主任陳文智表示，在自研 OpenBuddy 模型，以及豆包大模型等極具性價比的商業(yè)模型及智能體的共同賦能下，浙大創(chuàng)建了“浙大先生”智能體應(yīng)用開發(fā)平臺，并搭建了 AI 科學家、慧學外語、AI 百事通、數(shù)字教師等多個大模型校園應(yīng)用場景。后續(xù)浙大將繼續(xù)攜手火山引擎，共同打造每個人的 AI 專屬智能體，為校園帶來交互模式、知識復(fù)用、數(shù)據(jù)連接以及決策創(chuàng)新等更多方面變革。

火山引擎云基礎(chǔ)產(chǎn)品負責人 羅浩

大模型從探索走向應(yīng)用，云基礎(chǔ)設(shè)施的支撐不可或缺。火山引擎云基礎(chǔ)產(chǎn)品負責人羅浩表示，火山引擎 AI 全棧云依托與字節(jié)跳動的海量資源共池，從誕生起所有 IaaS、PaaS 層資源，以及推薦算法、數(shù)智平臺等中臺體系產(chǎn)品，都生長于同一朵云上。數(shù)據(jù)中心、軟硬件基礎(chǔ)架構(gòu)的統(tǒng)一，避免了“算力孤島”和“數(shù)據(jù)孤島”問題，結(jié)合火山引擎自研服務(wù)器、自研 DPU 卡、調(diào)度算法等技術(shù)能力，火山引擎 AI 全棧云在性能、穩(wěn)定性和成本上具備了更大的優(yōu)勢。在模型推理場景中，可針對不同體量模型，提供類型豐富、靈活供應(yīng)的海量 GPU 推理資源；支持超低延時調(diào)用豆包大模型，訪問質(zhì)量穩(wěn)定可控。

通過強化豆包大模型“更強模型、更低價格、更易落地”的優(yōu)勢、成立行業(yè)聯(lián)盟、推動生態(tài)共建，火山引擎將持續(xù)幫助企業(yè)加速落地 AI 能力，驅(qū)動商業(yè)模式變革，為行業(yè)的未來發(fā)展注入新的動力。下一站，2024火山引擎 AI 創(chuàng)新巡展將來到天津，帶來更多 AI 創(chuàng)新升級，攜手企業(yè)客戶推進 AI 轉(zhuǎn)型。