大模型落地場景走向縱深，騰訊宣布模型全矩陣產(chǎn)品升級

7月5日，2024世界人工智能大會·騰訊論壇在上海世博中心舉辦，騰訊公布大模型的最新進展和落地案例。

目前，騰訊圍繞大模型已經(jīng)構(gòu)建起全鏈路的產(chǎn)品矩陣，包括底層基礎(chǔ)設(shè)施、自研大模型、模型開發(fā)平臺、智能體開發(fā)平臺和面向場景的多元智能應(yīng)用等，幫助企業(yè)客戶將大模型快速落地到場景中去。

騰訊集團副總裁蔣杰表示，騰訊將人工智能視為公司長期戰(zhàn)略。從語音到圖像，再到大模型，每一次人工智能的浪潮里，騰訊始終堅持以自主技術(shù)創(chuàng)新為核心動力，結(jié)合場景推動AI的研究與落地。經(jīng)過近一年的迭代升級，騰訊混元大模型在國內(nèi)率先采用MoE架構(gòu)，參數(shù)量已達到萬億，tokens數(shù)量超過7萬億，居國內(nèi)大模型第一梯隊。騰訊將發(fā)揮“專心致志、做好比特”的專長，將更多的“比特”轉(zhuǎn)化成智能生產(chǎn)力，推動大模型等前沿人工智能技術(shù)在實體經(jīng)濟、文化保護、科學(xué)發(fā)現(xiàn)等領(lǐng)域的應(yīng)用，為全社會的智能升級做好技術(shù)支持。

騰訊云副總裁、騰訊云智能負(fù)責(zé)人、優(yōu)圖實驗室負(fù)責(zé)人吳運聲表示，通過混元大模型底座、TI平臺、知識引擎、圖像創(chuàng)作引擎、視頻創(chuàng)作引擎等產(chǎn)品的不斷迭代與發(fā)展，騰訊目前已經(jīng)圍繞辦公協(xié)同、知識管理、智能客服、營銷等全場景，為產(chǎn)業(yè)用戶提供全鏈路的模型服務(wù)，讓大模型真正實現(xiàn)落地，幫助企業(yè)提質(zhì)增效。

據(jù)介紹，騰訊混元大模型的單日調(diào)用Tokens已經(jīng)達到千億級別，單日調(diào)用次數(shù)超過3億，并在云上新開放了混元-lite 256k版本、vision多模態(tài)版本，以及代碼生成、角色扮演、functioncall等子模型和接口，滿足不同企業(yè)和開發(fā)者的需求。

大模型工具升級，加速落地產(chǎn)業(yè)場景

為了進一步降低大模型的使用門檻，今年5月，騰訊云發(fā)布了“大模型知識引擎”、“大模型圖像創(chuàng)作引擎”和“大模型視頻創(chuàng)作引擎”三款PaaS工具，讓企業(yè)能快速調(diào)用大模型的底層能力，構(gòu)建適合自身場景的應(yīng)用。

其中，知識引擎聚焦企業(yè)知識服務(wù)場景。通過該平臺，企業(yè)用自然語言，5分鐘就可以開發(fā)出一款知識服務(wù)應(yīng)用，快速在客服營銷、企業(yè)知識社區(qū)等業(yè)務(wù)場景落地。在本次論壇上，知識引擎發(fā)布了全新的多模態(tài)檢索能力，支持圖文互搜、以圖搜圖，能夠結(jié)合知識庫中檢索返回的圖文片段，給出圖文并茂的答案。同時，知識引擎進一步擴展了企業(yè)知識類型的覆蓋面，升級了泛BI對話式數(shù)據(jù)問答體驗，支持超大表格、多表場景的多步驟推理、多條件篩選、求和計算，并擴展支持對接客戶主流數(shù)據(jù)庫。

圖像創(chuàng)作引擎基于騰訊混元大模型底座，具備高質(zhì)量的AI圖像生成和編輯能力，能夠為企業(yè)客戶提供圖像風(fēng)格化、AI寫真等能力。目前，圖像創(chuàng)作引擎新增了商品背景生成、百變頭像、模特?fù)Q裝、百變換裝和線稿生圖等接口，大幅降低了營銷和影視行業(yè)的制作成本。

在視頻領(lǐng)域，視頻創(chuàng)作引擎推出復(fù)雜舞蹈編排算法，利用先進的3D建模技術(shù)和背部生成技術(shù)，上傳一張圖片，就可以讓人物流暢地進行轉(zhuǎn)身舞蹈，未來也將支持多人舞蹈的復(fù)雜編排。同時，視頻轉(zhuǎn)譯功能接入混元文生文大模型和 TTS 技術(shù)，大幅提升轉(zhuǎn)譯后音頻的自然度、相似度和語速效果。

面向想要自己訓(xùn)練大模型的行業(yè)客戶，騰訊云推出了向量數(shù)據(jù)庫和一站式機器學(xué)習(xí)平臺TI平臺等工具。騰訊云向量數(shù)據(jù)庫Tencent Cloud VectorDB每日支撐超過3700億次向量檢索請求，可支持千億級向量規(guī)模存儲，百萬級 QPS 及毫秒級查詢延遲，適用于大模型的訓(xùn)練推理、RAG場景、AI應(yīng)用以及搜索推薦服務(wù)，實現(xiàn)企業(yè)數(shù)據(jù)接入AI的效率比傳統(tǒng)方案提升10倍。

TI平臺提供從數(shù)據(jù)預(yù)處理、模型構(gòu)建、模型訓(xùn)練、模型評估到模型服務(wù)的全流程開發(fā)支持，幫助企業(yè)加速開發(fā)，降本增效。在TI平臺的助力下，閱文集團、瑞金醫(yī)院-上海市數(shù)字醫(yī)學(xué)創(chuàng)新中心等已經(jīng)訓(xùn)練出了自己的行業(yè)大模型。

閱文集團副總裁黃琰介紹，去年7月，閱文集團發(fā)布了國內(nèi)網(wǎng)絡(luò)文學(xué)行業(yè)首個大模型“閱文妙筆”。經(jīng)過近一年的探索實踐，妙筆大模型在輔助網(wǎng)文多模態(tài)創(chuàng)作、支持用戶與角色對話、網(wǎng)文AI多語種翻譯等方面均有實踐和落地。在大模型加持下，海外翻譯成本下降90%，效率提升近百倍，更多小語種市場獲得了增長機會，中國網(wǎng)文“一鍵出?！?、“全球追更”已成為可能。在此過程中，閱文也創(chuàng)新重塑了業(yè)務(wù)與模型優(yōu)化深度融合的協(xié)作流程，進一步實現(xiàn)了大模型的迭代優(yōu)化。

瑞金醫(yī)院-上海市數(shù)字醫(yī)學(xué)創(chuàng)新中心首席技術(shù)官黃飛躍介紹，基于瑞金醫(yī)院高品質(zhì)的醫(yī)學(xué)數(shù)據(jù)，團隊構(gòu)建了面向惠民和助醫(yī)的醫(yī)學(xué)大模型群。去年發(fā)布了瑞金醫(yī)學(xué)大模型，推出體檢報告生成和電子病歷生成系統(tǒng)，并在瑞金院內(nèi)應(yīng)用。以體檢報告生成為例，平均每5秒即可自動生成一份總檢報告，為醫(yī)生節(jié)約50%+的撰寫時間。

今年，瑞金醫(yī)院進一步發(fā)布了瑞金AI醫(yī)生。基于瑞金醫(yī)院深厚的醫(yī)學(xué)沉淀，AI醫(yī)生能夠?qū)崿F(xiàn)“見多識廣、望聞問切”，一方面，AI醫(yī)生學(xué)習(xí)了豐富多樣的疾病案例和領(lǐng)域?qū)I(yè)知識，成為一個專精特全的醫(yī)學(xué)專家；另一方面，通過多模態(tài)交互方式，AI醫(yī)生可以直接在線上使用，實現(xiàn)望體征、聞聲音、問病情、切病因，真正成為用戶身邊的健康助手。

開源全球最大個甲骨文多模態(tài)數(shù)據(jù)集，助力甲骨文研究

在當(dāng)天的論壇上，“數(shù)字甲骨共創(chuàng)中心”宣布將全球最大的甲骨文多模態(tài)數(shù)據(jù)集正式開源。該數(shù)據(jù)集包含一萬片甲骨的拓片、摹本，以及甲骨單字對應(yīng)位置、對應(yīng)字頭、對應(yīng)隸定字以及辭例分組、釋讀順序等數(shù)據(jù)?；谠摂?shù)據(jù)集，研究人員可開發(fā)甲骨文檢測、識別、摹本生成、字形匹配以及釋讀等方向的智能算法，助推甲骨文研究加速數(shù)字化和智能化。

據(jù)介紹，數(shù)字甲骨共創(chuàng)中心由安陽師范學(xué)院甲骨文信息處理教育部實驗室、騰訊SSV數(shù)字文化實驗室、騰訊優(yōu)圖實驗室、中國社會科學(xué)院甲骨學(xué)殷商史研究中心、中國社會科學(xué)院考古研究所安陽工作站、廈門大學(xué)多媒體可信感知與高效計算教育部重點實驗室、鄭州大學(xué)漢字文明研究中心等單位共同發(fā)起建立，吸納了來自中國社會科學(xué)院古代史研究所、復(fù)旦大學(xué)、英國劍橋大學(xué)、法國高等研究實踐學(xué)院、日本立命館大學(xué)、美國羅格斯大學(xué)、加州大學(xué)洛杉磯分校等高校和研究機構(gòu)的專業(yè)科研力量支持。

此次開源的甲骨文多模態(tài)數(shù)據(jù)集集合了甲骨文數(shù)字化研究的最新成果。一方面，該數(shù)據(jù)集吸收了當(dāng)前業(yè)界最先進的甲骨文研究資料，包括劍橋大學(xué)博士秦培超發(fā)布的鏡元甲骨文字庫，該字庫考慮了人工智能標(biāo)注需求的字庫進行了細(xì)粒度的異體字標(biāo)識；以及清華大學(xué)黃天樹教授發(fā)布的《摹本大系》，得益于其具有大量甲骨片清晰字形，降低了標(biāo)注的難度。

另一方面，AI相關(guān)技術(shù)的應(yīng)用也為數(shù)據(jù)集的信息豐富提供了支撐。比如由騰訊優(yōu)圖實驗室聯(lián)合安陽團隊開發(fā)的甲骨字檢測模型，可以對甲骨片上的字進行一個初步的標(biāo)注；字形降噪與匹配模型，為檢索提供了最直接的方法；甲骨校重算法，可以實現(xiàn)拓片與大系摹本的配準(zhǔn)，使得大系摹本可以直接輔助拓片的標(biāo)注；同時雙方聯(lián)合打造的協(xié)同創(chuàng)新平臺，也大大提升了數(shù)據(jù)標(biāo)注的效率。

騰訊數(shù)字文化實驗室負(fù)責(zé)人舒展在分享中介紹，守護中華文脈，煥活漢字源頭。用人工智能助力甲骨文“破譯”和活化利用，我們一直在探索，將“甲骨文AI破譯”納入探元計劃支持的創(chuàng)新探索型項目的定向命題。聯(lián)合數(shù)字甲骨共創(chuàng)中心發(fā)布甲骨文AI破譯需求，揭榜掛帥，期待與有技術(shù)儲備、有意愿共創(chuàng)、致力于AI助力甲骨文破譯的科研機構(gòu)形成解決方案。經(jīng)過遴選評審的共創(chuàng)伙伴將獲得資助，共創(chuàng)甲骨文AI考釋破譯的新算法、新工具、新方法。

近年來，騰訊持續(xù)探索數(shù)字科技與文化深度融合，運用前沿數(shù)字科技幫助文化遺產(chǎn)保護傳承，發(fā)起并推動了AI助力甲骨文研究、三星堆文物修復(fù)、國博數(shù)字人等多個項目，用數(shù)字技術(shù)推動文化遺產(chǎn)煥活。

AI也在持續(xù)助力天文探索。2021年，騰訊聯(lián)合國家天文臺，發(fā)起了“探星計劃”，基于優(yōu)圖實驗室的計算機視覺技術(shù)，用AI+云提高探星效率，輔助快速射電暴和近密雙星系統(tǒng)中脈沖星搜索。

快速射電暴是目前天文界研究熱點，相比脈沖星，快速射電暴因發(fā)現(xiàn)時間晚、AI訓(xùn)練數(shù)據(jù)少、出現(xiàn)頻率低，發(fā)現(xiàn)難度相比脈沖星要大很多。為此，優(yōu)圖團隊通過設(shè)計全新的端到端AI算法，引入多示例學(xué)習(xí)和大模型注意力機制，顯著提升了模型精度和數(shù)據(jù)處理速度。

截至目前，“探星計劃”從巡天觀測數(shù)據(jù)中發(fā)現(xiàn)了3顆快速射電暴、41顆脈沖星。

2024大模型十大趨勢，走入“機器外腦”時代

會上，騰訊研究院聯(lián)合上海交通大學(xué)、騰訊優(yōu)圖實驗室、騰訊云智能發(fā)布了《2024年AI大模型十大趨勢》報告。報告指出，人工智能正在迅速發(fā)展，大模型技術(shù)正成為賦能各行各業(yè)的關(guān)鍵。從算力底座、智力增強到人機協(xié)作，大模型正在重塑人類社會，成為人類可依賴的“外腦”。

十大趨勢包括算力底座、推理分析、創(chuàng)意生成、情緒智能、智能制造、游戲環(huán)境、移動革新、具身智能、開源共享、人機對齊等層面。

具體來說，算力底座的量變和提效為大模型行業(yè)的發(fā)展提供了算力的保障。海量GPU和新一代大模型的組合，使人工智能在三個方向上有了實質(zhì)性的飛躍：推理分析、創(chuàng)意生成和情緒智能。這意味著AI第一次擁有了類人的交互能能力，新一代AI正在成為人類的“機器外腦”，提供智力的外掛。

隨著大模型與人機協(xié)作的深入，個體創(chuàng)作的門檻進一步降低，越來越多的個體借助大模型外腦成為“斜杠青年”、“超級生產(chǎn)者”，甚至開啟自己的“一人企業(yè)”。端側(cè)模型的優(yōu)化將大幅提升提升移動設(shè)備的體驗，為大模型帶來了新的應(yīng)用入口。在工業(yè)領(lǐng)域，多模態(tài)通用感知技術(shù)正在提升生產(chǎn)力，而游戲與大模型的共生關(guān)系為Agent訓(xùn)練提供了新的舞臺。開源模型的成熟，為技術(shù)共享與創(chuàng)新提供了強大的生態(tài)支持。最后，人機對齊成為確保大模型安全與治理的核心議題，指引著人類走向一個更加智能、高效和倫理的未來。