吴忠躺衫网络科技有限公司

0
  • 聊天消息
  • 系統消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發帖/加入社區
會員中心
創作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

訊飛星辰MaaS平臺完成全新升級

訊飛開放平臺 ? 來源:訊飛開放平臺 ? 2024-11-22 10:38 ? 次閱讀

高質量數據的助攻,讓微調大模型青出于藍而勝于藍!

海量數據的預訓練,讓通用大模型擁有十八般武藝,幾乎能夠輕松應對所有問題。但面向特定行業與場景,模型效果卻難以讓人滿意,問題同樣也是數據。

通過將特定數據“投喂”給通用大模型,在保持“通才”優勢的基礎上,微調大模型輕松兼容行業“專才”的優勢,指哪打哪。但訓練專屬大模型,看似簡單,背后需要從數據、算力到微調工具等一系列支撐。 訊飛星辰MaaS平臺已匯集訊飛星火、Llama3、SD-XL等20+行業內知名的優質模型,無需復雜調整或重新訓練,甚至零代碼也可能完成微調。 圍繞數據管理、模型微調、評估、托管、推理服務,訊飛星辰MaaS平臺提供了完善大模型全生命周期管理,覆蓋內容創作、代碼、邏輯推理等多場景。近期,模型與數據集豐富度,以及功能特性再次完成全新升級。

微調模型更豐富:支持星火系列大模型及多個優質開源大模型

數據集構建更輕松:基本支持行業主流數據集,可實現數據批量處理

微調體驗顯著提升:提供靈活可用的全棧工具鏈,讓大模型效果符合預期

01豐富模型,滿足多樣業務場景

訊飛星辰MaaS平臺已匯集星火、Llama3等行業優質模型,讓每一個場景需求都能找到合適的模型搭子。本次升級,新加入了Spark Max、Spark Mini、Spark Tiny等星火自研模型,讓模型“隊伍”再次壯大。

Spark Max適用于對內容質量和知識專業性要求高的業務場景,如高端內容創作、專業知識服務等。Spark Tiny的部署和精調成本在星火系列模型中最具性價比,在對成本較為敏感但又需要一定性能支持的場景表現良好,比如小型創業公司的在線客服系統,能在滿足性能需求的同時節省成本。

同時,平臺還引入了書生系列、Qwen2.5系列等多個開源模型的精調,給開發者提供更多選擇。

模型學習如何在特定任務中做出正確的判斷?首發文本分類的bert模型,可以分析文本特征后進行分類,將數據提供給bert模型進行微調后的分類器效果非常精準,而且能夠直接在Spark API中進行應用。

02夯實數據工程,提效加速更易用

數據量的大小和質量高低是大模型產業發展的關鍵,也是決定大模型是「專家」或是「磚家」的一條分界線。大模型微調過程中,數據集就像老師教課時用的書和資料。這些書和資料里有很多例子和題目,可以幫助學生(也就是大模型)更好地學習和理解新知識。

通過選擇合適的數據集構建方法,并遵循關鍵步驟進行操作,可以顯著提升微調效果,使模型更好地適應新任務。但開發者在數據構建中很容易遇到不少難題:只有文本數據、無問答對數據,數據量少,沒辦法判斷數據質量、不知道如何優化數據集、積累數據困難。

基于問答抽取、數據增強、prompt工程等維度出發,訊飛星辰MaaS平臺構建了全方位的數據工程能力,幫助用戶輕松構建高質量數據。以數據增強為例,支持常見文本生成、語義理解、知識問答數據泛化,擴展數據集數量;支持混合訓練(平臺自動添加數據集)。

大模型微調過程中,因為不同的任務需求、數據來源和處理方式會導致數據集的結構和內容有所不同。不同的微調框架可能支持不同的數據集格式。

現在,訊飛星辰MaaS平臺的數據集格式擴充,已支持ShareGPT、Alpaca格式數據集,實現了對幾乎所有行業主流數據集格式的支持。無論你的數據集什么樣,在訊飛星辰MaaS平臺上都能訓。

如果你不想或者來不及準備測試集,也不用慌。訊飛星辰MaaS平臺支持從訓練集中拆分出一定比例,在訓練完成后,平臺會自動把拆出來的這部分數據拿去做驗證,就可以直觀的看到微調效果展示。

當我們有大量數據需要處理時,而不是一次只處理一條數據,可以把很多數據一起“放”進模型中,讓模型一次處理多條數據。現在,訊飛星辰MaaS平臺最多支持10個模型同時在線批量推理,大大提高了數據處理的效率。

03擴展功能邊界,輔助創新更專業

選好了合適模型,數據準備好后,進入到具體的微調環節,如何讓模型的功能更強大、效果符合預期?訊飛星辰MaaS平臺還提供了多種讓人驚喜的功能。

?兼容OpenAI協議,「絲滑」搬家國產大模型

今年6月,OpenAI 停止向中國大陸地區提供 API 服務,對于依賴 OpenAI API 構建產品和服務的企業來說,無疑是一次技術上的挑戰。然而國內大模型已經大幅縮小了與 OpenAI 的差距,可以滿足大部分日常的場景。10月24日發布的訊飛星火4.0 Turbo七項核心能力在中文領域已全面超過GPT-4 Turbo,代碼能力和數學能力超越GPT-4o。

方便開發者進行能力遷移,訊飛星辰MaaS平臺現已兼容OpenAI協議,用戶之前用OpenAI的能力,可以一鍵切換成星火的能力,實現「絲滑」搬家。

?支持function_call 精調訓練,高效調用獨立工具

由于大模型的訓練數據有時間期限,無法了解最近發生的事情。因此,當用戶詢問模型一些它不了解的數據信息時,模型本身就無法給出答案。此時,function_call 就像放大器一樣,通過調用外部工具,增強大語言模型的能力。

使用function_call,可以讓模型能夠理解什么時候需要調用函數、調用哪種函數,以及如何正確地傳遞參數給函數,從而增強模型在實際應用中的實用性,使其能夠更好地與外部工具或系統進行交互。

?支持Loss曲線展示和裁判員模型效果評估對比,模型效果隨時評估

大模型的調試評估不能等精調完再檢查,要在過程中就把握好。

訊飛星火系列模型已支持Loss曲線展示,在微調模態訓練過程中即可通過精細化的數據配比和動態調整,在提升目標領域能力的同時,最大限度避免災難性遺忘,保持模型的全面性能。

如果你選擇了多個大模型進行微調訓練,不知道最終該用哪一個。訊飛星辰MaaS平臺提供了裁判員打分模型,基于星火最優模型提供的評估報告,評判模型效果的好壞。

面向專業開發者的更多需求,訊飛星辰MaaS平臺還支持部分高級參數,支持分詞長度、Lora Merge,UnSloth等特性配置。

訊飛星辰MaaS平臺之外,訊飛星火還構建了豐富且高性價比API矩陣。目前,Spark Pro版本每百萬token僅需5元,并支持128K上下文;Ultra和Max 均提供Batch版本 API。

聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規問題,請聯系本站處理。 舉報投訴
  • 開源
    +關注

    關注

    3

    文章

    3408

    瀏覽量

    42714
  • 訊飛開放平臺

    關注

    0

    文章

    13

    瀏覽量

    11568
  • 大模型
    +關注

    關注

    2

    文章

    2551

    瀏覽量

    3174

原文標題:大模型人人皆可“煉”,訊飛星辰MaaS平臺精調門檻再降低

文章出處:【微信號:訊飛開放平臺,微信公眾號:訊飛開放平臺】歡迎添加關注!文章轉載請注明出處。

收藏 人收藏

    評論

    相關推薦

    科大將發布醫療大模型升級

    近日,科大宣布了一項令人矚目的計劃:在2025年上半年,公司將正式發布基于星火X1的醫療大模型升級版。這一消息無疑為醫療科技領域注入
    的頭像 發表于 01-17 09:57 ?133次閱讀

    星火4.0 Turbo七大能力全面提升

    近日,科大發布了當前全國產算力平臺上唯一的深度推理大模型——星火X1,并率先應用于教育、醫療等剛需場景。
    的頭像 發表于 01-16 11:02 ?266次閱讀

    科大即將發布星火深度推理模型X1

    近日,科大飛在1月7日成功舉辦的辦公智能體產品升級發布會上,宣布了一項令人振奮的新進展。據科大官方透露,公司將于1月15日正式對外發布其最新的“
    的頭像 發表于 01-08 10:30 ?335次閱讀

    科大辦公智能體產品升級發布

    近日,科大辦公智能體產品升級發布會,在北京中關村國際會議中心如期舉辦。圍繞智慧辦公新范式,多款辦公智能體同時升級發布,賦能專業用戶創新效能。“知識中臺、AI搜索、星火人設、虛擬數字
    的頭像 發表于 01-08 09:55 ?236次閱讀

    科大AI虛擬人交互平臺榮獲行業最高評級

    近日,科大的AI虛擬人交互平臺順利完成中國信通院人工智能研究所組織的大模型數字人基礎能力分級測試,并獲得最高等級L5認證,系國內首批。
    的頭像 發表于 12-13 11:39 ?369次閱讀

    科大發布星火4.0 Turbo大模型及星火多語言大模型

    近日,科大正式推出了其最新研發成果——星火4.0 Turbo大模型。這一發布不僅標志著科大飛在人工智能領域的又一次重大突破,也預示
    的頭像 發表于 10-24 13:58 ?474次閱讀

    科大發布星火4.0 Turbo:七大能力超GPT-4 Turbo

    10月24日,在科大全球1024開發者節上,科大董事長劉慶峰正式發布了星火大模型的最
    的頭像 發表于 10-24 11:39 ?559次閱讀

    星火大模型V4.0正式發布

    日前,星火V4.0正式發布,升級成為更懂你的AI助手!星火4.0 API同步上線,Ultra版本首次公開發布!
    的頭像 發表于 10-14 10:06 ?896次閱讀

    科大星火APP/Desk全新升級

    星火V4.0 如期而至,升級成為更懂你的AI助手。
    的頭像 發表于 09-14 14:41 ?2330次閱讀

    科大AI學習機暑期重磅升級

    。得益于這些大獎AI技術的支撐,科大AI學習機自2019年問世以來,即持續引領行業發展,開創了個性化精準學這一革命性學習方式。 ? 6月27日,科大發布全面
    的頭像 發表于 07-08 09:38 ?800次閱讀

    中國電信與昆侖萬維等聯合發布星辰MaaS平臺

    在近日于福州舉辦的第七屆數字中國建設峰會智算云生態大會高峰論壇上,中國電信攜手昆侖萬維等合作伙伴,共同推出了星辰MaaS平臺(Model as a Service,模型即服務)。該平臺
    的頭像 發表于 06-07 09:18 ?1236次閱讀

    星火長文本功能全新升級

    科大近日宣布,其首個長文本、長圖文、長語音大模型已完成全新升級。這一大模型不僅具備強大的學習能力,可以快速吸收海量文本、圖文資料以及會議錄音等多元化信息,更能在各行業場景中提供精準
    的頭像 發表于 05-06 11:22 ?598次閱讀

    科大華中總部已封頂 年內交付使用

    科大華中總部已封頂 年內交付使用 科大華中總部位于武漢經開區車谷資本島,投資額50億;計劃建成科大
    的頭像 發表于 04-16 14:49 ?1640次閱讀

    云知聲AIGC內容創作平臺藍藻AI全新升級

    近日,云知聲AIGC內容創作平臺藍藻AI宣布完成全新升級,并推出超值會員服務,旨在為廣大創作者提供更豐富多元的聲音選擇,助力內容創作更高效、更精彩。此次升級聚焦于AI聲音克隆和AI配音
    的頭像 發表于 03-16 14:05 ?1313次閱讀

    醫療遞交港股IPO申請

    近日,醫療AI解決方案提供商醫療正式向港交所遞交了IPO申請,其IPO備案資料已由證監會接收。科大作為
    的頭像 發表于 03-05 13:49 ?842次閱讀
    百家乐赌博器| 百家乐官网平台凯发| 永济市| 江山市| 免费百家乐官网奥秘| 宁化县| 圣淘沙百家乐官网游戏| 百家乐官网声音不印网| 百家乐官网翻天快播粤语| 百家乐官网真人游戏开户| 网上百家乐官网哪里开户| 缅甸百家乐官网博彩真假| 百家乐官网打闲赢机会多| 利澳百家乐官网娱乐城| 茅台百家乐官网的玩法技巧和规则 | 香港百家乐官网马书| 百家乐官网游戏唯一官网网站 | 百家乐代理加盟| 巴黎百家乐地址| 名仕百家乐的玩法技巧和规则| 全讯网888| 明升娱乐 | 东阳市| 百家乐官网赌场公司| 风水24山组成| 百家乐八卦九| 大发888| 百胜百家乐官网软件| 新澳门百家乐官网软件下载| 亿酷棋牌世界下载手机版| 百家乐官网单注技巧| 新锦江百家乐官网娱乐网| 有24天星名的罗盘| 娱乐场百家乐大都| 大发888娱乐城官方网站lm0| 吕梁市| 百家乐官网单机游戏下| 百家乐有电脑游戏吗| 二八杠手法| 鹰潭市| 百家乐官网最好投注法是怎样的去哪儿能了解一下啊 |