海天瑞聲發(fā)布中文千萬輪對話語料庫DOTS-NLP-216
近年來,隨著數(shù)據(jù)處理技術的飛速進化以及計算能力的不斷提升,大模型及其在生成式人工智能中的應用得到了迅猛發(fā)展。這一領域的突破性進展不僅為各行各業(yè)帶來了巨大的變革潛力,也為我們對人工智能的未來發(fā)展充滿了無限想象。
【資料圖】
近期,Llama 2 發(fā)布的消息在AI圈引起了巨大轟動。在 Llama 2 官網(wǎng)公布的50余家合作伙伴中,作為唯一的中國企業(yè),海天瑞聲榜上有名,成為 Llama 2 全球合作伙伴。同時,海天瑞聲COO李科及CTO黃宇凱作為 Supporter,支持 Meta AI 的這種開源行為。可以讓每個人都能從這個技術中受益良多,并為技術帶來足夠的透明度、審慎性和可信性。
當前在中文對話領域,公開的數(shù)據(jù)集往往量少、分布有偏、價格昂貴甚至不能商用。導致一些大模型在中文對話方面的能力,相比英文對話略遜一籌。尤其是在一些需要比較深的中文語言理解能力的對話場景,無論開源的還是閉源的大模型,都往往表現(xiàn)不佳。
海天瑞聲正式推出「中文千萬輪對話語料庫DOTS-NLP-216」。真實場景采集,符合中文表達習慣的自然對話數(shù)據(jù),將為中文大語言模型(LLM)帶來新動能。我們致力于在安全合規(guī)的基礎上,為大模型提供更好的性能和魯棒性,幫助企業(yè)更輕松的構建高質量生成式AI應用。
數(shù)據(jù)集優(yōu)勢:
·中文多輪對話:符合中文表達習慣,真實場景采集的自然對話
·超大規(guī)模:上億級 token
·立等可取:成品數(shù)據(jù)集
·自有版權:安全合規(guī),可授權商用
數(shù)據(jù)集詳情:
這是一個符合中國人表達習慣的自然對話數(shù)據(jù)集,共計約1,0000,000輪,上億級token,包含正式&非正式風格對話,使用偏口語化自然表達。覆蓋工作、生活、校園等場景,及金融、教育、娛樂、體育、汽車、科技等領域。
在數(shù)據(jù)集構成上,DOTS-NLP-216包含了對真實場景的對話采集,及高度還原真實場景的模擬對話這兩種方式,兼顧分布的代表性、多樣性和樣本規(guī)模。
樣例:
據(jù)悉,海天瑞聲近期還發(fā)布了再融資預案,將建設不少于10大類型的大模型數(shù)據(jù)集系列產品,用于大語言模型、多模態(tài)大模型的訓練和大模型評測。
標簽:
- 01 康達新材:公司暫無產品應用于3D打印領域
- 02 仰望U8動力參數(shù)曝光,搭載2.0T前后四電機,最大扭矩1280牛米
- 03 高溫工況:研判全域550伏級電壓平臺比亞迪唐DM-p技術優(yōu)勢!
- 04 售99.98萬元,奧迪e-tron GT正式上市
- 05 恒大汽車2年虧840億,總負債1800億,如何翻身?
- 06 MINI發(fā)布全新中控系統(tǒng),冰激凌事件后,用戶能否對MINI重拾興趣?
- 07 濟南:故事生動 演講精彩 全市職工演講比賽落幕
- 08 山東省成武縣:“賽馬機制”激活人才成長成才“一池春水”
- 09 達安基因2023年上半年歸母凈利減少88.68%
- 010 香料生產廢水處理系統(tǒng)