ModelBuilder

ModelBuilder,是百度公司發布的模型定製工具。預置了最全面最豐富的大模型,也支持國內外第三方主流模型,總數量達到77個,是國內擁有大模型數量最多的開發平台。可以根據需要,兼顧效果、回響速度、推理成本等各種考慮,裁剪出適合各種場景的更小尺寸模型,並且支持精調和post pretrain。

2024年4月16日,ModelBuilder發布。

基本介紹

  • 外文名:ModelBuilder
  • 發布時間:2024年4月16日
發展歷史,主要功能,使用方式,

發展歷史

2024年4月16日,ModelBuilder發布。

主要功能

它可以根據開發者的需求定製任意尺寸的模型,並根據細分場景對模型進一步精調。據了解,ModelBuilder預置了多款大模型。包括旗艦版大模型ERNIE3.5、ERNIE4.0,輕量級大模型ERNIE Speed、Lite、Tiny;垂直場景的模型ERNIE Character、ERNIE Functions。並支持國內外第三方主流模型,總數量達到77個,是國內擁有大模型數量最多的開發平台。

使用方式

第一步:創建數據集。模型精調的效果很大程度依賴我們的數據質量。在這個案例中,原始數據只有180條,質量也不夠高。我們就需要用到三個功能:數據清洗、數據標註和數據增強。數據清洗,可以快速去除數據的空缺、亂碼等問題。數據標註方面,我們對作文增加了更多維度,比如內容深度、寫作手法等評價。數據增強功能,可以生成同類但不重複的數據,進行數據擴充。擴充後,ModelBuilder給我們生成了920條高質量數據。
第二步,就進入模型精調階段了。首先,我們需要選擇一個進行精調的基礎模型,這裡我們選擇了ERNIE Speed作為基礎模型。然後,我們根據平台推薦值來配置參數,這次數據接近1000條,按照推薦的疊代輪次,配置為10輪,然後就可以讓模型開始訓練了。
第三步:把模型部署在平台上,這樣整個精調過程就完成了。

熱門詞條

聯絡我們