港人灣區生活

Hi, 请登录

富嶽 超級計算機助力,日本團隊推出 Fugaku-LLM 大模型

日本一傢產學研聯合研究團隊近日發佈瞭一款名為 Fugaku-LLM 的大型語言模型。該模型全球最快 Arm 架構超級計算機 「富嶽」 上訓練而成,展現瞭日本在科技領域的創新實力。Fugaku-LLM 模型是日本國內最大的語言模型,擁有 130 億參數,使用瞭富嶽超算的 13824 個計算節點,在 3800 億個 Token 上進行瞭深入訓練。該模型尤其在日語表達方面表現出色,已在日語 MT-Bench 模型基準測試中取得優異成績。目前,該模型已在 GitHub 和 Hugging Face 平臺上公開發佈,可供外部研究人員和工程師在遵守相關許可協議的前提下廣泛應用。

相关推荐

评论

  • 昵称 (必填)
  • 邮箱
  • 网址