MP3ファイルをダウンロード

内容紹介

yasukawa0713さんをゲストに、gpt-ossを支える技術（アーキテクチャ、RoPEとYaRN、MXPF4など）ついて語っていただいたエピソードです。

出演者

iwashi
yasukawa0713

話したネタ

• gpt-oss
• gpt-ossのモデルアーキテクチャ
• MoEの仕組みとメリット
• コンテキスト長を伸ばす工夫
• RoPEとYaRN
• 量子化とその手法
• MXFP4 とは
• gpt-oss で使われているトークナイザ
• BPE(Byte-Pair Encoding)とは
• Harmony Chat Format (HCF)とは何か、その概要
• Agentic Tool Use
• model cardで安全性周りで述べられていること
• gpt-oss の使用感
• rokadoc