日本語 Decision モデル "saihai" (采配) と、日本語 Decision モデルベンチマークの公開 - A Day in the Life

注意点として、saihai は日本語タスクを解きやすくするため、いくつかのベンチマークタスクの元データセットの train set を学習しているので、ベンチマークの点数は上がりやすくなっています (test set と重複するデータは、できる限り除いています)。その影響を調べた対照実験の結果は後半に載せています。表の見方は...

日本語 Decision モデル "saihai" (采配) と、日本語 Decision モデルベンチマークの公開 - A Day in the Life

この記事のキーワード

同じキーワードの記事

「FFXIV：白銀のワンダラー」ベンチマークソフトは12月下旬ごろにリリース。新しいキャラメイク機能もテスト可能

MSIノートPC、購入・応募でオリジナルグッズがもらえる 冬のキャンペーン開始

AIベンチマーク「Intelligence Index v5」発表、2つの新しいベンチマークと3つのアップグレード

昼はスローライフ、夜は宇宙ホラー『Life & Shadow: Celestial Call』Steamで98％好評の熱烈人気。星を観測してたら、星に観測されている

『ちいかわ』人気店が京都出店 ファン歓喜の店頭限定グッズと「事前予約」の注意点

診断名をつけないで！コンサルト時の注意点

ChatGPT、見られたくない会話をPINや生体認証で守る新機能が登場

C++やRustよりも高速に動作しメモリ使用量も少ないプログラミング言語「Goose」

Valveの開発者が公の場で「Half-Life」新作と思われるコード名を漏らす

読み込み14.9GB/sのPCIe 5.0対応SSD「SANDISK Optimus GX PRO 8100 NVMe SSD」の2TBモデルでベンチマークテストを実行してみたよレビュー

STARGLOW・TAIKI、KANON、ADAMがHEARTSTEEL「Live My Life」をカバー

次々と襲来する敵を撃退するサバイバルFPS「Sker Ritual」と，選択によって物語の展開が変化していくホラーADV「Home - A Unique Horror Adventure」がEpic Games Storeで無料配布中

ChatGPTやGeminiの性格診断結果をArtificial Analysisが公開、Gemini 4 Argonは媚びやすくClaude Fable 5.1は説得力がある

miletがドラマ「アナログナース」主題歌「My Voice, My Life」リリース、ライブ映像使ったMVも公開

宇垣美里のポッドキャスト番組が配信決定、“エンタメ処方箋”でリスナーの悩みに答える

同じ問題を解決してもAIによってコードの増加量に大きな差、AIモデルを比較するベンチマーク「Parsimony」が登場

本日開始「Androidのマイナンバーカード」さっそく登録、試してわかったiPhoneとの違いと注意点

東方神起・チャンミン、ロックアーティストとして帰還！3rdミニAL『All Of My Life』リリース

腎機能障害患者へのRA系阻害薬、Cr値上昇はどこまで許容？

PowerPointだけで、ここまで画像を直せるとは。スライドの上でそのまま、余計なものを消して切り抜けた

MSIノートPC、購入・応募でオリジナルグッズがもらえる冬のキャンペーン開始

『ちいかわ』人気店が京都出店ファン歓喜の店頭限定グッズと「事前予約」の注意点