はてなアンテナ
D言語関係のアンテナ
id:k_ahiru
グループ一覧
1/10ページ
▽
はてなダイアリー - ABAの日誌
●04/09 13:37
2025-04-08LLM の創造性を比較してみたい - ショートショート執筆ベンチマークLLM の能力を評価するベンチマークの多くは、客観的に測定可能で実用的な能力、例えばコーディング能力や数学的能力などに焦点を当てている。一方、創造性のような主観的な要素が強い能力を評価するベンチマークは限られている。その理由として、評価の主観性、再現性の難しさ、評価基準の設定の難しさ、評価者のバイアスといった課題が挙げられる。その中で、EQ-Bench のような感情知能を評価するベンチマークもあり、Creative Writing v3 は特に創造性に焦点を当てた評価を行っている。このベンチマークは、上記の課題に対して以下の対応策を取っている:複数の評価基準(ルーブリックスコア)と相対評価(Elo スコア)の組み合わせ32 の異なるプロンプトに対して各モデルが 3 回ずつ(合計 96 項目)
▽
はてなダイアリー - beruponの日記
●04/05 23:51
この広告は、90日以上更新していないブログに表示しています。
▽
D Win32 COM libraries
●03/30 11:58
Amazon Spring SaleAmazon tech salesAmazon Spring SaleAmazon tech sales
▽
andy’s D page
●01/09 23:40
2025 著作権. 不許複製
▽
Whenever construction in my heart !
●12/21 03:13
作者ホームページサービス(hp.vector)は終了いたしました。作者ホームページサービス(hp.vector)は終了いたしました。長らくのご利用、ありがとうございます。ご不明な点があれば、お問い合わせページをご覧の上、お問い合わせください。※15秒後にトップページに戻ります。(c) Vector HOLDINGS Inc.All Rights Reserved.
6.
次5>
0.
はてなアンテナトップ
8.
このページを友達に紹介
9.
このページの先頭へ
□
ヘルプ
/
お知らせ
□
ログイン
□
無料ユーザー登録
□
はてなトップ
(c) Hatena