[過去ログ] 【ChatGPT】AIチャット総合 Part10【Bing・Bard】 (1002レス)
前次1-
抽出解除 必死チェッカー(本家) (べ) レス栞 あぼーん

このスレッドは過去ログ倉庫に格納されています。
次スレ検索 歴削→次スレ 栞削→次スレ 過去ログメニュー
104
(1): 2023/11/22(水)09:23 ID:4pmrIqkH(1) AAS
@at_sushi_
Claude 2.1 のコンテキストが200Kになったのは良いが、精度はどうなのか?という研究

結論:
・90Kトークンあたりから急激に精度低下
・文書の先頭の内容は、常に正答

つまり、Claude 2.1 に15~20万文字程度の文章を入れ込めるようになったものの(GPT-4の約2倍)、質問文章が長ければ長いほど正答率が下がるので注意が必要です。

また、この点もGPT-4と変わらず、「質問文章の、どのあたりに正解となるべき記述があるのか」によって正答率も変わるということです。
画像リンク[jpg]:pbs.twimg.com

@at_sushi_
GPT-4 Turbo (128K) のテストはこちら。
省10
前次1-
スレ情報 赤レス抽出 画像レス抽出 歴の未読スレ AAサムネイル

ぬこの手 ぬこTOP 0.040s