[過去ログ]
最新ソフトで棋士の指し手一致率を調査した結果 2 (1002レス)
最新ソフトで棋士の指し手一致率を調査した結果 2 http://mevius.5ch.net/test/read.cgi/bgame/1566706590/
上
下
前
次
1-
新
通常表示
512バイト分割
レス栞
このスレッドは過去ログ倉庫に格納されています。
次スレ検索
歴削→次スレ
栞削→次スレ
過去ログメニュー
6: ◆f7OmZ9ucu2 [sage] 2019/08/25(日) 16:09:15 ID:drQ8F6x8 次に相手一致率の算出の仕組を説明しておく >>1でデータ数が一番少ない三浦九段を例にするとこんな仕組になっている 算出する度にこうした表にしているわけではないが、こうした原理で、三浦九段の一致率74.1%と相手一致率74.8%が算出されている https://i.imgur.com/pnUiqNL.png http://mevius.5ch.net/test/read.cgi/bgame/1566706590/6
7: ◆f7OmZ9ucu2 [sage] 2019/08/25(日) 16:09:48 ID:drQ8F6x8 ほかにも説明が必要な箇所はあると思うが、とりあえず重要な点については説明が足りたのでないだろうか ここで、テンプレごときを一端終了し気付いたことがあれば、また追加していきたい http://mevius.5ch.net/test/read.cgi/bgame/1566706590/7
8: 名無し名人 [] 2019/08/25(日) 16:21:56 ID:Ayy8DYu9 一致率ってソフトの最善手と一致する率のことなの? Aは最善が多かったけど大きな悪手を1回だけやる Bは最善が多くなかったけど大きな悪手は1回も指さなかった この場合Bが勝っても一致率はAが上になっちゃう? 勝敗に直結する大きな悪手を指さない方が重要では? http://mevius.5ch.net/test/read.cgi/bgame/1566706590/8
9: ◆f7OmZ9ucu2 [sage] 2019/08/25(日) 16:31:43 ID:drQ8F6x8 >>8 大きな悪手を指さないほうが重要なのはその通りなんだけどね だけど、プロ棋士は最善手と思って指している場合がほとんどなので、気付かなかった手を相手に指されてから自分が指した手が悪手だったことが分かるわけよ だから、その手が大悪手になるか軽傷ですむかは結果論なんだな つまり、1局だけなら色んなケースがあるけど、データ局数が増えるほど一致率が高い棋士より一致率が低い棋士のほうが悪手を多く指しているという結論になるんじゃないかな 大悪手の数にしても同じことだね http://mevius.5ch.net/test/read.cgi/bgame/1566706590/9
10: ◆f7OmZ9ucu2 [sage] 2019/08/25(日) 16:39:07 ID:drQ8F6x8 例えば、プロ棋士の対局を観戦してるとき、ソフトの評価値が出てくる ソフトの最善手は簡単に指せるような手でないけど、それ以外の手はダメというようなことがしばしばある そのときにソフトの最善手を指せる棋士はやっぱし強い棋士なんだな 一致率は棋士のこうした勝負の分かれ目に強いところを評価している側面もあるんじゃないかな http://mevius.5ch.net/test/read.cgi/bgame/1566706590/10
11: 名無し名人 [sage] 2019/08/25(日) 16:39:40 ID:Ayy8DYu9 「大悪手の少なさ」は調査する価値のある重要なものだと思ったんだけど 無理だったらいいよ http://mevius.5ch.net/test/read.cgi/bgame/1566706590/11
12: ◆f7OmZ9ucu2 [sage] 2019/08/25(日) 17:00:24 ID:drQ8F6x8 かなりムズいことは確かだね 大悪手の定義から、その大悪手がプロでも無理からぬ大悪手なのかプロにあるまじき大悪手なのか、本当に大悪手なのか解析が足りないだけなのではないのか等々、1局の解析を終える前に日が暮れてしまうんじゃないかな 神が解析したら負けた側には必ず負けを決定付けた大悪手があるわけで、そうした意味では大悪手率を調べることは勝率を調べることとあまり変わらないと思っているよ http://mevius.5ch.net/test/read.cgi/bgame/1566706590/12
13: 名無し名人 [sage] 2019/08/25(日) 17:06:55 ID:pGRg7V+g そもそも最善もソフトによって変わるからねえ http://mevius.5ch.net/test/read.cgi/bgame/1566706590/13
14: 名無し名人 [] 2019/08/25(日) 17:23:59 ID:ZVP0Z3pa 最新ソフトとは言ってもソフトAで次善手と出た手がソフトBでは最善手ということはよくあると思う 対してソフトAで大悪手だった手がソフトBで最善手になることはほとんどないだろう だからソフトの次善手は真の最善手である可能性もある手という意味で悪手とは明確に差があるしこれは結果論ではないと思う http://mevius.5ch.net/test/read.cgi/bgame/1566706590/14
15: ◆f7OmZ9ucu2 [sage] 2019/08/25(日) 17:24:00 ID:drQ8F6x8 これもテンプレにしておきますか 将棋は最善手を見逃したほうが大概負ける 最善手率が高ければ高いほど勝率がよくなる 本当の最善手率はわからないが、最強ソフトとの一致率を代用したらどうか こうして、強さの指標として一致率を試すことになった 今年の対局で集計したのは880局で、そのうち一致率が高かった側が勝ったのが818局だった(勝率93%) つまり、相手より一致率が低くて勝った例は7%しかない また、60%未満の一致率で勝った例は3.6%しかない 急所で間違えなければ一致率40%でも勝てるようなことはないのだ 反対に、一致率80%台で負けたのは7%しかない 一致率90%以上なら勝率97%になっている このように一致率が強さの指標として機能していることがハッキリとした 8/11日現在の一致率集計データ https://i.imgur.com/BE6S9wx.png http://mevius.5ch.net/test/read.cgi/bgame/1566706590/15
16: 名無し名人 [sage] 2019/08/25(日) 17:28:05 ID:pGRg7V+g これ見ると相手の最善率低いしやっぱり藤井は強い相手と多くやってないから 最善が指しやすいわけだ http://mevius.5ch.net/test/read.cgi/bgame/1566706590/16
17: 名無し名人 [sage] 2019/08/25(日) 17:39:45 ID:TwlR4oFB 最前だけでなく2番目3番目も正解にしないとな http://mevius.5ch.net/test/read.cgi/bgame/1566706590/17
18: 名無し名人 [] 2019/08/25(日) 17:55:24 ID:xw7W/nEQ >>14 これだろ 一致率の欠点って調査に使ったソフトと棋風が似てる棋士だけ有利になるところじゃねーか? 特に今はソフトで研究するのが主流になってるから調査ソフトと同じソフトを研究で使ってる棋士と別のソフトを研究に使ってる棋士とで同じ強さでも一致率変わってくるんじゃねーの? 複数のソフトで調べて平均を取るとかするなら分かるんだけど そうじゃないなら最善手-10くらいまでの手は別のソフトなら最善手の可能性ありとして扱いを変えたほうがいい まあ調査が凄い面倒なことになりそうだからある程度は妥協するしかないんだろうけど http://mevius.5ch.net/test/read.cgi/bgame/1566706590/18
19: 名無し名人 [sage] 2019/08/25(日) 17:55:30 ID:Ayy8DYu9 試しに単純に評価値の下落の大きいものをチェックしてみる手はあるんじゃないか? 500点差の悪手を指した場合の勝率、1000点差の悪手を指した場合の勝率・・・ なんかをデータとして出していったら 何点差の悪手が大悪手としてふさわしいかも見えてくるんじゃないかと思う それでも大変なのかもしれないけどw http://mevius.5ch.net/test/read.cgi/bgame/1566706590/19
20: ◆f7OmZ9ucu2 [sage] 2019/08/25(日) 17:55:42 ID:drQ8F6x8 >>14 その疑問はごもっともで以前からあったはず ソフトの最善手との一致率を採用するのが良いのか、次善手を含めた広義の一致率のほうがいいのか つまり、最善手だけにすると次善手が多い棋士(いると仮定して)の評価が過小になるし、次善手を含めた一致率では解析が甘くなって強さの判定に向いていないといったことになる どうしたら解決するか 実を言うと、ソフトが最初に選んだ最善手ではなくとも評価値がさほど変わらない手ならば最善手と認定してくれる解析方法がある >>1の表はその方法で一致率を調べたものなのでEloレートとの高い相関を得ることに成功したと認識している その方法というのが逆順での解析だった ?探索エンジンのMutiPvを1にする ?ShogiGuiの棋譜解析で候補手を1にする ?逆順で解析するにチェックを入れる このやり方をするだけで、プロ棋士の読みの内容を最大限に取り入れた解析をしてくれる http://mevius.5ch.net/test/read.cgi/bgame/1566706590/20
21: ◆f7OmZ9ucu2 [sage] 2019/08/25(日) 17:59:50 ID:drQ8F6x8 >>18 前半40手を除外した一致率なので、ソフトでの研究の影響はあまりないはず ソフトの終盤から学んで終盤に強くなった棋士はいる(あるいは今後出てくる)かもしれないけどね http://mevius.5ch.net/test/read.cgi/bgame/1566706590/21
22: ◆f7OmZ9ucu2 [sage] 2019/08/25(日) 18:11:50 ID:drQ8F6x8 >>13 1局だけの評価なら最善手か次善手かは大問題だけど、数多く解析すれば誤差は±0に均されるという見立で解析してきた 1局で1棋士40手解析するとして20局なら800手になる サイコロを800回振って1の目が何回出るかを数えているのと同じ理屈だ 1局ごとにこだわって精査しなくとも数多く棋譜を解析した結果、棋士の一致率がEloレートと適合してきていることが何よりの検証になっているんじゃないかな http://mevius.5ch.net/test/read.cgi/bgame/1566706590/22
23: 名無し名人 [] 2019/08/25(日) 18:38:57 ID:QB+H8/hl >>22 一度他のソフトでも何件か解析してみて一致率の差は誤差レベルになるというデータを示してくれたら分かりやすいんだけど 今は解析にillqhaを使ってるらしいからそれ以外のソフトで orqha、水匠、NNUEkaiはillqhaと同族なのでそれ以外でやってみてほしい http://mevius.5ch.net/test/read.cgi/bgame/1566706590/23
24: ◆f7OmZ9ucu2 [sage] 2019/08/25(日) 18:51:37 ID:drQ8F6x8 >>23 今やっていることだけで手が一杯なので無理 誰かやってくれるとありがたい ソフトで一致率に違いがあるのは当然として、各棋士のランキングに大きな違いは出てこないんじゃないか 仮に出てきても、どちらの一致率が強さの判定として有力かはEloレートとの比較で判断されることになる そういうわけだから、>>1のデータがそれ自体独立して評価されるべきなのは変わらないよ http://mevius.5ch.net/test/read.cgi/bgame/1566706590/24
25: 名無し名人 [sage] 2019/08/25(日) 18:53:01 ID:o2ZMgyvS 持ち時間の長い対局だと一致率は上がるもんなのかな… 秒読み状態での一致率を比べるとどうなるんだろ… いろいろ興味が湧くなぁ http://mevius.5ch.net/test/read.cgi/bgame/1566706590/25
上
下
前
次
1-
新
書
関
写
板
覧
索
設
栞
歴
あと 977 レスあります
スレ情報
赤レス抽出
画像レス抽出
歴の未読スレ
AAサムネイル
Google検索
Wikipedia
ぬこの手
ぬこTOP
0.013s