はじめに
本記事は、前回の記事の続きです。まだ読んでいない方はそちらを先にお読みください。
今回のテーマは「サイズ分割」です。では一般的に、より強いバリューほど大きいベットサイズを用いる傾向がありますが、それはなぜでしょうか。今回はこの疑問を、トイゲーム「AKQJT9ゲーム」を用いて、数学的な観点から考察していきたいと思います。
1. AKQJT9ゲームとは？
AKQJT9ゲームは、本テーマを取り上げるために自作したトイゲームで、前回紹介した「AKQゲーム」の派生です。AKQゲームと比較して、カードが3枚から6枚に増えただけですが、一応ルールをおさらいしておきます。
- プレイヤー
本ゲームは、HeroとVillainの2人で行います。 - カード
使用するカードは As Ks Qs Js Ts 9s の6枚のみで、それぞれの強さは A > K > Q > J > T > 9 です。各プレイヤーには、これらのうち1枚がランダムに配られ、同じのカードが配られることはありません。
Heroは常にIP（インポジション）、Villainは常にOOP（） でプレイします。- いきなりから始まり、最初にVillain（OOP）が行動します。その際、Villainは常にを選択します。
- その後、Hero（IP）は、任意のベットサイズを選択するか、チェックバックをすることができます。
- 2でHeroがチェックバックの場合、そのままとなります。
- 2でHeroがベットした場合、Villainはまたはの2択のみとなり、はできません。
- サイズ
初期ポットは1です。
2. アルゴリズムで計算されたGTO解
それではこのゲームの最適解を数式で計算していきたいのですが、イメージを掴みやすくするため、CFRアルゴリズムを用いて計算されたGTO解を見てみましょう。（CFRアルゴリズムの詳しい話にも、また機会があったら触れたいです）
図1は、筆者が独自に構築したツールにてGTO解を図示したものです。表はGTO Wizard風に仕上げました。この表は、実際のポーカーにおいてが2s2h2d3s3h（つまり今回のA~9とは直接的に関係のない）で、VillainからCheckされた後のHeroの全体の戦略を示しています。
ただし、お互いのはAsAh,KsKh,...9s9hの6に限定しています（はスペード・ハートののみ使用）。
この時ハンドの強さはAsAh > KsKh > ... > 9s9hで、互いが同じハンドを持つことは無いので、この状況はAKQJT9ゲームと等価です。
今回は15%から160%まで、様々なベットサイズのを用意しました。赤色は大ベット、オレンジは小ベット、緑はチェックを示します。
のAの方がのKよりものサイズが大きく、サイズ分割が行われていることが分かります。
また、図2・図3は、ハンドがKsKh・AsAhの時に使う戦略を詳細に示しています。それぞれのハンドでを最大化させるベットサイズを用いるのが最善で、が大きい値のアクション頻度が大きいことが分かります。
図1から図3を見て、AKQJT9ゲームについて分かることをまとめると、以下のようになります。
《ここまでのまとめ》
- ナッツのAは、ピュアに大ベットを用いる。最適なサイズは120%から130%の間の、やや120%寄りの当たりにありそう。
- セカンドナッツのKは、ピュアに小ベットを用いる。最適なサイズは25%から30%の間の、やや30%寄りの当たりにありそう。
- のQからTは、ピュアにチェックする。
- 最弱の9は、AとKのそれぞれのバリューベットで用いるサイズを兼用して、適切な頻度でベットする。
※補足
- Qはバリューベットを打つことができません。もしQでベットすると、相手はA・Kを確実にコールし、9を確実にフォールドします。すると、相手がJ・Tを全頻度でコールしたとしても、コールされた後のエクイティが50%となってしまい、バリューベットとして機能していないことが分かります。
- Tはブラフベットすることはありません。ブラフは、必要コンボ数的に9だけで十分だからです(後述)。
3. ベットサイズを任意の2つのサイズとしたAKQJT9ゲームの最適解
さて、ここからは数学的な考察に入っていきましょう。
このゲームにはサイズ分割があるので、Aで使うバリューベットのサイズを、Kで使うバリューベットのサイズをとして考えます。
前回の記事より、ある強いハンドをピュアにサイズでバリューベットするとき、相手のマージナルハンドをコールとフォールドのにするブラフベット頻度はでした。今回は用いるベットサイズが2種類あるため、Heroの最適な戦略は以下のようになります。
Heroの戦略
Hero(IP) の手札 | bet の頻度 | bet の頻度 | checkの頻度 |
|---|---|---|---|
A | 1 | 0 | 0 |
K | 0 | 1 | 0 |
Q , J , T | 0 | 0 | 1 |
9 |
この戦略に対して、Villainは以下のように応答します。ここでは一旦、bet に対するマージナルハンド(KからT)のブラフキャッチ頻度を、bet に対するマージナルハンド(QからT)のブラフキャッチ頻度をと置きます。(具体的な値はこれから計算します。)
Heroのbet に対するVillainの戦略
Villainの手札 | callの頻度 | foldの頻度 |
|---|---|---|
A (1コンボ) | 1 | 0 |
K , Q , J , T (4コンボ) | ||
9 (1コンボ) | 0 | 1 |
Heroのbet に対するVillainの戦略
Villainの手札 | callの頻度 | foldの頻度 |
|---|---|---|
A , K (2コンボ) | 1 | 0 |
Q , J , T (3コンボ) | ||
9 (1コンボ) | 0 | 1 |
ここで前回の記事より、Villainの最適なブラフキャッチ頻度は、Heroの弱いハンドがブラフベットするか諦めチェックするかのインディファレントになるような頻度でした。すなわち
(Heroの9のbet のEV) = (Heroの9のbet のEV) = (Heroの9のcheckのEV)
となればいいので、以下の式が成り立ちます。
これを解いて, となります。
また、, となります。(後で使います)
4. Heroのレンジ全体のEVを最大化させるは？
お互いの最適戦略が分かったところで、Heroのレンジ全体のEVを最大化させるを求めましょう。前回の記事で、マージナルハンドと弱いハンドのEVは、Heroのベットサイズに依存しないことに触れました。よって最適なは、A・K(バリューハンド)それぞれのEVを考えれば求まることになります。
それでは実際にA・KのEVを計算しましょう。AのEVは前回のように計算できますが、KのEVについては注意点があります。それは、Kは相手のAに対してミスバリューを打ってしまう可能性があることです。それに注意して、HeroのAのEVを、HeroのKのEVをとすると、
となります。を最大にするとを最大にするを、関数を微分してそれぞれ求めましょう。
高校の数IIIで習う分数関数の微分公式を用いると、
となります。
とは、共に単調減少な関数なので、これらが0となるような,が最適なベットサイズです。
これを解いて , となります。
これが意味することは、Heroの最適なベットサイズは、Aの時がPot 123.6%、Kの時がPot 29.1%だということです。先ほどアルゴリズムの結果から、
- ナッツのAは、ピュアに大ベットを用いる。最適なサイズは120%から130%の間の、やや120%寄りの当たりにありそう。
- セカンドナッツのKは、ピュアに小ベットを用いる。最適なサイズは25%から30%の間の、やや30%寄りの当たりにありそう。
と予想を立てましたが、見事にその通りになっていることが分かります。また、この時9のブラフベットの頻度は、
Pot 123.6%が
Pot 29.1%が
となり、両方合わせても1を超えません。つまり、ブラフコンボは9だけで十分なので、Tまでブラフに回す必要はない、ということです。
5. 実践でベットサイズ分割を行う際の注意
ここまで、ベットサイズ分割が自身のレンジのEVを底上げする話をしてきました。しかし、これを本当のポーカーで実践する際には注意が必要です。
このゲームでは、Villainにレイズ権がありませんでしたが、実際のポーカーではレイズされることがあります。
安ベットのレンジにナッツクラスのハンドが一切含まれない場合、相手にそれがバレると、で幅広くされたレイズを返されてしまいます。
そうなると自身のレンジのEVは大きく下がってしまいます。
よって、相手がレイズを適切に返せる上手なプレイヤーである場合、ナッツクラスのハンドを、一部安ベットに入れてバランスを取ります(特にOOPの場合)。
まとめ
今回も難易度の高い記事になってしまいましたが、ここまでお読みいただきありがとうございます。本記事では、GTOの行うベットサイズ分割が、数学的な裏付けを持つ効果的なプレーであることを説明しました。
結論を簡潔に要約すると以下のようになります。
- ベットサイズ分割を行う場合、より強いバリューハンドほど大きいベットサイズを用いるとEVが上昇する。
- ブラフハンドはEQの低い弱いハンドから選定し、各ベットサイズごとに適切な頻度でブラフをする（実践では、の良いハンドほど大きいブラフベットを選択する傾向あり。今回のゲームではは無かった）。
- 実践では相手にレイズ権があるため、ベットサイズ分割をするにしても、ある程度ナッツクラスのハンドをさせてエクスプロイトされることを防ぐ必要がある。
