Judi Online Poker Online

Bot Head-Up Akan Lebih Kuat Daripada Manusia; Hold-Limit Tanpa Batas Mungkin Tidak Pernah Diatasi

Artikel PokerNews baru-baru ini yang menarik perhatian pembaca kami adalah The Perfect Poker Bot is Almost Here. Artikel tersebut menggambarkan bot yang dikenal sebagai Baby Tartanian 8, yang telah memenangkan Kompetisi Poker Komputer Tahunan terbaru dan bagaimana para peneliti berencana untuk membuat bot poker yang sempurna dalam dua hingga tiga tahun.

Pembuat bot, Noam Brown, cukup berbaik hati untuk mengambil waktu dari jadwalnya yang sibuk untuk mengobrol tentang bot pemenang penghargaannya, termasuk bagaimana hal itu membuahkan hasil, dan bahkan bagaimana kinerjanya di dunia poker online; jawaban untuk yang terakhir cukup mengkhawatirkan.

Brown menjelaskan bahwa Kompetisi Poker Komputer Tahunan telah berjalan sejak 2006, dengan fitur hold’em tanpa batas dari sekitar 2008, dan selama waktu itu, seperti yang Anda bayangkan, bot telah tumbuh lebih kompleks.

“Saya pikir pada tahun 2008-2009 kita baru saja mulai dengan hold’em Texas tanpa batas, dan bot hanya akan mempertimbangkan menelepon, melipat, membuat taruhan seukuran pot, atau masuk semuanya,” kata Brown. “Ketika Anda melihat abstraksi kartu, yang kami namakan itu, ketika Anda mempertimbangkan kemungkinan tangan, Anda harus mengelompokkannya bersama-sama dan memperlakukan banyak tangan secara identik untuk menjaga permainan dalam ukuran yang masuk akal. Saat itu, semua mungkin tangan sungai dikelompokkan menjadi sekitar 500 ember dan kali ini kami menghasilkan sekitar 1 juta ember. “

Menulis kode untuk bot membutuhkan waktu sekitar satu bulan untuk menyelesaikan, kemudian bot dijalankan selama sekitar satu bulan di San Diego Super Computer, yang memiliki 3.700 CPU yang mengejutkan, yaitu 18 terabyte yang ditugaskan untuknya. Namun, Anda tidak perlu akses ke komputer super untuk membuat bot yang sangat kuat, seperti yang dibuktikan oleh dua tim lain yang finis di tiga besar kompetisi yang dimenangkan Brown.

“Sebenarnya, tahun ini misalnya, kami adalah salah satu dari tiga bot teratas, tetapi dua lainnya bukan bagian dari universitas atau kelompok penelitian, mereka di luar sana sendiri,” kata Brown. “Salah satunya adalah pemain poker profesional yang juga seorang insinyur perangkat lunak, dan salah satunya adalah pemain poker amatir yang merupakan mantan karyawan Google, dan keduanya membuat bot besar dengan anggaran di bawah $ 10.000.

“Biaya komputasi telah turun secara dramatis, terutama dalam satu tahun terakhir, sehingga mereka dapat memanfaatkan layanan komputasi Cloud Amazon untuk membuat bot kompetitif, sehingga tidak di luar jangkauan orang rata-rata untuk membuat bot mirip dengan milik kami, dengan asumsi mereka tahu cara membuat bot seperti ini, yang merupakan hal yang rumit untuk dilakukan. “

Jika Anda sering mengunjungi forum-forum poker maka Anda pasti akan mendengar klaim bahwa varian-varian poker tertentu “terpecahkan,” yaitu mungkin untuk bermain dengan sangat sempurna, tetapi Brown mengklaim bahwa hold’em tanpa batas tidak akan terpecahkan di masa hidup kita, jika pernah.

“Limit hold’em dan no-limit hold’em sangat berbeda dari sudut pandang kompetisi,” katanya. “Dalam hold’em batas, Anda memiliki tiga opsi: panggilan, lipat, atau bertaruh. Dalam hold’em tanpa batas, Anda pada dasarnya memiliki jumlah opsi yang tak terbatas karena Anda dapat bertaruh berapa pun jumlahnya, dan masing-masing taruhan berbeda yang dapat Anda buat diperlakukan oleh komputer sebagai tindakan terpisah. Jika Anda ingin menyelesaikan Texas hold’em tanpa batas, Anda harus mempertimbangkan, jika Anda berbicara tentang tumpukan chip 20.000 chip yang kami gunakan dalam kompetisi komputer poker tahunan, bahwa Anda Sedang berbicara tentang permainan yang kira-kira 10 ^ 163 (10 diikuti oleh 163 nol), sedangkan batas Texas hold’em mungkin sekitar 10 ^ 15, jadi skalanya tidak bisa dibayangkan. ‘Mereka akan dipecahkan dalam masa hidup kita, jika pernah. Yang mengatakan, ada cara untuk mendapatkan solusi perkiraan yang baik dan saya pikir tentu dalam beberapa tahun ke depan kita akan melihat bot yang dapat menurunkan pro paling atas, tetapi ada perbedaan besar antara itu dan dipecahkan. “

Brown kemudian menjelaskan bahwa banyak orang membuat asumsi keliru tentang bot poker terbaik karena mereka percaya bot harus dapat diprediksi, tetapi ini bukan masalahnya, mereka bahkan menggertak.

“Itu tidak mengejutkan [itu bots bluff], karena apa yang dilakukan komputer adalah mensimulasikan triliunan dan triliunan tangan poker, dan itu tidak benar-benar berpikir tentang menggertak seperti yang kita lakukan,” katanya. “Yang benar-benar dilakukannya adalah menghadapi situasi berulang kali dan pemberitahuan bahwa meskipun tidak memiliki tangan yang kuat, itu masih dapat menghasilkan lebih banyak uang dengan bertaruh.”

Bot memang memiliki beberapa kelemahan. Salah satunya adalah bahwa bot pada tingkat tinggi ini terbatas pada poker kepala-up dan tidak berkinerja baik dalam, katakanlah, lingkungan enam tangan. Ini dapat diatur untuk berubah, karena Brown mengungkapkan ada banyak minat di Kompetisi Poker Komputer Tahunan tahun ini untuk kontes enam pemain dan ia percaya bahwa ini akan terjadi pada kompetisi edisi 2017, walaupun mereka yang memasukinya akan membutuhkan untuk memasukkan banyak waktu dan upaya untuk memiliki bot yang kompetitif.

Kelemahan lain yang ditunjukkan bot adalah kemampuannya untuk mengeksploitasi kelemahan lawan-lawannya dengan satu alasan karena ia perlu bermain triliunan tangan untuk membuat strategi Game Theory Optimal, sehingga ia tidak akan bisa bermain tangan yang cukup melawan lawan manusia. Ketika kami bertanya kepada Brown apakah bot dapat mengeksploitasi kelemahan lawan, inilah yang ia katakan:

“Itu pertanyaan yang bagus,” kata Brown. “Ketika kami melakukan triliunan tangan ini, kami bermain melawan bot kami sendiri dan terbukti bahwa jika bot bermain sendiri maka akhirnya akan menyatu dengan Nash Equilibrium, yaitu strategi Game Theory Optimal (GTO) yang tidak mungkin dilakukan. sekarang ada komponen lain untuk poker yang merupakan eksploitasi lawan. Hanya karena Anda memiliki strategi GTO tidak berarti Anda akan menghasilkan uang sebanyak mungkin dari lawan Anda. Ini adalah sesuatu yang sangat baik dilakukan oleh manusia, mereka menemukan sebuah kelemahan dan manfaatkan sepenuhnya. Jelas Anda bisa mencoba mengeksploitasi lawan Anda dan kelemahan mereka, tetapi Anda membuka diri terhadap eksploitasi dan karenanya tidak memainkan strategi GTO, tetapi dalam banyak kasus masih bermanfaat.

“Ada banyak penelitian tentang bagaimana melakukan ini dengan bot, dan sayangnya itu belum terlalu sukses sejauh ini. Teknik yang kami gunakan, di mana kami bermain triliunan tangan dan mempelajari apa yang bekerja melawan lawan dan apa yang tidak bekerja, akan bekerja melawan pro manusia juga tetapi masalahnya adalah Anda harus bermain triliunan tangan melawan lawan Anda untuk membuat strategi melawan mereka. Teknik yang kami gunakan sekarang tidak bisa sampai pada strategi yang baik untuk menanggapi kelemahan lawan dalam sejumlah kecil tangan. Ini adalah bidang penelitian aktif, bagaimana mengeksploitasi lawan dengan jumlah sampel yang terbatas. Kita tidak tahu mengapa pemain manusia sangat pandai dalam hal ini, dan mungkin merupakan area kunci kelemahan dalam bot poker hari ini. “

Selain keterbatasan saat ini, Brown yakin bahwa Baby Tartanian 8 akan mendominasi adegan hold’em tanpa batas jika digunakan secara online. Tetapi apakah bot Brown akan bersih di poker online?

“Pasti,” katanya. “Jika kita berbicara tentang dua pemain, ya, itu pasti akan menang. Bot kami sebelumnya bermain melawan empat pemain utama di dunia, dan meskipun itu tidak keluar ke depan, itu sangat kompetitif di level itu. dan agen ini jauh lebih kuat, jadi saya pikir ada sangat sedikit orang yang bisa mengalahkannya. “

Meskipun Brown sangat yakin bahwa bot seperti Baby Tartanian 8 akan mendominasi permainan head-up jika mereka ditempatkan di dunia poker online, ia tidak percaya bahwa bot sekuat miliknya akan tersebar luas secara online, seperti yang diyakini sebagian orang.

“Saya tentu berpikir bot dua pemain akan lebih kuat daripada manusia, tetapi saya tidak perlu berpikir bahwa mereka akan menyebar secara online,” katanya. “Saya pikir situs poker online sangat efektif dalam mendeteksi dan menghapus bot.”

Leave a Reply

Your email address will not be published. Required fields are marked *