คู่มือบริษัท

อัลฟ่าโก และอัลฟ่าซีโร

AlphaGo combined neural networks with Monte Carlo Tree Search to play Go.

ฟังคำแนะนำนี้บรรยายโดย AI · ~2 min

บนหน้านี้อ่าน 2 นาที
  1. ภาพรวม
  2. เจาะลึก
  3. การใช้งานจริงในโลกแห่งความเป็นจริง
  4. อนาคตของ AlphaGo และ AlphaZero
  5. การนำไปปฏิบัติ
  6. สำรวจต่อไป
  7. คำถามที่พบบ่อย

ภาพรวม

AlphaZero used self-play given game rules in Go, chess, and shogi, while MuZero learned a model sufficient for planning without being given the environment dynamics.

เจาะลึก

Go is difficult for brute-force search because of its large search space and the challenge of evaluating positions. AlphaGo combines a policy network, which suggests promising moves, and a value network, which evaluates board positions, with Monte Carlo Tree Search. Its original Nature paper describes supervised learning from human expert games followed by reinforcement learning from self-play. AlphaZero generalizes self-play reinforcement learning to Go, chess, and shogi; it starts from random play and uses the game rules without human game examples. The AlphaZero paper reports superhuman play in the tested games, including reaching that level in chess and shogi within 24 hours of training. MuZero is different: it learns a latent model of rewards and state transitions sufficient for planning, without being supplied the game’s rules or full dynamics. These are research results in games, not evidence that the same performance transfers to arbitrary planning tasks.

การใช้งานจริงในโลกแห่งความเป็นจริง

Compare AlphaGo’s supervised learning from expert games with reinforcement learning from self-play.

Use AlphaZero’s experiments to study search and self-play under known game rules.

Inspect how a policy prior and value estimate can guide Monte Carlo Tree Search.

Compare MuZero’s learned planning model with systems that receive explicit game rules.

อนาคตของ AlphaGo และ AlphaZero

AlphaGo, AlphaZero, and MuZero show different ways to combine learned evaluation with search in structured games. Applying these methods to other domains requires defining actions, rewards, constraints, and an evaluation environment; game results alone do not establish performance in robotics, mathematics, or language tasks.

การนำไปปฏิบัติ

ทำไมมันถึงสำคัญ

  • กลยุทธ์ของผู้ขาย. โรดแมปของผู้จำหน่ายมีอิทธิพลต่อฟีเจอร์ที่ทีมของคุณสามารถสร้างได้ต่อไป
  • ต้นทุนและงบประมาณ. ข้อกำหนดทางการค้าและตัวเลือกการใช้งานส่งผลต่อต้นทุนและความเสี่ยงในระยะยาว
  • ความเสี่ยงและความปลอดภัย. สิ่งจูงใจของบริษัทจะกำหนดค่าเริ่มต้นของผลิตภัณฑ์ ท่าทางที่ปลอดภัย และความเปิดกว้าง

ระวัง

  • การประกาศเปิดตัวอาจแซงหน้าความเสถียรในขั้นตอนการทำงานจริง
  • การกำหนดราคา API หรือการเปลี่ยนแปลงนโยบายสามารถทำลายสมมติฐานได้ในชั่วข้ามคืน
  • การพึ่งพาผู้ขายรายเดียวจะเพิ่มค่าใช้จ่ายในการล็อคอินและการย้ายข้อมูล

ขั้นตอนต่อไป

  1. ประเมินผู้ให้บริการโดยใช้งานและชุดข้อมูลของคุณเอง
  2. ตรวจสอบความเป็นส่วนตัว ความปลอดภัย และข้อกำหนดทางกฎหมายก่อนรวมระบบ
  3. รักษาแผนสำรองสำหรับรุ่นหรือผู้จำหน่าย
  4. ตรวจสอบบันทึกประจำรุ่นเพื่อให้การเปลี่ยนแปลงแผนงานไม่ทำให้ทีมแปลกใจ

สำรวจต่อไป

จดหมายข่าวฟรี

รับสรุป AI รายวัน

เรื่องราว AI ที่ตรวจสอบแล้ว 3 เรื่องทุกวันทำงาน เช้า, เขียนเป็นภาษาอังกฤษธรรมดา ฟรีตลอดไป ไม่มีโฆษณา

อีเมลหนึ่งฉบับทุกวันทำงาน ยกเลิกการสมัครในคลิกเดียว เราไม่เคยขายหรือแชร์ที่อยู่อีเมลของคุณ

ทดสอบตัวเอง

Take the AlphaGo and AlphaZero quiz

ข้อเสนอแนะทันทีสำหรับทุกคำตอบ และใบรับรองที่สามารถแชร์ได้พร้อม ID ที่ตรวจสอบได้เมื่อคุณผ่านหลักสูตร

เริ่มแบบทดสอบ

สนับสนุนการศึกษา AI ฟรี AI Understanding เป็นองค์กรไม่แสวงหาผลกำไร 501(c)(3) — ไม่มีโฆษณา ไม่มีกำแพงเงิน, ตลอดไป บริจาค

คำถามที่พบบ่อย

AlphaGo และ AlphaZero คืออะไร?

AlphaGo combined neural networks with Monte Carlo Tree Search to play Go. AlphaZero used self-play given game rules in Go, chess, and shogi, while MuZero learned a model sufficient for planning without being given the environment dynamics.

เหตุใดเกม Go จึงถือว่ายากสำหรับคอมพิวเตอร์เป็นพิเศษ

ปัจจัยการแตกแขนงมหาศาลของ Go ทำให้การค้นหาแบบเดรัจฉานบังคับเป็นไปไม่ได้ ดังนั้นความสำเร็จจึงต้องใช้สัญชาตญาณในการเรียนรู้

AlphaGo เอาชนะใครได้อย่างโด่งดังด้วยสกอร์ 4-1 ในปี 2016?

AlphaGo เอาชนะแชมป์ Go ชั้นนำ Lee Sedol 4-1 ในการแข่งขันปี 2016 ที่มีผู้ชมอย่างกว้างขวาง

Which three games did AlphaZero’s paper evaluate?

The AlphaZero paper evaluates its general reinforcement-learning algorithm in Go, chess, and shogi. Its results are specific to those games and experiments.

AlphaZero จับคู่กับโครงข่ายประสาทเทียมด้วยวิธีการค้นหาใด

AlphaZero ใช้ Monte Carlo Tree Search ตามนโยบายของโครงข่ายประสาทเทียมและการคาดการณ์มูลค่า

โครงข่ายประสาทเทียมของ AlphaZero ทำนายสองสิ่งใดเพื่อเป็นแนวทางในการค้นหา

ผลลัพธ์ของเครือข่ายที่เคลื่อนไหวมีแนวโน้มดี (นโยบาย) และการประมาณการว่าใครจะเป็นผู้ชนะ (มูลค่า) โดยเน้นไปที่การค้นหา

เรียนรู้ต่อไป

คำแนะนำที่เกี่ยวข้อง

คำแนะนำเพิ่มเติมที่เลือกสำหรับหัวข้อนี้

รับใบรับรอง AI ฟรีหลักสูตรและการสอบสั้น ๆ ฟรี ไม่มีค่าใช้จ่าย ไม่มีบัตรเครดิต ประมาณ 2.5 ชั่วโมงเริ่มต้นฟรี →