āļ„āļđāđˆāļĄāļ·āļ­āļ—āļēāļ‡āđ€āļ—āļ„āļ™āļīāļ„

āđ‚āļˆāļĢāļŦāļĨāļēāļĒāļ­āļēāļ§āļļāļ˜

āđ‚āļˆāļĢāļ—āļĩāđˆāļĄāļĩāļ­āļēāļ§āļļāļ˜āļŦāļĨāļēāļāļŦāļĨāļēāļĒāļ„āļ·āļ­āļ›āļąāļāļŦāļēāđƒāļ™āļāļēāļĢāļ•āļąāļ”āļŠāļīāļ™āđƒāļˆ āļ‹āļķāđˆāļ‡āļ„āļļāļ“āļˆāļ°āļ•āđ‰āļ­āļ‡āđ€āļĨāļ·āļ­āļāļĢāļ°āļŦāļ§āđˆāļēāļ‡āļ•āļąāļ§āđ€āļĨāļ·āļ­āļāļ—āļĩāđˆāđ„āļĄāđˆāļ—āļĢāļēāļšāļœāļĨāļ•āļ­āļšāđāļ—āļ™āļ‹āđ‰āļģāđ† āđāļĨāļ°āđ€āļĢāļĩāļĒāļ™āļĢāļđāđ‰āđ„āļ›āļžāļĢāđ‰āļ­āļĄāđ† āļāļąāļ™ āđ‚āļ”āļĒāļŠāļĢāđ‰āļēāļ‡āļŠāļĄāļ”āļļāļĨāđƒāļŦāđ‰āļāļąāļšāļāļēāļĢāļŠāļģāļĢāļ§āļˆāļ•āļąāļ§āđ€āļĨāļ·āļ­āļāđƒāļŦāļĄāđˆāđ† āļāļąāļšāļāļēāļĢāđƒāļŠāđ‰āļ›āļĢāļ°āđ‚āļĒāļŠāļ™āđŒāļˆāļēāļāļ•āļąāļ§āđ€āļĨāļ·āļ­āļāļ—āļĩāđˆāļ”āļĩāļ—āļĩāđˆāļŠāļļāļ”āļ—āļĩāđˆāļžāļš

āļŸāļąāļ‡āļ„āļģāđāļ™āļ°āļ™āļģāļ™āļĩāđ‰āļšāļĢāļĢāļĒāļēāļĒāđ‚āļ”āļĒ AI · ~2 min

āļšāļ™āļŦāļ™āđ‰āļēāļ™āļĩāđ‰āļ­āđˆāļēāļ™ 2 āļ™āļēāļ—āļĩ
  1. āļ āļēāļžāļĢāļ§āļĄ
  2. āđ€āļˆāļēāļ°āļĨāļķāļ
  3. āļāļēāļĢāđƒāļŠāđ‰āļ‡āļēāļ™āļˆāļĢāļīāļ‡āđƒāļ™āđ‚āļĨāļāđāļŦāđˆāļ‡āļ„āļ§āļēāļĄāđ€āļ›āđ‡āļ™āļˆāļĢāļīāļ‡
  4. āļ­āļ™āļēāļ„āļ•āļ‚āļ­āļ‡āđ‚āļˆāļĢāļŦāļĨāļēāļĒāļ­āļēāļ§āļļāļ˜
  5. āļāļēāļĢāļ™āļģāđ„āļ›āļ›āļāļīāļšāļąāļ•āļī
  6. āļŠāļģāļĢāļ§āļˆāļ•āđˆāļ­āđ„āļ›
  7. āļ„āļģāļ–āļēāļĄāļ—āļĩāđˆāļžāļšāļšāđˆāļ­āļĒ

āļ āļēāļžāļĢāļ§āļĄ

It powers A/B testing, recommendations, and online ad selection.

āđ€āļˆāļēāļ°āļĨāļķāļ

āļŠāļ·āđˆāļ­āļ™āļĩāđ‰āđ„āļ”āđ‰āļĄāļēāļˆāļēāļāļ™āļąāļāļžāļ™āļąāļ™āļ—āļĩāđˆāļ•āđ‰āļ­āļ‡āđ€āļœāļŠāļīāļāļāļąāļšāļŠāļĨāđ‡āļ­āļ•āđāļĄāļŠāļŠāļĩāļ™āļŦāļĨāļēāļĒāđ€āļ„āļĢāļ·āđˆāļ­āļ‡ (āđ‚āļˆāļĢāļ•āļīāļ”āļ­āļēāļ§āļļāļ˜āđ€āļ”āļĩāļĒāļ§) āļ‹āļķāđˆāļ‡āđāļ•āđˆāļĨāļ°āđ€āļ„āļĢāļ·āđˆāļ­āļ‡āļĄāļĩāļ­āļąāļ•āļĢāļēāļāļēāļĢāļŠāļ™āļ°āļ—āļĩāđˆāđ„āļĄāđˆāļĢāļđāđ‰āļˆāļąāļ āļ‹āļķāđˆāļ‡āļ•āđ‰āļ­āļ‡āļāļēāļĢāđ€āļžāļīāđˆāļĄāļĢāļēāļ‡āļ§āļąāļĨāļŠāļđāļ‡āļŠāļļāļ”āļˆāļēāļāļāļēāļĢāļ”āļķāļ‡āļŦāļĨāļēāļĒāļ„āļĢāļąāđ‰āļ‡ āļ„āļ§āļēāļĄāļ•āļķāļ‡āđ€āļ„āļĢāļĩāļĒāļ”āļŦāļĨāļąāļāļ­āļĒāļđāđˆāļ—āļĩāđˆāļāļēāļĢāđāļĨāļāđ€āļ›āļĨāļĩāđˆāļĒāļ™āļĢāļ°āļŦāļ§āđˆāļēāļ‡āļāļēāļĢāļŠāļģāļĢāļ§āļˆāđāļĨāļ°āļāļēāļĢāđāļŠāļ§āļ‡āļŦāļēāļœāļĨāļ›āļĢāļ°āđ‚āļĒāļŠāļ™āđŒ: āļ”āļķāļ‡āđāļ‚āļ™āļ—āļĩāđˆāļ”āļđāļ”āļĩāļ—āļĩāđˆāļŠāļļāļ”āļ•āđˆāļ­āđ„āļ› āļŦāļĢāļ·āļ­āļŠāļļāđˆāļĄāļ•āļąāļ§āļ­āļĒāđˆāļēāļ‡āđāļ‚āļ™āļ—āļĩāđˆāđ„āļĄāđˆāđāļ™āđˆāļ™āļ­āļ™āđ€āļžāļ·āđˆāļ­āđ€āļĢāļĩāļĒāļ™āļĢāļđāđ‰āđ€āļžāļīāđˆāļĄāđ€āļ•āļīāļĄ āļ›āļĢāļ°āļŠāļīāļ—āļ˜āļīāļ āļēāļžāļ§āļąāļ”āđ„āļ”āđ‰āļˆāļēāļāļ„āļ§āļēāļĄāđ€āļŠāļĩāļĒāđƒāļˆ āļŠāđˆāļ­āļ‡āļ§āđˆāļēāļ‡āļŠāļ°āļŠāļĄāļĢāļ°āļŦāļ§āđˆāļēāļ‡āļĢāļēāļ‡āļ§āļąāļĨāļ‚āļ­āļ‡āļ„āļļāļ“āđāļĨāļ°āļāļēāļĢāđ€āļĨāļ·āļ­āļāļāļĨāļļāđˆāļĄāļ—āļĩāđˆāļ”āļĩāļ—āļĩāđˆāļŠāļļāļ”āđ€āļŠāļĄāļ­ āļ­āļąāļĨāļāļ­āļĢāļīāļ˜āļķāļĄāļ—āļĩāđˆāļ”āļĩāļˆāļ°āļ—āļģāđƒāļŦāđ‰āđ€āļāļīāļ”āļ„āļ§āļēāļĄāđ€āļŠāļĩāļĒāđƒāļˆāļ‹āļķāđˆāļ‡āļˆāļ°āđ€āļžāļīāđˆāļĄāļ‚āļķāđ‰āļ™āļ•āļēāļĄāļĨāļ­āļāļēāļĢāļīāļ—āļķāļĄāļ•āļēāļĄāļˆāļģāļ™āļ§āļ™āļĢāļ­āļšāđ€āļ—āđˆāļēāļ™āļąāđ‰āļ™ āļāļĨāļĒāļļāļ—āļ˜āđŒāļ„āļĨāļēāļŠāļŠāļīāļ āđ„āļ”āđ‰āđāļāđˆ epsilon-greedy (āđƒāļŠāđ‰āļ›āļĢāļ°āđ‚āļĒāļŠāļ™āđŒ āđāļ•āđˆāļŠāļģāļĢāļ§āļˆāđāļšāļšāļŠāļļāđˆāļĄāđ‚āļ”āļĒāļĄāļĩāļ„āļ§āļēāļĄāļ™āđˆāļēāļˆāļ°āđ€āļ›āđ‡āļ™āđ€āļĨāđ‡āļāļ™āđ‰āļ­āļĒ), Upper Confidence Bound (āđ€āļĨāļ·āļ­āļāđāļ‚āļ™āļ—āļĩāđˆāļĄāļĩāļāļēāļĢāļ›āļĢāļ°āļĄāļēāļ“āļāļēāļĢāđƒāļ™āđāļ‡āđˆāļ”āļĩāļŠāļđāļ‡āļŠāļļāļ”) āđāļĨāļ° Thompson sampling (āļ•āļąāļ§āļ­āļĒāđˆāļēāļ‡āļˆāļēāļāļ„āļ§āļēāļĄāđ€āļŠāļ·āđˆāļ­āļŦāļĨāļąāļ‡āļ‚āļ­āļ‡āđāļ•āđˆāļĨāļ°āđāļ‚āļ™āļ‡āđāļĨāđ‰āļ§āđ€āļĨāđˆāļ™āđ€āļ›āđ‡āļ™āļœāļđāđ‰āļŠāļ™āļ°) āđ‚āļˆāļĢāļ•āļēāļĄāļšāļĢāļīāļšāļ—āļ‚āļĒāļēāļĒāļŠāļīāđˆāļ‡āļ™āļĩāđ‰āđ‚āļ”āļĒāđƒāļŠāđ‰āļ„āļļāļ“āļĨāļąāļāļĐāļ“āļ°āļ‚āļ­āļ‡āļŠāļ–āļēāļ™āļāļēāļĢāļ“āđŒāđ€āļžāļ·āđˆāļ­āđ€āļĨāļ·āļ­āļ

āļāļēāļĢāđƒāļŠāđ‰āļ‡āļēāļ™āļˆāļĢāļīāļ‡āđƒāļ™āđ‚āļĨāļāđāļŦāđˆāļ‡āļ„āļ§āļēāļĄāđ€āļ›āđ‡āļ™āļˆāļĢāļīāļ‡

āđ€āļ§āđ‡āļšāđ„āļ‹āļ•āđŒāļ‚āđˆāļēāļ§āđƒāļŠāđ‰āđ‚āļˆāļĢāđƒāļ™āļāļēāļĢāļ•āļąāļ”āļŠāļīāļ™āđƒāļˆāļ§āđˆāļēāļˆāļ°āđāļŠāļ”āļ‡āļžāļēāļ”āļŦāļąāļ§āļ‚āđˆāļēāļ§āļĢāļđāļ›āđāļšāļšāđƒāļ” āļ‹āļķāđˆāļ‡āļˆāļ°āļ—āļģāđƒāļŦāđ‰āļ›āļĢāļīāļĄāļēāļ“āļāļēāļĢāđ€āļ‚āđ‰āļēāļŠāļĄāđ„āļ›āļĒāļąāļ‡āđ€āļ§āļ­āļĢāđŒāļŠāļąāļ™āļ—āļĩāđˆāđ„āļ”āđ‰āļĢāļąāļšāļ„āļĨāļīāļāļĄāļēāļāļ—āļĩāđˆāļŠāļļāļ”āļ­āļĒāđˆāļēāļ‡āļĢāļ§āļ”āđ€āļĢāđ‡āļ§

āđāļžāļĨāļ•āļŸāļ­āļĢāđŒāļĄāđ‚āļ†āļĐāļ“āļēāļ­āļ­āļ™āđ„āļĨāļ™āđŒāļˆāļąāļ”āļŠāļĢāļĢāļāļēāļĢāđāļŠāļ”āļ‡āļœāļĨāđ‚āļ†āļĐāļ“āļēāļ”āđ‰āļ§āļĒāļāļēāļĢāļŠāļļāđˆāļĄāļ•āļąāļ§āļ­āļĒāđˆāļēāļ‡ Thompson āđ€āļžāļ·āđˆāļ­āđ€āļžāļīāđˆāļĄāļāļēāļĢāļ„āļĨāļīāļāļœāđˆāļēāļ™āļŠāļđāļ‡āļŠāļļāļ”āđƒāļ™āļ‚āļ“āļ°āļ—āļĩāđˆāļĒāļąāļ‡āļ„āļ‡āļ—āļ”āļŠāļ­āļšāđ‚āļ†āļĐāļ“āļēāđƒāļŦāļĄāđˆ

āļāļēāļĢāļ—āļ”āļĨāļ­āļ‡āļ—āļēāļ‡āļ„āļĨāļīāļ™āļīāļāđāļšāļšāļ›āļĢāļąāļšāđ€āļ›āļĨāļĩāđˆāļĒāļ™āđ„āļ”āđ‰āļĄāļ­āļšāļŦāļĄāļēāļĒāđƒāļŦāđ‰āļœāļđāđ‰āļ›āđˆāļ§āļĒāļˆāļģāļ™āļ§āļ™āļĄāļēāļāļ‚āļķāđ‰āļ™āđ„āļ”āđ‰āļĢāļąāļšāļāļēāļĢāļĢāļąāļāļĐāļēāļ—āļĩāđˆāđƒāļŦāđ‰āļœāļĨāļĨāļąāļžāļ˜āđŒāļ—āļĩāđˆāļ”āļĩāļ‚āļķāđ‰āļ™ āđ‚āļ”āļĒāļĨāļ”āļāļēāļĢāļŠāļąāļĄāļœāļąāļŠāļāļąāļšāđāļ‚āļ™āļ—āļĩāđˆāļ”āđ‰āļ­āļĒāļāļ§āđˆāļē

āļšāļĢāļīāļāļēāļĢāļŠāļ•āļĢāļĩāļĄāļĄāļīāđˆāļ‡āļ›āļĢāļąāļšāđāļ•āđˆāļ‡āļ āļēāļžāļ‚āļ™āļēāļ”āļĒāđˆāļ­āļ„āļģāđāļ™āļ°āļ™āļģāļ•āđˆāļ­āļœāļđāđ‰āđƒāļŠāđ‰āļžāļĢāđ‰āļ­āļĄāđ‚āļˆāļĢāļ•āļēāļĄāļšāļĢāļīāļšāļ—āļ—āļĩāđˆāļ­āđˆāļēāļ™āļ„āļļāļ“āļŠāļĄāļšāļąāļ•āļīāļ›āļĢāļ°āļ§āļąāļ•āļīāļāļēāļĢāļ”āļđ

āļ­āļ™āļēāļ„āļ•āļ‚āļ­āļ‡āđ‚āļˆāļĢāļŦāļĨāļēāļĒāļ­āļēāļ§āļļāļ˜

Bandits āļāļģāļĨāļąāļ‡āđāļžāļĢāđˆāļāļĢāļ°āļˆāļēāļĒāđ„āļ›āļŠāļđāđˆāļāļēāļĢāđ€āļĢāļĩāļĒāļ™āļĢāļđāđ‰āđāļšāļšāđ€āļŠāļĢāļīāļĄāļāļģāļĨāļąāļ‡ āđ‚āļ”āļĒāļ—āļĩāđˆāļžāļ§āļāđ€āļ‚āļēāļŠāļĢāđ‰āļēāļ‡āļšāļĨāđ‡āļ­āļ„āļāļēāļĢāļŠāļĢāđ‰āļēāļ‡āļ—āļĩāđˆāļ‡āđˆāļēāļĒāļ—āļĩāđˆāļŠāļļāļ” āđāļĨāļ°āđ„āļ›āļŠāļđāđˆāļāļēāļĢāļ›āļĢāļąāļšāđ€āļ›āļĨāļĩāđˆāļĒāļ™āđƒāļ™āđāļšāļšāļ‚āļ­āļ‡āļ„āļļāļ“āļ‚āļ™āļēāļ”āđƒāļŦāļāđˆāļ”āđ‰āļ§āļĒāđ‚āļˆāļĢāļ•āļēāļĄāļšāļĢāļīāļšāļ—āđāļĨāļ°āļ›āļĢāļ°āļŠāļēāļ—āļ—āļĩāđˆāļ­āđˆāļēāļ™āļ„āļļāļ“āļŠāļĄāļšāļąāļ•āļīāļ—āļĩāđˆāļŦāļĨāļēāļāļŦāļĨāļēāļĒ āļāļēāļĢāļ§āļīāļˆāļąāļĒāđ€āļŠāļīāļ‡āļĢāļļāļāļĄāļļāđˆāļ‡āđ€āļ›āđ‰āļēāđ„āļ›āļ—āļĩāđˆāļĢāļēāļ‡āļ§āļąāļĨāļ—āļĩāđˆāđ„āļĄāđˆāļ„āļ‡āļ—āļĩāđˆāļ‹āļķāđˆāļ‡āđ€āļĨāļ·āđˆāļ­āļ™āļĨāļ­āļĒāđ„āļ›āļ•āļēāļĄāļāļēāļĨāđ€āļ§āļĨāļē āđ‚āļˆāļĢāļ—āļĩāđˆāļĄāļĩāļ‚āđ‰āļ­āļˆāļģāļāļąāļ”āļ”āđ‰āļēāļ™āļ„āļ§āļēāļĄāļ›āļĨāļ­āļ”āļ āļąāļĒāļŦāļĢāļ·āļ­āļ„āļ§āļēāļĄāļĒāļļāļ•āļīāļ˜āļĢāļĢāļĄ āđāļĨāļ°āļœāļŠāļĄāļœāļŠāļēāļ™āđ‚āļˆāļĢāđ€āļ‚āđ‰āļēāļāļąāļšāļāļēāļĢāđ€āļĢāļĩāļĒāļ™āļĢāļđāđ‰āđ€āļŠāļīāļ‡āļĨāļķāļāđƒāļ™āļāļēāļĢāļ™āļģāđ€āļŠāļ™āļ­ āļ„āļēāļ”āļŦāļ§āļąāļ‡āļ§āđˆāļēāļŠāļīāđˆāļ‡āđ€āļŦāļĨāđˆāļēāļ™āļĩāđ‰āļˆāļ°āļāļąāļ‡āļ­āļĒāļđāđˆāđƒāļ™āļāļēāļĢāļ—āļ”āļĨāļ­āļ‡āļ—āļēāļ‡āļ„āļĨāļīāļ™āļīāļāđāļšāļšāļ›āļĢāļąāļšāđ€āļ›āļĨāļĩāđˆāļĒāļ™āđ„āļ”āđ‰ āļāļēāļĢāļāļģāļŦāļ™āļ”āļĢāļēāļ„āļēāđāļšāļšāđ„āļ”āļ™āļēāļĄāļīāļ āđāļĨāļ°āļĢāļ°āļšāļš LLM āļ—āļĩāđˆāđ€āļĨāļ·āļ­āļāļāļēāļĢāđāļˆāđ‰āļ‡āđ€āļ•āļ·āļ­āļ™āļŦāļĢāļ·āļ­āđ€āļ„āļĢāļ·āđˆāļ­āļ‡āļĄāļ·āļ­āļ­āļ­āļ™āđ„āļĨāļ™āđŒāđƒāļ™āļ‚āļ“āļ°āļ—āļĩāđˆāļ„āļ§āļšāļ„āļļāļĄāļ„āļ§āļēāļĄāđ€āļŠāļĩāļĒāđƒāļˆ

āļāļēāļĢāļ™āļģāđ„āļ›āļ›āļāļīāļšāļąāļ•āļī

āļ—āļģāđ„āļĄāļĄāļąāļ™āļ–āļķāļ‡āļŠāļģāļ„āļąāļ

  • āļ•āđ‰āļ™āļ—āļļāļ™āđāļĨāļ°āļ‡āļšāļ›āļĢāļ°āļĄāļēāļ“. āļāļēāļĢāļ•āļąāļ”āļŠāļīāļ™āđƒāļˆāļ”āđ‰āļēāļ™āļŠāļ–āļēāļ›āļąāļ•āļĒāļāļĢāļĢāļĄāļ‚āļąāļšāđ€āļ„āļĨāļ·āđˆāļ­āļ™āļ›āļĢāļ°āļŠāļīāļ—āļ˜āļīāļ āļēāļžāđāļĨāļ°āļ•āđ‰āļ™āļ—āļļāļ™āļāļēāļĢāļ”āļģāđ€āļ™āļīāļ™āļ‡āļēāļ™āđ€āļ›āđ‡āļ™āđ€āļ§āļĨāļēāļŦāļĨāļēāļĒāļ›āļĩ
  • āļāļēāļĢāļ•āļąāļ”āļŠāļīāļ™āđƒāļˆāļ—āļĩāđˆāļŠāļąāļ”āđ€āļˆāļ™āļĒāļīāđˆāļ‡āļ‚āļķāđ‰āļ™. āļāļēāļĢāļĻāļķāļāļĐāļēāļ”āđ‰āļēāļ™āđ€āļ—āļ„āļ™āļīāļ„āļŠāđˆāļ§āļĒāđƒāļŦāđ‰āļ—āļĩāļĄāđ€āļĨāļ·āļ­āļāļāļĨāļļāđˆāļĄāļ—āļĩāđˆāđ€āļŦāļĄāļēāļ°āļŠāļĄ āđ„āļĄāđˆāđƒāļŠāđˆāđāļ„āđˆāļāļĨāļļāđˆāļĄāđƒāļŦāļĄāđˆāļĨāđˆāļēāļŠāļļāļ”
  • āļāļēāļĢāļ„āļ§āļšāļ„āļļāļĄāļ„āļļāļ“āļ āļēāļž. āļ•āļąāļ§āđ€āļĨāļ·āļ­āļāļ—āļēāļ‡āļ§āļīāļĻāļ§āļāļĢāļĢāļĄāļ—āļĩāđˆāļ”āļĩāļāļ§āđˆāļēāļˆāļ°āļŠāđˆāļ§āļĒāļĨāļ”āđ€āļŦāļ•āļļāļāļēāļĢāļ“āđŒāļ”āđ‰āļēāļ™āļ„āļ§āļēāļĄāļ™āđˆāļēāđ€āļŠāļ·āđˆāļ­āļ–āļ·āļ­āđƒāļ™āļāļēāļĢāļœāļĨāļīāļ•

āļĢāļ°āļ§āļąāļ‡

  • āļāļēāļĢāđ€āļžāļīāđˆāļĄāļ›āļĢāļ°āļŠāļīāļ—āļ˜āļīāļ āļēāļžāđ€āļāļ“āļ‘āđŒāļĄāļēāļ•āļĢāļāļēāļ™āļŦāļ™āļķāđˆāļ‡āļĢāļēāļĒāļāļēāļĢāļŠāļēāļĄāļēāļĢāļ–āļ‹āđˆāļ­āļ™āļˆāļļāļ”āļ­āđˆāļ­āļ™āļ‚āļ­āļ‡āļĢāļ°āļšāļšāđƒāļ™āļ§āļ‡āļāļ§āđ‰āļēāļ‡āđ„āļ”āđ‰
  • āļ•āđ‰āļ™āļ—āļļāļ™āđ‚āļ„āļĢāļ‡āļŠāļĢāđ‰āļēāļ‡āļžāļ·āđ‰āļ™āļāļēāļ™āđāļĨāļ°āļāļēāļĢāļšāļģāļĢāļļāļ‡āļĢāļąāļāļĐāļēāļĄāļąāļāļ–āļđāļāļ›āļĢāļ°āđ€āļĄāļīāļ™āļ•āđˆāļģāđ„āļ›
  • āļŠāđˆāļ­āļ‡āļ§āđˆāļēāļ‡āļ”āđ‰āļēāļ™āļ„āļ§āļēāļĄāļ›āļĨāļ­āļ”āļ āļąāļĒāđāļĨāļ°āļ„āļ§āļēāļĄāļŠāļēāļĄāļēāļĢāļ–āđƒāļ™āļāļēāļĢāļŠāļąāļ‡āđ€āļāļ•āļŠāļēāļĄāļēāļĢāļ–āđ€āļžāļīāđˆāļĄāļ‚āļķāđ‰āļ™āđ„āļ”āđ‰āđ€āļĄāļ·āđˆāļ­āļĢāļ°āļšāļšāļĄāļĩāļ„āļ§āļēāļĄāļ‹āļąāļšāļ‹āđ‰āļ­āļ™āļĄāļēāļāļ‚āļķāđ‰āļ™

āļ‚āļąāđ‰āļ™āļ•āļ­āļ™āļ•āđˆāļ­āđ„āļ›

  1. āļāļģāļŦāļ™āļ”āđ€āļ›āđ‰āļēāļŦāļĄāļēāļĒāđ€āļ§āļĨāļēāđāļāļ‡ āļ„āļļāļ“āļ āļēāļž āđāļĨāļ°āļ•āđ‰āļ™āļ—āļļāļ™āļāđˆāļ­āļ™āļ™āļģāđ„āļ›āđƒāļŠāđ‰āļ‡āļēāļ™
  2. āđ€āļāļ“āļ‘āđŒāļĄāļēāļ•āļĢāļāļēāļ™āļ āļēāļĒāđƒāļ•āđ‰āļŠāļ āļēāļ§āļ°āđ‚āļŦāļĨāļ”āđāļĨāļ°āļ‚āđ‰āļ­āļĄāļđāļĨāļˆāļĢāļīāļ‡
  3. āļāļēāļĢāļ•āļĢāļ§āļˆāļŠāļ­āļšāđ€āļ„āļĢāļ·āđˆāļ­āļ‡āļĄāļ·āļ­āđ€āļžāļ·āđˆāļ­āļŦāļēāļ‚āđ‰āļ­āļœāļīāļ”āļžāļĨāļēāļ” āļāļēāļĢāđ€āļšāļĩāđˆāļĒāļ‡āđ€āļšāļ™ āđāļĨāļ°āļœāļĨāļāļĢāļ°āļ—āļšāļ•āđˆāļ­āļœāļđāđ‰āđƒāļŠāđ‰
  4. āđ€āļ•āļĢāļĩāļĒāļĄāđ€āļŠāđ‰āļ™āļ—āļēāļ‡āļāļēāļĢāļĒāđ‰āļ­āļ™āļāļĨāļąāļšāđāļĨāļ°āļāļēāļĢāļ•āļ­āļšāļŠāļ™āļ­āļ‡āļ•āđˆāļ­āđ€āļŦāļ•āļļāļāļēāļĢāļ“āđŒāļāđˆāļ­āļ™āļ›āļĢāļąāļšāļ‚āļ™āļēāļ”

āļŠāļģāļĢāļ§āļˆāļ•āđˆāļ­āđ„āļ›

āļˆāļ”āļŦāļĄāļēāļĒāļ‚āđˆāļēāļ§āļŸāļĢāļĩ

āļĢāļąāļšāļŠāļĢāļļāļ› AI āļĢāļēāļĒāļ§āļąāļ™

āđ€āļĢāļ·āđˆāļ­āļ‡āļĢāļēāļ§ AI āļ—āļĩāđˆāļ•āļĢāļ§āļˆāļŠāļ­āļšāđāļĨāđ‰āļ§ 3 āđ€āļĢāļ·āđˆāļ­āļ‡āļ—āļļāļāļ§āļąāļ™āļ—āļģāļ‡āļēāļ™ āđ€āļŠāđ‰āļē, āđ€āļ‚āļĩāļĒāļ™āđ€āļ›āđ‡āļ™āļ āļēāļĐāļēāļ­āļąāļ‡āļāļĪāļĐāļ˜āļĢāļĢāļĄāļ”āļē āļŸāļĢāļĩāļ•āļĨāļ­āļ”āđ„āļ› āđ„āļĄāđˆāļĄāļĩāđ‚āļ†āļĐāļ“āļē

āļ­āļĩāđ€āļĄāļĨāļŦāļ™āļķāđˆāļ‡āļ‰āļšāļąāļšāļ—āļļāļāļ§āļąāļ™āļ—āļģāļ‡āļēāļ™ āļĒāļāđ€āļĨāļīāļāļāļēāļĢāļŠāļĄāļąāļ„āļĢāđƒāļ™āļ„āļĨāļīāļāđ€āļ”āļĩāļĒāļ§ āđ€āļĢāļēāđ„āļĄāđˆāđ€āļ„āļĒāļ‚āļēāļĒāļŦāļĢāļ·āļ­āđāļŠāļĢāđŒāļ—āļĩāđˆāļ­āļĒāļđāđˆāļ­āļĩāđ€āļĄāļĨāļ‚āļ­āļ‡āļ„āļļāļ“

āļ—āļ”āļŠāļ­āļšāļ•āļąāļ§āđ€āļ­āļ‡

Take the Multi-Armed Bandits quiz

āļ‚āđ‰āļ­āđ€āļŠāļ™āļ­āđāļ™āļ°āļ—āļąāļ™āļ—āļĩāļŠāļģāļŦāļĢāļąāļšāļ—āļļāļāļ„āļģāļ•āļ­āļš āđāļĨāļ°āđƒāļšāļĢāļąāļšāļĢāļ­āļ‡āļ—āļĩāđˆāļŠāļēāļĄāļēāļĢāļ–āđāļŠāļĢāđŒāđ„āļ”āđ‰āļžāļĢāđ‰āļ­āļĄ ID āļ—āļĩāđˆāļ•āļĢāļ§āļˆāļŠāļ­āļšāđ„āļ”āđ‰āđ€āļĄāļ·āđˆāļ­āļ„āļļāļ“āļœāđˆāļēāļ™āļŦāļĨāļąāļāļŠāļđāļ•āļĢ

āđ€āļĢāļīāđˆāļĄāđāļšāļšāļ—āļ”āļŠāļ­āļš

āļŠāļ™āļąāļšāļŠāļ™āļļāļ™āļāļēāļĢāļĻāļķāļāļĐāļē AI āļŸāļĢāļĩ AI Understanding āđ€āļ›āđ‡āļ™āļ­āļ‡āļ„āđŒāļāļĢāđ„āļĄāđˆāđāļŠāļ§āļ‡āļŦāļēāļœāļĨāļāļģāđ„āļĢ 501(c)(3) — āđ„āļĄāđˆāļĄāļĩāđ‚āļ†āļĐāļ“āļē āđ„āļĄāđˆāļĄāļĩāļāļģāđāļžāļ‡āđ€āļ‡āļīāļ™, āļ•āļĨāļ­āļ”āđ„āļ› āļšāļĢāļīāļˆāļēāļ„

āļ„āļģāļ–āļēāļĄāļ—āļĩāđˆāļžāļšāļšāđˆāļ­āļĒ

What is Multi-Armed Bandits?

āđ‚āļˆāļĢāļ—āļĩāđˆāļĄāļĩāļ­āļēāļ§āļļāļ˜āļŦāļĨāļēāļāļŦāļĨāļēāļĒāļ„āļ·āļ­āļ›āļąāļāļŦāļēāđƒāļ™āļāļēāļĢāļ•āļąāļ”āļŠāļīāļ™āđƒāļˆ āļ‹āļķāđˆāļ‡āļ„āļļāļ“āļˆāļ°āļ•āđ‰āļ­āļ‡āđ€āļĨāļ·āļ­āļāļĢāļ°āļŦāļ§āđˆāļēāļ‡āļ•āļąāļ§āđ€āļĨāļ·āļ­āļāļ—āļĩāđˆāđ„āļĄāđˆāļ—āļĢāļēāļšāļœāļĨāļ•āļ­āļšāđāļ—āļ™āļ‹āđ‰āļģāđ† āđāļĨāļ°āđ€āļĢāļĩāļĒāļ™āļĢāļđāđ‰āđ„āļ›āļžāļĢāđ‰āļ­āļĄāđ† āļāļąāļ™ āđ‚āļ”āļĒāļŠāļĢāđ‰āļēāļ‡āļŠāļĄāļ”āļļāļĨāđƒāļŦāđ‰āļāļąāļšāļāļēāļĢāļŠāļģāļĢāļ§āļˆāļ•āļąāļ§āđ€āļĨāļ·āļ­āļāđƒāļŦāļĄāđˆāđ† āļāļąāļšāļāļēāļĢāđƒāļŠāđ‰āļ›āļĢāļ°āđ‚āļĒāļŠāļ™āđŒāļˆāļēāļāļ•āļąāļ§āđ€āļĨāļ·āļ­āļāļ—āļĩāđˆāļ”āļĩāļ—āļĩāđˆāļŠāļļāļ”āļ—āļĩāđˆāļžāļš āļ‚āļąāļšāđ€āļ„āļĨāļ·āđˆāļ­āļ™āļāļēāļĢāļ—āļ”āļŠāļ­āļš A/B āļ„āļģāđāļ™āļ°āļ™āļģ āđāļĨāļ°āļāļēāļĢāđ€āļĨāļ·āļ­āļāđ‚āļ†āļĐāļ“āļēāļ­āļ­āļ™āđ„āļĨāļ™āđŒ

āļāļĨāļĒāļļāļ—āļ˜āđŒāđ€āļ­āļ›āđ„āļ‹āļĨāļ­āļ™āđ‚āļĨāļ āļ—āļģāļ­āļ°āđ„āļĢ?

āđ€āļ­āļ›āđ„āļ‹āļĨāļ­āļ™āļœāļđāđ‰āļĨāļ°āđ‚āļĄāļšāļŦāļēāļ›āļĢāļ°āđ‚āļĒāļŠāļ™āđŒāļˆāļēāļāđāļ‚āļ™āļ—āļĩāđˆāļ”āļĩāļ—āļĩāđˆāļŠāļļāļ”āđƒāļ™āļ›āļąāļˆāļˆāļļāļšāļąāļ™āđ€āļ›āđ‡āļ™āļŠāđˆāļ§āļ™āđƒāļŦāļāđˆ āđāļĨāļ°āļŠāļģāļĢāļ§āļˆāđāļ‚āļ™āļŠāļļāđˆāļĄāļ—āļĩāđˆāļĄāļĩāļ„āļ§āļēāļĄāļ™āđˆāļēāļˆāļ°āđ€āļ›āđ‡āļ™āđ€āļ­āļ›āđ„āļ‹āļĨāļ­āļ™āđ€āļžāļĩāļĒāļ‡āđ€āļĨāđ‡āļāļ™āđ‰āļ­āļĒ

āđ‚āļˆāļĢāļ•āļēāļĄāļšāļĢāļīāļšāļ—āđāļ•āļāļ•āđˆāļēāļ‡āļˆāļēāļāđ‚āļˆāļĢāļĄāļēāļ•āļĢāļāļēāļ™āļ­āļĒāđˆāļēāļ‡āđ„āļĢ

āđ‚āļˆāļĢāļ•āļēāļĄāļšāļĢāļīāļšāļ—āļˆāļ°āļŠāļąāļ‡āđ€āļāļ•āļ‚āđ‰āļ­āļĄāļđāļĨāļ”āđ‰āļēāļ™āļ‚āđ‰āļēāļ‡ (āļ„āļļāļ“āļŠāļĄāļšāļąāļ•āļī) āđ€āļāļĩāđˆāļĒāļ§āļāļąāļšāđāļ•āđˆāļĨāļ°āļĢāļ­āļš āđāļĨāļ°āđƒāļŠāđ‰āļ‚āđ‰āļ­āļĄāļđāļĨāļ”āļąāļ‡āļāļĨāđˆāļēāļ§āđ€āļžāļ·āđˆāļ­āđ€āļĨāļ·āļ­āļāļāļĨāļļāđˆāļĄāļ—āļĩāđˆāļ”āļĩāļ—āļĩāđˆāļŠāļļāļ”āļŠāļģāļŦāļĢāļąāļšāļšāļĢāļīāļšāļ—āļ™āļąāđ‰āļ™

In UCB, which arm usually receives a larger exploration bonus?

The UCB bonus is larger for under-sampled arms and shrinks as their count grows.

What does logarithmic regret growth indicate over a long run?

Logarithmic regret is sublinear in the number of rounds, so average regret per round can decrease over time.

āđ€āļĢāļĩāļĒāļ™āļĢāļđāđ‰āļ•āđˆāļ­āđ„āļ›

āļ„āļģāđāļ™āļ°āļ™āļģāļ—āļĩāđˆāđ€āļāļĩāđˆāļĒāļ§āļ‚āđ‰āļ­āļ‡

āļ„āļģāđāļ™āļ°āļ™āļģāđ€āļžāļīāđˆāļĄāđ€āļ•āļīāļĄāļ—āļĩāđˆāđ€āļĨāļ·āļ­āļāļŠāļģāļŦāļĢāļąāļšāļŦāļąāļ§āļ‚āđ‰āļ­āļ™āļĩāđ‰

āļ•āđˆāļ­āđ„āļ›āļ„āļģāđāļ™āļ°āļ™āļģāļ•āđˆāļ­āđ„āļ›

āļāļēāļĢāļŠāļ•āļĢāļĩāļĄāļĄāļīāđˆāļ‡āđāļšāļšāđ€āļāđ‡āļ‡āļāļģāđ„āļĢāđāļĨāļ°āļāļēāļĢāļ„āļēāļ”āļāļēāļĢāļ“āđŒāđāļšāļšāļŦāļĨāļēāļĒāđ‚āļ—āđ€āļ„āđ‡āļ™

āđ€āļ—āļ„āļ™āļīāļ„

āļĢāļąāļšāđƒāļšāļĢāļąāļšāļĢāļ­āļ‡ AI āļŸāļĢāļĩāļŦāļĨāļąāļāļŠāļđāļ•āļĢāđāļĨāļ°āļāļēāļĢāļŠāļ­āļšāļŠāļąāđ‰āļ™ āđ† āļŸāļĢāļĩ āđ„āļĄāđˆāļĄāļĩāļ„āđˆāļēāđƒāļŠāđ‰āļˆāđˆāļēāļĒ āđ„āļĄāđˆāļĄāļĩāļšāļąāļ•āļĢāđ€āļ„āļĢāļ”āļīāļ• āļ›āļĢāļ°āļĄāļēāļ“ 2.5 āļŠāļąāđˆāļ§āđ‚āļĄāļ‡āđ€āļĢāļīāđˆāļĄāļ•āđ‰āļ™āļŸāļĢāļĩ →