Pong是什么
Pong既是电子游戏历史上的开山鼻祖之一，也是现代强化学习（Reinforcement Learning, RL）和计算机视觉（CV）领域中最经典的基准测试环境（Benchmark）。
无论是想用 C++ 练手面向对象编程、在 FPGA 上连 VGA 显示器手撕硬件，还是刚开始用 PyTorch 训练 Policy Gradient（策略梯度）智能体，Pong 都是绝佳的切入点。
以下从游戏核心逻辑和AI 强化学习环境两个维度为你拆解 Pong。
1. 极简极智：Pong 的核心游戏逻辑
从零实现一个 Pong 游戏（比如用 C++ 结合 SDL/SFML 库，或者用 Python 的 Pygame），其底层架构本质上是一个确定性的2D 刚体碰撞物理引擎。
它的核心状态机和运动公式只有以下三部分：
① 状态表示（State）
整个游戏在二维平面坐标系下运行，只需要维护极少量的变量：
- 球（Ball）：位置(x,y)(x, y)(x,y)，速度向量(vx,vy)(v_x, v_y)(vx,vy)。
- 球拍（Paddles）：左拍ylefty_{left}yleft，右拍yrighty_{right}yright，以及固定的长宽和xxx轴位置。
② 碰撞与反弹公式（Collision & Reflection）
球在移动过程中，每帧更新：x←x+vxx \leftarrow x + v_xx←x+vx,y←y+vyy \leftarrow y + v_yy←y+vy。
- 上下墙壁碰撞：当球触及屏幕上边界或下边界时，速度在yyy轴反向：
vy←−vyv_y \leftarrow -v_yvy←−vy
- 球拍碰撞与角度修正：当球的xxx坐标与球拍重合且yyy坐标在球拍范围内时，vxv_xvx反向。为了让游戏更有可玩性，通常会根据球击中球拍的位置来动态改变vyv_yvy，即击中球拍边缘时，反弹角度更刁钻：
vy←vy+offset×paddle_speedv_y \leftarrow v_y + \text{offset} \times \text{paddle\_speed}vy←vy+offset×paddle_speed
③ 胜负判定
当球的xxx坐标越过左边界或右边界，则对方得分，球回到中心重新开球。
2. 深度学习中的 Pong：从像素到决策
在 OpenAI Gym（现为 Farama Foundation Gymnasium）的 Atari 游戏环境中，Pong-v4是用来检验强化学习算法（如 DQN, PPO）是否入门的标准试金石。
AI 是如何玩 Pong 的？
与人类玩家直接看屏幕类似，AI 模型的输入通常是原始的屏幕像素画面：
- 输入预处理（State Representation）：
- 原始的 Atari 屏幕是210×160210 \times 160210×160的 RGB 图像。
- 为了减少计算量，通常会将其裁剪为84×8484 \times 8484×84，并转换为灰度图。
- 关键技巧：帧堆叠（Frame Stacking）。单张静态图片是无法看出球的运动方向和速度的。因此，通常会将连续的 4 帧画面压在一起作为网络的输入，这样 CNN（卷积神经网络）就能捕捉到速度和加速度信息。
- 动作空间（Action Space）：
- Pong 的动作空间极其精简，通常只有 3 个有效动作：
NOOP（不动）、UP（向上移动球拍）、DOWN（向下移动球拍）。
- 奖励机制（Reward Signal）：
- 赢下一球获得
+1。 - 输掉一球获得
-1。 - 其余时间（球在空中飞时）奖励为
0。 - 一场比赛先到 21 分的一方获胜。
为什么说它是经典的 Baseline？
Pong 的状态空间比围棋或《星际争霸》简单得多，且奖励相对密集（相比于那些要走很久迷宫才能拿到奖励的游戏）。一个设计良好的DQN（深度Q网络）或Policy Gradient（策略梯度）算法，通常在消费级显卡上训练几个小时，就能实现对内置 AI（Rule-based AI）的 21:0 完美血洗。
它是验证“端到端”（输入像素，直接输出控制指令）控制算法是否写错 Bug 的最佳标尺。