索尼新专利曝光：AI 可在 GPU 渲染完成前预测下一帧画面，减少游戏卡顿

IT之家 10 月 18 日消息，据科技媒体 TechSpot 今日报道，索尼近期申请了一项专利，描述了以下场景：让 AI 在 GPU 尚未完成渲染前，提前预测下一帧画面，从而减少游戏画面卡顿，同时避免帧生成技术带来的额外延迟。

IT之家从原报道了解到，这项技术可以解决帧生成的缺陷，使显示画面不再需要等待两帧渲染完成，才能生成插入的中间帧。而是直接利用已经生成的画面来预测下一帧，无需等待两帧画面即可进行插值，帮助游戏保持更稳定的帧输出节奏。

同时，索尼采用了联合训练的编解码器，将渲染完成的画面转化为嵌入表示，对图像进行紧凑的数值化表达，让解码器利用这些提示生成预测帧。游戏运行时，该系统会与图形渲染管线并行工作。当硬件渲染下一帧时，AI 会处理上一帧，并将预测结果发送至显示缓冲区。因此，在下一帧完成渲染之前，预测画面就有可能提前显示。

此外，该系统还可以利用运动矢量和玩家近期的手柄操作，使玩家操作角色的历史成为下一帧动作预测的基础。系统训练过程使用连续的视频帧。神经网络最初采用随机初始化的权重，以一帧画面作为输入，并尝试预测下一帧。接着，系统会将预测结果与实际后续画面进行比较，并计算一个用于衡量预测误差的损失值。

不过，这项技术能否发挥实际作用，取决于 AI 能否快速生成准确的画面，从而在渲染速度下降时填补帧输出间隙。