哪个 Python 框架可以在 Google Collab 中显示和更改图像？

我希望能够在使用 Google Collab 时为 RL 绘制高 fps 的位图。

我现在可以使用 OpenCV 绘制图像 cv2_imshow google 替换 cv2.imshow

但是，它无法替换现有图像，它下面绘制了新的

我能够在替换 imshow 函数中使用一些JavaScript来修复它。但刷新率约为 2 帧/秒

是否有专用框架可以在使用 Google Collab 时显示 OpenCV 帧的实时回放或仅显示位图？

谢谢

虽然你已经尝试了使用 cv2_imshow 和一些 JavaScript 技巧来更新 Google Colab 中的图像，但达到高帧率确实是一个挑战。这是因为每次更新都需要与浏览器进行一些往返操作。

为了获得更好的性能，你可以考虑以下选项：

1. 使用 Python 图像显示库：

• matplotlib: matplotlib 有一个 imshow() 函数，可以在 Jupyter 环境（包括 Colab）中内联显示图像。你可以使用 ion() 函数打开交互模式，并使用 pause() 函数在每次更新后暂停一小段时间来更新图像。

```python import matplotlib.pyplot as plt import cv2

# 打开交互模式 plt.ion()

# 创建一个图形窗口 fig, ax = plt.subplots()

# 显示初始图像 image = cv2.imread("image.jpg") img_handle = ax.imshow(image)

for i in range(100): # 更新图像数据（例如，从你的 RL 环境中获取） updated_image = ...

   # 更新图像显示
   img_handle.set_data(updated_image)
   plt.pause(0.01)  # 暂停 0.01 秒（调整以控制帧率）

plt.ioff() # 关闭交互模式 plt.show() ```

• Pillow (PIL): 虽然 Pillow 主要用于图像处理，但它也可以使用 Image.show() 函数显示图像。但是，这可能不适合实时更新，因为它会在每次调用时打开一个新窗口。

2. 使用基于 Web 的可视化库：

• Bokeh: Bokeh 是一个用于创建交互式可视化的 Python 库，它可以在 Web 浏览器中呈现输出。它提供了用于处理图像和创建动画的工具。

• Plotly: Plotly 是另一个强大的库，用于创建交互式图表和仪表板。它还支持图像显示和更新。

3. 使用虚拟显示和视频编码：

• 如果你需要非常高的帧率，你可以考虑使用虚拟显示（如 xvfb ) 和视频编码库（如 ffmpeg ) 来录制视频，然后在 Colab 中嵌入或下载视频。

请记住，在 Colab 中实现高帧率实时图像更新可能需要进行一些实验和优化。 这些库提供的功能和性能可能会有所不同，因此请务必根据你的特定需求选择最适合的库。