百度360必应搜狗淘宝本站头条
linux取消挂载yum卸载下横线怎么打mysql 外网访问权限php打乱数组顺序
当前位置：网站首页 > 编程文章 > 正文

PPO 强化学习机械臂 IK 训练过程可视化利器 Tensorboard

qiyuwang 2025-05-15 20:31 4 浏览 0 评论

视频讲解：PPO 强化学习机械臂 IK 训练过程可视化利器 Tensorboard_哔哩哔哩_bilibili

PPO 强化学习过程中，设置了verbose会显示数据，但还是不够直观，这里上一个可视化利器，Tensorboard，实际上stable baselines3中已经有了这部分的集成，但这个工具实际上在其他的框架上也可以使用，基于web的显示，简便好看。

https://stable-baselines3.readthedocs.io/en/master/guide/tensorboard.html

介绍下环境，ubuntu22.04 wsl，python3.10，无conda环境，安装tensorboard

pip3 install tensorboard -i https://pypi.tuna.tsinghua.edu.cn/simple

使用非常简单，只需要在PPO增加 `tensorboard_log="./tensorboard/"` 即可

model = PPO(
        "MlpPolicy",
        env,
        policy_kwargs=policy_kwargs,
        verbose=1,
        n_steps=2048,
        batch_size=64,
        n_epochs=10,
        gamma=0.99,
        learning_rate=3e-4,
        device="cuda" if torch.cuda.is_available() else "cpu",
        tensorboard_log="./tensorboard/"
    )

运行后，会在当前目录生成tensorboard文件夹

使用tensorboard指令读取该log，会起一个web可以看

tensorboard --logdir ./tensorboard/

打开浏览器，可以看到训练过程的图表

设置reload的时间，最快30s一次

相关推荐

PPO 强化学习机械臂 IK 训练过程可视化利器 Tensorboard

视频讲解：PPO强化学习机械臂IK训练过程可视化利器Tensorboard_哔哩哔哩_bilibili...

免费定时运行Python程序并存储输出文档的服务推荐

免费定时运行Python程序并存储输出文档的服务推荐以下是几种可以免费定时运行Python程序并存储输出结果的云服务方案：1.PythonAnywhere特点：提供免费的Python托管环境...

实战搭建深度学习运行

一、准备环境ubuntu22.04nvidia显卡这里使用的是RTX3060已安装Python3.10二、安装pip3...

部署Django到阿里云服务器教程

基于Ubuntu16.04+Python3+nginx+mysql+Django接下来先安装这些必要的环境，这些操作都是在你已经购买了阿里云服务器。并且在本地你已经搭建好了Django...

Ubuntu 22.04安装MySQL : Qwen2.5 模型对话数据收集与微调教程

1安装MySQL首先来到(安装)根目录下，开启终端...

3D点云数据处理简明教程【Python】

近年来，在AR和空间计算技术的大力推动下，在Apple和Meta等大公司的支持下，最近推出了AppleVisionPro，3D理解领域受到越来越多的关注。...

Ubuntu22.04中定时执行任务(cron)设置

做这个实验，主要涉及内容如下：cronTest.py待执行的python文件，代码会读入本地文件内容，并打印当前时间cron_run.sh将执行cronTest.py的语句，包装成shellcro...

使用vllm部署DeepSeek

1、基础环境1.1、基础环境准备RTX3090*2卡ubuntu22.04python3.12cuda12.4pytorch2.5.1...

一键打包,随时运行,Python3项目虚拟环境一键整合包的制作(Venv)

之前我们介绍了如何使用嵌入式Python3环境给项目制作一键整合包，在使用嵌入式Python环境时，通常是作为另一个应用程序的一部分，而Python3虚拟环境是为了在开发过程中隔离项目所需的...

从零开始:Ubuntu Server中MySQL 8.0的安装与Django数据库配置详解

Ubuntu系统纯净安装MySQL8.01、安装Mysql8.0sudoaptinstallmysql-server...

同一台电脑如何共存多个版本Python?

同一台电脑可以安装多个版本Python吗？可以共存！当前电脑安装了Python3.8.832位，为了调用大漠插件dll，但是我又想安装较新版本的64位Python3.12.0，就涉及到多个Pytho...

我把 ML 模型编译成 C 后，速度竟提升了 1000 倍!

...

zabbix企业微信告警

zabbix企业微信告警的前提是用户有企业微信且创建了一个能够发送消息的应用，具体怎么创建可以协同用户侧企业微信的管理员。第一步：企业微信准备我们需要的内容包括企业ID，应用的AgentId和应用的S...

「2022 年」崔庆才 Python3 爬虫教程 - urllib 爬虫初体验

首先我们介绍一个Python库，叫做urllib，利用它我们可以实现HTTP请求的发送，而不用去关心HTTP协议本身甚至更低层的实现。我们只需要指定请求的URL、请求头、请求体等信息即...

手把手教你搭建深度学习环境Pytorch版-Ubuntu

引言很多搞人工智能的小伙伴，刚开始学习，往往摸不着头脑怎么跑代码。跑代码的前提是要有个环境。本篇结合自己的亲身经历，带你搭建环境。相关知识Ubuntu是Linux系统的一种...

取消回复欢迎 你 发表评论:

一周热门
最近发表
标签列表