Webots+Ray深度强化学习
https://github.com/eellak-gsoc2021/deepbots-stable
example中有采用Ray+Webots实现强化学习的example参考
运行中遇到的问题，主要是和wandb有关系
安装wandb
pip install wandbwandb login # https://wandb.ai/ 注册获取api-key，按提示复制黏贴（注意黏贴不显示任何字符）# 提示建立project，输入名称
https://blog.csdn.net/q_xiami123/article/details/116937033
程序中的修改
supervisorsManager.py***中的***PROJECT_NAME 修改为wandb中注册的工程名称，USE_Ray***修改为True***
PPORun.py***中的***api_key_file***修改为"wandb.txt"***
同目录中中加入***wandb.txt***，并编辑内容为wandb.ai中注册获取的api-key
