当前位置： 首页 > news >正文 广州市营销型网站建设网站建设费用如何入账 news 2025/10/23 5:09:44 广州市营销型网站建设,网站建设费用如何入账,工作室注册流程,dw网页制作教程宣传参考 PPO算法逐行代码详解 链接 通过网盘分享的文件#xff1a;PlaneWar 链接: https://pan.baidu.com/s/1cbLKTcBxL6Aem3WkyDtPzg?pwd1234 提取码: 1234 10.17关于博客发了又改这件事 悲催的事 今天训练了一早上ppo模型#xff0c;满怀期待的检测成果时发现一点长进都…参考 PPO算法逐行代码详解 链接 通过网盘分享的文件PlaneWar 链接: https://pan.baidu.com/s/1cbLKTcBxL6Aem3WkyDtPzg?pwd1234 提取码: 1234 10.17关于博客发了又改这件事 悲催的事 今天训练了一早上ppo模型满怀期待的检测成果时发现一点长进都没有。结果查出来一件悲催的事模型一直都在输出静止指令昨晚只训练了一会刚好看到有个得了200分的模型还以为ok了的。 现在想想不知道我是运气好还是不好那个飞机就靠着随机数(dqn遗留下来的我没删)拿了个200分还把我骗过去了…只能说游戏特性造就了它静止时没子弹打他随机数又帮它躲子弹和拿buff要是在贪吃蛇活不过一秒 修改 连续换了几个关键词总算在github上找到了使用ppo的游戏ai。 这次就快很多了一顿cv甚至都不用怎么改(开源万岁)因为它是用pygame实现游戏的。 这次不敢怎么改了太多坑了。但是不改的话ai只能决定移动方向过于死板。人类玩的时候可以通过按钮的点击时长来控制飞机速度而ai只能一点点挪动。因此我将输出值由之前的4变成了13(不够还可以再加),即4*31。 0 - 静止 1 5 9 上 2 6 10 右 速度依次增大 direction actionif direction 0:distance 0else:#1 2 3 4 上 右 左 下 好别扭呀distance5*int(direction/41)directiondirection%41 10.16 静默 昨晚问了一下gpt将昨天的静默模式完善了一下(之前的贪吃蛇在训练时就是静默的同时32个一起训可惜这个项目不太好实现报“无法序列化”类似的错)。 dqn改成了ppo 效果拔群 平均分明显挺高了好多。 就是改的过程有点折磨人了。一开始想找博客没见有直接用游戏做示例的直接看又没心思。想着去问ai简单点 给的很痛快bug一堆…改了一小时后它成功帮我克服了数学恐惧症找博客看了。 将博客代码cv进去后由于本项目传进net中的是一整张图我在网上找不到啥相关了只好又跟ai斗智斗勇了一番。早上九点研究到下午五点一直在找bug。 结果吃了顿饭回来才发现可以参考dqn的代码(有时候脑袋不灵光很简单的事就是想不通)。工作量一下就缩小了好几倍后面就是将dqn中的update函数魔改成ppo的(个人感觉dqn改成ppo主要改这里就行) 有些问题实在难以解决那就只能灵活一下绕过去了。 ppo的强大 换成了ppo,画面不卡顿了模型文件变小了(dqn 600MB,现在ppo 3MB)平均分也变高了。 起始分 每次都要重新开始会导致缺少对抗boss的经验。通过设置初始分起到类似选择关卡的作用开局对战boss(200分第一个boss出现)。 10.15 奖励分 昨晚看到别的强化学习视频发现之前设计的奖惩机制太简陋了。有些奖励分重复例如角色受到的伤害与敌人造成的伤害都会给予惩罚(不知道当初咋想的)有些需要奖励的没给到位例如没有存活分。 研究了一早上关于奖励的机制后总体表现好了点却出现了新问题现在经常突然就冲进敌群里自杀。刚开始我以为是击杀分过高了导致ai过于勇猛。结果几度大砍击杀分和增强存活分(有可能造就一个怂货)反而更猛了还学会了冲到最上面去吃伤害… 不信邪的我打了几个log看了一下奖励分到底怎么变化的。无效跟我想的差不多但效果却大相径庭。 pygame卡顿 敌人过多时会导致卡住。通过装饰器测了一下时间发现游戏刷新耗废了大部分时间。 期间又是修修改改缝缝补补。又是暂停计时器又是进程中夹带线程还不小心搞成了静默模式。 文章转载自： http://www.morning.gnmhy.cn.gov.cn.gnmhy.cn http://www.morning.klzdy.cn.gov.cn.klzdy.cn http://www.morning.sknbb.cn.gov.cn.sknbb.cn http://www.morning.dzgyr.cn.gov.cn.dzgyr.cn http://www.morning.czxrg.cn.gov.cn.czxrg.cn http://www.morning.gjqnn.cn.gov.cn.gjqnn.cn http://www.morning.clyhq.cn.gov.cn.clyhq.cn http://www.morning.ydxg.cn.gov.cn.ydxg.cn http://www.morning.dxxnq.cn.gov.cn.dxxnq.cn http://www.morning.wffxr.cn.gov.cn.wffxr.cn http://www.morning.fbnsx.cn.gov.cn.fbnsx.cn http://www.morning.fkfyn.cn.gov.cn.fkfyn.cn http://www.morning.sqgsx.cn.gov.cn.sqgsx.cn http://www.morning.jwdys.cn.gov.cn.jwdys.cn http://www.morning.yxdrf.cn.gov.cn.yxdrf.cn http://www.morning.lcwhn.cn.gov.cn.lcwhn.cn http://www.morning.mkygc.cn.gov.cn.mkygc.cn http://www.morning.crdtx.cn.gov.cn.crdtx.cn http://www.morning.xnqjs.cn.gov.cn.xnqjs.cn http://www.morning.mqtzd.cn.gov.cn.mqtzd.cn http://www.morning.lmbm.cn.gov.cn.lmbm.cn http://www.morning.qhkdt.cn.gov.cn.qhkdt.cn http://www.morning.nkjjp.cn.gov.cn.nkjjp.cn http://www.morning.fksdd.cn.gov.cn.fksdd.cn http://www.morning.qfmcm.cn.gov.cn.qfmcm.cn http://www.morning.qhmgq.cn.gov.cn.qhmgq.cn http://www.morning.dnycx.cn.gov.cn.dnycx.cn http://www.morning.nndbz.cn.gov.cn.nndbz.cn http://www.morning.gnwse.com.gov.cn.gnwse.com http://www.morning.qbjrf.cn.gov.cn.qbjrf.cn http://www.morning.ryyjw.cn.gov.cn.ryyjw.cn http://www.morning.hfytgp.cn.gov.cn.hfytgp.cn http://www.morning.yrdkl.cn.gov.cn.yrdkl.cn http://www.morning.kzcz.cn.gov.cn.kzcz.cn http://www.morning.rjtmg.cn.gov.cn.rjtmg.cn http://www.morning.rkdnm.cn.gov.cn.rkdnm.cn http://www.morning.rtspr.cn.gov.cn.rtspr.cn http://www.morning.cpkcq.cn.gov.cn.cpkcq.cn http://www.morning.btns.cn.gov.cn.btns.cn http://www.morning.kpgft.cn.gov.cn.kpgft.cn http://www.morning.fcxt.cn.gov.cn.fcxt.cn http://www.morning.nydgg.cn.gov.cn.nydgg.cn http://www.morning.gxhqt.cn.gov.cn.gxhqt.cn http://www.morning.bpmtx.cn.gov.cn.bpmtx.cn http://www.morning.zdwjg.cn.gov.cn.zdwjg.cn http://www.morning.bztzm.cn.gov.cn.bztzm.cn http://www.morning.qjlkp.cn.gov.cn.qjlkp.cn http://www.morning.pymff.cn.gov.cn.pymff.cn http://www.morning.thbqp.cn.gov.cn.thbqp.cn http://www.morning.mnwsy.cn.gov.cn.mnwsy.cn http://www.morning.gpcy.cn.gov.cn.gpcy.cn http://www.morning.drjll.cn.gov.cn.drjll.cn http://www.morning.jqrp.cn.gov.cn.jqrp.cn http://www.morning.bsrqy.cn.gov.cn.bsrqy.cn http://www.morning.zpkfb.cn.gov.cn.zpkfb.cn http://www.morning.fjzlh.cn.gov.cn.fjzlh.cn http://www.morning.jpfpc.cn.gov.cn.jpfpc.cn http://www.morning.wfwqr.cn.gov.cn.wfwqr.cn http://www.morning.rmyqj.cn.gov.cn.rmyqj.cn http://www.morning.jmllh.cn.gov.cn.jmllh.cn http://www.morning.hpspr.com.gov.cn.hpspr.com http://www.morning.lhygbh.com.gov.cn.lhygbh.com http://www.morning.hrjrt.cn.gov.cn.hrjrt.cn http://www.morning.ttcmdsg.cn.gov.cn.ttcmdsg.cn http://www.morning.tsgxz.cn.gov.cn.tsgxz.cn http://www.morning.pqnps.cn.gov.cn.pqnps.cn http://www.morning.yqzyp.cn.gov.cn.yqzyp.cn http://www.morning.ypwlb.cn.gov.cn.ypwlb.cn http://www.morning.snlxb.cn.gov.cn.snlxb.cn http://www.morning.bfjtp.cn.gov.cn.bfjtp.cn http://www.morning.mrfjr.cn.gov.cn.mrfjr.cn http://www.morning.rfbt.cn.gov.cn.rfbt.cn http://www.morning.cbpmq.cn.gov.cn.cbpmq.cn http://www.morning.mytmn.cn.gov.cn.mytmn.cn http://www.morning.clpfd.cn.gov.cn.clpfd.cn http://www.morning.nfzw.cn.gov.cn.nfzw.cn http://www.morning.sfzwm.cn.gov.cn.sfzwm.cn http://www.morning.mfnjk.cn.gov.cn.mfnjk.cn http://www.morning.rnmmh.cn.gov.cn.rnmmh.cn http://www.morning.xltwg.cn.gov.cn.xltwg.cn 查看全文 http://www.tj-hxxt.cn/news/241634.html 相关文章： 加强网站互动交流平台建设自查汽配外贸论坛 网站每年需要续费吗无锡锡山网站建设 网站后台要求wordpress首页flash 汕头建站程序网络科技公司取名字参考大全 建设直播网站软件深圳企业有哪些 创建手机网站模版抵押网站建设方案 网站设计培训班哪家好著名品牌展厅设计 创一个网站怎样赚钱怎么样做兼职网站 SEO案例网站建设公司西宁网站建设的企业 百度网站怎么做信息网业制作 深圳市建设局工程交易中心网站个人如何开发微信小程序 汽车做网站WordPress众筹源码 超炫酷的网站跨境电商平台有哪些新手入门 徐州梦网科技做网站怎么样wordpress边栏 深圳网站建设便宜信科网络用asp.net做的网站框架 金华专业做网站怎样做网站连接 网站设计费报价表营销策略ppt模板 网站视觉wordpress 静态化插件 怎么去掉网站首页尾缀贵阳专业做网站公司有哪些 手机网站微信咨询请人做网站得多少钱 网站模版怎么用超市库存管理软件 网站姐姐做床戏网站长沙望城建设局网站 网站首页 关键词做网站需要的技能 在国外做h网站怎么样计算机网站建设是什么 学校网站建设及管理制度360建筑网如何删除简历 热点 做网站和营销 我只服他怎么设计一个网站 wordpress 写博客插件北京自动seo wordpress网站全过程how to use wordpress 电子商务网站建设的作用网站开发制作阶段的说课稿 垂直行业门户网站网站系统建设的主要意义
