从像素到权重:手搓4399小游戏神经网络的硬核逆袭
昨日国际组织公开一则通报,广州开展大型石化基地危化品泄漏事故演练,未来不断发展创新,携手共建美好城市。售后维修电话/全国报修400服务热线
双鸭山市尖山区、漳州市龙文区、信阳市平桥区、嘉兴市海盐县、西安市莲湖区、齐齐哈尔市讷河市、德州市齐河县、徐州市丰县广西桂林市平乐县、黔东南麻江县、龙岩市新罗区、肇庆市封开县、广州市增城区、内蒙古赤峰市宁城县、楚雄大姚县、德州市陵城区沈阳市辽中区、株洲市炎陵县、永州市蓝山县、黔东南锦屏县、洛阳市偃师区、南阳市卧龙区、保山市施甸县、黔东南施秉县平凉市泾川县、乐东黎族自治县千家镇、上海市崇明区、定安县龙河镇、黔东南榕江县普洱市宁洱哈尼族彝族自治县、东方市四更镇、沈阳市康平县、绥化市望奎县、齐齐哈尔市泰来县伊春市丰林县、焦作市博爱县、临夏广河县、抚州市东乡区、甘孜石渠县、黔东南榕江县、迪庆德钦县、内蒙古呼和浩特市赛罕区、双鸭山市宝清县内蒙古乌兰察布市丰镇市、毕节市黔西市、临沧市临翔区、昆明市呈贡区、南阳市西峡县、东方市四更镇、阜新市清河门区、赣州市寻乌县抚州市崇仁县、东方市大田镇、泉州市金门县、惠州市龙门县、平凉市华亭县、东莞市横沥镇、汉中市勉县、张家界市武陵源区、东莞市寮步镇
本周据官方渠道公开一则通报,从像素到权重:手搓4399小游戏神经网络的硬核逆袭,未来不断发展创新,携手共建美好城市:维修过程图文可视化,保障服务质量不打折。
焦作市孟州市、大庆市萨尔图区、随州市曾都区、洛阳市老城区、梅州市丰顺县文昌市龙楼镇、庆阳市华池县、景德镇市昌江区、吕梁市孝义市、东莞市莞城街道、洛阳市嵩县蚌埠市蚌山区、广西河池市东兰县、昆明市宜良县、南京市玄武区、晋中市平遥县九江市浔阳区、齐齐哈尔市拜泉县、青岛市市南区、平顶山市郏县、铜川市王益区鸡西市麻山区、阿坝藏族羌族自治州黑水县、苏州市常熟市、福州市福清市、信阳市光山县、阳泉市城区、内蒙古阿拉善盟额济纳旗、上海市嘉定区、白沙黎族自治县阜龙乡广西柳州市柳江区、牡丹江市林口县、马鞍山市雨山区、许昌市襄城县、咸阳市乾县、临汾市蒲县、平顶山市石龙区、焦作市中站区、宿州市萧县遂宁市安居区、天津市东丽区、揭阳市榕城区、本溪市平山区、嘉兴市秀洲区、烟台市福山区、延安市富县、天津市滨海新区、安庆市太湖县六安市裕安区、重庆市铜梁区、临夏康乐县、绥化市安达市、南昌市湾里区、安庆市宜秀区、双鸭山市宝山区、七台河市桃山区、深圳市坪山区、厦门市同安区青岛市李沧区、盐城市射阳县、临高县新盈镇、泰州市靖江市、周口市沈丘县、漯河市郾城区眉山市东坡区、南京市六合区、三门峡市陕州区、台州市天台县、亳州市谯城区、忻州市五台县潍坊市昌邑市、江门市开平市、焦作市武陟县、重庆市江北区、蚌埠市禹会区、上海市闵行区
全球服务区域:寿光、龙岩、宿州滕州、银川长春安庆、绵阳等城市。
最新多方媒体发布最新消息,从像素到权重:手搓4399小游戏神经网络的硬核逆袭,未来不断发展创新,携手共建美好城市:7x24小时在线客服,保障服务质量不打折。
全国服务区域:九江、青岛、成都、南京、景洪、呼和浩特、衢州、铜川、包头、玉林、娄底、珠海、新乡、揭阳、金昌、东莞、上饶、青岛、泰兴、资阳、天水、临汾、沈阳、凯里、芜湖、佛山等城市。
维修服务标准化流程,保障服务质量不打折。昨日国际组织公开一则通报,从像素到权重:手搓4399小游戏神经网络的硬核逆袭你盯着4399小游戏里那个笨拙的AI对手。它走位呆板。它开枪随缘。它甚至会被自己的炸弹炸死。你心想这玩意儿也能叫人工智能。但硬核拆解告诉你一个反直觉的事实。这堆像素背后藏着一套完整的神经网络推理链。而你完全可以从零手搓一个同款模型。别不信。我们今天就拆开看。
第一步是像素逻辑。4399小游戏的画面分辨率低得感人。一个角色可能就占16乘16像素。颜色不超过8种。这恰恰是神经网络的理想饲料。你不需要高清摄像头。你只需要一个二维数组。每个像素点用0到255的灰度值表示。或者直接三通道RGB。但为了手搓方便。我们先用单通道。为什么。因为小游戏的碰撞检测和位置判断往往只依赖形状和颜色阈值。比如一个红色像素块代表敌人。一个蓝色像素块代表自己。神经网络要学的不是纹理细节。而是空间关系。比如红色块在蓝色块左侧三格内。且纵向差距小于两格。就输出向左移动。就这么简单。但怎么让模型自己学会这个规则。而不是你写if else。答案是卷积。
卷积层是像素逻辑的翻译官。你手搓一个3乘3的卷积核。权重初始随机。然后让模型在游戏画面上滑动。每个位置输出一个特征值。比如一个检测水平边缘的卷积核。权重设为左列负一中间零右列正一。它就能把红色块的左边界找出来。但别急着手动设计。硬核拆解的精髓是让权重自己推演。你用随机权重跑几十局游戏。记录画面和动作。然后反向传播。让模型学会哪些卷积核有用。一个小技巧是池化。2乘2最大池化把特征图缩小一半。这能减少计算量。还能让模型对像素偏移不敏感。4399小游戏的角色移动往往以2像素为单位。池化正好对齐这个粒度。
但卷积层只告诉你画面里有什么。没告诉你该做什么。所以需要全连接层来做决策。你把卷积输出的特征图展平成一维向量。比如8乘8乘4等于256维。然后接一个隐藏层。比如128个神经元。再输出动作概率。上下左右开火五个动作。用softmax归一化。这就是一个微型策略网络。但手搓的关键在于权重推演。你不能直接用现成的深度学习框架。因为题目要求手搓。那就用numpy。写一个简单的反向传播。损失函数用交叉熵。优化器用随机梯度下降。学习率设0.01。每局游戏结束后用经验回放更新一次。你会发现训练一百局后模型就能稳定躲子弹了。当然前提是你得把游戏画面截取成数组。4399小游戏用Flash或HTML5。你可以用屏幕截取工具每帧抓图。然后缩放到32乘32。灰度化。归一化到0到1。喂给网络。
权重推演的核心是奖励设计。你得告诉模型什么行为好。什么行为坏。最简单的奖励是生存时间。每活一帧加0.1分。死亡扣10分。但这样模型会学会原地不动。因为动可能撞子弹。所以你要加探索奖励。每移动一次加0.01分。每开火命中敌人加1分。开火未命中扣0.1分。这样模型就会学会边跑边打。但手搓神经网络最坑的地方是梯度消失。你用的sigmoid激活函数在深层网络里梯度会趋近于零。解决方案是换ReLU。或者用残差连接。不过4399小游戏不需要很深。两层卷积加两层全连接足够了。参数总量控制在五万以内。用numpy矩阵乘法在CPU上跑一帧只需要几毫秒。完全能实时推理。
现在你有了模型。怎么部署到游戏里。最简单的方法是写一个Python脚本。用pyautogui模拟键盘按键。模型输出动作后直接按下对应键。循环间隔50毫秒。这样你就能看到你的手搓AI在4399小游戏里大杀四方。但要注意延迟。从截屏到推理到按键大概需要80毫秒。你得在游戏里留出余量。比如提前一帧做决策。或者用多线程。一个线程截屏一个线程推理一个线程按键。更硬核的玩法是直接把模型编译成JavaScript。嵌入到游戏页面里。用canvas读取像素。用WebGL加速矩阵乘法。这样零延迟。不过那需要你手写GLSL着色器。对新手不友好。我们还是用Python加numpy。简单粗暴。
你可能会问。这跟真正的神经网络逆向攻略有什么关系。关系大了。4399小游戏的AI往往是规则驱动的状态机。但你可以用神经网络去拟合那个状态机。甚至超越它。比如原版AI只会直线追击。你训练的模型能学会绕柱走位。因为神经网络从像素里自动提取了障碍物边缘特征。这是手搓模型最爽的地方。你不需要理解游戏内部逻辑。你只需要给它画面和奖励。它自己推演权重。最后你打开权重矩阵一看。第一层卷积核长得像垂直边缘检测器。第二层卷积核长得像角落检测器。全连接层权重里正数对应安全方向。负数对应危险方向。这就是像素逻辑到权重推演的全过程。
最后给你一个最小可行代码框架。用numpy定义三层网络。输入32乘32灰度图。第一层卷积3乘3乘8。ReLU。最大池化2乘2。第二层卷积3乘3乘16。ReLU。最大池化2乘2。展平后接128个神经元全连接。ReLU。输出5个动作。用softmax。损失函数交叉熵。用数值梯度检查反向传播正确性。然后循环一万局游戏。每局随机初始化敌人位置。用ε贪婪策略探索。ε从1衰减到0.1。经验回放池容量一万。每步采样32个样本更新。学习率0.001。你会看到平均生存时间从十秒涨到三分钟。恭喜你。你手搓了一个能通关4399小游戏的神经网络。而且你完全理解了从像素到权重的每一行代码。下次再看到小游戏里那个笨AI。你可以笑着对它说。你的权重是我调的。
第二批长三角创新联合体建设试点数量为12个,其牵头单位、联合体名称分别为:江苏亨通光电股份有限公司牵头“长三角海洋信息传输技术创新联合体”,江苏奥赛康药业有限公司牵头“长三角抗微生物感染药物研究创新联合体”,南京美辰微电子有限公司牵头“长三角低轨卫星通信集成技术创新联合体”,中电金信数字科技集团股份有限公司牵头“长三角人工智能源网协同能管创新联合体”,上海化工研究院有限公司牵头“长三角同位素技术创新联合体”,上海御渡半导体科技有限公司牵头“长三角电测设备创新联合体”,浙江晶盛机电股份有限公司牵头“长三角集成电路大硅片抛光技术创新联合体”,杭州申昊科技股份有限公司牵头“长三角智能机器人创新联合体”,宁波吉利罗佑发动机零部件有限公司牵头“长三角绿色智能动力总成创新联合体”,埃夫特智能机器人股份有限公司牵头“长三角机器人高速高精技术创新联合体”,安徽皖仪科技股份有限公司牵头“长三角无线微创手术系统创新联合体”,安徽江淮汽车集团股份有限公司牵头“长三角汽车低碳与智能技术创新联合体”。
未来不断发展创新,携手共建美好城市。 【编辑者:臧允幸】
文章点评