鼠标|这只鼠标学会了自己玩FPS游戏:准度不输职业选手

能自动瞄准并“精准命中”,还不会被封号的FPS外挂,你见过吗?
现在,真的有一位CMU研究生小哥,将自己的鼠标变成了FPS游戏里的“神狙手”!
给它安上四个轮子后,鼠标便能根据CV算法反馈,自动瞄准并实现一枪狙击 。
鼠标|这只鼠标学会了自己玩FPS游戏:准度不输职业选手
文章图片

【鼠标|这只鼠标学会了自己玩FPS游戏:准度不输职业选手】在这之前,虽然也有一些物理外挂,但还不至于自动化到让鼠标自己移动并完成射击 。
如果选择第三方软件修改等外挂,又极容易被直接封号 。
思索一番,这位小哥便开发了一个能自己瞄准目标的FPS物理外挂,目前在训练场Aim Lab中的成绩已经超过了一些FPS专业玩家——
人类FPS专家平均在80000~90000分左右,而它拿到了110000+分 。
有网友看完后表示“绝不简单”:对于写过代码的人来说,这可没听上去那么轻松 。
鼠标|这只鼠标学会了自己玩FPS游戏:准度不输职业选手
文章图片

所以,他究竟是怎么做到的呢?
将鼠标变成“神狙手”
为了让鼠标自己“学会”瞄准,这名小哥首先给鼠标设计了一个底盘 。
在他的设想中,这个底盘要能带着鼠标灵活移动,原理大概像这样:
鼠标|这只鼠标学会了自己玩FPS游戏:准度不输职业选手
文章图片

思路有了后,最终底盘用到了四个全向轮和对应的控制电机 。
鼠标|这只鼠标学会了自己玩FPS游戏:准度不输职业选手
文章图片

简单来说,各个方向的全向轮(omni wheels),能够让机器人朝向任意方向灵活运动,包括直接走直线等,而这些轮子分别由不同的电机控制 。
鼠标|这只鼠标学会了自己玩FPS游戏:准度不输职业选手
文章图片

基本的移动操作实现后,就是利用计算机视觉算法,来让它学会“自己寻找猎物”了 。
小哥基于OpenCV写了一个Python目标检测算法,训练它能够根据目标的位置迅速瞄准对应的目标:
鼠标|这只鼠标学会了自己玩FPS游戏:准度不输职业选手
文章图片

从视觉数据反馈到操作上,小哥采用了PID控制算法,让机器人学会自己去找距离最近的“射击点”,来在规定时间内瞄中更多的物体:
鼠标|这只鼠标学会了自己玩FPS游戏:准度不输职业选手
文章图片

当瞄准物体后,这个机器人就会自行触发鼠标“点击”的动作,从而完成自动射击 。
在测试中超过部分专业玩家
为了加强这个机器人的能力,小哥在一个叫做Aim Lab的第一人称射击游戏模拟器中对它进行训练 。
目前,有不少专业FPS玩家都会在Aim Lab中训练,里面也包含了各种不同类型的射击任务,例如人形移动靶、飞靶等 。
鼠标|这只鼠标学会了自己玩FPS游戏:准度不输职业选手
文章图片

小哥训练的这个“鼠标机器人”,主要针对的还是颜色球射击,其中视觉算法自动找到带颜色的球体,然后机器人跟上去瞄准射击 。
调测了两个月算法后,小哥终于训练出了比较满意的机器人,目前在Aim Lab中最高拿到了118494的分数,超过了不少专业FPS玩家 。