2017 年 12 月 28 日下午,微信发布了 6.6.1 版本,加入了「小游戏」功能,并提供了官方 DEMO「跳一跳」。这是一个 2.5D 插画风格的益智游戏,玩家可以通过按压屏幕时间的长短来控制这个「小人」跳跃的距离。分数越高,那么在好友排行榜更加靠前。
辅助脚本wechat_jump_game是一个python2编写的辅助外挂。通过Python的图片操作库分析手机实时的截图,通过图像识别获取棋子位置和棋盘的位置,从而通过ADB模拟点击操作完成自动操作。 https://v.qq.com/x/page/j0542oocazn.html
辅助工作原理将手机点击到《跳一跳》小程序界面用 ADB 工具获取当前手机截图,并用 ADB 将截图 pull 上来adb shell screencap -p /sdcard/autojump.webpadb pull /sdcard/autojump.webp .计算按压时间
手动版:用 Matplotlib 显示截图,用鼠标先点击起始点位置,然后点击目标位置,计算像素距离;
自动版:靠棋子的颜色来 识别棋子,靠底色和方块的色差来识别棋盘;
用 ADB 工具点击屏幕蓄力一跳
adb shell input swipe x y x y time(ms)思路以及代码分析核心:我们这次讲解以最常用最好用的自动脚本为例。每次落稳之后截图,根据截图算出棋子的坐标和下一个块顶面的中点坐标,根据两个点的距离乘以一个时间系数获得长按的时间 1.首先脚本会检测ADB的可用性,并获取当前手机型号,分辨率等信息。
获取手机分辨率def _get_screen_size():'''获取手机屏幕大小'''size_str = os.popen('adb shell wm size').read()if not size_str:print('请安装 ADB 及驱动并配置环境变量')sys.exit()m = re.search(r'(\\d+)x(\\d+)', size_str)if m:return "{height}x{width}".format(height=m.group(2), width=m.group(1))return "1920x1080"注意re.serarch是正则表达式操作,目的是从ADB输出中提取出屏幕分辨率的两个数字。
调用配置文件def open_accordant_config():'''调用配置文件'''screen_size = _get_screen_size()config_file = "{path}/config/{screen_size}/config.json".format(path=sys.path[0],screen_size=screen_size)if os.path.exists(config_file):with open(config_file, 'r') as f:print("Load config file from {}".format(config_file))return json.load(f)else:with open('{}/config/default.json'.format(sys.path[0]), 'r') as f:print("Load default config")return json.load(f)这段函数实际的操作是通过获取的屏幕大小获取之前已经调试好的数据,包括根据屏幕大小测算好的二分之一的棋子底座高度,棋子的宽度,长按的时间系数(后文会继续说明)等等。 2.截图以及从手机拉取到PC
if screenshot_way == 2 or screenshot_way == 1:process = subprocess.Popen('adb shell screencap -p', shell=True, stdout=subprocess.PIPE)screenshot = process.stdout.read()if screenshot_way == 2:binary_screenshot = screenshot.replace(b'\r\n', b'\n')else:binary_screenshot = screenshot.replace(b'\r\r\n', b'\n')f = open('autojump.webp', 'wb')f.write(binary_screenshot)f.close()3.关键步骤:寻找棋子坐标和下一跳棋盘坐标
识别棋子:靠棋子的颜色来识别位置,通过截图发现最下面一行大概是一条直线,就从上往下一行一行遍历,比较颜色(颜色用了一个区间来比较)找到最下面的那一行的所有点,然后求个中点,求好之后再让 Y 轴坐标减小棋子底盘的一半高度从而得到中心点的坐标这段代码的核心是Python的PIL库操作,如果不了解请自行Google学习。
def find_piece_and_board(im):'''寻找关键坐标'''w, h = im.sizepiece_x_sum = 0piece_x_c = 0piece_y_max = 0board_x = 0board_y = 0scan_x_border = int(w / 8) # 扫描棋子时的左右边界scan_start_y = 0 # 扫描的起始 y 坐标im_pixel = im.load()# 以 50px 步长,尝试探测 scan_start_yfor i in range(int(h / 3), int(h*2 / 3), 50):last_pixel = im_pixel[0, i]for j in range(1, w):pixel = im_pixel[j, i]# 不是纯色的线,则记录 scan_start_y 的值,准备跳出循环if pixel[0] != last_pixel[0] or pixel[1] != last_pixel[1] or pixel[2] != last_pixel[2]:scan_start_y = i - 50breakif scan_start_y:breakprint('scan_start_y: {}'.format(scan_start_y))# 从 scan_start_y 开始往下扫描,棋子应位于屏幕上半部分,这里暂定不超过 2/3for i in range(scan_start_y, int(h * 2 / 3)):for j in range(scan_x_border, w - scan_x_border): # 横坐标方面也减少了一部分扫描开销pixel = im_pixel[j, i]# 根据棋子的最低行的颜色判断,找最后一行那些点的平均值,这个颜色这样应该 OK,暂时不提出来if (50