linux螢幕滑動效果實作代碼,使用swipe方法模拟螢幕滑動與手勢密碼繪制

前言

App自動化測試中有兩個很重要的操作，螢幕滑動與繪制手勢密碼。目前很多App在啟動時，都存在啟動時的引導動畫或者加載上下文内容時需要手動上滑或者下滑加載頁面，是以在自動化測試的過程中模拟手的滑動操作看起來就很重要了；第二個比較重要的是模拟手動繪制九宮格完成手勢密碼的設定，這種手勢密碼在我了解的範圍内，大多在金融類的app中最常見，還有一些對使用者資訊保密性較好的app中，是以，模拟繪制手勢密碼也是app自動化測試中必須掌握的操作，那麼接下來我們就開始講解兩種操作該如何實作, 在進入正題之前，你還應該知道，手機中橫縱坐标的原點是從螢幕的左上角頂點(0, 0)的位置開始的

滑動螢幕

swipe方法

模拟滑動螢幕的操作，我們通過swipe方法實作，先看一下這個方法的源代碼

def swipe(self, start_x, start_y, end_x, end_y, duration=None):

"""Swipe from one point to another point, for an optional duration.

Args:

start_x (int): x-coordinate at which to start

start_y (int): y-coordinate at which to start

end_x (int): x-coordinate at which to stop

end_y (int): y-coordinate at which to stop

duration (:obj:`int`, optional): time to take the swipe, in ms.

Usage:

driver.swipe(100, 100, 100, 400)

Returns:

`WebElement`

"""

# `swipe` is something like press-wait-move_to-release, which the server

# will translate into the correct action

action = TouchAction(self)

action \

.press(x=start_x, y=start_y) \

.wait(ms=duration) \

.move_to(x=end_x, y=end_y) \

.release()

action.perform()

return self

參數

start_x, start_y : 表示開始滑動時的初始坐标，也就是從哪裡開始滑動

end_x, end_y : 表示滑動後的坐标，也就是滑動到哪裡

duration: 　　 : 表示滑動過程的時間間隔，模拟操作時，我們最好設定個時間間隔，避免由于代碼運作太快，而真機或者模拟器反應比較慢，而操作失敗，機關以毫秒計算

通過源碼，我們發現swipe方法實際上是使用TouchAction實作的，這個類在後面我們仍然會使用，主要是模拟一些觸屏動作

實作思路

大家可以想象一下，平時我們滑動螢幕時，是如何操作的？例如向左滑動螢幕，我們往往是把手放在螢幕的右側，然後按住螢幕向左滑動，那麼代碼如何知道我們從螢幕的哪個位置開始讷？那就是坐标了，我們可以先擷取螢幕的寬，高，然後按照它的比例計算滑鼠的位置坐标，我這裡取的起始坐标點為螢幕寬度的0.9倍，高度的0.5倍，大概就是我們實際中滑屏時手指的操作位置。大家可以根據下面播放的動畫觀察滑鼠開始的大概位置和結束位置

linux螢幕滑動效果實作代碼,使用swipe方法模拟螢幕滑動與手勢密碼繪制

接下來我們開始模拟動畫中滑鼠的操作(人手的操作，我用的模拟器是以有滑鼠)

首先我們通過get_window_size()方法擷取螢幕的寬和高(這個方法傳回一個字典)，然後計算滑鼠的初始位置和結束為止

def get_phone_size(self):

"""擷取螢幕的大小"""

width = self.driver.get_window_size()['width'] # 擷取螢幕的寬

height = self.driver.get_window_size()['height'] # 擷取螢幕的高

return width, height

通過模拟動畫不難看出，滑鼠大概從起始點坐标(螢幕寬的3/4，高的1/2)位置滑動到結束點坐标(螢幕寬1/4，高1/2)，ok，接下來通過swipe()方法實作滑動操作

def swipe_left(self, duration=300):

"""左滑"""

width, height = self.get_phone_size

start = width * 0.9, height * 0.5

end = width * 0.1, height * 0.5

return self.driver.swipe(*start, *end, duration)

def swipe_right(self, duration=300):

"""右滑"""

width, height = self.get_phone_size

start = width * 0.9, height * 0.5

end = width * 0.1, height * 0.5

return self.driver.swipe(*start, *end, duration)

def swipe_up(self, duration):

"""上滑"""

width, height = self.get_phone_size

start = width * 0.9, height * 0.5

end = width * 0.1, height * 0.5

return self.driver.swipe(*start, *end, duration)

def swipe_down(self, duration):

"""下滑"""

width, height = self.get_phone_size

start = width * 0.9, height * 0.5

end = width * 0.1, height * 0.5

return self.driver.swipe(*start, *end, duration)

方法優化

以上每一個方法調用一次隻能滑動一次，而且不同的滑動方向需要調用不同的方法，使用時比較麻煩。是以我們可以優化一下代碼，通過調用一個函數實作不同次數，不同方向的滑動

使用for循環實作連續的滑動，引入direction參數，結合字典及反射機制，實作根據不同的參數執行不同滑動方向的方法，傳遞num參數控制滑動的次數，具體代碼如下

def skip_welcome_page(self, direction, num=3):

"""

滑動頁面跳過引導動畫

:param direction: str 滑動方向，left, right, up, down

:param num: 滑動次數

:return:

"""

direction_dic = {

"left": "swipe_left",

"right": "swipe_right",

"up": "swipe_up",

"down": "swipe_down"

}

time.sleep(3)

if hasattr(self, direction_dic[direction]):

for _ in range(num):

getattr(self, direction_dic[direction])() # 使用反射執行不同的滑動方法

else:

raise ValueError("參數{}不存在, direction可以為{}任意一個字元串".

format(direction, direction_dic.keys()))

以上就是所有滑動螢幕的操作了，具體效果，我們後面再看(你也可以先試試)

手勢密碼

TouchAction類

模拟手勢密碼的繪制我們使用TouchAction類，這個類提供了短按壓press()方法，wait()方法，move_to()方法，release()方法，perform()方法等常用方法，下面我簡單說明一下這幾個方法的作用

press(element, x, y) : 其中element參數是一個元素對象，當element不為空時，x和y必須位None，如果element為None時，x如果不為None，那麼y也不能位None，也就是說在安卓作業系統中，element和(x,y)必要傳遞一個，蘋果系統可以不傳，這裡不做介紹

wait(duration) : duration是時間，以毫秒為機關，這個方法的作用是等待一段時間，和sleep的作用類似，唯一差別sleep不能被TouchAtion對象通路

release() : 這個方法的作用是結合press等按壓動作使用的，表示擡起動作

perform()：這個方法的作用是使所有的按壓及等待，release等動作生效

實作思路

模拟大多app中的手勢設定密碼操作會遇見兩種情況，一種是9宮格中每一個點的元素都可以通過定位表達式定位到，另一種是每個點無法通過定位表達式定位到的，隻能定位到整體9宮格元素，每個點隻能通過擷取坐标的方式定位，那麼我們今天模拟繪制手勢密碼的情況就是第二種，如果這種掌握了，那麼第一種更簡單，下面我們分析一下該如何擷取每一個點的坐标，先來看下面的圖

linux螢幕滑動效果實作代碼,使用swipe方法模拟螢幕滑動與手勢密碼繪制

上圖中的x軸，y軸是手機的坐标表示方式，請差別數學中的二維坐标，其中x軸方向表示手機螢幕的寬度width，y軸方向表示螢幕的高度height，原點為(0, 0); 藍色方框代表9宮格手勢操作的整體元素(内部包含9個點)，start_x, start_y 代表9宮格元素的起始坐标點，start_x也是9宮格起始點距離y軸的距離，start_y也是9宮格起始點距離x軸的距離，請大家一定了解這幾個值的關系，下面我們可以通過WebElement對象的rect方法擷取9宮格元素的寬，高及起始點坐标

def get_element_size_location(element):

width = element.rect["width"] # 9宮格元素的寬度

height = element.rect["height"] # 9宮格坐标的高度

# 9宮格元素的起始坐标點

start_x = element.rect["x"]

start_y = element.rect["y"]

return width, height, start_x, start_y

除了使用rect方法外，你還可以使用location和size方法分别擷取元素的起始點坐标和寬，高，兩個方法同樣傳回字典

element.location ->{"x": start_x, "y": start_y}

element.size ->{"width": width, "height": height}

接下來我們通過9宮格元素的width，height，start_x, start_y分别計算每個點的坐标，我們按照上圖，把9宮格元素的width和height分别等分為6等分

前3個點(1, 2, 3)的坐标分别是

width, height, start_x, start_y = self.get_element_size_location(element)

point_1 = {"x": int(start_x + width * (1 / 6) * 1), "y": int(start_y + height * (1 / 6) * 1)}

point_2 = {"x": int(start_x + width * (1 / 6) * 3), "y": int(start_y + height * (1 / 6) * 1)}

point_3 = {"x": int(start_x + width * (1 / 6) * 5), "y": int(start_y + height * (1 / 6) * 1)}

中間3個點(4, 5, 6)的坐标分别為

point_4 = {"x": int(start_x + width * (1 / 6) * 1), "y": int(start_y + height * (1 / 6) * 3)}

point_5 = {"x": int(start_x + width * (1 / 6) * 3), "y": int(start_y + height * (1 / 6) * 3)}

point_6 = {"x": int(start_x + width * (1 / 6) * 5), "y": int(start_y + height * (1 / 6) * 3)}

最後3個點(7， 8， 9)的坐标分别為

point_7 = {"x": int(start_x + width * (1 / 6) * 1), "y": int(start_y + height * (1 / 6) * 5)}

point_8 = {"x": int(start_x + width * (1 / 6) * 3), "y": int(start_y + height * (1 / 6) * 5)}

point_9 = {"x": int(start_x + width * (1 / 6) * 5), "y": int(start_y + height * (1 / 6) * 5)}

下面我們使用TouchAction類中的move_to,wait,release,perform方法實作從一個點移動到另一個點，進而實作模拟手勢密碼的連線操作(連結1-2-3-6-9)

TouchAction(driver).press(x=point_1["x"], y=point_1["y"]).wait(300)\

.move_to(x=point_2["x"], y=point_2["y"]).wait(500)\

.move_to(x=point_3["x"], y=point_3["y"]).wait(500)\

.move_to(x=point_6["x"], y=point_6["y"]).wait(500)\

.move_to(x=point_9["x"], y=point_9["y"]).wait(500).release().perform()

完整代碼

不包含滑動螢幕的代碼

base.py

"""

------------------------------------

@Time : 2019/8/6 20:22

@Auth : linux超

@File : base.py

@IDE : PyCharm

@Motto: Real warriors,dare to face the bleak warning,dare to face the incisive error!

@QQ : [email protected]

@GROUP: 878565760

------------------------------------

"""

from appium.webdriver import WebElement

from appium.webdriver.common.touch_action import TouchAction

from appium.webdriver.webdriver import WebDriver

from selenium.webdriver.support.wait import WebDriverWait

from selenium.common.exceptions import NoSuchElementException, TimeoutException

class Base(object):

def __init__(self, driver: WebDriver):

self.driver = driver

@staticmethod

def get_element_size_location(element):

width = element.rect["width"]

height = element.rect["height"]

start_x = element.rect["x"]

start_y = element.rect["y"]

return width, height, start_x, start_y

def gesture_password(self, element: WebElement):