使用OCR实现Linux应用图像识别自动化测试

AirTest & LDTP

Airtest是一个基于图像识别的跨平台UI自动测试框架。它适用于游戏和应用程序，支持的平台有Windows、Android和iOS。

在之前的文章中，我们详细介绍了Airtest库和LDTP的使用。如果您已经了解其中的配置和使用，那么现在让我们来继续学习如何使用OCR实现Linux应用图像识别自动化测试。

OCR集成LDTP

启动被测应用程序：

Copy to Clipboard

重写findelement函数，让其拓展支持基于图像的定位方式，并返回ImageElement:

Copy to Clipboard

formatted_locator, message, short_message = self._format_which(which, args)
root = root.element if isinstance(root, WindowsUIElement) else root
timeout = timeout if timeout else settings.IMPLICITLY_WAIT_TIMEOUT

# find image
if which.control == Control.IMAGE:
	class WaitImageFound:
		def __init__(self, instance):
			self.instance = instance

def __call__(self):
			screen = screenshot(None)
			current_file_path = os.path.split(os.path.realpath(__file__))[0]
			po = None
			if isinstance(which.value, list):
				for each in which.value:
					img_path = os.path.abspath(os.path.join(current_file_path, each))
					po = Template(img_path).match_in(screen)
					if po:
						break
					log.info(each + ' not found')
			else:
				img_path = os.path.abspath(os.path.join(current_file_path, which.value))
				po = Template(img_path).match_in(screen)
			if po:
				return po[0], po[1]
			else:
				return False

x, y = Wait(timeout, wait_interval=settings.WAIT_INTERVAL).until(WaitImageFound(self))
	return WindowsImageElement(self, (x, y), message, short_message, which)
# find control
else:
	class WaitElementFound:
		def __call__(self):
			try:
				control = getattr(root, which.control)(**json.loads(formatted_locator))
				if control.Exists(settings.WAIT_INTERVAL):
					return control
				else:
					return False
			except:
				return False
	element = Wait(timeout).until(WaitElementFound(),
								  'Could not find element using which: {0}'.format(which))
	return WindowsUIElement(self, element, message, short_message, which)

Copy to Clipboard

封装好图像定位、操作的类库后，通过其提供的api进行脚本开发：

Copy to Clipboard

AirTest & LDTP

OCR集成LDTP

Share This Story, Choose Your Platform!

关于作者: Dilato

相关文章

Pytest Fixture：提高测试的可维护性

Pytest Plugins：扩展测试框架的功能

测试自动化中的容错和异常处理