UIPath入门系列六之UI自动化进阶

Wesley13
• 阅读 779

UI自动化进阶

一、Input Actions: 点击,键盘输入,快捷键,右键,鼠标悬停等

1)    **Default(默认)**:使用鼠标和键盘驱动程序来模拟人的操作,缺点是要求应用程序窗口保存活动的状态

2)    Simulate Type/Click(模拟): 三种方法中最快的,后台工作,不支持快捷键, 可自动清空字段

3)    **Window Messages(窗口消息)**:后台工作,在写入字段之前不能清空字段,并且速度不快。它将特定消息直接发送到目标应用程序以执行指定的操作

UIPath入门系列六之UI自动化进阶

Tips:UIPath中配置Default,Simulate, Window Message, 如下图

UIPath入门系列六之UI自动化进阶

例1:Input Action,打开记事本,输入一串字符,接着最小化窗口,然后点击最小化窗口,接着输入第二行,录制完毕后,在第一行和第二行之前加入Enter方法,此为Default录制结果。

UIPath入门系列六之UI自动化进阶

UIPath入门系列六之UI自动化进阶

UIPath入门系列六之UI自动化进阶

运行结果如下:

UIPath入门系列六之UI自动化进阶

例2:修改例1的用例,改为Window Messages模式,请自动验证运行结果。

UIPath入门系列六之UI自动化进阶

UIPath入门系列六之UI自动化进阶

UIPath入门系列六之UI自动化进阶

UIPath入门系列六之UI自动化进阶

UIPath入门系列六之UI自动化进阶

例3: 修改例1的用例,改为Simulate模式

UIPath入门系列六之UI自动化进阶

运行结果如下:Simulate模式可自动清空字段,会导致结果的不正确性

UIPath入门系列六之UI自动化进阶

二、Output Action:获得文本,找到页面元素和图片,剪贴板操作等

  1. Full Text: 它快速而准确,可在后台运行,它无法提取文本的屏幕坐标

  2. Native: 默认方法,能够提取单词数据,如每个单词或字符的屏幕坐标

  3. OCR: 此技术并非100%准确,但在其他任何直接方法都没有给我们想要的结果,OCR作为最后的选择。

UIPath入门系列六之UI自动化进阶

Tips:OCR分两种:

3.1) Microsoft OCR: 适用于较大的图像,如扫描文件,收据等,支持多国语言

3.2) Google OCR:适用于较小的低分辨率图像,可识别彩色图像,只支持英文

官网比较图如下:

UIPath入门系列六之UI自动化进阶

Tips:UIPath中可在Screen Scraping中找到Full Text,Native,OCR。如下图:

UIPath入门系列六之UI自动化进阶

UIPath入门系列六之UI自动化进阶

例4:识别MyCRM的Company下的Address信息,默认使用Native方法,准确率100%

1)点击Screen Scraping,打开MyCRM,Company选项

UIPath入门系列六之UI自动化进阶

2)选中Address区域

UIPath入门系列六之UI自动化进阶

3)抓取的结果如下:默认为Address中的内容,不包含标题

UIPath入门系列六之UI自动化进阶

4)点击Finish按钮,生成的场景如下

UIPath入门系列六之UI自动化进阶

UIPath入门系列六之UI自动化进阶

例5:同例4,选择Full Text方法

UIPath入门系列六之UI自动化进阶

抓取结果为Company的标题和内容

运行结果如下:

UIPath入门系列六之UI自动化进阶

UIPath入门系列六之UI自动化进阶

例6:用Microsoft OCR识别Company下的Address信息

UIPath入门系列六之UI自动化进阶

UIPath入门系列六之UI自动化进阶

由此可见,准确率并不是100%

例7:用Google OCR识别Company下的Address信息

UIPath入门系列六之UI自动化进阶

UIPath入门系列六之UI自动化进阶

准确率比Microsoft OCR更低。

例8:综合例子,将Output几个方法输出的结果进行比较

UIPath入门系列六之UI自动化进阶

UIPath入门系列六之UI自动化进阶

UIPath入门系列六之UI自动化进阶

UIPath入门系列六之UI自动化进阶

UIPath入门系列六之UI自动化进阶

以上四种方法的结果如下

UIPath入门系列六之UI自动化进阶

三、Output Methods – 页面元素的抓取

页面元素具有结构化的特征:

例如下图,每个蓝框表示一个网站信,里面有同样的网站名称,网站地址,网站描述, UIPath可以将这些元素导出成Excel表格形式

UIPath入门系列六之UI自动化进阶

例9:在亚马逊网站上搜索RPA,将搜索到的书名,作者,价格输出Excel中

  1. 打开亚马逊网站,搜索RPA,列出多个商品

  2. 打开UIPath-点击DataScraping-选择Next

UIPath入门系列六之UI自动化进阶

  1. 选择第一本书的标题

UIPath入门系列六之UI自动化进阶

4)点击Next,选择第二本书的标题

UIPath入门系列六之UI自动化进阶

  1. 勾选上Extract URL,并自定义书名和URL,点击Next

UIPath入门系列六之UI自动化进阶

6)点击Extract Correlated Data提取作者信息和电子书的价格

UIPath入门系列六之UI自动化进阶

7)空白处有些书是没有电子书价格的

UIPath入门系列六之UI自动化进阶

8)点击Finish按钮,然后点击Yes,此用例需要显示出网页搜索的所有结果

UIPath入门系列六之UI自动化进阶

  1. 将结果集放入CSV文件中

UIPath入门系列六之UI自动化进阶

10)运行结果如下

UIPath入门系列六之UI自动化进阶

例10:获取网页表格,以HTML字符集为例

  1. 打开网页http://www.w3school.com.cn/tags/html\_ref\_charactersets.asp

  2. 打开UIPath-点击DataScraping-选择Next-选择页面任意一个元素,弹出Extract table框,选择Yes

UIPath入门系列六之UI自动化进阶

3)选择前7行,然后点击Finish按钮

UIPath入门系列六之UI自动化进阶

4)加入输出CSV控件

UIPath入门系列六之UI自动化进阶

5)运行结果如下

UIPath入门系列六之UI自动化进阶

点赞
收藏
评论区
推荐文章
blmius blmius
3年前
MySQL:[Err] 1292 - Incorrect datetime value: ‘0000-00-00 00:00:00‘ for column ‘CREATE_TIME‘ at row 1
文章目录问题用navicat导入数据时,报错:原因这是因为当前的MySQL不支持datetime为0的情况。解决修改sql\mode:sql\mode:SQLMode定义了MySQL应支持的SQL语法、数据校验等,这样可以更容易地在不同的环境中使用MySQL。全局s
皕杰报表之UUID
​在我们用皕杰报表工具设计填报报表时,如何在新增行里自动增加id呢?能新增整数排序id吗?目前可以在新增行里自动增加id,但只能用uuid函数增加UUID编码,不能新增整数排序id。uuid函数说明:获取一个UUID,可以在填报表中用来创建数据ID语法:uuid()或uuid(sep)参数说明:sep布尔值,生成的uuid中是否包含分隔符'',缺省为
待兔 待兔
3个月前
手写Java HashMap源码
HashMap的使用教程HashMap的使用教程HashMap的使用教程HashMap的使用教程HashMap的使用教程22
Jacquelyn38 Jacquelyn38
3年前
2020年前端实用代码段,为你的工作保驾护航
有空的时候,自己总结了几个代码段,在开发中也经常使用,谢谢。1、使用解构获取json数据let jsonData  id: 1,status: "OK",data: 'a', 'b';let  id, status, data: number   jsonData;console.log(id, status, number )
Wesley13 Wesley13
3年前
mysql设置时区
mysql设置时区mysql\_query("SETtime\_zone'8:00'")ordie('时区设置失败,请联系管理员!');中国在东8区所以加8方法二:selectcount(user\_id)asdevice,CONVERT\_TZ(FROM\_UNIXTIME(reg\_time),'08:00','0
Stella981 Stella981
3年前
Android蓝牙连接汽车OBD设备
//设备连接public class BluetoothConnect implements Runnable {    private static final UUID CONNECT_UUID  UUID.fromString("0000110100001000800000805F9B34FB");
Stella981 Stella981
3年前
Docker 部署SpringBoot项目不香吗?
  公众号改版后文章乱序推荐,希望你可以点击上方“Java进阶架构师”,点击右上角,将我们设为★“星标”!这样才不会错过每日进阶架构文章呀。  !(http://dingyue.ws.126.net/2020/0920/b00fbfc7j00qgy5xy002kd200qo00hsg00it00cj.jpg)  2
Stella981 Stella981
3年前
Django中Admin中的一些参数配置
设置在列表中显示的字段,id为django模型默认的主键list_display('id','name','sex','profession','email','qq','phone','status','create_time')设置在列表可编辑字段list_editable
Wesley13 Wesley13
3年前
MySQL部分从库上面因为大量的临时表tmp_table造成慢查询
背景描述Time:20190124T00:08:14.70572408:00User@Host:@Id:Schema:sentrymetaLast_errno:0Killed:0Query_time:0.315758Lock_
Python进阶者 Python进阶者
9个月前
Excel中这日期老是出来00:00:00,怎么用Pandas把这个去除
大家好,我是皮皮。一、前言前几天在Python白银交流群【上海新年人】问了一个Pandas数据筛选的问题。问题如下:这日期老是出来00:00:00,怎么把这个去除。二、实现过程后来【论草莓如何成为冻干莓】给了一个思路和代码如下:pd.toexcel之前把这