您当前的位置:首页 > 电脑百科 > 软件技术 > 软件技术

RPA开发工具 Sikulix的探索

时间:2022-07-11 09:53:06  来源:  作者:进化的攻城狮

Sikulix是一个开源工具,支持图片识别和图片文字识别。用在RPA(机器人流程自动化) 上一般是检查屏幕上是否有对应的图片,识别出来后进行对应的业务操作。如果你需要拿到某些图片中的文字信息,Sikulix的文字识别也能帮到你。

Sikulix有自己的IDE。工作中,我们一般用Sikulix的IDE截取要被识别的图片。Sikulix下载地址:
https://launchpad.NET/sikuli。Sikulix IDE是一个jar包,我们可以双击直接启动。这里我在使用时遇见一个问题:mac直接启动后,使用截屏无法捕捉正常屏幕。原因是Mac上我们应该使用iterm命令行窗口启动SikulixIDE jar包,启动后会有提示需要在偏好设置中允许iterm的截屏权限,我们按照提示操作即可。需要注意的一点是,启动jar包时尽量把桌面上的其它窗口都最小化,我当时启动时桌面开了好几个窗口,一直看不到提示,导致无法正常使用。如果是windows系统,双击启动IDE jar即可。

Sikulix JAVA api使用:引入依赖

<dependency>

<groupId>com.sikulix</groupId>

<artifactId>sikulixapi</artifactId>

<version>2.0.5</version>

</dependency>

简单的业务中,一般Screen类中的方法就可以满足需求。代码如下:

RPA开发工具 Sikulix的探索

 

Sikulix识别屏幕上的图片也是有相似度分数的。我们可以设置相似度分数达到指定数值才认为是正确的图片。此时需要用到Pattern类。代码如下:

RPA开发工具 Sikulix的探索

 

有时候桌面上可能会有多个相同的图片,我们可以借助指定图片周围的图标来确定唯一性。识别到大范围图片后,使用sikulix java api移动鼠标进行精确点击。代码如下:

RPA开发工具 Sikulix的探索

 

识别文字:sikulix默认只支持英文识别。中文识别的话需要下载tesseract的中文数据。中文数据下载地址:
https://Github.com/tesseract-ocr/tessdata。将下载的数据包放到sikulix的工作目录:Mac下目录:/Users/用户名/Library/Application Support/Sikulix/SikulixTesseract/tessdata。识别文字代码如下:

RPA开发工具 Sikulix的探索

 

今天做个简单分享,大家点个关注吧!后面会持续分享哦



Tags:Sikulix   点击:()  评论:()
声明:本站部分内容及图片来自互联网,转载是出于传递更多信息之目的,内容观点仅代表作者本人,不构成投资建议。投资者据此操作,风险自担。如有任何标注错误或版权侵犯请与我们联系,我们将及时更正、删除。
▌相关推荐
RPA开发工具 Sikulix的探索
Sikulix是一个开源工具,支持图片识别和图片文字识别。用在RPA(机器人流程自动化) 上一般是检查屏幕上是否有对应的图片,识别出来后进行对应的业务操作。如果你需要拿到某些图...【详细内容】
2022-07-11  Search: Sikulix  点击:(741)  评论:(0)  加入收藏
▌简易百科推荐
如何在Windows 10中查看电脑的名称?这里提供详细步骤
你想在有多台计算机组成的网络上查找你的计算机吗?一种方法是找到你的电脑名称,然后在网络上匹配该名称。下面是如何在Windows 10中使用图形和命令行方法查看你的计算机名称。...【详细内容】
2024-04-10  驾驭信息纵横科技    Tags:Windows 10   点击:(6)  评论:(0)  加入收藏
移动版 Outlook 解锁新技能,可验证登录 OneDrive 等微软服务
IT之家 4 月 9 日消息,微软公司近日发布新闻稿,宣布用户可以使用 Outlook 手机应用,轻松登录 Teams、OneDrive、Microsoft 365 以及 Windows 等微软账号服务。移动端 Outlook...【详细内容】
2024-04-09    IT之家  Tags:Outlook   点击:(7)  评论:(0)  加入收藏
Win10/Win11和 macOS用户反馈:谷歌云服务“捆绑”系统 DNS 设置
IT之家 4 月 6 日消息,谷歌公司承认旗下的 Google One 订阅服务中存在问题,在 Windows 10、Windows 11 以及 macOS 系统上会更改系统 DNS 设置,变更为 8.8.8.8 地址。Google On...【详细内容】
2024-04-08    IT之家  Tags:Win10   点击:(11)  评论:(0)  加入收藏
电脑卡顿怎么重装系统,快看这篇
电脑卡顿时,重装系统确实是一种可能的解决方案。以下是重装系统的详细步骤:备份重要数据:首先,你需要将电脑中的重要文件和数据备份到外部存储设备(如U盘、移动硬盘或云存储)中,以...【详细内容】
2024-04-04  科技数码前锋    Tags:重装系统   点击:(5)  评论:(0)  加入收藏
如何检查电脑的最近历史记录?这里提供详细步骤
如果你怀疑有人在使用你的计算机,并且你想查看他们在做什么,下面是如何查看是否有访问内容的痕迹。如何检查我的计算机的最近历史记录要检查计算机的最近历史记录,应该从web浏...【详细内容】
2024-03-30  驾驭信息纵横科技    Tags:历史记录   点击:(6)  评论:(0)  加入收藏
关于Windows中AppData的相关知识,看这篇文章就可以了
如果AppData文件夹占用了你电脑上的太多空间,则需要清理AppData文件夹。下面是一些帮助你在Windows计算机上进行AppData清理的方法。什么是AppData文件夹AppData文件夹是保存...【详细内容】
2024-03-30  驾驭信息纵横科技    Tags:AppData   点击:(10)  评论:(0)  加入收藏
微软 Edge 浏览器将迎来“内存限制器”功能,用户可自主控制 Edge 内存占用
IT之家 3 月 28 日消息,微软即将为其 Edge 浏览器带来一项实用新功能,据悉该公司正在测试一项内置的内存限制器,这项功能可以让用户限制 Edge 所占用的内存,防止浏览器超出内存...【详细内容】
2024-03-29    IT之家  Tags:Edge   点击:(21)  评论:(0)  加入收藏
一寸照片的大小如何压缩?四个实测效果很好的方法
一寸照片作为生活中常见的尺寸之一,常用于各类证件照与证明文件的制作。然而,受限于其较为狭小的尺寸,上传及打印过程中很容易出现尺寸超限的情况。所以,这个时候就需要对其体积...【详细内容】
2024-03-18  宠物小阿涛    Tags:压缩   点击:(20)  评论:(0)  加入收藏
手机投屏到电脑/电视的方法
方法一:Win10自带的投影功能1、将手机和电脑连接同一个无线网络。2、选择【开始】>【设置】>【系统】>【投影到此电脑】3、将默认的始终关闭的选项更改为所有位置都可用。4、...【详细内容】
2024-03-18    老吴讲I  Tags:投屏   点击:(24)  评论:(0)  加入收藏
微软商店怎么卸载应用 一分钟快速看懂!
微软商店怎么卸载应用 一分钟快速看懂!微软公司(Microsoft Corporation)是一家全球领先的科技企业,总部位于美国华盛顿州的雷德蒙德。成立于1975年,由比尔&middot;盖茨和保罗&mid...【详细内容】
2024-02-27  婷婷说体育    Tags:微软商店   点击:(44)  评论:(0)  加入收藏
相关文章
    无相关信息
站内最新
站内热门
站内头条