在jenkins上不使用“PyAutoGUI”库就可以使用键盘操作吗？

Question

我正在使用机器人框架为应用程序创建测试脚本。此应用程序需要许多不可避免的键盘单击/操作组合。现在，我正在使用PyAutoGui库来模拟这些操作，它们工作正常，但是当我通过Jenkins上的无外设浏览器运行它们时，这些操作没有注册。

我得到的错误是“鼠标移动到左上角触发PyAutoGUI故障安全”。要禁用这种故障保护，请设置pyautogui。故障安全到假。”然而，即使在将故障保护值更改为false之后，键盘操作仍然不会被捕获。

奇怪的是，如果有人在测试运行时物理登录到Jenkins框中，库工作得很好，但在无头运行时，库会崩溃。

对于这种情况，是否有其他库可以使用或可能的解决方法？

提前感谢！

Answer 1

您可以通过安装VNC服务器并在其中运行jenkins slave来解决这个问题。然后浏览器将以gui启动，测试将正常工作。

Answer 2

我一直在工作中自动化许多Web应用程序。

我也是从PyAutoGUI开始的，在从我的笔记本电脑到运行脚本的生产服务器的过程中，我遇到了和你类似的问题。

我找到的解决方案是硒网络驱动程序。如果您正在测试的内容具有IP地址，则可能是解决方案。在我看来，它实际上比皮奥托GUI更容易。

Answer 3

这种行为的原因是，当没有用户登录时（物理上或通过RDP），就没有活动桌面（想想所有GUI元素、配置文件等）。我们在环境中遇到了这样的问题。这是一个可行的解决方案：

< li >创建将在Windows虚拟机上建立RDP会话的作业，以便有一个活动桌面。该作业无法结束RDP会话。它需要在后台运行(通常没问题，就像其他人用相同的用户登录一样，会话将切换到新用户，但桌面将是活动的。) < li >确保在Win虚拟机上运行测试作业时，已经打开了一个RDP。计划在Win虚拟机上测试之前运行作业1。

从作业1的技术细节来看，我们使用WIN前缀命名WinVM节点，因此要获得所有Windows节点，我们通过Jenkins API查询Jenkins
一旦我们有了WinVM（IP或主机名）列表，我们就在Linux节点上运行以下命令，循环所有发现的WinVM节点。

一个节点的基本命令：

   BUILD_ID=dontKillMe vncserver -kill :100 || true
   BUILD_ID=dontKillMe rm -rf /tmp/.X11-unix/X100 || true 
   BUILD_ID=dontKillMe vncserver :100
   BUILD_ID=dontKillMe DISPLAY=localhost:100
   BUILD_ID=dontKillMe export DISPLAY
   yum install -y freerdp
   ## loop through WinVMs below:    
   nohup xfreerdp -g <resolution> -u <user> -p <pas> <IP/hostname>
   ## end of loop

魔力在于 nohup，因为它在作业完成后在后台运行 RDP 会话。

这是安装了vncserver和xfreerdp的Centos。

#编辑

您可以要求管理员为运行测试创建一个WinVM，将Jenkins与开发/测试环境分开。通过这种方式，您可以从任何地方或从Jenkins本身在节点上打开RDP会话。为了稳定性和性能，最好不要在主机上运行任何东西。