pywin32/pywinauto 在最小化时无法在远程桌面中正常工作

Question

我有一个 Jenkins 管道，它在远程服务器中执行一个程序，该服务器使用 pywin 来操作应用程序以进行功能测试。

当我打开远程桌面时，我的应用程序运行良好，但是当我关闭远程桌面并从 Jenkins 运行它时，应用程序丢失了。

我所做的是打开应用程序并发送回车键。

这是我的应用:

os.startfile("C:\\Program Files (x86)\\SAP\\FrontEnd\\SAPgui\\saplogon.exe")

time.sleep(5)
handle = win32gui.FindWindow(0, "SAP Logon 740")  

keyboard = Controller()
keyboard.press(Key.enter)

于是我尝试给app添加焦点强制焦点没有成功:

os.startfile("C:\\Program Files (x86)\\SAP\\FrontEnd\\SAPgui\\saplogon.exe")

time.sleep(5)
handle = win32gui.FindWindow(0, "SAP Logon 740")  

win32gui.ShowWindow(handle, 5)           
win32gui.SetForegroundWindow(handle)

keyboard = Controller()
keyboard.press(Key.enter)

我将按键更改为此，结果相同:

shell = win32com.client.Dispatch("WScript.Shell")
shell.SendKeys('{ENTER}')

我尝试更改为 pywinauto，尝试点击按钮而不是发送输入，但我发现了更多问题，因为 pywinauto 无法识别我的应用标题:

app = Application().start("C:\\Program Files (x86)\\SAP\\FrontEnd\\SAPgui\\saplogon.exe")

app["SAP Logon 740"] # this doesn't work
app.top_window_()    # this doesn't work either

handle = win32gui.FindWindow(0, "SAP Logon 740")  
sapApp = app.window_(handle = handle)            #Finally this works but...

sapApp["Log &On"].click()                        # This doesn't work
sapApp.log_on.Click()                            # This doesn't work

我得到这个异常:

ctypes.ArgumentError: argument 2: <class 'TypeError'>: expected LP_c_ulong instance instead of pointer to c_long

我知道那是因为我试过:

print(sapApp.descendants(control_type="MenuBar"))

得到了这个结果:

[<win32_controls.ButtonWrapper - 'Log &On', Button, 14221798>, ...]

所以我知道这是按钮的名称，但无法点击它。

我也试过将焦点设置到应用程序，结果相同:

sapApp.SetFocus()

打开远程桌面后，一切正常，但它已关闭，我的应用程序无法输入

那么以前有人遇到过这个问题吗？我的想法用完了，我还能尝试什么？

谢谢

编辑:

这是 ctypes 错误的完整跟踪:

File "e:\Jenkins\workspace\my-project\scripts\test_pywin.py", line 23, in <module> sapApp.log_on.Click()
File "E:\Python_V365\lib\site-packages\pywinauto\controls\hwndwrapper.py", line 725, in click self.verify_actionable()
File "E:\Python_V365\lib\site-packages\pywinauto\base_wrapper.py", line 591, in verify_actionable self.wait_for_idle()
File "E:\Python_V365\lib\site-packages\pywinauto\controls\hwndwrapper.py", line 710, in wait_for_idle win32functions.WaitGuiThreadIdle(self)
File "E:\Python_V365\lib\site-packages\pywinauto\win32functions.py", line 283, in WaitGuiThreadIdle GetWindowThreadProcessId(handle, ctypes.byref(process_id))
ctypes.ArgumentError: argument 2: <class 'TypeError'>: expected LP_c_ulong instance instead of pointer to c_long

还尝试 (backend="uia") 以相同的结果启动应用程序:

app = Application(backend="uia").start("C:\\Program Files (x86)\\SAP\\FrontEnd\\SAPgui\\saplogon.exe")

启动程序后尝试连接会出现此错误:

app = Application().connect(title="SAP Logon 740", timeout=10)

File "e:\Jenkins\workspace\tacion_BehaveImplementation-637TPHZXXSFG4MVWWWJCBSJOWSAVPZMPOYFKFKNYKRT5XRBIZFBQ\scripts\test_pywin.py", line 12, in <module> app = Application().connect(title="SAP Logon 740", timeout=10)
File "E:\Python_V365\lib\site-packages\pywinauto\application.py", line 944, in connect self.process = findwindows.find_element(**kwargs).process_id
File "E:\Python_V365\lib\site-packages\pywinauto\findwindows.py", line 84, in find_element elements = find_elements(**kwargs)
TypeError: find_elements() got an unexpected keyword argument 'timeout'

这终于奏效了:

app = Application().connect(title="SAP Logon 740", backend="uia")
sapApp = app["SAP Logon 740"]

但发现问题实际上是我需要等待应用程序完全加载，所以这也有效:

app = Application().start("C:\\Program Files (x86)\\SAP\\FrontEnd\\SAPgui\\saplogon.exe")
time.sleep(5)
app["SAP Logon 740"]

但是按钮还是一样的问题

Answer 1

UPD:下面列出的所有实践都被编译成 Remote Execution Guide这可能是最新的。

远程桌面的问题与工具无关。当 RDP 最小化或断开连接时，RDP 本身不会保留 GUI 上下文(当操作系统被锁定时会发生相同的效果)。但症状通常涉及 .click_input() 和 .type_keys()/keyboard.SendKeys() 方法，这些方法在没有 GUI 上下文的情况下无法正常工作。

最小化 RDP 问题的解决方法:

1. 将 RDP 切换到窗口模式(非全屏)，在那里运行脚本并快速切换到本地计算机。现在你可以正常工作了。这是手动运行最简单的方式。

2. 在远程机器上安装 VNC 服务器软件(我使用的是 TightVNC)，在本地机器上安装 VNC 客户端(也是 TightVNC)。如果您看到黑屏，您可能需要更新远程计算机上的视频卡驱动程序。如果至少使用过一次 RDP，您还必须重新启动远程主机。主要好处:您甚至可以断开与远程主机的连接，但 TightVNC 将始终保持 GUI 上下文。这样更适合自动运行(Jenkins agent 必须运行在这个事件的桌面上，它根本不能作为服务运行)。另一个虚拟桌面环境(如 Citrix)可能适合此目的，但我没有这方面的个人经验。

3. RDP(mstsc 命令)有一些参数可以解除虚拟远程桌面与当前连接的绑定(bind)(现在不记得了)。用于自动远程运行的其他工具可能包括 psexec 或带有 psexec 插件的 Ansible。

---

如果找不到此应用程序的主窗口(进程 PID)，saplogon.exe 可能会使用目标窗口生成另一个进程。然后您必须执行 app = Application().connect(title="SAP Logon 740", timeout=10) 以绑定(bind)正确的进程 ID。对于此类启动器来说，这是很常见的问题。

---

ctypes.ArgumentError 更有趣。请提供错误的完整回溯。我怀疑这可以在 pywinauto 端修复。这种错误可能会发生，因为其他 Python 库使用 ctypes 的方式不正确，但它可能是可以解决的。

---

如果使用默认的“win32”后端无法找到登录按钮，您可以尝试Application(backend="uia").connect(...)。 Getting Started Guide 中解释了差异.