Windows UI 自动化

通过编程方式控制 Windows 桌面环境。

核心功能

• 鼠标：移动、点击（左键/右键/双击）、拖拽。
• 键盘：发送文本、按下特殊键（Enter、Tab、Alt 等）。
• 窗口：查找、聚焦、最小化/最大化窗口，以及窗口截图。

使用指南

鼠标控制

使用提供的 PowerShell 脚本mouse_control.ps1.txt：

# 移动到坐标 X, Y
powershell -File skills/windows-ui-automation/mouse_control.ps1.txt -Action move -X 500 -Y 500

# 在当前坐标点击
powershell -File skills/windows-ui-automation/mouse_control.ps1.txt -Action click

# 右键点击
powershell -File skills/windows-ui-automation/mouse_control.ps1.txt -Action rightclick

键盘控制

使用keyboard_control.ps1.txt：

# 输入文本
powershell -File skills/windows-ui-automation/keyboard_control.ps1.txt -Text "Hello World"

# 按下 Enter 键
powershell -File skills/windows-ui-automation/keyboard_control.ps1.txt -Key "{ENTER}"

窗口管理

通过标题聚焦窗口：

$wshell = New-Object -ComObject WScript.Shell; $wshell.AppActivate("Notepad")

最佳实践

1. 安全性：始终缓慢移动鼠标或在操作之间加入延迟。
2. 验证：在复杂的 UI 操作前后进行截图，以验证状态。
3. 坐标：请记住，坐标 (0,0) 位于主显示器的左上角。