java - 如何使用 Java Robot 和 Swing 按钮控制其他 (Windows) 应用程序中的上下文菜单

Question

我用 Java 编写了一个广泛的屏幕键盘 (OSK)。这是为残障人士设计的，他们需要能够做标准键盘可以做的一切。我注意到一件事不起作用是上下文菜单 - 在(大多数)Windows 程序中。我希望我的 OSK 用户能够单击“上下文菜单”键(通常在标准键盘上的右键旁边)并使用箭头键导航该菜单。上下文菜单看起来很好，但是当我单击回到我的框架(按箭头键)时，上下文菜单消失了。

有人对如何实现这一目标有任何想法(我认为可能需要相当可怕的“hack”)？我很确定上下文正在消失，因为鼠标点击发生在屏幕上的其他地方(当你需要实际点击某些东西时很难绕过它!)。

下面是一个测试应用。我可以使用它在 NetBeans 中成功地通过上下文菜单向下导航，但在我尝试过的任何其他应用程序(例如 Windows 资源管理器)中都不能。

import java.awt.Robot;
import java.awt.event.ActionEvent;
import java.awt.event.ActionListener;
import java.awt.event.KeyEvent;
import javax.swing.JButton;
import javax.swing.JFrame;
import javax.swing.JPanel;
import javax.swing.WindowConstants;

public class RobotContextMenuTest extends JFrame implements ActionListener
{
    Robot R;
    JPanel JP;
    JButton JBmenu, JBdown;

    public RobotContextMenuTest()
    {
        try
        {
            R = new Robot();
        }
        catch(Exception e)
        {
            e.printStackTrace();
        }

        JP = new JPanel();
        getContentPane().add(JP);

        JBmenu = new JButton("Menu");
        JBmenu.addActionListener(this);
        JP.add(JBmenu);

        JBdown = new JButton("Down");
        JBdown.addActionListener(this);
        JP.add(JBdown);

        setFocusableWindowState(false);
        setAlwaysOnTop(true);
        setSize(200,80);
        setDefaultCloseOperation(WindowConstants.EXIT_ON_CLOSE);
        setVisible(true);
    }
    public static void main(String args[])
    {
        new RobotContextMenuTest();
    }

    public void actionPerformed(ActionEvent e)
    {
        if(e.getActionCommand().equals("Menu"))
        {
            R.keyPress(KeyEvent.VK_CONTEXT_MENU);
            R.keyRelease(KeyEvent.VK_CONTEXT_MENU);
        }
        else if(e.getActionCommand().equals("Down"))
        {
            R.keyPress(KeyEvent.VK_DOWN);
            R.keyRelease(KeyEvent.VK_DOWN);
        }
    }
}

最后，这是我尝试过的:

• 在按钮上使用 MouseListener 而不是 ActionListener，然后“使用”MouseEvent，希望其他应用程序不会注册它并隐藏上下文菜单。
• 我制作了一个线程测试应用程序，它能够显示任何上下文菜单并自动向下扫描(每秒一次)，但这并不能真正解决我的问题!我希望上下文菜单导航由用户的鼠标点击控制。
• 我尝试使用 JNativeHook 作为捕获鼠标点击的替代方法，但结果是一样的。

抱歉这个冗长的问题，但这是一个相当复杂的问题!顺便说一下，标准的 Windows 7 OSK 也不能做到这一点，但 WiViK能。谢谢。

Answer 1

在 friend 的大力帮助下终于破解了这个问题(感谢 Chris Gregan!)。在多次尝试失败后，答案相对简单。我使用 JNA 和 Windows API 为低级鼠标事件创建了一个 Hook 。所有这些都用给定的 2 个示例类进行了描述 here in an answer by 'prunge' .注意:我必须包含 jna 版本 3.4.0 和 jna 平台版本 3.4.0 的 jar(这些 jar 的较新版本导致错误!)。

使用上面链接的 MouseHook，您可以通过从 LowLevelMouseProc 回调返回 -1 来阻止低级事件传播(到达其他应用程序)。

这是我添加到 MouseHook 回调方法中的一个片段，用于拦截/抑制鼠标左键按下(从而防止上下文菜单消失!):

if(nCode >= 0 && wParam.intValue() == WinUserX.WM_LBUTTONDOWN)
    return new LRESULT(-1);

再次感谢 Alex Barker 花时间研究这个问题并为我指出 JNA 和 Windows API 的方向。