wpf - 如何在 UIAutomation 中识别 WPF 绘图视觉效果？

Question

我们的应用程序有一个 Canvas ，我们可以在其中添加绘图视觉效果(如线条、多边形等)

// sample code

var canvas = new Canvas(); // create canvas
var visuals = new VisualCollection(canvas); // link the canvas to the visual collection
visuals.Add(new DrawingVisual()); // add the visuals to the canvas
visuals.Add(new DrawingVisual());

我们的目标是通过自动化将这些视觉效果添加到 Canvas 中，并验证它们是否已正确添加。我们使用基于 Microsoft 的 UIAutomation 的框架。

当使用“Inspect”之类的工具检查视觉结构时，我无法找到 Canvas 。做了一些研究，发现您需要重写 UIElement 中的 OnCreateAutomationPeer 方法，并返回适用的 AutomationPeer 对象，以便能够在自动化中看到这一点。

进行了更改，现在我可以看到 Canvas ，但是我仍然看不到 Canvas 下添加的任何视觉效果。

任何人都可以帮助我了解问题所在吗？

尝试过的事情/替代方案:

1. 尝试使用 OnCreateAutomationPeer 技术，但是DrawingVisual 不是从 UIElement 派生的，我无法添加 UIElement到Canvas.VisualCollection。
2. 图像识别是一种选择，但我们出于性能/维护方面的考虑，正在尝试避免使用它。

Answer 1

只有 UIElement 可以从 UI Automation 中看到(就像您所看到的，OnCreateAutomationPeer 从此类开始，而不是从 Visual 类开始)。

因此，如果您希望 UIAutomation 可以使用它，则需要将 UIElement(或派生的 FrameworkElement)添加到 Canvas 。

您可以创建自己的类，如下所述:Using DrawingVisual Objects或者使用自定义 UserControl 或使用适合您需要的现有控件，但它必须以某种方式从 UIElement 派生。

一旦你有了一个好的类，你就可以使用默认的 AutomationPeer 或重写该方法并更紧密地适应。

如果要保留 Visual 对象，一种解决方案是修改包含对象(但它仍然需要从 UIElement 派生)。例如，如果我按照链接中的文章进行操作，我可以编写一个自定义包含对象(而不是示例代码的 Canvas ，因此您可能需要稍微调整)，如下所示:

public class MyVisualHost  : UIElement
{
    public MyVisualHost()
    {
        Children = new VisualCollection(this);
    }

    public VisualCollection Children { get; private set; }


    public void AddChild(Visual visual)
    {
        Children.Add(visual);
    }

    protected override int VisualChildrenCount
    {
        get { return Children.Count; }
    }

    protected override Visual GetVisualChild(int index)
    {
        return Children[index];
    }

    protected override AutomationPeer OnCreateAutomationPeer()
    {
        return new MyVisualHostPeer(this);
    }

    // create a custom AutomationPeer for the container
    private class MyVisualHostPeer : UIElementAutomationPeer
    {
        public MyVisualHostPeer(MyVisualHost owner)
            : base(owner)
        {
        }

        public new MyVisualHost Owner
        {
            get
            {
                return (MyVisualHost)base.Owner;
            }
        }

        // a listening client (like UISpy is requesting a list of children)
        protected override List<AutomationPeer> GetChildrenCore()
        {
            List<AutomationPeer> list = new List<AutomationPeer>();
            foreach (Visual visual in Owner.Children)
            {
                list.Add(new MyVisualPeer(visual));
            }
            return list;
        }
    }

    // create a custom AutomationPeer for the visuals
    private class MyVisualPeer : AutomationPeer
    {
        public MyVisualPeer(Visual visual)
        {
        }

        // here you'll need to implement the abstrat class the way you want
    }
}