c# - 使用不同的规则从 Excel 导入不同的文件

Question

我最近的任务是编写一个可以导入 Excel 文件的软件。

我要解决的问题是我的公司有 c100 个客户，每个客户都提供不同布局的文件，因为文件中的列在客户之间会有所不同，但每个文件中都有相关信息。

这个过程比较复杂，因为需要对不同的文件进行某些操作。

例如，在 1 个文件中，需要在特定列之后插入一列，然后需要将计算结果放入该列中。在同一张表中，一个地址跨 9 列提供，该地址需要移至 9 列的最后 6 列，然后删除前 3 列。

我不想做的是为每个文件编写处理逻辑(如前所述，c 100)，从而陷入必须维护此代码并在新客户文件进来时负责添加新客户文件的苦差事.

我想做的是创建一个规则或处理引擎，这样我就可以拥有基本规则，如“插入列”、“删除列”、“插入计算”、“格式 a、b、c、d、e” & f Columns To Use d, e & f"- 原因是配置任何新文件的读取和处理都可以由最终用户通过前端软件完成(显然需要接受一些关于该做什么的培训).

是否有适合这种情况的模式或策略？我读过有关规则引擎的内容，但其中最好的例子是简单的 bool 比较，如“年龄 = 15”或“姓氏 ='史密斯'”，但找不到像“在 G 列之后插入列”这样的像样的例子“将 G - 125 放入 H 列”。

在此提供任何帮助或提供好的方法，我们将不胜感激。

Answer 1

让我看看能不能帮到你。

如果我错了请纠正我，但似乎您所有的输入和输出文件都只包含列中的数据。

在这种情况下，您应该将问题想象成 X 输入列到 Y 输出列的转换。对于每个客户端，您都需要一个指定转换的配置。配置可能如下所示

Y1 = X1
Y2 = X1 + X2 
Y3 = X3 + " some string"

如您所见，您的配置行只是 C# 表达式。您可以使用 LINQ Expression class从您的转换公式构建表达式树。可以了解Expressions here .然后可以编译这些表达式并用于执行实际的转换。如果您从 C# 的角度考虑，您将构建一个静态转换方法，该方法将列表作为输入并返回一个列表作为每个客户端的输出。当你使用 Expressions 时，你将不得不自己解析配置文件。

您还可以使用 Roslyn Compiler Services ，它可以支持正确的 C# 语法。这样，您实际上可以拥有一个可以进行转换的静态方法。这也减轻了您的解析职责。

在任何一种情况下，您仍然需要处理以下问题:我应该期望这些列是一个字符串(这意味着您的支持需要明确指示配置 GUI 将所需的列解析为数字)还是我应该自动将类似数字的字段转换为数字(现在支持不需要做额外的配置，但在处理具有数字的列时可能会遇到问题，如 ID，但应将其视为字符串以避免任何不当处理)等。

总而言之，我的方法是:

• 为每个客户创建配置文件。
• 使用表达式或 Roslyn 将配置文件动态转换为 C# 方法
• 提供用于生成此配置的 GUI - 这样支持人员就可以在不知道您的特殊语法(表达式)或 C# 语法(Roslyn)的情况下轻松指定转换。保存配置时，您可以在单个程序集中(或每个客户端单独的程序集)为每个客户端生成一个方法并保留它。我们称它为客户端库。
• 您的主应用程序可以执行从 excel 读取、验证等所有标准操作，然后调用客户端库方法以生成标准格式的输出，这些输出可以在您的主应用程序中进一步处理。

希望你明白了要点。

编辑:添加一些代码来演示。代码有点啰嗦，还是注释一下，方便理解。

// this data represents your excel data
var data = new string[][] {
    new string [] { "col_1_1", "10", "09:30" },
    new string [] { "col_2_1", "12", "09:40" }
};

// you should read this from your client specific config file/section
// Remember: you should provide a GUI tool to build this config
var config = @"
            output.Add(input[0]);

            int hours = int.Parse(input[1]);
            DateTime date = DateTime.Parse(input[2]);
            date = date.AddHours(hours);
            output.Add(""Custom Text: "" + date);
";

// this template code should be picked up from a 
// non client specific config file/section
var code = @"
using System;
using System.Collections.Generic;
using System.Linq;

namespace ClientLibrary {
    static class ClientLibrary {
        public static List<string> Client1(string[] input) {
            var output = new List<string>();

            <<code-from-config>>

            return output;
        }
    }
}
";

// Inject client configuration into template to form full code
code = code.Replace(@"<<code-from-config>>", config);

// Compile your dynamic method and get a reference to it
var references = new MetadataReference[] {
    MetadataReference.CreateFromFile(typeof(object).Assembly.Location),
    MetadataReference.CreateFromFile(typeof(Enumerable).Assembly.Location)
};

CSharpCompilation compilation = CSharpCompilation.Create(
    null,
    syntaxTrees: new[] { CSharpSyntaxTree.ParseText(code) },
    references: references,
    options: new CSharpCompilationOptions(OutputKind.DynamicallyLinkedLibrary));


MethodInfo clientMethod = null;
using (var ms = new MemoryStream()) {
    EmitResult result = compilation.Emit(ms);

    if (!result.Success) {
        foreach (Diagnostic diagnostic in result.Diagnostics) {
            Console.Error.WriteLine("{0}: {1}", diagnostic.Id, diagnostic.GetMessage());
        }
    } else {
        ms.Seek(0, SeekOrigin.Begin);
        Assembly assembly = Assembly.Load(ms.ToArray());
        clientMethod = assembly.GetType("ClientLibrary.ClientLibrary").GetMethod("Client1");
    }
}

if (clientMethod == null)
    return;

// Do transformation
foreach (string[] row in data) {
    var output = clientMethod.Invoke(null, new object[] { row }) as List<string>;
    Console.WriteLine(string.Join("|", output));
}

你将需要一些 nuget 库来编译它，以及它们相应的 using 子句

nuget install Microsoft.Net.Compilers   # Install C# and VB compilers
nuget install Microsoft.CodeAnalysis    # Install Language APIs and Services

using System;
using System.Collections.Generic;
using System.IO;
using System.Linq;
using System.Reflection;
using Microsoft.CodeAnalysis;
using Microsoft.CodeAnalysis.CSharp;
using Microsoft.CodeAnalysis.Emit;

如您所见，唯一需要担心的是用于自动生成转换代码的 GUI - 我没有在此处提供。如果你想要简单的变换，那应该很容易，但对于复杂的变换，它会更复杂