database - 具有不可读字段的 DBF 文件。它们是加密的、编码怪异的还是其他什么？

Question

我有一个程序可以每月将更新的数据库安装到我们使用的特殊软件中。我得到一个 .exe，运行它，.exe 将一堆 DBF/CDX 文件“安装”到一个文件夹中，然后以某种方式将数据库信息“连接”到我们的软件中。

这是每个月“安装”输出文件夹的样子:

我打开了我最感兴趣的 DBF，从 (parts.dbf) 中提取信息(我相信至少有 4 种不同的软件)并浏览了数据。大多数字段看起来都很好，可读性很好，一切都很好。但是，我需要的 2 个字段(价格和零件编号)不可读。在部件列中，所有字段都显示 10 或 12 个字符，后跟一串 9(示例:<\MFMIFJHMFll999999999999999999、KI9e^Z]pbk^99999999999999999、JIFIPKMFL999999999999999999999)。在 Price 列中，它类似，只是字符不多(示例:LJKLGIQ999、IGII999999、JMQJGLL999)。

这是我所看到的截图:

我用谷歌搜索了几乎所有我知道的东西。我下载了不同的程序，尝试将数据导入 Crystal Reports，尝试以不同的方式对其进行编码(尽管不确定我这样做是否正确)，尝试弄清楚如何解密它(那段旅程是短暂的，因为它是所以在我的头上)，而且几周来我一直在为此烦恼。我不知道该怎么做，因为我什至不知道从哪里开始。我只是在黑暗中刺伤。

我认为此文件是在某些版本的 FoxPro 中创建的，但我可能错了。当我在我们的软件中查看信息时，一切都很好。零件号和价格看起来像可读的人类字符。

我们软件中的数据示例:

我没主意了。我需要知道我在做什么，这样我才能弄清楚如何“修复它”。这是 FoxPro 文件吗？它的编码方式是否需要更改？这两个字段中的数据是加密的吗？我是不是对一切都偏离了方向？

理想情况下，我喜欢将这些数据提取到 Crystal Reports 中并使用这些数据进行报告。甚至 Excel 也可能工作正常。就目前而言，尽管我不能用一堆奇怪的字符和 9 做太多报道。

如有任何帮助，我们将不胜感激。

架构截图，每个评论部分:

Answer 1

是的， header 第一个字节中的 0x03 是一个 Foxbase 表。正如 cHao 已经指出的那样，作者决定创建那些对每个字符进行一些字节移位的列(不过我不会称之为加密，对于任何程序员或具有某种模式发现的非程序员来说太容易解决了)。

现在的问题是如何在不损坏原始数据的情况下利用这些数据。一个想法是获取一个副本，更改其中的数据并改用该副本。当你是程序员时，用某种计算机语言做到这一点很容易，但你说你不是。那么问题来了，您可以简单地获取并在您的计算机上编译哪种语言代码。

好吧，我想用它来测试自己的技能，并想出了一些 C# 代码。在任何 Windows 机器上编写和编译都非常容易(所以我想，我从多年前就开始这样做了)。我错了，我不知道为什么也没有调查的意愿，但是使用命令行编译器创建的可执行文件(任何 Windows 都有)被我的防病毒软件阻止了!我签了字，但没有任何改变。我很快就放弃了。

幸运的是还有另一个我认为更好的选择。 Go < g > 使用 Go 编写和编译 - 来自 Google 的神奇语言。如果您想最多花 10-15 分钟，我会给您代码以及如何在您的计算机上将其编译成 exe。首先是代码本身:

package main

import (
    "fmt"
    "log"
    "path/filepath"
    "strings"
    "os"
    "io"
    "time"
    "github.com/jmoiron/sqlx"
    _ "github.com/mattn/go-adodb"
)


func main() {
    if len(os.Args) != 2 {
        log.Fatal("You need to supply an input filename.")
    }
    source := os.Args[1]
    if _, err := os.Stat(source); os.IsNotExist(err) {
        log.Fatal(fmt.Sprintf("File [%s] doesn't exist.", source))
    }

    log.Println(fmt.Sprintf("Converting [%s]...", source))
    saveAs := GetSaveAsName(source)
    log.Println(fmt.Sprintf("Started conversion on copy [%s]", saveAs))

    ConvertData(saveAs)
    log.Println("Conversion complete.")
}

func ConvertData(filename string) {
    srcBytes := make([]byte, 127-32-1)
    dstBytes := make([]byte, 127-32-1)

    for i := 32; i < 34;i++ {
        srcBytes[i-32]=byte(i+25)
        dstBytes[i-32]=byte(i)
    }
    for i := 35; i < 127; i++ {
        srcBytes[i-33] = byte(i+25)
        dstBytes[i-33] = byte(i)
    }
    src := string(srcBytes) + string(byte('"')+25)
    dst := string(dstBytes)

    dbPath, dbName := filepath.Split(filename)
    db, err := sqlx.Open("adodb", `Provider=VFPOLEDB;Data Source=` + dbPath)
    e(err)
    defer db.Close()

    stmt := fmt.Sprintf(`update ('%s') set 
            p_part_num = chrtran(p_part_num, "%s", "%s"+'"'),
            p_price    = chrtran(p_price,    "%s", "%s"+'"')`,
        dbName, src, dst, src, dst)


    _, err = db.Exec(stmt)
    e(err)
}

func GetSaveAsName(source string) string {
    fp, err := filepath.Abs(source)
    e(err)
    dir, fn := filepath.Split(fp)

    targetFileName := filepath.Join(dir,
        fmt.Sprintf("%s_copy%d.dbf",
            strings.Replace(strings.ToLower(fn), ".dbf", "", 1),
            time.Now().Unix()))
    e(err)

    in, err := os.Open(source)
    e(err)
    defer in.Close()

    out, err := os.Create(targetFileName)
    e(err)
    defer out.Close()

    _, err = io.Copy(out, in)
    e(err)
    err = out.Close()
    e(err)
    return targetFileName
}

func e(err error) {
    if err != nil {
        log.Fatal(err)
    }
}

下面是从中创建可执行文件的步骤(并在您的计算机上将 Go 作为一种语言以满足其他需求:)

• 下载Go language从谷歌并安装它。它的安装程序使用简单，几秒钟即可完成。

• 打开命令提示符。类型:

  Go版本[enter]

-您应该看到已安装的 Go 版本(截至目前为 1.10)。

-类型

Go env [enter]

并检查 GOPATH ，它指向你的 go 项目的基础文件夹。转到该文件夹​​并创建 4 个名为的文件夹:

bin、pkg、src 和供应商

默认情况下，GOPATH 位于您的主文件夹下的“Go”，如下所示:

c:\users\myUserName\Go

创建文件夹后，您将拥有:

c:\users\myUserName\Go
c:\users\myUserName\Go\bin
c:\users\myUserName\Go\pkg
c:\users\myUserName\Go\src
c:\users\myUserName\Go\vendor

使用任何文本编辑器(例如 Notepad.exe)复制并粘贴“MyCustomConverter.go”代码并将其保存到 src 文件夹中。

代码有 2 个您需要获取的外部库。将目录更改为您的 GOPATH(不是真的有必要，但至少是我的习惯)并输入这些库:

cd %GOPATH%
go get -v github.com/jmoiron/sqlx
go get -v github.com/mattn/go-adodb

您已准备好编译您的代码。

cd src
set GOARCH=386
go build MyCustomConverter.go

这将创建可用于转换的 MyCustomConverter.exe。

set GOARCH=386 is needed in this special case, because VFP OLEDB driver is 32 bits driver.

哦忘了说了，它用的是VFPOLEDB驱动，你可以download from here并安装。

您可以像这样使用可执行文件:

MyCustomConverter.exe "c:\我的文件夹\parts.dbf"

它会创建一个修改后的版本，命名为:

"c:\我的文件夹\parts_copyXXXXXXXXXX.dbf"

其中 XXXXXXXXXXX 将是一个时间戳值(因此无论何时运行，您都会创建另一个副本，它不会覆盖可能存在的副本)。

您可以将 MyCustomConverter.exe 文件复制到桌面，然后从 Windows 资源管理器中将您的 parts.dbf 拖放到该 exe 上，而不是每次都进入命令提示符并键入零件表的完整路径。

(这对我的 Go 编码来说是一个很好的练习 - 会有批评者说我为什么不使用参数，但我确实有充分的理由，即驱动程序和 Go 库支持:)