gpt4 book ai didi

java - 编码不可知的方式来读取 "German"文本文件

转载 作者:行者123 更新时间:2023-11-30 10:26:36 26 4
gpt4 key购买 nike

我们所有基于文本的文件均采用 UTF-8 或 latin-1 (Windows) 编码。我们使用的唯一“特殊字符”是德语变音符号 ä、ö、ü 和 ß。

由于各种原因(包括历史原因,还有“属性文件不能是UTF-8”的老问题),我们无法完全统一我们的编码。

当人们用 Java 读取文本文件并使用错误的编码时,这显然会导致错误。

如果您知道唯一可能的特殊字符是上述字符,是否有一种简单可靠的方法来检测文件是 UTF-8 还是 latin-1。

或者我需要将文件作为字节数组读取并搜索特殊字节吗?

最佳答案

如果唯一的非 ASCII 字符是“ä、ö、ü 和 ß”,那么您可以使用 UTF_8 中它们的第一个代码是 195(-61 作为字节)这一事实。字符 195 是 ISO 8859 中的 Ã,显然您不希望找到它。

所以解决方案可能是这样的:

public static String readFile(Path p) throws IOException {
byte[] bytes = Files.readAllBytes(p);
boolean isUtf8 = false;
for (byte b : bytes) {
if (b == -61) {
isUtf8 = true;
break;
}
}
return new String(bytes, isUtf8 ? StandardCharsets.UTF_8 : StandardCharsets.ISO_8859_1);
}

这当然是非常脆弱的,如果文件包含其他特殊字符,将无法工作。

关于java - 编码不可知的方式来读取 "German"文本文件,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/45637016/

26 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com