java - 如何将 Cp1252 字节数组转换为正确的字符串？

Question

大家好，代码如下:

File file2 = new File("D://deploy//body.txt");

byte[] bytes = loadFile(file2);
System.out.println(bytes.length);

StringBuffer buffer = new StringBuffer();
InputStream inputStream = new ByteArrayInputStream(bytes);
InputStreamReader reader = new InputStreamReader(inputStream,"CP1252");
Reader in = new BufferedReader(reader);
int ch;
while ((ch = in.read()) > -1) {
    buffer.append((char)ch);
}
in.close(); 
System.out.println(buffer.toString().getBytes().length);

最终结果是字节数组的长度为1576和2439。将 CP1252 字节数组转换为字符串并保留正确大小的正确方法是什么？谢谢

Answer 1

我注意到你的短语 - “正确的字符串”，并想指出在你的情况下没有正确或不正确的字符串这样的东西。这是正确或不正确的编码。

您正在读取 cp1252 字节的字节序列，并将各个字符附加到缓冲区中。如果原文件在cp1252，这个过程没有问题。在引擎盖下，InputStreamReader 使用 CharsetDecoder能够将流的底层字符集解码为 16 位 Unicode 字符 (UTF-16) 的序列。这是完成的，因为您正在从字节流中读取字符。

As pointed out by bmargulies ，当您执行 buffer.toString().getBytes() 时，您正在将这些 UTF-16 字符序列转换为与平台具有相同编码的字节序列。由于这不是 cp1252，因此原始字节数组的长度和转换后的字节数组的长度不可比。将字符集指定给 getBytes() 方法会导致使用 StringEncoder(这是 Oracle/Sun JVM 的内部类；其他实现可能使用不同的类)来转换 UTF-16字符序列到所需编码 (cp1252) 的字节序列。