- html - 出于某种原因,IE8 对我的 Sass 文件中继承的 html5 CSS 不友好?
- JMeter 在响应断言中使用 span 标签的问题
- html - 在 :hover and :active? 上具有不同效果的 CSS 动画
- html - 相对于居中的 html 内容固定的 CSS 重复背景?
我的一个系统遇到了一个奇怪的错误,我无法解释。在我们的系统中,后端正在生成一个大型 TSV 输出文件,然后我们使用以下代码通过 HTTP 提供该文件:
BufferedInputStream input = new BufferedInputStream(p.getInputStream(), (int)FileUtils.BYTES_PER_MEGABYTE * 16);
OutputStream output = resp.getOutputStream();
byte[] buffer = new byte[(int) (FileUtils.BYTES_PER_KILOBYTE * 8)];
do
{
int read = input.read(buffer);
if (read <= 0) break;
output.write(buffer);
} while (true);
input.close();
output.close();
然后在客户端,有一个 TSV 解析器消耗 HTTP 响应,但在非常大的输入上,我们开始看到奇怪的工件,其中解析器将报告一行具有错误的项目数,并且错误消息会打印它将要显示的行正在解析,该行将是一个随机数据 block ,即不是整行数据
我的第一个想法是生成的 TSV 格式错误,但我通过直接从后端系统复制文件,然后通过三个独立编写的开源 TSV 解析器(包括客户端的解析器)运行它,几乎排除了这种可能性。代码正在使用)并且它们在本地文件上运行时都能够很好地解析文件。
作为引用,我们使用的 TSV 解析器的代码是 here
这让我想到了两种可能性:
BufferedReader.readLine()
不能保证读取整行?如果是这种情况,我不会完全感到惊讶,因为我已经被 .Net 中慢速网络流的奇怪读取行为所困扰,所以想知道类似的问题是否也适用于 Java?或者还有其他我忽略的解释吗?
最佳答案
在发布这个问题时,我突然发现错误是什么(通常!)
我发布的用于复制文件的代码的以下部分不正确:
int read = input.read(buffer);
if (read <= 0) break;
output.write(buffer);
它应该如下所示:
int read = input.read(buffer);
if (read <= 0) break;
output.write(buffer, 0, read);
问题是我总是将整个缓冲区写入输出流,即使我们从输入中读取的数据少于缓冲区的大小。这意味着在文件末尾,我们将打印最后一个数据 block 以及缓冲区其余部分中剩下的任何内容,因此留下了随机数据 block !
关于java - 从慢速流读取时,BufferedReader.readLine() 是否可能不读取整行?,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/11319049/
这个问题在这里已经有了答案: What could be the reason that `require` doesn't work in some places? (3 个回答) 6 个月前关闭。
我正在使用读取行从维基百科获取一些文本。但读取行仅返回列表,而不是我想要的文本。有什么方法可以使用替代方案或解决我的问题吗? public class mediawiki { public s
我正在编写一小段代码,其中涉及使用子进程运行一个脚本来监听一些实时数据 这是我的代码: def subscriber(): try: sub = subprocess.Pope
我已包括: #include "stdio.h" #include #include 我的编译器包含标志 -lreadline 但我仍然收到错误消息: fatal error: 'readl
使用 Term::Readline::readline 停止无限循环的正确方法是什么? ? 这样我一个都看不懂 0 #!/usr/bin/env perl use warnings; use stri
标题比我的实际目标更具体: 我有一个使用 GNU Readline 的命令行程序,主要用于命令历史记录(即使用向上箭头检索以前的命令)和其他一些细节。现在,程序的输出似乎散布在用户的输入中,有时是可以
在 ipython 中,如果我按“esc”,然后按“enter”(可能还有其他字符?),读行会中断。我无法再使用“向上”键搜索命令历史记录,并且某些命令(例如 control-K)失败。 有没有办法在
我在使用 readlines() 和 readline() 返回值时遇到问题,但在使用 read() 时却没有。任何人都知道这是怎么发生的?欣赏一下 with open('seatninger.txt
标题比我的实际目标更具体: 我有一个使用 GNU Readline 的命令行程序,主要用于命令历史记录(即使用向上箭头检索以前的命令)和其他一些细节。现在,程序的输出似乎散布在用户的输入中,有时是可以
我正在编写一个聊天客户端,它必须在接收用户输入的同时输出接收到的消息。 到目前为止,我已经 fork 成两个独立的进程,其中一个继续监听套接字连接并用 printf 写出接收到的字符串。另一个使用 r
我在 NetworkStream 上使用 StreamReader,我只想读取一行或多行,而另一个数据是 byte array(如文件数据)我不想在 StreamReader 中读取该文件数据,例如我
我遇到了这两个 API,用于在 C# 的简单控制台应用程序中读取用户的输入: System.Console.ReadLine() System.Console.In.ReadLine() 这是一个我试
yum 我的系统显示已安装 readline rlwrap-0.41]$ sudo yum install readline Loaded plugins: fastestmirror, presto
我尝试做 this tutorial在 Rust 中,到目前为止,我在将 C 库连接到 Rust 时遇到了很多问题。 C 等效代码: #include #include #include #in
我正在寻找 web Python的标题中提到的命令及其区别;但是,我并不满足于对这些命令有完整的基本理解。 假设我的文件只有以下内容。 This is the first time I am posi
你如何在 F# 中使用 Console.Readline?与 Console.Writeline 不同,当我调用它时,它并没有受到尊重。 最佳答案 如果你使用 let s = Console.Read
在一次面试中,面试官问我为什么 readline() 比 Python 中的 readlines() 慢很多? 我回答的是readlines()需要多次读取,需要更多的开销。 不知道我的回答对不对。
要在 OSX Lion 上完全运行 ipython 需要什么?我试图让 ipython 与 readline 一起工作,但没有成功。 我的做法: (在虚拟环境中) pip install ipytho
在 Nodejs 文档中,我看到: import EventEmitter from 'events'; import { readFile } from 'fs'; import fs, { rea
我写了一个简单的应用程序: #include #include #include #include int main() { char *user_input; while(u
我是一名优秀的程序员,十分优秀!