java - 生成新索引时 SOLR master 中的零星 SocketTimeoutException

Question

在主服务器 (SOLR 4.5.0) 中生成新的 SOLR 索引期间，我收到零星的 SocketTimeoutException

文档以 500 个为一组发送，异常通常发生在添加了约 1 或 2 百万个文档之后。

这是 SOLR 服务器端堆栈跟踪:

java.lang.RuntimeException: [was class java.net.SocketTimeoutException] null
at com.ctc.wstx.util.ExceptionUtil.throwRuntimeException(ExceptionUtil.java:18)
at com.ctc.wstx.sr.StreamScanner.throwLazyError(StreamScanner.java:731)
at com.ctc.wstx.sr.BasicStreamReader.safeFinishToken(BasicStreamReader.java:3657)
at com.ctc.wstx.sr.BasicStreamReader.getText(BasicStreamReader.java:809)
at org.apache.solr.handler.loader.XMLLoader.readDoc(XMLLoader.java:395)
...
Caused by: java.net.SocketTimeoutException
at org.apache.coyote.http11.InternalAprInputBuffer.fill(InternalAprInputBuffer.java:796)
at org.apache.coyote.http11.InternalAprInputBuffer$SocketInputBuffer.doRead(InternalAprInputBuffer.java:827)
at org.apache.coyote.http11.filters.ChunkedInputFilter.readBytes(ChunkedInputFilter.java:243)
at org.apache.coyote.http11.filters.ChunkedInputFilter.parseCRLF(ChunkedInputFilter.java:326)
at org.apache.coyote.http11.filters.ChunkedInputFilter.doRead(ChunkedInputFilter.java:128)
at org.apache.coyote.http11.InternalAprInputBuffer.doRead(InternalAprInputBuffer.java:738)
at org.apache.coyote.Request.doRead(Request.java:428)
at org.apache.catalina.connector.InputBuffer.realReadBytes(InputBuffer.java:304)
at org.apache.tomcat.util.buf.ByteChunk.substract(ByteChunk.java:405)
at org.apache.catalina.connector.InputBuffer.read(InputBuffer.java:327)
at org.apache.catalina.connector.CoyoteInputStream.read(CoyoteInputStream.java:162)

SOLR 在 Apache Tomcat(版本 6.0.26)和 JAVA7 上运行。

tomcat server.xml 中的连接器已配置:

<Connector port="1086" protocol="HTTP/1.1" URIEncoding="UTF-8"
    connectionTimeout="600000"
    redirectPort="8443"
    maxThreads="100"
    keepAliveTimeout="5000"
    maxKeepAliveRequests="5"
    minSpareThreads="3"
    maxSpareThreads="10"
    compression="on"
    compressableMimeType="application/octet-stream,text/html,text/xml,text/plain"
/>

我相信 600000(10 分钟)connectionTimeout 也算作 APR 连接器的 socketTimeout..

在 APR connector code 中挖掘一点看来空消息是因为缺少字符串导致的

throw new SocketTimeoutException(sm.getString("iib.failedread"));

Answer 1

我会回答我自己的问题。

错误几乎可以肯定是由 SOLR 主机的 tomcat 连接器超时引起的。

实际上超时值是 5000(5 秒)，因为它已设置为 600000(10 分钟)，所以错误没有再次出现。

关于 null 消息，可能是 APR 代码中缺少配置字符串引起的

throw new SocketTimeoutException(sm.getString("iib.failedread"));