在導入2.6 GByte xml時無效的內容長度

Question

我得到java.lang.IllegalArgumentException：在solr中導入2.6 GByte xml時導致無效的內容長度錯誤。我用的命令是java -Durl = http://solrserver.local:8080/solr/solr1/update -jar post.jar dssolrprice.xml。 tomcat server.xml中的maxHttpHeaderSize是10485760。可能是什麼原因

Answer 1

改爲使用DataImportHandler，它以流媒體的方式工作。您不應該通過互聯網連接發送大文件。

Answer 2

當您通過HTTP發佈內容時有一些限制。即我認爲Tomcat中HTTP post的默認大小是2 MB。

1）所以，也許你可以考慮DataImportHandler出於這樣的目的。

2）另一方面，您可以使用SolrJ客戶端並將數據拆分爲塊（如果可以）並將它們發送到索引。