2016-03-03 110 views
0

我的公司有一個搜索應用程序,我們正嘗試遷移到solrcloud。我們執行的一個關鍵查詢使用字段合併功能(分組​​)。 我們使用的是Solr 4.10.4 我們建立了一個雙節點雲,我創建了幾個集合,每個集合都有兩個分片,它們都使用默認的compositeId路由器。Solrcloud中的分組查詢引發異常

我們在字符串字段s_id上分組。我在模式中創建了一個新的唯一字段shard_spec,它是通過將s_id字段與舊的唯一字段連接而創建的。 該領域的一個示例:trizmabase1211477861!T1503SIGMA

相同的查詢在非solr內核上完美運行。在Solr的雲,我得到:

java.lang.IllegalArgumentException: numHits must be > 0; please use TotalHitCountCollector if you just need the total hit count 
at org.apache.lucene.search.TopFieldCollector.create(TopFieldCollector.java:1130) 
at org.apache.lucene.search.TopFieldCollector.create(TopFieldCollector.java:1079) 
at org.apache.lucene.search.grouping.AbstractSecondPassGroupingCollector.<init>(AbstractSecondPassGroupingCollector.java:75) 
at org.apache.lucene.search.grouping.term.TermSecondPassGroupingCollector.<init>(TermSecondPassGroupingCollector.java:49) 
at org.apache.solr.search.grouping.distributed.command.TopGroupsFieldCommand.create(TopGroupsFieldCommand.java:129) 
at org.apache.solr.search.grouping.CommandHandler.execute(CommandHandler.java:142) 
at org.apache.solr.handler.component.QueryComponent.process(QueryComponent.java:412) 
at org.apache.solr.handler.component.SearchHandler.handleRequestBody(SearchHandler.java:218) 
at org.apache.solr.handler.RequestHandlerBase.handleRequest(RequestHandlerBase.java:135) 
at org.apache.solr.core.SolrCore.execute(SolrCore.java:1976) 
at org.apache.solr.servlet.SolrDispatchFilter.execute(SolrDispatchFilter.java:777) 
at org.apache.solr.servlet.SolrDispatchFilter.doFilter(SolrDispatchFilter.java:418) 
at org.apache.solr.servlet.SolrDispatchFilter.doFilter(SolrDispatchFilter.java:207) 
at org.eclipse.jetty.servlet.ServletHandler$CachedChain.doFilter(ServletHandler.java:1419) 
at org.eclipse.jetty.servlet.ServletHandler.doHandle(ServletHandler.java:455) 
at org.eclipse.jetty.server.handler.ScopedHandler.handle(ScopedHandler.java:137) 
at org.eclipse.jetty.security.SecurityHandler.handle(SecurityHandler.java:557) 
at org.eclipse.jetty.server.session.SessionHandler.doHandle(SessionHandler.java:231) 
at org.eclipse.jetty.server.handler.ContextHandler.doHandle(ContextHandler.java:1075) 
at org.eclipse.jetty.servlet.ServletHandler.doScope(ServletHandler.java:384) 
at org.eclipse.jetty.server.session.SessionHandler.doScope(SessionHandler.java:193) 
at org.eclipse.jetty.server.handler.ContextHandler.doScope(ContextHandler.java:1009) 
at org.eclipse.jetty.server.handler.ScopedHandler.handle(ScopedHandler.java:135) 
at org.eclipse.jetty.server.handler.ContextHandlerCollection.handle(ContextHandlerCollection.java:255) 
at org.eclipse.jetty.server.handler.HandlerCollection.handle(HandlerCollection.java:154) 
at org.eclipse.jetty.server.handler.HandlerWrapper.handle(HandlerWrapper.java:116) 
at org.eclipse.jetty.server.Server.handle(Server.java:368) 
at org.eclipse.jetty.server.AbstractHttpConnection.handleRequest(AbstractHttpConnection.java:489) 
at org.eclipse.jetty.server.BlockingHttpConnection.handleRequest(BlockingHttpConnection.java:53) 
at org.eclipse.jetty.server.AbstractHttpConnection.content(AbstractHttpConnection.java:953) 
at org.eclipse.jetty.server.AbstractHttpConnection$RequestHandler.content(AbstractHttpConnection.java:1014) 
at org.eclipse.jetty.http.HttpParser.parseNext(HttpParser.java:861) 
at org.eclipse.jetty.http.HttpParser.parseAvailable(HttpParser.java:240) 
at org.eclipse.jetty.server.BlockingHttpConnection.handle(BlockingHttpConnection.java:72) 
at org.eclipse.jetty.server.bio.SocketConnector$ConnectorEndPoint.run(SocketConnector.java:264) 
at org.eclipse.jetty.util.thread.QueuedThreadPool.runJob(QueuedThreadPool.java:608) 
at org.eclipse.jetty.util.thread.QueuedThreadPool$3.run(QueuedThreadPool.java:543) 
at java.lang.Thread.run(Thread.java:745) 

我試圖簡化查詢是。所有組查詢都會因此錯誤而失敗。他們在我嘗試過的每個雲集中都失敗了。 Solrcloud中的分組是否被破壞? 這可能會阻止我們去Solrcloud

我確實看到Solr Jira看起來與這個SOLR-4164相似。那裏的評論表明它很難複製,我不能讓它發生!

查詢的組部分是: 組=真& group.field = S_ID & group.limit = -1 & group.sort = DS%20asc 我已經發現,改變group.limit到500使查詢運行。 500是我們出於商業原因的最大值

回答

1

原來,將group.limit標誌設置爲-1是導致問題的原因。我相信我們希望返回所有匹配的文檔。但是,出於商業原因,我們將該數字限制爲500.我認爲solr中存在一個錯誤,但是解決方法就足夠了。

+0

這也被認爲是Solr中的一個bug,因爲設置group.limit = -1在獨立solr中工作,但不在solrcloud中 – whomer