设为首页收藏本站
开启辅助访问
切换到宽版

创星网络[分享知识 传递快乐]

 找回密码
 立即注册

QQ登录

只需一步,快速开始

用新浪微博登录

只需一步,快速搞定

搜索
查看: 4494|回复: 0
打印 上一主题 下一主题

Solr集群Replication配置与实践

[复制链接]

我玩的应用:

跳转到指定楼层
楼主
发表于 2012-12-12 16:36:37 | 只看该作者 回帖奖励 |倒序浏览 |阅读模式

Solr作为一个搜索服务器,在并发搜索请求的场景下,可能一台服务器很容易就垮掉,这是我们可以通过使用集群技术,设置多台Solr搜索服务器同时对外提供搜索服务,在前端使用类似Nginx的负载均衡软件,可以通过配置使得并发到达的搜索请求均匀地反向代理到Solr集群中的每一台服务器上,这样每台Solr搜索服务器搜索请求的压力可以大大减小,增强了每台服务器能够持续提供服务器的能力。

然而,这时我们面临的问题有:


  • 集群中的每台服务器在线上要保证索引数据都能很好地的同步,使得每台搜索服务器的索引数据在一定可以承受的程度上保持一致性;
  • 集群中某台服务器宕机离线,人工干预重启后继续与集群中其它服务器索引数据保持一致,继续提供搜索服务;
  • 集群中某台服务器的索引数据,由于硬盘故障或人为原因无法提供搜索服务,需要一种数据恢复机制;
  • 集群中最先接受数据更新的Master服务器,在将索引更新传播到Slave服务器上时,避免多台Slave服务器同一时间占用大量网络带宽,从而影响了Master提供搜索服务。

事实上,Solr框架在上面的几个方面都能做到不错的支持,具有很大的灵活性。基于上述的几个问题,我们来配置Solr集群的Replication,并实践集群复制的功能。



单机实例Replication

Solr支持在单机上配置多个实例(MultiCore),每个实例都可以独立对外提供服务,共享同一网络带宽。同时,也可以实现单机实例之间Replication,在实例之间复制数据,保证数据的可用性,从而提高系统的服务能力。

我们看一下,这种复制模式的结构图,如下所示:


上图,在同一台服务器上,启动Solr的多个实例,将这些实例(通过Core来区分)作为单机上的伪分布式集群,这些Core实例都是在同一个JVM中。选择其中的一个实例Core0作为Master,每次索引更新都首先从这个实例Core0进行传播,直到Master实例Core0与Slave实例Core1、Core2、Core3上的数据同步为止。其中,每个实例都可以独立对外提供服务,因为这种模式保证多个实例上的数据都是同一份数据,起到数据备份的作用,一般不建议让多个实例同时提供服务。下面给出上图复制模式下Solr的配置。

Core0作为Master,对应的solrconfig.xml配置内容,如下所示:

  1. <?xml version="1.0" encoding="UTF-8" ?>
  2. <config>
  3.         <luceneMatchVersion>LUCENE_35</luceneMatchVersion>
  4.         <directoryFactory name="DirectoryFactory" class="${solr.directoryFactory:solr.StandardDirectoryFactory}" />

  5.         <updateHandler class="solr.DirectUpdateHandler2" />

  6.         <requestDispatcher handleSelect="true">
  7.                 <requestParsers enableRemoteStreaming="false" multipartUploadLimitInKB="2048" />
  8.         </requestDispatcher>

  9.         <requestHandler name="standard" class="solr.StandardRequestHandler" default="true" />
  10.         <requestHandler name="/update" class="solr.JsonUpdateRequestHandler" />
  11.         <requestHandler name="/admin/" class="org.apache.solr.handler.admin.AdminHandlers" />

  12.         <queryParser name="dismax" class="solr.DisMaxQParserPlugin" />
  13.         <requestHandler name="/dismax" class="solr.SearchHandler">
  14.                 <lst name="defaults">
  15.                         <str name="defType">dismax</str>
  16.                         <str name="qf">title content</str>
  17.                         <bool name="hl">true</bool>
  18.                         <str name="hl.fl">title content</str>
  19.                         <int name="hl.fragsize">200</int>
  20.                         <int name="hl.snippets">1</int>
  21.                         <str name="fl">*,score</str>
  22.                         <str name="qt">standard</str>
  23.                         <str name="wt">standard</str>
  24.                         <str name="version">2.2</str>
  25.                         <str name="echoParams">explicit</str>
  26.                         <str name="indent">true</str>
  27.                         <str name="debugQuery">on</str>
  28.                         <str name="explainOther">on</str>
  29.                 </lst>
  30.         </requestHandler>

  31.         <requestHandler name="/replication" class="solr.ReplicationHandler">
  32.                 <lst name="master">
  33.                         <str name="replicateAfter">startup</str>
  34.                         <str name="replicateAfter">commit</str>
  35.                         <str name="commitReserveDuration">00:00:10</str>
  36.                 </lst>
  37.         </requestHandler>

  38.         <admin>
  39.                 <defaultQuery>solr</defaultQuery>
  40.         </admin>

  41. </config>
复制代码
上述配置中,提供了一个/dismax搜索接口,对外提供搜索服务。配置中name为/Replication的requestHandler,即为Solr提供的复制请求处理接口,配置中replicateAfter表示在startup和commit之后才允许Slave的复制请求。

Solr支持索引数据Replication,同时也支持配置数据的复制。如果需要复制配置数据做好配置备份,可以在Master的solrconfig.xml中配置如下内容:

  1. <str name="confFiles">schema.xml,stopwords.txt,solrconfig.xml,synonyms.txt</str>
复制代码
指定需要从Master上复制的配置文件名即可。

对于Core1~Core3都为Slave,即请求复制数据,我们拿Core1为例,其它配置均相同,但是我们不希望Slave实例对外提供服务,所以只需要配置Slave的/replication复制请求处理接口即可,配置内容如下所示:

  1. <?xml version="1.0" encoding="UTF-8" ?>
  2. <config>
  3.         <luceneMatchVersion>LUCENE_35</luceneMatchVersion>
  4.         <directoryFactory name="DirectoryFactory" class="${solr.directoryFactory:solr.StandardDirectoryFactory}" />

  5.         <updateHandler class="solr.DirectUpdateHandler2" />

  6.         <requestDispatcher handleSelect="true">
  7.                 <requestParsers enableRemoteStreaming="false" multipartUploadLimitInKB="2048" />
  8.         </requestDispatcher>

  9.         <requestHandler name="standard" class="solr.StandardRequestHandler" default="true" />
  10.         <requestHandler name="/update" class="solr.JsonUpdateRequestHandler" />
  11.         <requestHandler name="/admin/" class="org.apache.solr.handler.admin.AdminHandlers" />

  12.         <requestHandler name="/replication" class="solr.ReplicationHandler">
  13.                 <lst name="slave">
  14.                         <str name="masterUrl">http://192.168.0.195:8080/solr35/core0/replication</str>
  15.                         <str name="pollInterval">00:00:20</str>
  16.                         <str name="compression">internal</str>
  17.                         <str name="httpConnTimeout">5000</str>
  18.                         <str name="httpReadTimeout">10000</str>
  19.                         <str name="httpBasicAuthUser">username</str>
  20.                         <str name="httpBasicAuthPassword">password</str>
  21.                 </lst>
  22.         </requestHandler>

  23.         <admin>
  24.                 <defaultQuery>solr</defaultQuery>
  25.         </admin>

  26. </config>
复制代码
Slave配置中masterUrl和pollInterval是必选的,masterUrl指定为core0的复制请求接口,pollInterval是指Slave周期地向Master询问是否数据有所更新,如果发生变更则进行复制。其它的参数可以根据需要进行配置。一般情况下,单机多个实例之间的Replication不需要配置上述httpBasicAuth*的参数的。

启动Solr之前,没有任何索引数据。启动之后,我们通过在 http://blog.csdn.net/shirdrn/article/details/7054633 中设计的小工具,向Master发送数据请求索引,因为在post的过程中,执行了commit和optimize操作,所以会触发Slave复制Master的索引数据,我们可以看一下日志。

在Master和Slave数据同步的情况下,Master收到Slave的Replication请求:

  1. 2011-12-9 15:18:00 org.apache.solr.core.SolrCore execute
  2. 信息: [core0] webapp=/solr35 path=/replication params={command=indexversion&wt=javabin} status=0 QTime=0
  3. 2011-12-9 15:18:20 org.apache.solr.core.SolrCore execute
  4. 信息: [core0] webapp=/solr35 path=/replication params={command=indexversion&wt=javabin} status=0 QTime=0
  5. 2011-12-9 15:18:40 org.apache.solr.core.SolrCore execute
  6. 信息: [core0] webapp=/solr35 path=/replication params={command=indexversion&wt=javabin} status=0 QTime=0
  7. 2011-12-9 15:19:00 org.apache.solr.core.SolrCore execute
  8. 信息: [core0] webapp=/solr35 path=/replication params={command=indexversion&wt=javabin} status=0 QTime=0
复制代码
每隔20s间隔,Slave请求一次,这个时间间隔可以根据需要进行配置。

从我们向Master发送索引数据更新索引请求后,在Master和Slave之间执行的数据的复制,处理日志内容可以参考后面附录的内容。

通过日志信息可以看到,Slave在Master更新索引(通过add可以看到更新了5篇文档,日志中给出了文档编号;更新时,每次发送2篇文档执行一次commit,全部发送完成后执行一次commit和optimize操作)之后,通过发送请求获取复制文件列表,然后执行复制过程,最后Slave索引数据发生变化,为保证实时能够搜索到最新内容,重新打开了一个IndexSearcher实例。日志最后面的部分,Slave的索引数据与Master保持同步,不需要复制。



集群结点Replication

在Solr集群中进行配置,与上面单机多实例的情况基本上一致,基本特点是:每个结点上的实例(Core)在同一个JVM内,不同结点之间进行复制——实际上是不同结点上的实例之间进行Replication。集群复制模式架构图,如下所示:


在一个Solr集群中执行Replication,复制请求与动作发生在一个网络内部。而replication的端点是不同结点上的实例(Core),很可能Slave结点上的其它实例在提供其他的服务。

通过上图可以看到,在只有一个Master的Solr集群中,如果存在大量的Slave要求Replication,势必会造成对Master服务器的压力(网络带宽、系统IO、系统CPU)。很可能因为外部大量搜索请求达到,使Master持续提供服务的能力降低,甚至宕机。Solr也考虑到这一点,通过在Master和Slave之间建立一个代理的结点来改善单点故障,代理结点既做Master的Slave,同步Master的数据,同时又做Slave的Master,将最新的数据同步复制到Slave结点,这个结点叫做Repeater,架构图如下所示:


由图可见,Master的压力一下转移到了Repeater结点上,在一定程度上解决了Master的单点问题。对于Reaper结点,它具有双重角色,显而易见,在配置的时候需要配置上Master和Slave都具有的属性。我们给出一个Repeater的配置示例。

Master配置:

  1.         <requestHandler name="/replication" class="solr.ReplicationHandler">
  2.                 <lst name="master">
  3.                         <str name="replicateAfter">startup</str>
  4.                         <str name="replicateAfter">commit</str>
  5.                         <str name="confFiles">schema.xml,stopwords.txt,solrconfig.xml,synonyms.txt</str>
  6.                         <str name="commitReserveDuration">00:00:10</str>
  7.                 </lst>
  8.         </requestHandler>
复制代码
Repeater配置:
  1.         <requestHandler name="/replication" class="solr.ReplicationHandler">
  2.                 <lst name="master">
  3.                         <str name="replicateAfter">startup</str>
  4.                         <str name="replicateAfter">commit</str>
  5.                         <str name="commitReserveDuration">00:00:10</str>
  6.                 </lst>
  7.                 <lst name="slave">
  8.                         <str name="masterUrl">http://192.168.0.184:8080/masterapp/master/replication</str>
  9.                         <str name="pollInterval">00:00:20</str>
  10.                         <str name="compression">internal</str>
  11.                         <str name="httpConnTimeout">5000</str>
  12.                         <str name="httpReadTimeout">10000</str>
  13.                         <str name="httpBasicAuthUser">username</str>
  14.                         <str name="httpBasicAuthPassword">password</str>
  15.                 </lst>
  16.         </requestHandler>
复制代码
Slave配置:
  1. <requestHandler name="/replication" class="solr.ReplicationHandler" >
  2.            <lst name="slave">
  3.                <str name="masterUrl">http://192.168.0.174:8080/repeaterapp/repeater/replication</str>
  4.                <str name="pollInterval">00:00:20</str>
  5.                <str name="compression">internal</str>
  6.                <str name="httpConnTimeout">5000</str>
  7.                <str name="httpReadTimeout">10000</str>
  8.                 <str name="httpBasicAuthUser">username</str>
  9.                 <str name="httpBasicAuthPassword">password</str>
  10.              </lst>
  11.         </requestHandler>
复制代码

可见,Solr能够支持这种链式Replication配置,甚至可以配置更多级,但具体如何配置还要依据你的应用的特点,以及资源条件的限制。总之,Solr Replication的目标就是让你系统的数据可用性变得更好。任何时候发生机器故障、硬盘故障、数据错误,都可以从其他的备机上同步数据。



附录日志
  1. 2011-12-9 15:19:32 org.apache.solr.update.processor.LogUpdateProcessor finish
  2. 信息: {add=[4eded6a5bf3bfa0014000003, 4eded74abf3bfa0014000005]} 0 1257
  3. 2011-12-9 15:19:32 org.apache.solr.core.SolrCore execute
  4. 信息: [core0] webapp=/solr35 path=/update params={} status=0 QTime=1257
  5. 2011-12-9 15:19:32 org.apache.solr.update.DirectUpdateHandler2 commit
  6. 信息: start commit(optimize=false,waitFlush=true,waitSearcher=true,expungeDeletes=false)
  7. 2011-12-9 15:19:33 org.apache.solr.core.SolrDeletionPolicy onCommit
  8. 信息: SolrDeletionPolicy.onCommit: commits:num=2
  9.         commit{dir=E:\Develop\myeclipse\workspace\solr35\multicore\core0\data\index,segFN=segments_1,version=1323415055454,generation=1,filenames=[segments_1]
  10.         commit{dir=E:\Develop\myeclipse\workspace\solr35\multicore\core0\data\index,segFN=segments_2,version=1323415055456,generation=2,filenames=[_0.tis, _0.nrm, _0.fnm, _0.tii, _0.frq, segments_2, _0.fdx, _0.prx, _0.fdt]
  11. 2011-12-9 15:19:33 org.apache.solr.core.SolrDeletionPolicy updateCommits
  12. 信息: newest commit = 1323415055456
  13. 2011-12-9 15:19:33 org.apache.solr.search.SolrIndexSearcher <init>
  14. 信息: Opening Searcher@151b6ea main
  15. 2011-12-9 15:19:33 org.apache.solr.update.DirectUpdateHandler2 commit
  16. 信息: end_commit_flush
  17. 2011-12-9 15:19:33 org.apache.solr.search.SolrIndexSearcher warm
  18. 信息: autowarming Searcher@151b6ea main from Searcher@1a80fb8 main
  19.         fieldValueCache{lookups=0,hits=0,hitratio=0.00,inserts=0,evictions=0,size=0,warmupTime=0,cumulative_lookups=0,cumulative_hits=0,cumulative_hitratio=0.00,cumulative_inserts=0,cumulative_evictions=0}
  20. 2011-12-9 15:19:33 org.apache.solr.search.SolrIndexSearcher warm
  21. 信息: autowarming result for Searcher@151b6ea main
  22.         fieldValueCache{lookups=0,hits=0,hitratio=0.00,inserts=0,evictions=0,size=0,warmupTime=0,cumulative_lookups=0,cumulative_hits=0,cumulative_hitratio=0.00,cumulative_inserts=0,cumulative_evictions=0}
  23. 2011-12-9 15:19:33 org.apache.solr.core.SolrCore registerSearcher
  24. 信息: [core0] Registered new searcher Searcher@151b6ea main
  25. 2011-12-9 15:19:33 org.apache.solr.search.SolrIndexSearcher close
  26. 信息: Closing Searcher@1a80fb8 main
  27.         fieldValueCache{lookups=0,hits=0,hitratio=0.00,inserts=0,evictions=0,size=0,warmupTime=0,cumulative_lookups=0,cumulative_hits=0,cumulative_hitratio=0.00,cumulative_inserts=0,cumulative_evictions=0}
  28. 2011-12-9 15:19:33 org.apache.solr.update.processor.LogUpdateProcessor finish
  29. 信息: {commit=} 0 790
  30. 2011-12-9 15:19:33 org.apache.solr.core.SolrCore execute
  31. 信息: [core0] webapp=/solr35 path=/update params={} status=0 QTime=790
  32. 2011-12-9 15:19:33 org.apache.solr.update.SolrIndexWriter getDirectory
  33. 警告: No lockType configured for E:\Develop\myeclipse\workspace\solr35\multicore\core0\data\index/ assuming 'simple'
  34. 2011-12-9 15:19:33 org.apache.solr.core.SolrDeletionPolicy onInit
  35. 信息: SolrDeletionPolicy.onInit: commits:num=1
  36.         commit{dir=E:\Develop\myeclipse\workspace\solr35\multicore\core0\data\index,segFN=segments_2,version=1323415055456,generation=2,filenames=[_0.tis, _0.nrm, _0.fnm, _0.tii, _0.frq, segments_2, _0.fdx, _0.prx, _0.fdt]
  37. 2011-12-9 15:19:33 org.apache.solr.core.SolrDeletionPolicy updateCommits
  38. 信息: newest commit = 1323415055456
  39. 2011-12-9 15:19:33 org.apache.solr.update.processor.LogUpdateProcessor finish
  40. 信息: {add=[4eded53abf3bfa0014000002, 4eded700bf3bfa0014000004]} 0 336
  41. 2011-12-9 15:19:33 org.apache.solr.core.SolrCore execute
  42. 信息: [core0] webapp=/solr35 path=/update params={} status=0 QTime=336
  43. 2011-12-9 15:19:33 org.apache.solr.update.DirectUpdateHandler2 commit
  44. 信息: start commit(optimize=false,waitFlush=true,waitSearcher=true,expungeDeletes=false)
  45. 2011-12-9 15:19:34 org.apache.solr.core.SolrDeletionPolicy onCommit
  46. 信息: SolrDeletionPolicy.onCommit: commits:num=2
  47.         commit{dir=E:\Develop\myeclipse\workspace\solr35\multicore\core0\data\index,segFN=segments_2,version=1323415055456,generation=2,filenames=[_0.tis, _0.nrm, _0.fnm, _0.tii, _0.frq, segments_2, _0.fdx, _0.prx, _0.fdt]
  48.         commit{dir=E:\Develop\myeclipse\workspace\solr35\multicore\core0\data\index,segFN=segments_3,version=1323415055458,generation=3,filenames=[_0.nrm, _0.tis, _0.fnm, _1.tis, _1.frq, _1.fnm, _1.fdx, _1.prx, _0.tii, _1.fdt, _0.frq, _1.tii, _0.fdx, _0.prx, _1.nrm, segments_3, _0.fdt]
  49. 2011-12-9 15:19:34 org.apache.solr.core.SolrDeletionPolicy updateCommits
  50. 信息: newest commit = 1323415055458
  51. 2011-12-9 15:19:34 org.apache.solr.search.SolrIndexSearcher <init>
  52. 信息: Opening Searcher@5fa11b main
  53. 2011-12-9 15:19:34 org.apache.solr.update.DirectUpdateHandler2 commit
  54. 信息: end_commit_flush
  55. 2011-12-9 15:19:34 org.apache.solr.search.SolrIndexSearcher warm
  56. 信息: autowarming Searcher@5fa11b main from Searcher@151b6ea main
  57.         fieldValueCache{lookups=0,hits=0,hitratio=0.00,inserts=0,evictions=0,size=0,warmupTime=0,cumulative_lookups=0,cumulative_hits=0,cumulative_hitratio=0.00,cumulative_inserts=0,cumulative_evictions=0}
  58. 2011-12-9 15:19:34 org.apache.solr.search.SolrIndexSearcher warm
  59. 信息: autowarming result for Searcher@5fa11b main
  60.         fieldValueCache{lookups=0,hits=0,hitratio=0.00,inserts=0,evictions=0,size=0,warmupTime=0,cumulative_lookups=0,cumulative_hits=0,cumulative_hitratio=0.00,cumulative_inserts=0,cumulative_evictions=0}
  61. 2011-12-9 15:19:34 org.apache.solr.core.SolrCore registerSearcher
  62. 信息: [core0] Registered new searcher Searcher@5fa11b main
  63. 2011-12-9 15:19:34 org.apache.solr.search.SolrIndexSearcher close
  64. 信息: Closing Searcher@151b6ea main
  65.         fieldValueCache{lookups=0,hits=0,hitratio=0.00,inserts=0,evictions=0,size=0,warmupTime=0,cumulative_lookups=0,cumulative_hits=0,cumulative_hitratio=0.00,cumulative_inserts=0,cumulative_evictions=0}
  66. 2011-12-9 15:19:34 org.apache.solr.update.processor.LogUpdateProcessor finish
  67. 信息: {commit=} 0 616
  68. 2011-12-9 15:19:34 org.apache.solr.core.SolrCore execute
  69. 信息: [core0] webapp=/solr35 path=/update params={} status=0 QTime=616
  70. 2011-12-9 15:19:34 org.apache.solr.update.SolrIndexWriter getDirectory
  71. 警告: No lockType configured for E:\Develop\myeclipse\workspace\solr35\multicore\core0\data\index/ assuming 'simple'
  72. 2011-12-9 15:19:34 org.apache.solr.core.SolrDeletionPolicy onInit
  73. 信息: SolrDeletionPolicy.onInit: commits:num=1
  74.         commit{dir=E:\Develop\myeclipse\workspace\solr35\multicore\core0\data\index,segFN=segments_3,version=1323415055458,generation=3,filenames=[_0.nrm, _0.tis, _0.fnm, _1.tis, _1.frq, _1.fnm, _1.fdx, _1.prx, _0.tii, _1.fdt, _0.frq, _1.tii, _0.fdx, _0.prx, _1.nrm, segments_3, _0.fdt]
  75. 2011-12-9 15:19:34 org.apache.solr.core.SolrDeletionPolicy updateCommits
  76. 信息: newest commit = 1323415055458
  77. 2011-12-9 15:19:34 org.apache.solr.update.processor.LogUpdateProcessor finish
  78. 信息: {add=[4eded79fbf3bfa0014000006]} 0 164
  79. 2011-12-9 15:19:34 org.apache.solr.core.SolrCore execute
  80. 信息: [core0] webapp=/solr35 path=/update params={} status=0 QTime=164
  81. 2011-12-9 15:19:34 org.apache.solr.update.DirectUpdateHandler2 commit
  82. 信息: start commit(optimize=false,waitFlush=true,waitSearcher=true,expungeDeletes=false)
  83. 2011-12-9 15:19:35 org.apache.solr.core.SolrDeletionPolicy onCommit
  84. 信息: SolrDeletionPolicy.onCommit: commits:num=2
  85.         commit{dir=E:\Develop\myeclipse\workspace\solr35\multicore\core0\data\index,segFN=segments_3,version=1323415055458,generation=3,filenames=[_0.nrm, _0.tis, _0.fnm, _1.tis, _1.frq, _1.fnm, _1.fdx, _1.prx, _0.tii, _1.fdt, _0.frq, _1.tii, _0.fdx, _0.prx, _1.nrm, segments_3, _0.fdt]
  86.         commit{dir=E:\Develop\myeclipse\workspace\solr35\multicore\core0\data\index,segFN=segments_4,version=1323415055460,generation=4,filenames=[_0.tis, _1.frq, _2.tii, _1.fnm, _1.tii, _0.prx, _0.nrm, _1.tis, _0.fnm, _2.prx, _2.fdt, _2.frq, _2.fdx, _2.fnm, _1.prx, _1.fdx, _2.tis, _0.tii, _1.fdt, _0.frq, _0.fdx, _0.fdt, _1.nrm, _2.nrm, segments_4]
  87. 2011-12-9 15:19:35 org.apache.solr.core.SolrDeletionPolicy updateCommits
  88. 信息: newest commit = 1323415055460
  89. 2011-12-9 15:19:35 org.apache.solr.search.SolrIndexSearcher <init>
  90. 信息: Opening Searcher@1d449fc main
  91. 2011-12-9 15:19:35 org.apache.solr.update.DirectUpdateHandler2 commit
  92. 信息: end_commit_flush
  93. 2011-12-9 15:19:35 org.apache.solr.search.SolrIndexSearcher warm
  94. 信息: autowarming Searcher@1d449fc main from Searcher@5fa11b main
  95.         fieldValueCache{lookups=0,hits=0,hitratio=0.00,inserts=0,evictions=0,size=0,warmupTime=0,cumulative_lookups=0,cumulative_hits=0,cumulative_hitratio=0.00,cumulative_inserts=0,cumulative_evictions=0}
  96. 2011-12-9 15:19:35 org.apache.solr.search.SolrIndexSearcher warm
  97. 信息: autowarming result for Searcher@1d449fc main
  98.         fieldValueCache{lookups=0,hits=0,hitratio=0.00,inserts=0,evictions=0,size=0,warmupTime=0,cumulative_lookups=0,cumulative_hits=0,cumulative_hitratio=0.00,cumulative_inserts=0,cumulative_evictions=0}
  99. 2011-12-9 15:19:35 org.apache.solr.core.SolrCore registerSearcher
  100. 信息: [core0] Registered new searcher Searcher@1d449fc main
  101. 2011-12-9 15:19:35 org.apache.solr.search.SolrIndexSearcher close
  102. 信息: Closing Searcher@5fa11b main
  103.         fieldValueCache{lookups=0,hits=0,hitratio=0.00,inserts=0,evictions=0,size=0,warmupTime=0,cumulative_lookups=0,cumulative_hits=0,cumulative_hitratio=0.00,cumulative_inserts=0,cumulative_evictions=0}
  104. 2011-12-9 15:19:35 org.apache.solr.update.processor.LogUpdateProcessor finish
  105. 信息: {commit=} 0 735
  106. 2011-12-9 15:19:35 org.apache.solr.core.SolrCore execute
  107. 信息: [core0] webapp=/solr35 path=/update params={} status=0 QTime=735
  108. 2011-12-9 15:19:35 org.apache.solr.update.DirectUpdateHandler2 commit
  109. 信息: start commit(optimize=true,waitFlush=false,waitSearcher=false,expungeDeletes=false)
  110. 2011-12-9 15:19:35 org.apache.solr.update.SolrIndexWriter getDirectory
  111. 警告: No lockType configured for E:\Develop\myeclipse\workspace\solr35\multicore\core0\data\index/ assuming 'simple'
  112. 2011-12-9 15:19:35 org.apache.solr.core.SolrDeletionPolicy onInit
  113. 信息: SolrDeletionPolicy.onInit: commits:num=1
  114.         commit{dir=E:\Develop\myeclipse\workspace\solr35\multicore\core0\data\index,segFN=segments_4,version=1323415055460,generation=4,filenames=[_0.tis, _1.frq, _2.tii, _1.fnm, _1.tii, _0.prx, _0.nrm, _1.tis, _0.fnm, _2.prx, _2.fdt, _2.frq, _2.fdx, _2.fnm, _1.prx, _1.fdx, _2.tis, _0.tii, _1.fdt, _0.frq, _0.fdx, _0.fdt, _1.nrm, _2.nrm, segments_4]
  115. 2011-12-9 15:19:35 org.apache.solr.core.SolrDeletionPolicy updateCommits
  116. 信息: newest commit = 1323415055460
  117. 2011-12-9 15:19:36 org.apache.solr.core.SolrDeletionPolicy onCommit
  118. 信息: SolrDeletionPolicy.onCommit: commits:num=2
  119.         commit{dir=E:\Develop\myeclipse\workspace\solr35\multicore\core0\data\index,segFN=segments_4,version=1323415055460,generation=4,filenames=[_0.tis, _1.frq, _2.tii, _1.fnm, _1.tii, _0.prx, _0.nrm, _1.tis, _0.fnm, _2.prx, _2.fdt, _2.frq, _2.fdx, _2.fnm, _1.prx, _1.fdx, _2.tis, _0.tii, _1.fdt, _0.frq, _0.fdx, _0.fdt, _1.nrm, _2.nrm, segments_4]
  120.         commit{dir=E:\Develop\myeclipse\workspace\solr35\multicore\core0\data\index,segFN=segments_5,version=1323415055462,generation=5,filenames=[_3.nrm, _3.fdx, _3.frq, _3.tii, _3.fnm, _3.prx, _3.fdt, segments_5, _3.tis]
  121. 2011-12-9 15:19:36 org.apache.solr.core.SolrDeletionPolicy updateCommits
  122. 信息: newest commit = 1323415055462
  123. 2011-12-9 15:19:36 org.apache.solr.search.SolrIndexSearcher <init>
  124. 信息: Opening Searcher@130df8 main
  125. 2011-12-9 15:19:36 org.apache.solr.update.DirectUpdateHandler2 commit
  126. 信息: end_commit_flush
  127. 2011-12-9 15:19:36 org.apache.solr.update.processor.LogUpdateProcessor finish
  128. 信息: {optimize=} 0 764
  129. 2011-12-9 15:19:36 org.apache.solr.core.SolrCore execute
  130. 信息: [core0] webapp=/solr35 path=/update params={} status=0 QTime=764
  131. 2011-12-9 15:19:36 org.apache.solr.search.SolrIndexSearcher warm
  132. 信息: autowarming Searcher@130df8 main from Searcher@1d449fc main
  133.         fieldValueCache{lookups=0,hits=0,hitratio=0.00,inserts=0,evictions=0,size=0,warmupTime=0,cumulative_lookups=0,cumulative_hits=0,cumulative_hitratio=0.00,cumulative_inserts=0,cumulative_evictions=0}
  134. 2011-12-9 15:19:36 org.apache.solr.search.SolrIndexSearcher warm
  135. 信息: autowarming result for Searcher@130df8 main
  136.         fieldValueCache{lookups=0,hits=0,hitratio=0.00,inserts=0,evictions=0,size=0,warmupTime=0,cumulative_lookups=0,cumulative_hits=0,cumulative_hitratio=0.00,cumulative_inserts=0,cumulative_evictions=0}
  137. 2011-12-9 15:19:36 org.apache.solr.core.SolrCore registerSearcher
  138. 信息: [core0] Registered new searcher Searcher@130df8 main
  139. 2011-12-9 15:19:36 org.apache.solr.search.SolrIndexSearcher close
  140. 信息: Closing Searcher@1d449fc main
  141.         fieldValueCache{lookups=0,hits=0,hitratio=0.00,inserts=0,evictions=0,size=0,warmupTime=0,cumulative_lookups=0,cumulative_hits=0,cumulative_hitratio=0.00,cumulative_inserts=0,cumulative_evictions=0}
  142. 2011-12-9 15:19:40 org.apache.solr.core.SolrCore execute
  143. 信息: [core0] webapp=/solr35 path=/replication params={command=indexversion&wt=javabin} status=0 QTime=0
  144. 2011-12-9 15:19:40 org.apache.solr.handler.SnapPuller fetchLatestIndex
  145. 信息: Master's version: 1323415055462, generation: 5
  146. 2011-12-9 15:19:40 org.apache.solr.handler.SnapPuller fetchLatestIndex
  147. 信息: Slave's version: 1323415058428, generation: 1
  148. 2011-12-9 15:19:40 org.apache.solr.handler.SnapPuller fetchLatestIndex
  149. 信息: Starting replication process
  150. 2011-12-9 15:19:40 org.apache.solr.core.SolrCore execute
  151. 信息: [core0] webapp=/solr35 path=/replication params={indexversion=1323415055462&command=filelist&wt=javabin} status=0 QTime=1
  152. 2011-12-9 15:19:40 org.apache.solr.handler.SnapPuller fetchLatestIndex
  153. 信息: Number of files in latest index in master: 9
  154. 2011-12-9 15:19:40 org.apache.solr.core.SolrCore execute
  155. 信息: [core0] webapp=/solr35 path=/replication params={indexversion=1323415055462&file=_3.fdx&command=filecontent&checksum=true&compression=true&wt=filestream} status=0 QTime=27
  156. 2011-12-9 15:19:40 org.apache.solr.core.SolrCore execute
  157. 信息: [core0] webapp=/solr35 path=/replication params={indexversion=1323415055462&file=_3.nrm&command=filecontent&checksum=true&compression=true&wt=filestream} status=0 QTime=0
  158. 2011-12-9 15:19:40 org.apache.solr.core.SolrCore execute
  159. 信息: [core0] webapp=/solr35 path=/replication params={indexversion=1323415055462&file=_3.tii&command=filecontent&checksum=true&compression=true&wt=filestream} status=0 QTime=0
  160. 2011-12-9 15:19:40 org.apache.solr.core.SolrCore execute
  161. 信息: [core0] webapp=/solr35 path=/replication params={indexversion=1323415055462&file=_3.frq&command=filecontent&checksum=true&compression=true&wt=filestream} status=0 QTime=0
  162. 2011-12-9 15:19:40 org.apache.solr.core.SolrCore execute
  163. 信息: [core0] webapp=/solr35 path=/replication params={indexversion=1323415055462&file=_3.fdt&command=filecontent&checksum=true&compression=true&wt=filestream} status=0 QTime=11
  164. 2011-12-9 15:19:40 org.apache.solr.core.SolrCore execute
  165. 信息: [core0] webapp=/solr35 path=/replication params={indexversion=1323415055462&file=_3.prx&command=filecontent&checksum=true&compression=true&wt=filestream} status=0 QTime=0
  166. 2011-12-9 15:19:40 org.apache.solr.core.SolrCore execute
  167. 信息: [core0] webapp=/solr35 path=/replication params={indexversion=1323415055462&file=_3.fnm&command=filecontent&checksum=true&compression=true&wt=filestream} status=0 QTime=0
  168. 2011-12-9 15:19:40 org.apache.solr.core.SolrCore execute
  169. 信息: [core0] webapp=/solr35 path=/replication params={indexversion=1323415055462&file=segments_5&command=filecontent&checksum=true&compression=true&wt=filestream} status=0 QTime=1
  170. 2011-12-9 15:19:40 org.apache.solr.core.SolrCore execute
  171. 信息: [core0] webapp=/solr35 path=/replication params={indexversion=1323415055462&file=_3.tis&command=filecontent&checksum=true&compression=true&wt=filestream} status=0 QTime=0
  172. 2011-12-9 15:19:40 org.apache.solr.handler.SnapPuller fetchLatestIndex
  173. 信息: Total time taken for download : 0 secs
  174. 2011-12-9 15:19:40 org.apache.solr.update.DirectUpdateHandler2 commit
  175. 信息: start commit(optimize=false,waitFlush=true,waitSearcher=true,expungeDeletes=false)
  176. 2011-12-9 15:19:40 org.apache.solr.search.SolrIndexSearcher <init>
  177. 信息: Opening Searcher@49a1c5 main
  178. 2011-12-9 15:19:40 org.apache.solr.update.DirectUpdateHandler2 commit
  179. 信息: end_commit_flush
  180. 2011-12-9 15:19:40 org.apache.solr.search.SolrIndexSearcher warm
  181. 信息: autowarming Searcher@49a1c5 main from Searcher@14a93a6 main
  182.         fieldValueCache{lookups=0,hits=0,hitratio=0.00,inserts=0,evictions=0,size=0,warmupTime=0,cumulative_lookups=0,cumulative_hits=0,cumulative_hitratio=0.00,cumulative_inserts=0,cumulative_evictions=0}
  183. 2011-12-9 15:19:40 org.apache.solr.search.SolrIndexSearcher warm
  184. 信息: autowarming result for Searcher@49a1c5 main
  185.         fieldValueCache{lookups=0,hits=0,hitratio=0.00,inserts=0,evictions=0,size=0,warmupTime=0,cumulative_lookups=0,cumulative_hits=0,cumulative_hitratio=0.00,cumulative_inserts=0,cumulative_evictions=0}
  186. 2011-12-9 15:19:40 org.apache.solr.core.SolrCore registerSearcher
  187. 信息: [core1] Registered new searcher Searcher@49a1c5 main
  188. 2011-12-9 15:19:40 org.apache.solr.search.SolrIndexSearcher close
  189. 信息: Closing Searcher@14a93a6 main
  190.         fieldValueCache{lookups=0,hits=0,hitratio=0.00,inserts=0,evictions=0,size=0,warmupTime=0,cumulative_lookups=0,cumulative_hits=0,cumulative_hitratio=0.00,cumulative_inserts=0,cumulative_evictions=0}
  191. 2011-12-9 15:19:40 org.apache.solr.handler.SnapPuller doCommit
  192. 信息: Force open index writer to make sure older index files get deleted
  193. 2011-12-9 15:19:40 org.apache.solr.update.SolrIndexWriter getDirectory
  194. 警告: No lockType configured for E:\Develop\myeclipse\workspace\solr35\multicore\core1\data\index/ assuming 'simple'
  195. 2011-12-9 15:19:41 org.apache.solr.core.SolrDeletionPolicy onInit
  196. 信息: SolrDeletionPolicy.onInit: commits:num=2
  197.         commit{dir=E:\Develop\myeclipse\workspace\solr35\multicore\core1\data\index,segFN=segments_1,version=1323415058428,generation=1,filenames=[segments_1]
  198.         commit{dir=E:\Develop\myeclipse\workspace\solr35\multicore\core1\data\index,segFN=segments_5,version=1323415055462,generation=5,filenames=[_3.nrm, _3.fdx, _3.frq, _3.tii, _3.fnm, _3.prx, _3.fdt, segments_5, _3.tis]
  199. 2011-12-9 15:19:41 org.apache.solr.core.SolrDeletionPolicy updateCommits
  200. 信息: newest commit = 1323415055462
  201. 2011-12-9 15:20:00 org.apache.solr.core.SolrCore execute
  202. 信息: [core0] webapp=/solr35 path=/replication params={command=indexversion&wt=javabin} status=0 QTime=0
  203. 2011-12-9 15:20:00 org.apache.solr.handler.SnapPuller fetchLatestIndex
  204. 信息: Slave in sync with master.
  205. 2011-12-9 15:20:20 org.apache.solr.core.SolrCore execute
  206. 信息: [core0] webapp=/solr35 path=/replication params={command=indexversion&wt=javabin} status=0 QTime=0
  207. 2011-12-9 15:20:20 org.apache.solr.handler.SnapPuller fetchLatestIndex
  208. 信息: Slave in sync with master.
  209. 2011-12-9 15:20:40 org.apache.solr.core.SolrCore execute
  210. 信息: [core0] webapp=/solr35 path=/replication params={command=indexversion&wt=javabin} status=0 QTime=0
  211. 2011-12-9 15:20:40 org.apache.solr.handler.SnapPuller fetchLatestIndex
  212. 信息: Slave in sync with master.
  213. 2011-12-9 15:21:00 org.apache.solr.core.SolrCore execute
  214. 信息: [core0] webapp=/solr35 path=/replication params={command=indexversion&wt=javabin} status=0 QTime=0
  215. 2011-12-9 15:21:00 org.apache.solr.handler.SnapPuller fetchLatestIndex
  216. 信息: Slave in sync with master.
复制代码
from:http://go.cxweb.com.cn/d7stv
分享到:  QQ好友和群QQ好友和群 QQ空间QQ空间 腾讯微博腾讯微博 腾讯朋友腾讯朋友
收藏收藏 转播转播 分享分享 分享淘帖
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

QQ|Archiver|手机版|小黑屋|创星网络 ( 苏ICP备11027519号|网站地图  

GMT+8, 2024-5-2 17:05 , Processed in 0.083590 second(s), 28 queries .

Powered by Discuz! X3

© 2001-2013 Comsenz Inc.

快速回复 返回顶部 返回列表