码迷,mamicode.com
首页 > 其他好文 > 详细

solr3.6数据导入DataImport实现

时间:2014-07-16 19:14:31      阅读:252      评论:0      收藏:0      [点我收藏+]

标签:style   http   java   文件   os   数据   

上文中介绍了定时器实现实时索引数据的解决方案,本文对其进行补充,介绍数据导入的配置

 

1 配置RequestHandler

 <!-- DataImportHandler -->

 <requestHandler name="/dataimport" class="org.apache.solr.handler.dataimport.DataImportHandler">  
     <lst name="defaults">  
       <str name="config">db/db-data-config.xml</str>  
     </lst>  
  </requestHandler>

2 配置数据源和数据实体

包括全部导入和增量导入

bubuko.com,布布扣
<dataConfig>      

<dataSource driver="net.sourceforge.jtds.jdbc.Driver" url="jdbc:jtds:sqlserver://IP;instance=SQLSRV2005;DatabaseName=CloudPlat" user="sa" password="sa"  batchSize="100"/>
<document>
        <entity name="article" pk="DocAutoId" query="select * from CP_InfoListPub order by DocAutoId"         
        deltaImportQuery="select * from CP_InfoListPubClone where DocAutoId=‘${dataimporter.delta.DocAutoId}‘"
        deltaQuery="select DocAutoId from CP_InfoListPubClone where Doc_GatherDate &gt; ‘${dataimporter.last_index_time}‘"
        deletedPkQuery="select DocAutoId from CP_InfoListPubClone where DocAutoId=0"
        transformer="ClobTransformer,HTMLStripTransformer,DateFormatTransformer" >
            <field column="DocAutoId" name="id" />        
            <field column="Doc_Title" name="title" /> 
            <field column="Doc_RegionName" name="region" />
            <field column="Doc_TradeName" name="trade" />
            <field column="Doc_Content" name="content" clob="true" stripHTML="true"/>            
            <field column="Doc_PubDate" name="update"  dateTimeFormat="yyyy-MM-dd"/>
            <field column="Doc_Url" name="link" />
        </entity>
    </document>
 

</dataConfig> 

3 引入相关的文件,apache-solr-dataimporthandler-1.4.0.jar,apache-solr-dataimporthandler-extras-1.4.0.jar,mysql-connector-java-5.1.10.jar等

4 启动tomcat,访问http://localhost:8080/solr/dataimport?command=full-import 将数据全部导入solr服务器进行索引

访问http://localhost:8080/solr/dataimport?command=status可以查看运行状态

当修改data-config.xml 文件配置时运行http://localhost:8080/solr/dataimport?command=reload-config可以进行重新加载配置文件

如果想终止运行http://localhost:8080/solr/dataimport?command=abort

solr3.6数据导入DataImport实现,布布扣,bubuko.com

solr3.6数据导入DataImport实现

标签:style   http   java   文件   os   数据   

原文地址:http://www.cnblogs.com/licunbing/p/3844726.html

(0)
(0)
   
举报
评论 一句话评论(0
登录后才能评论!
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!