solr 同步mysql 两百万条数据 时间多少

发布网友 发布时间：2022-05-02 20:45

我来回答

共2个回答

懂视网 时间：2022-05-03 01:06

       能够将数据库中的数据导入到solr中，对于百万级别的数据能够高速响应查询。

JDK版本号须要1.7以上

下载solr压缩包，解压安装包。进入到SOLR_HOMEexample文件夹下，执行命令java –jar start.jar启动solr

Solr默认port为8983，訪问http://localhost:8983/solr，若有例如以下界面，则启动成功

       Solr提供了将数据库数据导入到solr索引库的功能（dataimport）

       下载mysql的驱动包。并放在{%SOLR_HOME%}contribdataimporthandlerlib文件夹下

       solrconfig.xml包括了用于配置自身行为的绝大部分參数,其作用范围是当前core。位置在文件文件夹该文件位于{%solr_home%} examplesolrcollection1conf下。

       数据导入须要引用mysql的驱动包和DataImport所需的包。

       在文件里加入例如以下内容：

<libdir="/contrib/dataimporthandler/lib"regex=".*.jar" />

       <lib dir="/dist/"regex="solr-dataimporthandler-d.*.jar" />

       在solrconfig.xml中增加例如以下配置：

<requestHandlername="/dataimport"class="org.apache.solr.handler.dataimport.DataImportHandler">

       <lst name="defaults">

         <str name="config">data-config.xml</str>

       </lst>

   </requestHandler>

3.3、配置schema.xml

              Schema.xml能够灵活的配置不同类型的字段，所在位置与solrconfig.xml同级。

              导入数据须要配置与数据库中字段一致的类型，在配置文件里

       在与solrconfig.xml同级文件夹下（{%solr_home%}examplesolrcollection1con），建立与3.2.2中配置中同名的数据配置文件data-config.xml，

并加入例如以下内容

<dataConfig>

   <!-- driver: 数据库驱动名

        url:数据库路径

        user:数据库用户

        password:数据库密码

        batchSize:防止在导入数据过程中内存溢出

    -->

  <dataSource type="JdbcDataSource"

             driver="com.mysql.jdbc.Driver"

             url="jdbc:mysql://localhost/exercise"

              user="root"

              password=""

              batchSize="-1"/>

  <document>

   <!--要导入的表，能够配置多个

       并查询出要建立索引的字段

   -->

   <entity name="customerinfo" query="selectcustomerID,customerName,PID,telephone from customerinfo">

      <field column="customerID" name="id"/>

      <field column="customerID" name="customerID"/>

      <field column="customerName"name="customerName"/>

      <field column="PID" name="PID"/>

      <field column="telephone" name="telephone"/>

   </entity>

 </document>

</dataConfig>

       訪问solr界面

Command选择full-import,Entity选择要导入的表，再点击Execute便可导入数据

完毕后会提示索引建立完毕。

然后在Query界面能够输入相关查询条件进行查询

[jjzhu学java]之solr4.9同步mysql数据

标签：server   功能   class   版本号   style   同名   hone   drive   command   

热心网友 时间：2022-05-02 22:14