<!-- flowchart 箭头图标 勿删 --> 引言： 验证表明：mongo-connector工具支持MongoDB与ES之间的实时增insert、删delete、改update操作。 对于历史数据，mongo-connector工具不能同步到ES中，根因是本身工具不支持(初步界定），还是没 ...
分类：
数据库 时间：
2018-12-14 13:02:20
阅读次数：
402
mongo-connector安装: 1. yum -y install openssl* 2.编译安装python3 下载地址:https://www.python.org/ftp/python/ (在安装结尾出可以看到pip3已经被安装的提示，如果提示require TLS/SSL，说明没有安装 ...
分类：
数据库 时间：
2017-09-28 22:27:13
阅读次数：
276
前提条件： mongo集群必须是副本集，因为同步插件读取的是日志文件 1.需要安装pip插件（如果已经安装不需再安装） yum install python-setuptools && easy_install pip 2.在mongo端 安装 mongo-connector。pip install ...
分类：
其他好文 时间：
2017-08-01 14:29:56
阅读次数：
225
个人博客:https://blog.sharedata.info/ 最近需要做mongo之间的同步,因此还是选择之前的工具mongo-connectorgitHub文档：https://github.com/mongodb-labs/mongo-connector/wiki/Usage-with-M ...
分类：
其他好文 时间：
2017-06-08 18:04:22
阅读次数：
131
要求 基于mongo-connector同步数据，必须要求mongodb为复制集架构，原因是此插件是基于oplog操作记录进行数据同步的；而oplog可以说是Mongodb Replication的纽带。具体参见： http://www.mongoing.com/oplog 启动复制集: ./bin ...
分类：
其他好文 时间：
2017-05-12 13:40:29
阅读次数：
2120
1、搭建完毕MongoDb复制集环境 2、开始安装 mongo-connector pip install mongo-connector；基于pip命令，不管是linux 、window 系统默认有python环境； 3、安装 4、输入命令 mongo-connector -m 192.168.1 ...
分类：
数据库 时间：
2017-05-08 14:23:04
阅读次数：
336
# Mongo-Connector 安装及使用文档 > * 工具介绍> * 安装前准备> * 安装步骤> * 命令详解> * 有可能的坑> * 其他文档 ###工具介绍mongo-connector工具创建一个从MongoDB簇到一个或多个目标系统的管道，目标系统包括：Solr，Elasticsea ...
分类：
其他好文 时间：
2016-10-10 13:29:06
阅读次数：
252
Mongo-connector集成MongoDB到Solr实现增量索引配置MongoDB复制集参考：《部署一个用于测试和开发的复制集》安装Solr5.3参考：《在CentOS下安装Solr5.3》安装Python2.7参考：《在CentOS下安装Python2.7》安装pip参考：《在CentOS下安装pip》安装mongo-connector方法一：使用pip..
分类：
数据库 时间：
2015-09-18 18:43:56
阅读次数：
302
有一些东西记录下来，不久之后就会再次用到。
1. 使复杂的嵌套对象从MongoDB更新到Solr
最近使用mongo-connector将MongoDB与Solr打通，对于简单的json，更新是没问题了。这次我们遇到的问题是，如果json中某一个field的值是数组类型，或者有嵌套了一个对象，那该怎么整。比如，我们在MongoDB中插入这么个货：
{
"_id": "55...
分类：
数据库 时间：
2015-05-22 01:56:24
阅读次数：
1471
以下程序使用solr作为搜索模块，搜索关键的第一步是创建索引。索引的产生我们一般是通过数据库中的数据作为数据源。但是数据库中的数据是时时变化的，数据库的数据变化了怎么同步索引到solr呢。以下程序就是解决这个问题。mongo数据库发生变化后通过使用github上开源的项目mongo-connector作为工具，该项目可以时时检测数据库的改变从而和solr配合实现同步索引的目的。
一：配置...
分类：
数据库 时间：
2015-03-08 00:08:10
阅读次数：
303
