240 发简信
IP属地:浙江
  • mysql+canal+kafka+elasticsearch构建订单搜索平台(canal搭建)

    1.相关背景: 在各个互联网公司的项目架构中。有一个系统必不可少,那就是各类的搜索系统。不管是b端商家端还是c端用户。都有各种各样的搜索需求。我们今天就基于mysql,can...

  • python 消费kafka 写入es 小记

    # -*- coding: utf8 -*- # __author__ = '小红帽' # Date: 2020-05-11 """Naval Fate. Usage: ...

  • 120
    PGSQL+citus 分片实战

    Citus是Postgres的一个扩展。Citus的优势在于:无论你的数据和查询怎么组织,它都可以智能的将你的数据库以及查询分布在多个节点上。Citus可以优化你的每个查询的...

  • DATAX 同步mysql 数据到ES步骤

    DataX 是阿里巴巴集团内被广泛使用的离线数据同步工具/平台,实现包括 MySQL、Oracle、SqlServer、Postgre、HDFS、Hive、ADS、HBase...

  • mysql5.7.29 rpmbuild 2次编译记录

    分配物理内存的70%,ip(后二位)+3306 作为server-id cat mysql57.spec << Name: mysql Version: 5.7...

  • 120
    mysql+canal+kafka+canal-adapter+ES 搭建实时查询平台

    背景:公司订单数据越来越多,因为有海外业务,数据也比较分散,业务查询数据,需要遍历多个库,查询数据慢,需要做一个数仓来统一查询且需要延时控制 架构图如下: 测试环境,资源有限...

  • 多谢,其实不查数据,只是获取字段名称跟类型 对吧😀😀

    使用canal实现增量同步MySQL的数据到ES

    使用canal实现增量同步MySQL的数据 搭建环境 操作系统: CentOS release 6.5 (Final) MySQL版本: 10.0.33-MariaDB-ws...

  • yaml sql 是写出来是为啥

    使用canal实现增量同步MySQL的数据到ES

    使用canal实现增量同步MySQL的数据 搭建环境 操作系统: CentOS release 6.5 (Final) MySQL版本: 10.0.33-MariaDB-ws...