SDK0827

一、前言 数据平台已迭代三个版本，从头开始遇到很多常见的难题，终于有片段时间整理一些已完善的文档，在此分享以供所需朋友的实现参考，少走些弯路，在此篇幅中偏重于ES的优化，关于...

SDK0827

概述 canal主要用途是对MySQL数据库增量日志进行解析，提供增量数据的订阅和消费，简单说就是可以对MySQL的增量数据进行实时同步，支持同步到MySQL、Elastic...

SDK0827

作者：张sir来源：京东技术（id：jingdongjishu） 背景 京东到家订单中心系统业务中，无论是外部商家的订单生产，或是内部上下游系统的依赖，订单查询的调用量都非常...

SDK0827

年初最常要做的事情就是各种报告、总结、计划等，所谓一图胜千言，可视化图表如果能用得好，绝对可以做到事半功倍的效果，但是往往领导总是会嫌弃图表做的太丑。 其实普通的柱状图、饼图...

SDK0827

最近公司开发需要用到 IM 系统，自己开发的话需要耗费较多时间和精力。于是我们考虑在开源项目的基础上二次开发，我们对比了较多开源方案之后，选择了 CIM[1] 。 项目简介 ...

SDK0827

写作背景 大家都清楚，日志是 MySQL 数据库的重要组成部分，记录着数据库运行期间各种状态信息。MySQL 日志主要包括「错误日志」、「查询日志」、「慢查询日志」、「二进制...

SDK0827

mall项目中的商品搜索功能，一直都没有做实时数据同步。最近发现阿里巴巴开源的canal可以把MySQL中的数据实时同步到Elasticsearch中，能很好地解决数据同步问...

SDK0827

平时使用Elasticsearch的时候，偶尔会在Kibana中使用Query DSL来查询数据。每次要用到Query DSL时都基本忘光了，需要重新在回顾一遍，最近发现El...

SDK0827

CPU起飞了 最近有朋友在群里反馈，自己服务器的CPU一直处于高占用状态，但用top、ps等命令却一直找不到是哪个进程在占用，怀疑中了挖矿病毒，急的团团转。 根据经验，我赶紧...

SDK0827

目标 在一颗树中快速查找到子孙节点、祖先节点 查找节点A的所有子孙节点 node表的数据 查找节点A的子孙节点，可以用以下3个SQL完成 可以看到随着节点深度的增加，获取子孙...

SDK0827

canal简介 canal主要用途是对MySQL数据库增量日志进行解析，提供增量数据的订阅和消费，简单说就是可以对MySQL的增量数据进行实时同步，支持同步到MySQL、El...