一、先说结论 如果您的StarRocks版本在3.1.4及以下，并且使用了metadata_journal_skip_bad_journal_ids来跳过某个异常的journ...
发简信
IP属地：内蒙古
-
StarRocks元数据无法合并 -
解决Redis缓存数据类型丢失问题
一、背景 在通用的数据开放平台中，支持用户编写基于Groovy脚本的接口，Groovy脚本中可以查询数据库，然后对数据库中的数据进行一些处理。平台支持任何接口都可以启用缓存。...
-
-
一种小资源情况下RDS数据实时同步StarRocks方案
一、背景 目前需要将阿里云RDS数据库的数据同步到自建的StarRocks集群。之前使用DolphinScheduler通过定时调度Datax任务，将数据同步到StarRoc...
-
@e22b8125ef1c 你理解错了，兄弟，slot的数量是不会变得，既然slot数量不变，那么取模就是不会变得，只是一部分slot改变了所在机器节点而已，只是需要改变一部分slot和节点的对应关系就行了，和slot取模是没有关系的
关于redis的几件小事(十)redis cluster模式
redis cluster是redis提供的集群模式。 1.redis cluster的架构 ①可以有多个master node，每个master node 都可以挂载多个s...
-
安装pyspider出现的坑
本文来自微信公众号:coder_xiaobu,欢迎关注 一.安装pyspider 二.启动 三.安装中出现的问题处理 安装的时候出现如下的错误 解决方法：下载安装pycurl...
-
Spring事务的传播级别
一、简单说明 传播属性描述PROPAGATION_REQUIRED如果当前没有事务，就创建一个事务，如果当前存在事务，就加入该事务。PROPAGATION_REQUIRED_...
-
一条路上的咸鱼 ·博主的意思实际就是在业务上进行拆分吧！
比如kafka中，单个partition是可以保证顺序的，但是单个线程消费太慢了。 所以将这个线程仅仅只做一层转发的功能，不做实际的业务功能。从parttion中取出数据然后根据规则，分发到不用的内存队列中。
比如：A-1，B-1，A-2，A-3，B-2。 实际上A、B是可以并行的。只需要在业务上区分即可。
如果你完全无法区分哪一组消息哪个可以并行，哪个不能并行。 那就没救了。只能老实排队一个个来。 -
-
一条路上的咸鱼 ·
上述解决方案中"一个queue对应一个consumer" 即为消费者集群, 作者已经写过这个问题了, 楼主可以仔细思考下.
该方案的关键在于, 有顺序的几条消息中, 相同的id(如订单id)的消息被路由(或hash)到同一个message queue中, 然后, 消费者集群中任意一个node消费(单线程)到这条消息均可实现消息的顺序执行. -
@小道萧兮 因为数据库的锁无法应用到多个服务，或者多个数据库无法使用同一个锁
分布式的几件小事（十）分布式锁是啥？
1.什么是分布式锁 分布式锁是控制分布式系统之间同步访问共享资源的一种方式。在分布式系统中，常常需要协调他们的动作。如果不同的系统或是同一个系统的不同主机之间共享了一个或一组...
-
zookeeper集群搭建与选举原理
一、集群的搭建 1.将zookeeper解压到/opt/module目录下面(zookeeper要下载名称中带-bin的包)。 2.在zookeeper下面创建zkData目...
-
搭建hadoop集群
hadoop集群搭建 一.集群规划 二.集群搭建 1.修改服务器的主机名称、主机名和IP的映射。 1.1 修改主机名称 1.2 修改主机名和IP映射 1.3 重启网络服务，使...
-
@Randolph555 这样是没有办法保证的
关于MQ的几件小事（五）如何保证消息按顺序执行
1.为什么要保证顺序 消息队列中的若干消息如果是对同一个数据进行操作，这些操作具有前后的关系，必须要按前后的顺序执行，否则就会造成数据异常。举例：比如通过mysql binl...
-
@Randolph555 不是这样的，相同的数据已经发送到同一个消息队列里面去了，所以变成了串行的，所以和消费能力是没有关系的。
关于MQ的几件小事（五）如何保证消息按顺序执行
1.为什么要保证顺序 消息队列中的若干消息如果是对同一个数据进行操作，这些操作具有前后的关系，必须要按前后的顺序执行，否则就会造成数据异常。举例：比如通过mysql binl...
-
SpringBoot与缓存、消息、检索、任务、安全与监控
一、Spring抽象缓存 Spring从3.1开始定义了org.springframework.cache.Cache和org.springframework.cache.C...
