研究背景： 微软亚研院，郑宇（关于LBS归纳的博客） 1、Geolife项目，2007，分享个人轨迹到地图上，识别用户交通模式，挖掘位置兴趣点和经典旅行序列，基于历史轨迹推断...
发简信
IP属地：西藏
-
基于GPS轨迹数据的检索、分析和挖掘
-
Spark Structured Streaming 与Kafka的整合
Structured Streaming 与0.10及以上版本的Kafka整合来对Kafka中的读书进行读取和写入操作。 Linking 对于使用SBT/Maven定义的Sc...
-
-
echarts结合百度地图使用--热力图公司的项目要做一个热力图，本来想着是用百度地图直接搞定，但是完成之后，产品经理说要有一个标尺，根据颜色不同来区分热力程度，然后我就一直找插件，但是找了很久，也没有找到，于是就...
-
SparkStreaming之读取Kafka数据本文主要记录使用SparkStreaming从Kafka里读取数据，并计算WordCount 主要内容： 1.本地模式运行SparkStreaming 2.yarn-clie...
-
Spark Streaming WebUI监控，查看Streaming Statistics，Batch（job stage task）摘要：Spark Streaming，yarn，Streaming Statistics，Active Batches，Completed Batches总结一下Spark ...
-
Mac 更新node版本
MAC升级Nodejs和Npm到最新版 第一步，先查看本机node.js版本： node -v 第二步，清除node.js的cache： sudo npm cache cle...
-
Apache Camel 调研什么是Camel？ Camel框架的核心是一个路由引擎，或者更确切地说是一个路由引擎构建器。它允许您定义自己的路由规则，决定从哪个源接收消息，并确定如何处理这些消息并将其发送...
-
Robot Framework官方教程（一）入门
Robot Framework官方教程（一）入门Robot Framework官方教程（二）测试数据语法Robot Framework官方教程（三）创建测试用例Robot F...
-
liquibase数据库工具使用
liquibase安装 [liquibase下载](https://download.liquibase.org/ liquibase) 解压 下载slf4j-api-1.7...
-
Spark 操作hbase(构建一个支持更新和快速检索的数据库)
一、背景 在用户画像的系统中，需要将用户ID的拉通结果表和用户标签的结果表存入Hbase中。组件如下： 因而提出以下几个问题： Spark 作为内存计算引擎强于计算，Hbas...
-
Spark+ignite实现海量数据高性能OLAP海量数据多维分析我这里指的是通过数据库，然后通过某种专业olap工具（例如cognos等）进行灵活查询的行为，这种查询具有以下特定： 1、行为不可控，在模型范围内随意...
-
Spark的那些事(四) java操作kudu全示例(含sparksql)
上文提到，使用kudu等列式存储将数据以update模式写入kudu.下面说一下java操作kudu的相关demo。java操作kudu在git上有相关demo，而spark...
-
单元测试之embedded-kafka
在项目中，团队也使用了Kafka作为消息中间件。 经过了嵌入式redis选型的问题之后，笔者在嵌入式kafka选型时就更倾向于还在持续更新，并且维护人员是一个团队而不是个人或...
-
Centos7下安装kudu简介 kudu官网https://kudu.apache.org/ 准备 直接通过yum install是找不到kudu的源的，在官网安装的页面详细介绍了怎么在各种系统下安装...
-
实现自己的 JDBC 驱动
本文可能是全网最全面最详细的 JDBC 驱动开发教程，转载请注明出处 要自己实现一个 JDBC 驱动无疑是较为困难的，在此之前我查阅了很多资料，也查到了许多正在提问的帖子，最...
-
Rxjava使用详解，强烈推荐最近项目里面有用到Rxjava框架，感觉很强大的巨作，所以在网上搜了很多相关文章，发现一片文章很不错，今天把这篇文章分享给大家，感谢原作者的倾心贡献，那么下面大家来看看这篇文...
-
[Spring Cloud Task]4 Spring Batch批处理探究
概述 本文是Spring Cloud Task系列的第四篇文章，如果你尚未使用过Spring Cloud Task，请 移步spring cloud task1 简介与示例。...
-
微服务核心研究之--编排目录：一、微服务编排的必要性二：3种常见的微服务编排方式1、Orchestration（编制）2、Choreography（编排）3、API网关三、微服务编排的框架（Orch...
