2020-12-01

云通信眼中的大数据 

大数据这个名词这几年突然之间火了,可以预测未来还会持续火下去。如今和一些朋友聊天,不管他们是不是真的了解大数据,总是会不经意间提到这个概念。其原因无非以下几点:一是人们对新技术的渴求期待;二就是有些人为了显示自己的高端前沿,不管是不是真懂,吹上一通再说;三是部分人的确已经在从事大数据方面的研究和应用。但更多的人其实对大数据的概念还是一知半解。

由于小编目前从事的是云通信行业,而和大数据有着千丝万缕的联系。所以在这谈谈小编对大数据的理解,希望能和大家共同学习、共同进步。

老样子,我们先看一下对于大数据比较官方的定义是什么样的?

大数据(big data),指无法在一定时间范围内用常规软件工具进行捕捉、管理和处理的数据集合,是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样化的信息资产。同时IBM还提出了大数据的5V特点:Volume(大量)、Velocity(高速)、Variety(多样)、Value(低价值密度)、Veracity(真实性)。

接下来谈谈小编的个人看法?

小编认为大数据就是互联网发展到现今阶段的一种必然趋势,完全不需要去过度神话。因为随着云存储,云通信等一系列云计算技术的发展,这些原本很难收集和应用的数据开始较容易被利用起来,为我们创造价值。换句话说大数据其实一直是存在的,即使是在过去,他依然是存在的。

我们可以想象一下,原始社会时期,人类需要靠狩猎和采集维持生存。那么整个地球上的每个人每天通过狩猎获取的猎物数量、种类、等等是不是非常庞大的一个数据?这何尝又不是一种大数据呢?为什么当时没人提出大数据的概念呢?因为受到技术的影响,当时的人类无法收集获取数据,更加无法管理分析和应用,自然也就没有什么大数据的概念了。

那么现在提出的大数据概念是什么呢?其实它的本质是对大数据如何运用的一个完整过程的研究。我们可以把大数据的一个完整研究过程分为以下几个步骤:大数据的采集、大数据存储、大数据加工、大数据应用。

一、大数据采集:大数据采集一般是指对企业经营数据、企业的管理数据和企业外部的用户行为数据等进行收集、获取的流程。可以使用如系统日志、网络爬虫、开放API等采集工具来进行。当然这里需要注意一个隐私问题,要小心在采集数据的过程中侵犯用户隐私信息,引起不必要的麻烦;

二、大数据存储:鉴于大数据的大量、多样性、低密度等特点,不但对数据的存储量有要求,同时对数据的有效管理提出了很高的要求,如存储设备的容量、读写性能、可靠性、扩展性等,还需要充分考虑功能集成度、数据安全性、数据稳定性、系统可扩展性、性能及成本各方面因素。现在大多应用到的存储技术主要是分布式存储;

三、大数据加工:通过大数据的特点我们可以看出海量的数据下,并不是采集获取的所有数据都是真实有用的,而数据的真正价值在于加工,将数据进行二次加工,经过精密分析,才能真正发挥数据的价值和作用。

四、大数据应用:完成采集、存储、加工之后,最终的结果是为了应用,不能很好应用可以说前面的步骤就是无用功。大数据应用环节是指将处理好的数据产品应用到行业中去,为企业和决策者提供决策支持,从而提高运营效率。

下面再具体结合我们SUBMAIL赛邮云通信来聊聊大数据的运用过程。SUBMAIL赛邮云通信作为一个PAAS型平台网站,主要是为政企和个人客户提供、邮件、验证码等在线群发以及触发服务。比如春节即将来临,某位电商企业用户需要我们帮助发送一批营销短信给自己的客户,该用户可以通过自己官网平台的网络日志获取所有客户的手机号码,加以整理,根据客户不同的浏览习惯大致确定他们的类型(如经常浏览服装页面的看作一类型,经常浏览美食页面的看作一类型,然后根据不同类型推销相应的短信内容)。然后通过实时大数据计算后,针对不同用户的浏览习惯、偏好,通过API 将推荐内容发送给特定的用户。

对用户日常的浏览数据,通过大数据计算,得到用户的使用习惯就相当于大数据采集环节;对用户的浏览习惯进行分类相当于大数据的加工;通过SUBMAIL地址簿 API 保存数据的行为可以看作是大数据的存储; 最后通过SUBMAIL API触发推荐信息推送就是一次大数据的具体应用。

所以说大数据离我们并不遥远,也谈不上是多么神秘。但是大数据也的的确确带来了很多的价值。 除了商业价值以外,对于政府和一些公共机构也具备很大的研究价值。2015年奥巴马政府宣布投资2亿美元拉动大数据相关产业发展,将“大数据战略”上升到美国国家领域。而我国政府对于大数据也同样上升到了高度重视的地位。政府部门在获取大数据方面具有一定的先天优势,而且相对于企业体量更大,内容更加丰富。如气象数据、金融数据、信用数据、电力数据、住房数据、海关数据、旅游数据、医疗数据、教育数据等等。如政府针对气象数据,通过大数据的分析,可以及时发现自然灾害、提高应急处理能力和安全防范能力。

SUBMAIL赛邮云通信在17年计划推出大数据服务,完善大数据的采集、计算、和存储等大数据服务。

©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 199,440评论 5 467
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 83,814评论 2 376
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 146,427评论 0 330
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 53,710评论 1 270
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 62,625评论 5 359
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 48,014评论 1 275
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 37,511评论 3 390
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 36,162评论 0 254
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 40,311评论 1 294
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 35,262评论 2 317
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 37,278评论 1 328
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 32,989评论 3 316
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 38,583评论 3 303
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 29,664评论 0 19
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 30,904评论 1 255
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 42,274评论 2 345
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 41,856评论 2 339

推荐阅读更多精彩内容