在现今的社会,大数据的应用越来越彰显他的优势,他占领的领域也越来越大,人工智能、电子商务、O2O、物流配送等,各种利用大数据进行发展的领域正在协助企业不断地发展新业务,创新运营模式。越来越多的政府、企业等机构开始意识到数据正在成为组织最重要的资产,数据分析能力正在成为组织的核心竞争力。

头条推荐

人工智能创新有望解决大数据难题

尽管种种新奇的系统和算法涌入数据科学界,但使用一种有几十年历史,并久经考验的解决方案:专家系统根本不会错。别因为设计的简洁性而误以为它过时或无效,事实恰恰相反。只要你能找到合适的专家,就可以立即搭建起一套专家系统;与此同时,其他数据科学家仍在为压缩分类绞尽脑汁。……>>详细

12款领先的企业级开源软件

没错,你猜对了,企业级开源软件是门大生意。

据Gartner声称,2016年公司花在企业软件上的开支可能会达到3210亿美元,比去年增长4.2%。由于企业级应用软件支出在IT预算中占有更大的份额,许多企业在想方设法降低成本,这导致许多企业考虑开源软件。实际上,Black Duck软件公司开展的一项调查发现,65%的公司在2016年加大了使用开源软件的力度。

由于较低的许可费用,许多开源应用软件提供的总体拥有成本低于相似的专有软件。开源企业级软件还有其他好处,比如能够定制源代码,满足公司的具体需求。此外,许多最佳的开源应用软件提供了闭源应用软件无法提供的功能;一些人认为,由于许多人在积极编写和修订代码,开源提供了更好的安全性。开源还可帮助企业避免厂商锁定现象。

阅读全文

从此,Kubernetes变得简单易用

 Kubernetes,是Google开源的Docker容器集群管理系统,它构建在Docker技术之上,为容器化的应用提供资源调度、部署运行、服务发现、扩容缩容等一整套功能,本质上可看作是基于容器技术的mini-PaaS平台。目前,无论是公有云还是私有云,甚至混合云,Kubernetes将作为一个为任何应用、任何环境的容器管理框架无处不在。正因为如此,受到各大巨头及初创公司的青睐,如Microsoft、VMWare、Red Hat等,纷纷加入Kubernetes的阵营。但是,像单机操作系统Linux一样,Kubernetes虽然开源了,安装和部署却相当复杂,需要专业知识和专业团队。

大数据公司百分点集体和云知声两家公司都在使用Kubernetes。在百度硅谷AI实验室资深科学家王益的协调下,两方合作,成倍地提升了集群利用率和团队工作效率,并且一起开发了开源的Kubernetes“发行版”Sextant——实现几乎零操作的全自动安装和部署Kubernetes集群。目前有多家互联网同仁在准备使用和参与开发。

9月9日,分布式操作系统的“发行版”:Sextant正式发布。百度硅谷AI实验室资深科学家王益、百分点集团技术副总裁刘译璟、普惠金融CTO方亮、云知声联合创始人李霄寒,接受了51CTO记者的采访,对Docker和Kubernets的运维趋势进行了深入解读。

阅读全文

大数据主流工具,你知道几个?

业内有这样一种说法,SQL虽然在大数据分析领域久经考验,但是无奈长江后浪推前浪,和炙手可热的Hadoop相比,SQL已经过时了。这个说法有点言过其实,现在很多的项目都是将Hadoop作为数据存储,然后利用SQL进行前端查询。这说明Hadoop需要一种高级查询语言的支持。 Hadoop MapReduce虽然能够进行数据分析,但是太复杂了。于是,开发人员开发出了类似SQL的Pig和Hive。

大数据时代,我们有很多的查询工具可以选择。虽然SQL占据着绝对优势,但是随着大数据的持续升温,也给了Apache Pig和Hive很大的发挥空间。工欲善其事必先利其器,如果选择了合适的平台和语言,会让数据的提取,处理和分析达到事半功倍的效果。未来,数据会越来越大,数据分析必须要更易操作。处理速度快和操作简单必定成为大数据分析的主流趋势。

Apache Pig,Apache Hive和SQL是当今主流的大数据工具。它们各有优势,下面我们就先来简单介绍Apache Pig、Apache Hive和SQL。

 SQL

阅读全文

五个角度浅析大数据与BI的区别,教你迅速

BI(Business Intelligence),中文翻译是商务智能,是一套完整的解决方案,用来将组织中现有的数据进行有效的整合,快速准确的提供报表并提出决策依据,帮助组织做出明智的业务经营决策。

大数据(Big Data)是从收集的海量数据中,通过算法将这些来自不同渠道、格式的数据进行直接分析,从中寻找到数据之间的相关性。简单而言,大数据更偏重于发现,以及猜测并印证的循环逼近过程。

阅读全文

热点推荐

大数据”时代并不是掌握数据
大数据可以来自方方面面,从生活中的购物交易,到工业上的生产制造;从社交…
大数据实现“0”到“1” 要
大数据有多火?这样的答案可能有千百种,也从反向证明了大数据真的太火,因…
大数据时代 银行信息安全如
互联网的放大效应使公众的容忍度越来越低,尤其是信息安全事件的影响,让银…
亚马逊如何利用大数据练就“
精准的推荐、心水的价格、充足的库存以及高效率的配货,在你还未下单之前,…
有关大数据的6大误区
你的组织是否在考虑分析数据的最佳方式?以下是在你采用大数据分析之前,需…
大数据服务还是那个大数据服
目前“人工智能”无疑是最流行的词之一,“大数据”是自2012年以来的流行词…
大机会?大风险?大忽悠? ——
大数据实际上有三个主要的理解:大数据确实带来了大的机会;大数据也引来了…
Kafka实战:从RDBMS到Hadoop
本文是关于Flume成功应用Kafka的研究案例,深入剖析它是如何将RDBMS实时数…

技术先锋

数据科学家最常用的10种算法
最新的KDnuggets调查统计了数据科学家们实际工作中最常使用的算法,在大多…
利用“大数据、云计算”提高
美国国防部长卡特曾赴硅谷招募顶尖科技人才。近年来的信息大爆炸使得五角大…
7个影响数据分析的数据建模
在这篇文章中,介绍了人们在数据准备分析建模时出现的一些常见的错误。如果…
如何保证Hadoop数据湖不变成
数据湖的提出距今已经有了几年时间了,特别是在当今时代中,基于Hadoop建立…
数据太大?你该了解Hadoop分
大数据时代来了。当所有人都争吵着这件事情的时候,当所有企业都看好大数据…
Spark的三种集群deploy模式
Spark有三种集群部署模式,或者叫做集群管理模式。分别是standalone,YARN…
大数据会撒谎?如何戳破大数
数据科学家使用统计分析工具深度挖掘数据潜在的内容时经常会遭遇到大数据挖…
Spark体系架构必读
最近看到一篇关于Spark架构的博文,作者是 Alexey Grishchenko。看过Alexey…

厂商动态

“云”里“雾”里,重新布局
机智云正式发布新一代机智云4.0物联网开发平台,充分整合物联网、大数据和…
“后大数据时代”,看Talkin
由TalkingData主办的——“T11 2016暨TalkingData智能数据峰会”在北京中国…
领跑物联网数据应用,机智云
机智云4.0物联网开发平台推出 “ECE边缘计算引擎”、“RTBD实时大数据平台…
数据资产时代,看亚信如何布
伴随着大数据时代的悄然来临,对数据的重视提到了前所未有的高度。套上大数…

投    票

专题推荐

目前消费互联网已饱和,互联网创新由商业模式创新向技术创新的转变过程中,技术人员的行业地位将越来越重。
这是一个需要懂技术的时代
目前消费互联网已饱和,互联网创新由商业模式创新向技术创新的转变过程中,技术...
近几年,互联网行业发展风起云涌,“大数据”炙手可热,大数据作为一种重要的战略资产,已经不同程度地渗透
一切尽在大数据
近几年,互联网行业发展风起云涌,“大数据”炙手可热,大数据作为一种重要的战...
尽管云市场一直火热,但随着大数据时代与信息时代的到来,用户对云的需求也不断变化。在信息时代,谁掌握的
公有云频频受疑 黄金时代是
尽管云市场一直火热,但随着大数据时代与信息时代的到来,用户对云的需求也不断...
大数据的时代已经来临,如何利用大数据技术帮助企业拓展业务、提升管理效率,已经成为IT方案提供商追捧的热
大数据世界之旅高端访谈
大数据的时代已经来临,如何利用大数据技术帮助企业拓展业务、提升管理效率,已...

一周排行

留言评论