大数据应用

Kaggle 20G数据集强势分析“绝地求生”,科学吃鸡攻略拿走不谢!

大数据应用Kaggle 20G数据集强势分析“绝地求生”,科学吃鸡攻略

在吃鸡的过程中你是否捧着手机战战兢兢,一会儿激动得起飞、一会儿手抖得厉害;是否有过落地3分钟就被毙、跑不过毒倒在半路上失血致死、站在草丛中被不明方向的子...

大数据应用 / 2018-06-08

数据解读:中国高校招生如何不平等?

大数据应用数据解读:中国高校招生如何不平等?

根据清华大学校内论坛的信息,我抓取了2006到2013年间各省(即各考区)就读清华的人数。由于清华在中国高等教育中占据特殊地位,这份数据不失为探索中国高校招生地...

大数据应用 / 2018-06-08

如何克服数据湖与客户互动分析之间的瓶颈

大数据应用如何克服数据湖与客户互动分析之间的瓶颈

创建客户的完整视图,并通过最佳渠道实时互动。当今在商业领域的竞争就是了解你的客户。消费者期待个性化的服务和令人满意的体验,而与他们互动品牌无关的东西都...

大数据应用 / 2018-06-07

大数据存储平台之异构存储实践深度解读

大数据应用大数据存储平台之异构存储实践深度解读

在数据被视为公司资产的A5,每个公司基本都会保存最近数年的数据,而这些数据尤其是冷数据的累积也给存储平台带来了甜蜜的负担。下面就来分享下如何解决这些“...

大数据应用 / 2018-06-07

腾云大学与美世咨询联合发布会圆满举行,全面明确行业定义

大数据应用腾云大学与美世咨询联合发布会圆满举行,全面明确行业

《专业数据人才教育行业生态报告》发布会今日举行,美世咨询中国区副总裁兼战略客户部总经理乔鲁诺先生对专业数据人才市场规模与现状做出介绍;TalkingData CEO...

大数据应用 / 2018-06-06

干货 :基于用户画像的聚类分析

大数据应用干货 :基于用户画像的聚类分析

聚类(Clustering),顾名思义就是“物以类聚,人以群分”,其主要思想是按照特定标准把数据集聚合成不同的簇,使同一簇内的数据对象的相似性尽可能大,同时,使不...

大数据应用 / 2018-06-06

全球十大数据治理解决方案提供商

大数据应用全球十大数据治理解决方案提供商

数据治理主要是企业内部部署的解决方案,该领域的大多数领导者都是一些传统的软件公司,其中大部分的企业已经在某种程度上向云端过渡。而Gartner公司认为,未来...

大数据应用 / 2018-06-06

当开源技术遇上大数据创新

大数据应用当开源技术遇上大数据创新

大数据新兴技术不断涌现,让我们更容易更精准的从海量繁杂的数据中提取有用价值。开源作为一种推动大数据技术创新的新模式,正广受技术开发人员的热爱。...

大数据应用 / 2018-06-06

Kafka解惑之时间轮 (TimingWheel)

大数据应用Kafka解惑之时间轮 (TimingWheel)

Kafka中存在大量的延迟操作,比如延迟生产、延迟拉取以及延迟删除等。Kafka并没有使用JDK自带的Timer或者DelayQueue来实现延迟的功能,而是基于时间轮自定义了一...

大数据应用 / 2018-06-06

数据科学“内战”:统计vs.机器学习

大数据应用数据科学“内战”:统计vs.机器学习

和武侠世界里有少林和武当两大门派一样,数据科学领域也有两个不同的学派:以统计分析为基础的统计学派,以及以机器学习为基础的人工智能派。而本文将从数据科学...

大数据应用 / 2018-06-05

零售业强竞争,大数据如何帮助弱者角逐

大数据应用零售业强竞争,大数据如何帮助弱者角逐

大数据A5,数据分析已经渗透到各行各业,这里也包括零售行业。目前,各大中小型零售商都在努力为客户提供更好的购物体验,用有限的预算为顾客提供满意的服务。...

大数据应用 / 2018-06-05

当大数据满足数据可视化时,如何使数据变得可操作

大数据应用当大数据满足数据可视化时,如何使数据变得可操作

如今,数据科学家可以使用数据可视化来使他们的信息更具可操作性插图、图表、图表和电子表格可以把枯燥的报告变成有启发性的内容,更容易收集洞察力和可操作的结...

大数据应用 / 2018-06-05

深度:Hadoop对Spark五大维度正面比拼报告!

大数据应用深度:Hadoop对Spark五大维度正面比拼报告!

为了增加混淆,Spark和Hadoop经常与位于HDFS,Hadoop文件系统中的Spark处理数据一起工作。但是,它们都是独立个体,每一个体都有自己的优点和缺点以及特定的商业...

大数据应用 / 2018-06-04

伯克利发布迄今为止最大驾驶数据集BDD100K,含10万段视频

大数据应用伯克利发布迄今为止最大驾驶数据集BDD100K,含10万段

日前,伯克利发布了迄今最大、最多样化的带有丰富注释的驾驶视频数据集 BDD100K。大家可以访问 http://bdd-data.berkeley.edu 获取该数据集。同时,他们也在 arX...

大数据应用 / 2018-06-04

用Python将数据写到CSV文件

大数据应用用Python将数据写到CSV文件

我们从网上爬取数据,最后一步会考虑如何存储数据。如果数据量不大,往往不会选择存储到数据库,而是选择存储到文件中,例如文本文件、CSV 文件、xls 文件等。因...

大数据应用 / 2018-06-04

一文理清Apache Spark内存管理脉络

大数据应用一文理清Apache Spark内存管理脉络

本文旨在梳理出 Spark 内存管理的脉络,抛砖引玉,文中阐述的原理基于 Spark 2.1 版本,阅读本文需要读者有一定的 Spark 和 Java 基础,了解 RDD、Shuffle、JVM...

大数据应用 / 2018-06-03

什么是预测分析技术?将数据转化为对未来的见解

大数据应用什么是预测分析技术?将数据转化为对未来的见解

根据Zion Market Research 市场研究机构2017年发布的报告,预测分析技术已获得众多组织的支持,预计到2022年全球市场将达到约109.5亿美元,2016年至2022年期间的...

大数据应用 / 2018-06-01

Facebook科学家:别给算法模型喂垃圾数据了…

大数据应用Facebook科学家:别给算法模型喂垃圾数据了…

在最近的一次谈话中,Facebook人工智能研究科学家Moustapha Cissé告诉我,“你吃什么你就是什么,而我们正在给算法模型喂垃圾食品。”如果你不知道食物中有什么...

大数据应用 / 2018-06-01

Amas:基于大数据平台技术开发的统一监控平台

大数据应用Amas:基于大数据平台技术开发的统一监控平台

Amas是基于大数据平台技术开发的统一监控平台,其特点包括:全维度监控指标,覆盖从操作系统、中间件、大数据平台(Hadoop/Spark/HBase/Kakfa等)到代码级别、可扩...

大数据应用 / 2018-06-01

短视频现状如何?大数据告诉你抖音最火,快手最赚钱!

大数据应用短视频现状如何?大数据告诉你抖音最火,快手最赚钱!

近年来,“短视频”的热度一直高居不下。截止2018年2月,短视频综合平台与短视频聚合平台活跃用户规模分别达到4.035亿人与1.655亿人。短视频对用户的生活方式正...

大数据应用 / 2018-06-01

WOT干货大放送:大数据架构发展趋势及探索实践分享

大数据应用WOT干货大放送:大数据架构发展趋势及探索实践分享

WOT大数据处理技术分会场,PingCAP CTO黄东旭、易观智库CTO郭炜、Mob开发者服务平台技术副总监林荣波、宜信技术研发中心高级架构师王东及商助科技(99Click)顾问...

大数据应用 / 2018-05-31

页面可视化搭建工具的前生今世

大数据应用页面可视化搭建工具的前生今世

页面可视化搭建, 是一个历久弥新的话题. 更广义上讲, 页面是 GUI 的一部分, GUI 的拖拉生成在各种开发工具上很常见, 如 Android Studio, Xcode, Visual Studio...

大数据应用 / 2018-05-31

可视化的三大误区,哪些可视化工具受欢迎?

大数据应用可视化的三大误区,哪些可视化工具受欢迎?

数据可视化主要旨在借助于图形化手段,清晰有效地传达与沟通信息。为了有效地传达思想概念,美学形式与功能需要齐头并进,通过直观地传达关键的方面与特征,从而...

大数据应用 / 2018-05-31

大数据的4大宏观趋势

大数据应用大数据的4大宏观趋势

一系列不同的趋势正在影响大数据举措,但四个总体主题正在成为2018年影响大数据的关键因素:云计算、机器学习、数据治理,以及对速度的需求。...

大数据应用 / 2018-05-30

深入浅出:大妈也能看懂的大数据分布式计算

大数据应用深入浅出:大妈也能看懂的大数据分布式计算

本文是一篇科普性质的文章,希望能通过一个通俗易懂的例子给大家讲清楚大数据分布式计算技术。大数据技术虽然包含存储、计算和分析等一系列庞杂的技术,但分布式...

大数据应用 / 2018-05-30

数据科学目标、挑战以及门派

大数据应用数据科学目标、挑战以及门派

就像“一千个人眼里有一千个哈姆雷特”一样,对于什么是数据科学也有很多种不同的解读,并由此衍生出很多相关概念,比如数据驱动、大数据、分布式计算等。但这...

大数据应用 / 2018-05-30

大数据技术在金融行业的典型应用

大数据应用大数据技术在金融行业的典型应用

从发展特点和趋势来看,“金融云”快速建设落地奠定了金融大数据的应用基础,金融数据与其他跨领域数据的融合应用不断强化,人工智能正在成为金融大数据应用的新...

大数据应用 / 2018-05-29

全球大数据发展的新动向与新趋势

大数据应用全球大数据发展的新动向与新趋势

目前,伴随移动互联网、智能硬件和物联网的快速普及,全球数据总量呈现指数级增长态势,与此同时,机器学习等先进的数据分析技术创新也日趋活跃,使得大数据隐含...

大数据应用 / 2018-05-29

高效的数据压缩编码方式 Protobuf

大数据应用高效的数据压缩编码方式 Protobuf

Protocol buffers 很适合做数据存储或 RPC 数据交换格式。可用于通讯协议、数据存储等领域的语言无关、平台无关、可扩展的序列化结构数据格式 。...

大数据应用 / 2018-05-29

十张图告诉你大数据的增长趋势

大数据应用十张图告诉你大数据的增长趋势

在McKinsey 2018年1月的研究报告 “Analytics Comes of Age”中,以大数据分析为代表的高级分析技术对于销售与营销、研究与开发(R&D)、包括分销在内的供应链管理...

大数据应用 / 2018-05-29

1
3