大数据应用

初级数据科学家常犯的十大编程错误

大数据应用初级数据科学家常犯的十大编程错误

数据科学家是“比任何软件工程师更擅长统计方法,又比任何统计学家更擅长软件工程的人”。许多数据科学家学过统计学,但在软件工程方面经验很少。我是一名高级数...

大数据应用 / 2019-04-09

大数据平台常见开源工具

大数据应用大数据平台常见开源工具

此片文章整理出了大数据平台常见的一些开源工具,并且依据其主要功能进行分类,以便大数据学习者及应用者快速查找和参考。...

大数据应用 / 2019-04-08

大数据计算框架Spark之任务调度

大数据应用大数据计算框架Spark之任务调度

Spark有几种资源调度设施。每个Spark Application(SparkContext实例)独立地运行在一组executor进程内。cluster manager为应用间的调度提供设施。在每个Spark应用...

大数据应用 / 2019-04-08

7个已经为预测分析做好准备的项目

大数据应用7个已经为预测分析做好准备的项目

预测分析的先进技术正在得到广泛应用,几乎所有企业都能借此获得强大的预测能力。以下是一些预测分析可以产生影响的关键领域。...

大数据应用 / 2019-04-03

运营商大数据:构建城市大脑的智慧基础

大数据应用运营商大数据:构建城市大脑的智慧基础

3月30日,由中国科学院上海高等研究院、上海浦东临港智慧城市发展中心和阿里云计算有限公司主办的“2019年第一届中国(上海)城市大脑技术国际研讨会”在上海成功...

大数据应用 / 2019-04-02

干货 :送你12个关于数据科学学习的关键提示(附链接)

大数据应用干货 :送你12个关于数据科学学习的关键提示(附链接

根据Glassdoor在美国区的统计,“数据科学家”排名为2019年最诱人的工作。平均基础工资为$108k,工作满意度为4.3–5★,加上被预测有大量空缺,这个结果一点都不...

大数据应用 / 2019-04-01

小心大数据专业,一哄而上后的“一地鸡毛

大数据应用小心大数据专业,一哄而上后的“一地鸡毛

人工智能,大数据,智能机器人,这些专业,今年火遍大江南北。下面是我的一些数据分析,愿能给大家选专业时,带来一点帮助。...

大数据应用 / 2019-03-30

大数据行业有多少种工作岗位,各自的技能能需求是什么?

大数据应用大数据行业有多少种工作岗位,各自的技能能需求是什么

大数据的技术是一个技术群落,想全部学习短期内是不现实的,那么我们怎么样科学的有逻辑有规划的来学习,怎么进行大数据的入门学习呢?我们得了解大数据行业里,...

大数据应用 / 2019-03-29

大数据是大问题?组织需要为数据管理负责

大数据应用大数据是大问题?组织需要为数据管理负责

专业人士了解数据管理的复杂性。现在是让企业决策者对他们在确保适当监督方面的作用负责的时候了。以下是组织在负责任的数据管理方面应优先考虑的三种解决方案。...

大数据应用 / 2019-03-29

分享一些容易被忽视的Hadoop面试题及答案

大数据应用分享一些容易被忽视的Hadoop面试题及答案

大数据已经无处不在,随之而来的就是大数据技术人才的急需,以下是关于大数据技术的面试问题,大家可以再面试前参考。...

大数据应用 / 2019-03-28

大数据的十大流行误区,你中了几个?

大数据应用大数据的十大流行误区,你中了几个?

作为一项不断发展的技术和相对较新的概念,大数据其实存在极少的误区。但是,如果我们不理清这一些极少的误区,那么不正确的理解可能会导致严重后果。...

大数据应用 / 2019-03-28

招聘行业大数据应用场景分析

大数据应用招聘行业大数据应用场景分析

多年前应他人所邀,对其所关注的招聘行业在大数据方面的应用方向进行了简要分析:主要从技术架构与应用模式两个层面进行展开。鄙人水平有限,下文的内容纯属一家...

大数据应用 / 2019-03-27

人人都说大数据,那你知道它的核心价值吗?

大数据应用人人都说大数据,那你知道它的核心价值吗?

近些年来,大数据已成为了大家茶余饭后讨论的热门话题,像数据安全、数据挖掘、数据分析等围绕大数据的一系列技术也深受市场的喜爱。那么,在这样一个满城尽谈大...

大数据应用 / 2019-03-27

中国移动研究院常耀斌:商用大数据平台的研发之路

大数据应用中国移动研究院常耀斌:商用大数据平台的研发之路

我是中国移动研究院的资深架构师常耀斌。今天有幸分享商用大数据平台研发经验,让大数据知识图谱在各位的脑海里转起来,并形成商用产品的作战体系,这是“作为架...

大数据应用 / 2019-03-26

这些数据科学家必备的技能,你拥有哪些?

大数据应用这些数据科学家必备的技能,你拥有哪些?

88%的数据科学家受过高等教育且拥有硕士学位,其中46%拥有博士学位。虽然有些人是例外,但通常需要非常强大的教育背景才能拥有成为数据科学家所必需的知识深度。...

大数据应用 / 2019-03-26

大数据入门学习必读好书推荐,请收藏!

大数据应用大数据入门学习必读好书推荐,请收藏!

为了跟上技术更迭的节奏,不落人后,最好的方式是继续刷新自己的知识,同时保持上手的经验。在这行业中要取得成功,需要完美的项目经验和技能组合。尽管网上有大...

大数据应用 / 2019-03-26

企业监控员工绩效的7个大数据工具

大数据应用企业监控员工绩效的7个大数据工具

大数据正在改变和塑造工作场所。这一点尤其适用于新的专注于数字化、远程团队的工作场所。通过大数据的简化,数据技术对企业工作场所的积极变化和消极变化都有贡...

大数据应用 / 2019-03-26

什么是大数据架构?

大数据应用什么是大数据架构?

大数据架构是用于摄取和处理大量数据(通常称为“大数据”)的总体系统,因此可以针对业务目的进行分析。该架构可视为基于组织业务需求的大数据解决方案的蓝图。大...

大数据应用 / 2019-03-22

从HDFS和MapReduce两方面了解Hadoop

大数据应用从HDFS和MapReduce两方面了解Hadoop

本文主要从 HDFS 和 MapReduce 两个大的方面讲解了 Hadoop 的相关知识,并且编写了一个简单的 MapReduce 程序,最后还深入了解了一下 MapReduce 程序的运行原理...

大数据应用 / 2019-03-21

2019 年,Python 数据科学该怎么学

大数据应用2019 年,Python 数据科学该怎么学

最近看到一篇叫「2019 年学习数据科学是什么感受」的文章,深有感触。作者是 Thomas Nield,美国西南航空公司的商务顾问,著有《Getting Started with SQL (O...

大数据应用 / 2019-03-20

大数据算法及应用场景首篇:统计与分布

大数据应用大数据算法及应用场景首篇:统计与分布

算法是大数据的最核心价值部分。大数据的挖掘是从海量、不完整、噪声、模糊、随机、碎片数据中发现其中隐藏的价值,以及潜在的有用信息和知识的过程。什么情况用...

大数据应用 / 2019-03-20

大数据或将消亡?痛点在哪里?

大数据应用大数据或将消亡?痛点在哪里?

在“大数据或将消亡”的世界里,是时候认真解决复杂、快速、不断发展的大数据栈所带来的挑战了。现在的主要挑战是确保大数据栈可靠、高效地运行,并且大数据团队...

大数据应用 / 2019-03-20

如今的大数据究竟发展到了什么阶段

大数据应用如今的大数据究竟发展到了什么阶段

大数据A5,大数据分析与应用大肆盛行。越来越多的大公司大企业大集团,都越来越重视大数据的影响和作用。可以说,谁想抢得大数据的一手可靠资料,谁就在未来的...

大数据应用 / 2019-03-19

高德地图联手西湖上线一键智慧游 打造中国数字第一景

大数据应用高德地图联手西湖上线一键智慧游 打造中国数字第一景

3月19日,杭州西湖风景名胜区管理委员会与高德地图宣布达成合作,上线“西湖一键智慧游”。高德地图基于其强大的数字化能力,帮助西湖景区管理全面进行数字化升...

大数据应用 / 2019-03-19

大数据产业进入提质增效关键期

大数据应用大数据产业进入提质增效关键期

一时间,仿佛各行各业都在谈大数据,人人都在谈大数据。但也有声音说大数据迎来了“七年之痒”,面对大数据热潮也需要一些“冷思考”。我国大数据究竟发展得如何...

大数据应用 / 2019-03-15

Hadoop大数据通用处理平台

大数据应用Hadoop大数据通用处理平台

Hadoop是一款开源的大数据通用处理平台,其提供了分布式存储和分布式离线计算,适合大规模数据、流式数据(写一次,读多次),不适合低延时的访问、大量的小文件以...

大数据应用 / 2019-03-14

大数据分析师的日常,听起来高大上,其实干的活四个字脏乱差累

大数据应用大数据分析师的日常,听起来高大上,其实干的活四个字

哇,互联网大数据分析师,听起来好高大上哦,其实不然,做的事情都是最底层的事情,打杂的,是业务的仆人,为全公司的人服务。在你的眼里他们待遇好,白领,挣的...

大数据应用 / 2019-03-12

大数据的技术生态?Hadoop、Hive、Spark之间是什么关系?

大数据应用大数据的技术生态?Hadoop、Hive、Spark之间是什么关

大数据本身是个很宽泛的概念,Hadoop生态圈(或者泛生态圈)基本上都是为了处理超过单机尺度的数据处理而诞生的。你可以把它比作一个厨房所以需要的各种工具。锅碗...

大数据应用 / 2019-03-12

社交网络大数据的应用有多大的价值

大数据应用社交网络大数据的应用有多大的价值

移动互联网A5,UGC(用户产生内容)不断发展,社交网络(Social Network)已经不断普及并深入人心,用户可以随时随地在网络上分享内容,由此产生了海量的用户数据...

大数据应用 / 2019-03-11

大数据安全防护方法研究与建议

大数据应用大数据安全防护方法研究与建议

随着数据驱动创新战略的提出,数据已成为一种重要的生产要素,数据安全程度将对企业转型升级的成败产生重大的影响。...

大数据应用 / 2019-03-11

1
3