来源:达内IT教育-东莞校区
时间:2020/1/17 11:21:19
大数据技术发展到目前已经经历了几个阶段,在很多企业都已经形成了相对成熟稳定的架构,如何了解其发展中的概况。以下是小编为你整理的大数据分析如何学
大数据系统的演化历程包括:解决数据规模问题,解决使用门槛问题,解决计算延迟问题,解决复杂场景问题。
大数据的整体架构可以按以下分层:数据源、数据采集Agent、数据存储、数据计算和数据应用。
数据源从内部来讲一般来自于企业的各个数据中心,外部一般从互联网获取,也可能与其他企业或机构通过交换传输。
数据的采集通常有批处理的传送,或者基于kafka等组件的实时接口,采集要确保准确。
数据的存储方式也包含多种,可以基于hadoop的分布式文件系统,或者基于hbase分布式数据库,也可以基于Kafka。
数据的计算包括离线分析(Hive、Spark、MR),即席查询/多维分析(Presto、SparkSQL、Kylin)和实时计算引擎(Flink、Spark Streaming)。
数据的应用层包括数据报表和离线计算,交互式查询以及BI分析,模型训练以及针对性的广告投放。
大数据对我们有什么影响?
网络发展越来越快,当互联网形成,世界发生变化。十年前的互联网与今天的
互联网不同,今天的互联网将在未来5年陈旧。是什么原因导致的 答案是:
大数据。
什么是大数据?
大数据是一个概念,一种说法,解释就是每天海量的网络,
极大的复杂的数据集合
这些数据以什么单位呈现呢,比如9x10的18次方,大家可以想象庞大数据
为什么我要去了解大数据运营
打个比方,一个公司有生成产品,有销售人员,如果公司生产很多产品,
就像大数据一样,我们应该把这些数据转变为赚钱,
所以需要怎么卖到用户手里,这样大数据才有用
了解运营需要了解大数据从出现到实现赚钱整个过程
需要知道哪些数据对你公司或者个人有用
第二这些数据如何获得
第三获得数据如何处理
第四如何数据如何转换成利润
版权所有:搜学搜课(www.soxsok.com)