大数据介绍大数据的由来大数据的应用领域大数据方面核心技术有哪些？一、数据采集与预处理Flume NGNDCLogstashSqoop流式计算Zookeeper二、数据存储HBasePhoenixYarnMesosRedisAtlasKudu三、数据清洗OozieAzkaban四、... / 2019-10-10 02:00:00 / 查看 447 次

近几年，大数据、云计算、物联网和人工智能先后走进我们的生活，我个人对这些新兴的前沿产业，也比较感兴趣，尤其是对大数据比较看好，个人认为，最先商业化的一定是数据，所以对数据比较情有独钟，以下是学习大数据... / 2018-09-04 15:45:10 / 查看 236 次

这篇文章探讨的是女性吸引力，但没有通常看到的照片分析之类的东西。相反，我们采用过去的女人图片，分析她在男同胞们头脑里产生的反应。 我们将展示以下显著的现象：公正性警告：我们将把女性作为客观对象来讨论，... / 2018-08-26 00:46:10 / 查看 952 次

Google在2003年到2004年先后发布了被称为大数据三驾马车的三篇重要论文，分别是分布式数据处理MapReduce、分布式数据存储GFS以及列式存储 数据库BigTable。正是谷歌的这三驾马车掀开了大数据时代的序幕，谷歌也毋庸... / 2018-07-17 15:00:26 / 查看 219 次

其实大数据并不是一种概念，而是一种方法论。简单来说，就是通过分析和挖掘全量的非抽样的数据辅助决策。大数据可以实现的应用可以概括为两个方向，一个是精准化定制，第二个是预测。比如像通过搜索引擎搜索同样的内... / 2018-07-12 12:59:38 / 查看 251 次

1、系统建设背景随着经济的发展，城镇建设速度加快，以及互联网的突飞猛进，导致城市中人口密集，流动人口增加，引发了城市建设中的交通、社会治安、重点区域防范、网络犯罪日益突出等城市管理问题，今后现代化城市... / 2019-04-04 03:09:53 / 查看 311 次

1、zookeeper一个分布式的应用程序协调服务，是Hadoop和Hbase的重要组件。它是一个为分布式应用提供一致性服务的工具，让Hadoop集群里面的节点可以彼此协调。ZooKeeper现在已经成为了 Apache的顶级项目，为分布式系... / 2018-08-10 01:26:32 / 查看 288 次

长文预警！这是一篇数据体系介绍文章，并不涉及开发实践。|0x00 什么是数据数据是一种对客观事物的逻辑归纳，是事实或观察的结果 。随着科学技术的发展，数据的概念内涵越来越广泛包括数值，文本，声音，图像，视频... / 2020-11-23 21:02:44 / 查看 881 次

简介： 本次内容将会介绍使用Flink和Hologres，实现可扩展的、高效的、云原生实时数仓。一、Hologres生态从前面几篇的内容，相信大家已经了解到Hologres是一款兼容PostgreSQL协议的实时交互式分析产品。在生态的兼容... / 2020-11-29 20:44:15 / 查看 596 次

简介： 近年来，随着数据实时化的诉求加剧，催生了一系列的实时数仓架构，Lambda架构也应运而生，但是随着场景的复杂度和业务多维需求，Lambda架构的痛点也越来越明显。HSAP的理念则是服务分析一体化，在本文中，来... / 2020-11-29 19:49:07 / 查看 1738 次