数据运营需要学习些什么？第一步，明确数据分析的目的做数据分析要有明确的目的，为什么要做数据分析，做数据想要得到什么。第二步. 收集数据的方法用原始的方法采集现有的数据，通过加工，汇聚成自己需要的数据。第... / 2020-11-10 10:16:59 / 查看 230 次

ClickHouse作为OLAP分析引擎已经被广泛使用，数据的导入导出是用户面临的第一个问题。由于ClickHouse本身无法很好地支持单条大批量的写入，因此在实时同步数据方面需要借助其他服务协助。本文给出一种结合Canal+Kafk... / 2021-02-22 00:31:33 / 查看 492 次

长文预警！这是一篇数据体系介绍文章，并不涉及开发实践。|0x00 什么是数据数据是一种对客观事物的逻辑归纳，是事实或观察的结果 。随着科学技术的发展，数据的概念内涵越来越广泛包括数值，文本，声音，图像，视频... / 2020-11-23 21:02:44 / 查看 881 次

简介： 本次内容将会介绍使用Flink和Hologres，实现可扩展的、高效的、云原生实时数仓。一、Hologres生态从前面几篇的内容，相信大家已经了解到Hologres是一款兼容PostgreSQL协议的实时交互式分析产品。在生态的兼容... / 2020-11-29 20:44:15 / 查看 596 次

简介： 介绍如何基于Hologres和MaxCompute产品组合，支撑高并发、快响应的数据服务化场景，替换HBase开发模式，实现数据资产服务化在线化能力。也可在PC端打开 https://developer.aliyun.com/topic/download?id=961 ... / 2020-11-29 20:44:16 / 查看 673 次

简介： 近年来，随着数据实时化的诉求加剧，催生了一系列的实时数仓架构，Lambda架构也应运而生，但是随着场景的复杂度和业务多维需求，Lambda架构的痛点也越来越明显。HSAP的理念则是服务分析一体化，在本文中，来... / 2020-11-29 19:49:07 / 查看 662 次

Flink 和 ClickHouse 分别是实时计算和（近实时）OLAP 领域的翘楚，也是近些年非常火爆的开源框架，很多大厂都在将两者结合使用来构建各种用途的实时平台，效果很好。关于两者的优点就不再赘述，本文来简单介绍笔者... / 2020-11-29 19:49:07 / 查看 848 次

回合对战数据指标计算，耗时过长，甚至因为单机内存不足无法满足需求，故考虑将原本单节点的单机ClickHouse改为集群 , 采用分布式表来进行相关计算。环境搭建单机方案集群方案 3分片1复方案对比写入速度对比数据量 :... / 2021-02-12 15:16:03 / 查看 1275 次

基于上一篇Hadoop集群已经搭建完成基础上（需要的朋友可以翻看我的上一篇博文），我们来完成Hbase的搭建工作。一、节点规划二、Zookeeper集群安装由于Hbase集群master的高可用需要依赖Zookeeper集群，所以需要安装Zo... / 2021-02-21 23:52:38 / 查看 1012 次

一、传统数仓痛点1）传统数据仓库痛点目前来说，大数据相关的业务场景一般有实时大屏、实时BI报表、用户画像和监控预警等，如下图所示。实时大屏业务，一般是公司领导层做决策的辅助工具，以及对外成果展示，比如双... / 2021-05-05 23:42:05 / 查看 1066 次