Menu

HOME
LIFE
TECHNOLOGY
DIGEST
AUTHOR
Twitter
Facebook
Subscribe

Home Menu

我们的大数据技术栈：Kylin、Flink、ClickHouse、DataLake...

Sen Du | 18 Jun 2021 | 1 min read

Share: Twitter Facebook

Tags: 2021 Kylin Flink ClickHouse DataLake 技术

Sen Du

A free man at the start of a long journey whose conclusion is uncertain.

China Website Twitter Facebook

基于 Kubernetes 的通用云原生大数据架构

随着数据量的不断膨胀，传统的数据处理技术，性能上逐渐不能满足需求。为了解决数据增长带来的挑战，逐渐发展出各种各样的数据处理技术，一定程度上提高了数据处理能力，却带来技术孤岛、数据分散、架构复杂、维护困难的问题，导致数据成本越来越高昂。由于云计算技术的蓬勃发展，“万物上云”成为时代常态，不仅普通系统可以借助云的优势，提高整体能力，数据处理技术更能依托云，提高性能降低成本…

ClickHouse单机 VS ClickHouse集群 VS Kyligence (单表25亿数据)

我们早先的大数据平台基于Kylin商业版，这款大数据系统帮我们减轻了业务系统的压力、提高了业务系统的响应时间、节约了不少存储费用。运行了一年多，没有出现大的生产问题。但是随着对Kylin使用程度的加深，对ClickHouse了解的增多，我逐渐认为ClickHouse可能更适合我们。主要原因…

Theme Attila by zutrinken Published with Ghost