Welcome to My Wiki

I’m 许飛, 数据工程师，这个是我的Wiki知识库，主要记录大数据生态的学习记录，问题总结，资源整理等。该Wiki是按照 DCMM 的评估标准进行分模块管理的。该Wiki是基于 Quartz构建，通过 Obsidian 进行文档管理的。我从事过阿里云大数据海外项目交付、政务云数据治理，数据平台资产管理等，你可以通过我的博客网站查看我做过的相关项目

Wiki Contents

AREA	INCLUDE
Data Integration	Apache Kafka | Apache Pulsar ｜Apache Airflow ｜ Apache DolphinScheduler | Apache Flume |
Data Store	Apache Hive ｜ClickHouse ｜Data Lake | Relational Database | Hbase | Apache Doris | Apache Paimon
Data Compute	Apache Flink | Apache Spark | Apache Hadoop | Apache Storm
Data Architecture	Lambda Architecture | Kappa Architecture | ZooKeeper
Data Visual	Data Visual Product & Tools | Tableau | FineBI | Grafana
Data Governance	Apache Atlas

Resources

Column

Big Data Resources

• Bigdata DataSet
• Big Data Wiki
• Bigdata Book
• Big Data Team
• Big data Engineer
• Bigdata Product & Tools
• Data Organization

see more other big data resources …

Big Data Concepts

• CAP（CAP theorem）
• CDC（Change Data Capture）
• DFD（Data Flow Diagrams)
• MQ（Message Queue）
• RUP（Relation Unified Process）
• RPC（Remote Procedure Call）

see more other big data concpets…

Python & System Architecture

Column

Python

• DataFrame
• NumPy
• Pandas
• Faker
• Multilab
• Spider

see more other python files…

IDE

• Dataworks
• Jupyter Notebook

see more other system architecture files…