rawley

今日网易云☁

文章引用《从你的全世界路过》诗句，描绘故事常在不期而遇中开启，却在分道扬镳中落幕；以“花开两朵，天各一方”点出相遇与离别的无常与遗憾。

情感与回忆

#音乐 #随笔感悟

2025-11-06

18

0

求职online系统升级 V2.0→V3.0

电商数仓项目已接近收尾但尚未完成，作者提前更新简历，整理1段实习经历与3个项目经历；项目完结后将全面复盘并准备面试八股，为后续投递数据开发实习打基础。

求职与面经

#求职指南 #随笔感悟

2025-11-05

35

0

DolphinScheduler 简介与入门

Apache DolphinScheduler 是分布式可扩展的可视化 DAG 工作流调度平台，支持多任务类型与监控告警。介绍其核心架构（Master/Worker/ZK/API/UI）、三种部署模式（单机/伪集群/集群）及安全中心配置要点（租户、用户、队列、告警、环境、令牌）。

大数据组件

#入门指南 #数仓建模

2025-11-05

82

0

随便写写

作者五天未更新，也没认真学习，更多时间用于打球和刷抖音，导致时间碎片化。11月已至，项目遇阻停滞、动力不足，但仍希望提升效率推进进度，争取12月初完成找数开实习的阶段性准备。

日常随笔

#随笔感悟 #求职指南

2025-11-02

24

0

好凶的小茂密🐱

回寝室路上偶遇一只小动物，原本想伸手摸摸，但它的表情有点“蒜鸟”般警惕又可爱，让人瞬间犹豫，只好远远欣赏并记录下这一幕。

日常随笔

#随笔感悟

2025-10-28

22

0

🌏 电商数仓项目全链路架构详解

文章从全局视角梳理数据全链路体系：数据由端与业务系统产生，经 DataX/Maxwell/Flume+Kafka 采集汇聚至 HDFS，再以 Hive 构建 ODS-DWD-DM-ADS 分层数仓，最终同步至 MySQL 并用 BI 可视化，实现数据闭环与业务价值输出。

数仓建模

#数仓建模 #Hive #Hadoop

2025-10-28

80

0

Shuffle 优化 YARN 工作机制

本文梳理 Hadoop MapReduce Shuffle 全流程（Map 溢写排序/合并、Reduce 拉取归并聚合），并给出缓冲区、Combiner、并行拉取与压缩等优化点；同时介绍 YARN 组件与调度器、多队列优势、Benchmark 测试，以及宕机、数据倾斜与资源分配问题的排查方案。

大数据组件

#Hadoop #原理剖析

2025-10-27

75

0

HDFS_读写流程笔记

本文梳理 Hadoop/HDFS 常用端口与核心配置文件作用，详解 HDFS 文件写入（副本分配、管道传输与确认）和读取（就近访问、故障切换）流程，并总结小文件问题危害及 HAR、合并输入、JVM 重用等优化策略与面试要点。

大数据组件

#Hadoop #原理剖析

2025-10-27

75

0

📘 数据仓库建模与维度建模笔记

笔记梳理数据仓库建模意义，比较 Inmon 的 ER 与 Kimball 维度模型；详解事务/周期快照/累积快照三类事实表及可加性；总结维度表设计、星型/雪花模型，以及慢变维快照与拉链表处理。

数仓建模

#数仓建模 #原理剖析

2025-10-24

51

0

睡眠质量难得上90分😙

作者分享近期睡眠状态变好：自6月戴手表以来仅3次睡眠质量超过90分，最近两天都达标。虽然昨晚吃肯德基后有点拉肚子，但“疯狂星期四”量确实很足，吃到后面都有些撑。

日常随笔

#随笔感悟 #数码评测

2025-10-23

19

0