https://luoyuxia.github.io/ Recent content on Yuxia's Blog Hugo zh Sat, 30 May 2026 18:00:00 +0800 https://luoyuxia.github.io/posts/materialize%E7%94%A8-differential-dataflow-%E6%9E%84%E5%BB%BA%E5%AE%9E%E6%97%B6-sql-%E6%95%B0%E6%8D%AE%E5%BA%93/ Sat, 30 May 2026 18:00:00 +0800 https://luoyuxia.github.io/posts/materialize%E7%94%A8-differential-dataflow-%E6%9E%84%E5%BB%BA%E5%AE%9E%E6%97%B6-sql-%E6%95%B0%E6%8D%AE%E5%BA%93/ 系列文章的最后一篇。Materialize 在 timely dataflow 和 differential dataflow 之上构建了一个完整的 SQL 数据库，将 SQL 查询编译为增量维护的 dataflow 图，实现物化视图的实时更新。 https://luoyuxia.github.io/posts/differential-dataflow%E8%AE%A9%E8%AE%A1%E7%AE%97%E5%8F%AA%E5%81%9A%E5%A2%9E%E9%87%8F/ Sat, 30 May 2026 17:00:00 +0800 https://luoyuxia.github.io/posts/differential-dataflow%E8%AE%A9%E8%AE%A1%E7%AE%97%E5%8F%AA%E5%81%9A%E5%A2%9E%E9%87%8F/ 解读 Differential Dataflow 的核心思想：如何将数据表达为变更流，让任意关系代数运算都能增量化执行。这是三篇系列文章的第二篇。 https://luoyuxia.github.io/posts/timely-dataflow%E7%94%A8%E4%B8%80%E4%B8%AA%E8%AE%A1%E7%AE%97%E6%A8%A1%E5%9E%8B%E7%BB%9F%E4%B8%80%E4%B8%89%E7%A7%8D%E6%95%B0%E6%8D%AE%E5%A4%84%E7%90%86%E8%8C%83%E5%BC%8F/ Sat, 30 May 2026 16:00:00 +0800 https://luoyuxia.github.io/posts/timely-dataflow%E7%94%A8%E4%B8%80%E4%B8%AA%E8%AE%A1%E7%AE%97%E6%A8%A1%E5%9E%8B%E7%BB%9F%E4%B8%80%E4%B8%89%E7%A7%8D%E6%95%B0%E6%8D%AE%E5%A4%84%E7%90%86%E8%8C%83%E5%BC%8F/ 解读 Naiad 论文（SOSP 2013 Best Paper），深入分析 Timely Dataflow 如何用一个支持有环图的数据流模型，统一 batch、streaming 和 iterative 三种计算范式。这是三篇系列文章的第一篇。 https://luoyuxia.github.io/posts/%E5%88%97%E5%AD%98-vs-%E8%A1%8C%E5%AD%98%E5%AE%83%E4%BB%AC%E5%88%B0%E5%BA%95%E6%9C%89%E5%A4%9A%E5%A4%A7%E5%B7%AE%E5%88%AB/ Sat, 30 May 2026 14:00:00 +0800 https://luoyuxia.github.io/posts/%E5%88%97%E5%AD%98-vs-%E8%A1%8C%E5%AD%98%E5%AE%83%E4%BB%AC%E5%88%B0%E5%BA%95%E6%9C%89%E5%A4%9A%E5%A4%A7%E5%B7%AE%E5%88%AB/ 解读 SIGMOD 2008 经典论文 Column-Stores vs. Row-Stores: How Different Are They Really?，深入分析列存数据库相对于行存的性能优势究竟来自哪里。 https://luoyuxia.github.io/posts/%E4%BB%8E-agent-%E5%88%B0-code-agentai-%E4%B8%BA%E4%BB%80%E4%B9%88%E7%AA%81%E7%84%B6%E5%83%8F%E5%90%8C%E4%BA%8B%E4%B8%80%E6%A0%B7%E5%B9%B2%E6%B4%BB/ Sat, 23 May 2026 16:00:00 +0800 https://luoyuxia.github.io/posts/%E4%BB%8E-agent-%E5%88%B0-code-agentai-%E4%B8%BA%E4%BB%80%E4%B9%88%E7%AA%81%E7%84%B6%E5%83%8F%E5%90%8C%E4%BA%8B%E4%B8%80%E6%A0%B7%E5%B9%B2%E6%B4%BB/ 从 Agent 到 Code Agent，AI 开始具备交付能力。本文梳理了五篇关键论文——Codex、SWE-bench、SWE-agent、OpenHands、Agentless，拆解代码场景为何成为 agent 最先爆发的领域，以及 AI 如何从’会写代码’演进到’能在真实仓库里执行—验证—修复—交付’的工程闭环。 https://luoyuxia.github.io/posts/%E4%BB%8E-chatgpt-%E5%88%B0-agent%E6%A8%A1%E5%9E%8B%E4%B8%BA%E4%BB%80%E4%B9%88%E5%BC%80%E5%A7%8B%E4%BC%9A%E5%81%9A%E4%BA%8B/ Sat, 23 May 2026 14:00:00 +0800 https://luoyuxia.github.io/posts/%E4%BB%8E-chatgpt-%E5%88%B0-agent%E6%A8%A1%E5%9E%8B%E4%B8%BA%E4%BB%80%E4%B9%88%E5%BC%80%E5%A7%8B%E4%BC%9A%E5%81%9A%E4%BA%8B/ 从 ChatGPT 到 Agent，模型的评价标准从’回答得像不像’变成了’任务到底有没有完成’。本文梳理了这段演进中的五篇关键论文——Chain-of-Thought、ReAct、Toolformer、Reflexion、Self-Refine，拆解模型如何从会回答的问题机器，变成了会推进任务的执行系统。 https://luoyuxia.github.io/posts/%E4%BB%8E-gpt-3-%E5%88%B0-chatgptai-%E4%B8%BA%E4%BB%80%E4%B9%88%E7%AA%81%E7%84%B6%E5%83%8F%E5%8A%A9%E6%89%8B%E4%BA%86/ Sat, 23 May 2026 12:00:00 +0800 https://luoyuxia.github.io/posts/%E4%BB%8E-gpt-3-%E5%88%B0-chatgptai-%E4%B8%BA%E4%BB%80%E4%B9%88%E7%AA%81%E7%84%B6%E5%83%8F%E5%8A%A9%E6%89%8B%E4%BA%86/ 从 GPT-3 到 ChatGPT，真正发生的变化不是’模型更大了’，而是训练目标变了。本文梳理了这段技术演进中的四篇关键论文——GPT-3、Learning to Summarize from Human Feedback、InstructGPT、WebGPT，拆解通用能力如何通过指令微调、人类反馈强化学习和工具增强，被重新塑造成一个可用的助手系统。 https://luoyuxia.github.io/posts/%E5%BD%93-ai-agent-%E9%9C%80%E8%A6%81%E6%96%B0%E9%B2%9C%E4%B8%8A%E4%B8%8B%E6%96%87cocoindex%E4%B8%80%E4%B8%AA%E5%A3%B0%E6%98%8E%E5%BC%8F%E5%A2%9E%E9%87%8F%E6%95%B0%E6%8D%AE%E7%B4%A2%E5%BC%95%E6%A1%86%E6%9E%B6/ Sat, 23 May 2026 12:00:00 +0800 https://luoyuxia.github.io/posts/%E5%BD%93-ai-agent-%E9%9C%80%E8%A6%81%E6%96%B0%E9%B2%9C%E4%B8%8A%E4%B8%8B%E6%96%87cocoindex%E4%B8%80%E4%B8%AA%E5%A3%B0%E6%98%8E%E5%BC%8F%E5%A2%9E%E9%87%8F%E6%95%B0%E6%8D%AE%E7%B4%A2%E5%BC%95%E6%A1%86%E6%9E%B6/ CocoIndex 是一个为 AI Agent 和 LLM 应用设计的声明式增量数据索引框架。Rust 引擎 + Python API，声明目标状态而非编写同步逻辑，只处理变化的增量数据。本文从 What / Why / How 三个维度分析 CocoIndex 的设计哲学和关键技术。 https://luoyuxia.github.io/posts/%E5%BD%93-ai-agent-%E6%9C%89%E4%BA%86%E8%AE%B0%E5%BF%86agentmemory%E4%B8%80%E4%B8%AA%E4%B8%BA%E7%BC%96%E7%A8%8B%E6%99%BA%E8%83%BD%E4%BD%93%E8%AE%BE%E8%AE%A1%E7%9A%84%E6%8C%81%E4%B9%85%E8%AE%B0%E5%BF%86%E5%BC%95%E6%93%8E/ Sat, 23 May 2026 12:00:00 +0800 https://luoyuxia.github.io/posts/%E5%BD%93-ai-agent-%E6%9C%89%E4%BA%86%E8%AE%B0%E5%BF%86agentmemory%E4%B8%80%E4%B8%AA%E4%B8%BA%E7%BC%96%E7%A8%8B%E6%99%BA%E8%83%BD%E4%BD%93%E8%AE%BE%E8%AE%A1%E7%9A%84%E6%8C%81%E4%B9%85%E8%AE%B0%E5%BF%86%E5%BC%95%E6%93%8E/ AgentMemory 是一个为 AI 编程智能体设计的持久记忆引擎。它用四层记忆模型模拟人类认知，通过 BM25 + 向量 + 知识图谱的混合检索实现跨会话记忆，支持 12+ 种 Agent，零外部依赖，本地运行。本文从 What / Why / How 三个维度分析这个项目的设计哲学和关键技术。 https://luoyuxia.github.io/posts/ray%E4%B8%BA-ai-%E5%B7%A5%E4%BD%9C%E8%B4%9F%E8%BD%BD%E8%AE%BE%E8%AE%A1%E7%9A%84%E5%88%86%E5%B8%83%E5%BC%8F-python-%E8%BF%90%E8%A1%8C%E6%97%B6/ Sat, 16 May 2026 12:00:00 +0800 https://luoyuxia.github.io/posts/ray%E4%B8%BA-ai-%E5%B7%A5%E4%BD%9C%E8%B4%9F%E8%BD%BD%E8%AE%BE%E8%AE%A1%E7%9A%84%E5%88%86%E5%B8%83%E5%BC%8F-python-%E8%BF%90%E8%A1%8C%E6%97%B6/ Ray 用一个 @ray.remote 装饰器，把普通 Python 函数变成分布式任务。但这一行装饰器背后，藏着一套精密的分布式系统：层次化 ID 体系、两阶段调度、分布式对象存储、引用计数 GC、对象溢写。本文从源码出发，拆解 Ray 的核心设计。 https://luoyuxia.github.io/posts/%E5%BD%93-ai-agent-%E6%88%90%E4%B8%BA%E8%B0%83%E7%94%A8%E6%96%B9%E6%88%91%E4%BB%AC%E9%9C%80%E8%A6%81%E6%80%8E%E6%A0%B7%E7%9A%84%E6%97%A5%E5%BF%97%E7%B3%BB%E7%BB%9F/ Sun, 26 Apr 2026 16:00:00 +0800 https://luoyuxia.github.io/posts/%E5%BD%93-ai-agent-%E6%88%90%E4%B8%BA%E8%B0%83%E7%94%A8%E6%96%B9%E6%88%91%E4%BB%AC%E9%9C%80%E8%A6%81%E6%80%8E%E6%A0%B7%E7%9A%84%E6%97%A5%E5%BF%97%E7%B3%BB%E7%BB%9F/ 基于 UIUC 论文 AgileLog 的深度分析：当 AI Agent 成为流数据系统的一等公民，底层共享日志需要支持 forking。论文提出 Continuous Fork 新抽象和 Bolt 系统实现，通过 Diskless 架构、HLI、Tail-Only Updates、Lazy Tail Tree 四项技术实现廉价、隔离、可扩展的 fork。 https://luoyuxia.github.io/posts/%E5%BD%93-ai-%E9%81%87%E4%B8%8A%E6%95%B0%E6%8D%AE%E7%AE%A1%E9%81%93daft%E4%B8%80%E4%B8%AA%E5%A4%9A%E6%A8%A1%E6%80%81%E6%97%B6%E4%BB%A3%E7%9A%84%E6%95%B0%E6%8D%AE%E5%BC%95%E6%93%8E/ Sun, 26 Apr 2026 12:00:00 +0800 https://luoyuxia.github.io/posts/%E5%BD%93-ai-%E9%81%87%E4%B8%8A%E6%95%B0%E6%8D%AE%E7%AE%A1%E9%81%93daft%E4%B8%80%E4%B8%AA%E5%A4%9A%E6%A8%A1%E6%80%81%E6%97%B6%E4%BB%A3%E7%9A%84%E6%95%B0%E6%8D%AE%E5%BC%95%E6%93%8E/ Daft 是一个为多模态 AI 工作负载设计的数据引擎。Python API + Rust 引擎，原生支持图片、音频、视频等非结构化数据类型，同一份代码从笔记本无缝扩展到分布式集群。本文从 What / Why / How 三个维度介绍 Daft 的设计哲学和关键技术。 https://luoyuxia.github.io/posts/%E6%B5%85%E6%B5%85%E5%AD%A6%E4%B9%A0%E4%B8%80%E4%B8%8B-mooncake---%E5%A6%82%E4%BD%95%E8%AE%A9-postgres-%E7%9A%84%E6%AF%8F%E4%B8%80%E6%AC%A1%E5%86%99%E5%85%A5iceberg-%E9%83%BD%E8%83%BD%E5%AE%9E%E6%97%B6%E7%9C%8B%E8%A7%81/ Tue, 14 Apr 2026 21:44:51 +0800 https://luoyuxia.github.io/posts/%E6%B5%85%E6%B5%85%E5%AD%A6%E4%B9%A0%E4%B8%80%E4%B8%8B-mooncake---%E5%A6%82%E4%BD%95%E8%AE%A9-postgres-%E7%9A%84%E6%AF%8F%E4%B8%80%E6%AC%A1%E5%86%99%E5%85%A5iceberg-%E9%83%BD%E8%83%BD%E5%AE%9E%E6%97%B6%E7%9C%8B%E8%A7%81/ Mooncake通过GlobalIndex实时生成DeletionVector替代低效EqualityDelete，并结合UnionRead将内存Arrow批次、磁盘Parquet与多级删除信息统一查询，实现Postgres到Iceberg的毫秒级实时同步与分析。 https://luoyuxia.github.io/posts/rust%E7%94%A8%E9%93%BE%E8%A1%A8%E7%90%86%E8%A7%A3%E6%89%80%E6%9C%89%E6%9D%83%E5%80%9F%E7%94%A8%E4%B8%8E-unsafe/ Sun, 12 Apr 2026 15:36:30 +0800 https://luoyuxia.github.io/posts/rust%E7%94%A8%E9%93%BE%E8%A1%A8%E7%90%86%E8%A7%A3%E6%89%80%E6%9C%89%E6%9D%83%E5%80%9F%E7%94%A8%E4%B8%8E-unsafe/ 本文通过五版链表实现，系统演示Rust所有权、借用、生命周期、Rc/RefCell共享与内部可变性，以及unsafe裸指针等核心机制的演进与权衡。 https://luoyuxia.github.io/posts/rust%E5%BC%82%E6%AD%A5%E7%BC%96%E7%A8%8B-+-tokio/ Sun, 12 Apr 2026 12:57:10 +0800 https://luoyuxia.github.io/posts/rust%E5%BC%82%E6%AD%A5%E7%BC%96%E7%A8%8B-+-tokio/ 本文系统讲解Rust异步编程原理与Tokio运行时，涵盖async/await机制、Future状态机实现、Waker唤醒模型、执行器从忙轮询到按需唤醒的演进，以及Tokio适用场景与最佳实践。 https://luoyuxia.github.io/posts/%E7%BB%99-ai-agent-%E7%9A%84%E5%A4%A7%E8%84%91%E8%A3%85%E4%B8%8A-git-%E5%88%86%E6%94%AF%E7%AE%A1%E7%90%86/ Sat, 11 Apr 2026 20:45:01 +0800 https://luoyuxia.github.io/posts/%E7%BB%99-ai-agent-%E7%9A%84%E5%A4%A7%E8%84%91%E8%A3%85%E4%B8%8A-git-%E5%88%86%E6%94%AF%E7%AE%A1%E7%90%86/ 本文介绍agent-memory工具，通过将AI记忆与Git分支一一绑定，实现多任务间上下文自动隔离、错误路径不污染、记忆按需沉淀，大幅提升AI编程的上下文纯净度与协作效率。 https://luoyuxia.github.io/posts/%E4%BB%8E-gpt-1-%E5%88%B0-gpt-3%E7%8E%B0%E4%BB%A3%E5%A4%A7%E8%AF%AD%E8%A8%80%E6%A8%A1%E5%9E%8B%E7%9A%84%E6%8A%80%E6%9C%AF%E5%BA%95%E5%BA%A7%E6%98%AF%E5%A6%82%E4%BD%95%E5%BD%A2%E6%88%90%E7%9A%84/ Sun, 22 Mar 2026 17:04:49 +0800 https://luoyuxia.github.io/posts/%E4%BB%8E-gpt-1-%E5%88%B0-gpt-3%E7%8E%B0%E4%BB%A3%E5%A4%A7%E8%AF%AD%E8%A8%80%E6%A8%A1%E5%9E%8B%E7%9A%84%E6%8A%80%E6%9C%AF%E5%BA%95%E5%BA%A7%E6%98%AF%E5%A6%82%E4%BD%95%E5%BD%A2%E6%88%90%E7%9A%84/ GPT-1至GPT-3逐步确立了现代大语言模型的三大基础：预训练获得通用能力、从文本中学习任务模式、通过prompt实现零微调的任务调用。 https://luoyuxia.github.io/posts/%E6%B5%85%E6%B5%85%E5%AD%A6%E4%B9%A0%E4%B8%80%E4%B8%8B%E5%A4%A7%E8%AF%AD%E8%A8%80%E6%A8%A1%E5%9E%8Bllm%E6%8E%A8%E7%90%86%E6%A1%86%E6%9E%B6---sglang/ Sun, 15 Mar 2026 17:02:28 +0800 https://luoyuxia.github.io/posts/%E6%B5%85%E6%B5%85%E5%AD%A6%E4%B9%A0%E4%B8%80%E4%B8%8B%E5%A4%A7%E8%AF%AD%E8%A8%80%E6%A8%A1%E5%9E%8Bllm%E6%8E%A8%E7%90%86%E6%A1%86%E6%9E%B6---sglang/ 本文系统介绍了大语言模型推理框架SGLang，围绕其如何通过RadixAttention、ContinuousBatching、ChunkedPrefill等五大优化技术，解决KVCache内存瓶颈、Prefill/Decode负载不均及调度低效等核心挑战，显著提升高并发LLM推理效率。 https://luoyuxia.github.io/posts/slatedb--%E9%9D%A2%E5%90%91%E5%AF%B9%E8%B1%A1%E5%AD%98%E5%82%A8%E9%87%8D%E6%96%B0%E8%AE%BE%E8%AE%A1%E7%9A%84-rocksdb/ Fri, 07 Nov 2025 10:13:09 +0800 https://luoyuxia.github.io/posts/slatedb--%E9%9D%A2%E5%90%91%E5%AF%B9%E8%B1%A1%E5%AD%98%E5%82%A8%E9%87%8D%E6%96%B0%E8%AE%BE%E8%AE%A1%E7%9A%84-rocksdb/ SlateDB是基于Rust和LSM-Tree、专为对象存储设计的嵌入式KV数据库，解决RocksDB在远程存储场景下的局限性。 https://luoyuxia.github.io/posts/%E6%B7%B1%E5%85%A5%E7%90%86%E8%A7%A3%E5%88%97%E5%AD%98%E6%A0%BC%E5%BC%8Farrowparquetorc/ Mon, 13 Oct 2025 21:31:10 +0800 https://luoyuxia.github.io/posts/%E6%B7%B1%E5%85%A5%E7%90%86%E8%A7%A3%E5%88%97%E5%AD%98%E6%A0%BC%E5%BC%8Farrowparquetorc/ 本文深入对比Arrow、Parquet、ORC三种列存格式，分析其在压缩、编码、读写性能等方面的差异，总结各自优劣及适用场景。 https://luoyuxia.github.io/posts/rust%E8%AF%AD%E6%B3%95%E6%89%8B%E5%86%8C/ Sat, 27 Sep 2025 21:31:42 +0800 https://luoyuxia.github.io/posts/rust%E8%AF%AD%E6%B3%95%E6%89%8B%E5%86%8C/ 本文系统介绍了Rust语言的核心语法，涵盖变量、数据类型、函数、模式匹配、错误处理、泛型、并发编程及宏等关键特性。 https://luoyuxia.github.io/posts/rust%E5%86%85%E5%AD%98%E7%AE%A1%E7%90%86---no-gc-%E7%9A%84%E9%AD%94%E6%B3%95/ Sat, 27 Sep 2025 20:55:34 +0800 https://luoyuxia.github.io/posts/rust%E5%86%85%E5%AD%98%E7%AE%A1%E7%90%86---no-gc-%E7%9A%84%E9%AD%94%E6%B3%95/ Rust通过所有权、借用和生命周期机制在编译时确保内存安全，无需垃圾回收。 https://luoyuxia.github.io/posts/%E4%B8%80%E7%AF%87%E8%AE%BA%E6%96%87%E5%B8%A6%E4%BD%A0%E5%9B%9E%E9%A1%BE%E6%95%B0%E6%8D%AE%E5%BA%93%E8%BF%87%E5%8E%BB-20-%E5%B9%B4%E7%9A%84%E5%8F%91%E5%B1%95/ Sat, 27 Sep 2025 17:17:26 +0800 https://luoyuxia.github.io/posts/%E4%B8%80%E7%AF%87%E8%AE%BA%E6%96%87%E5%B8%A6%E4%BD%A0%E5%9B%9E%E9%A1%BE%E6%95%B0%E6%8D%AE%E5%BA%93%E8%BF%87%E5%8E%BB-20-%E5%B9%B4%E7%9A%84%E5%8F%91%E5%B1%95/ 该论文回顾数据库20年发展，指出技术螺旋演进，关系模型与SQL仍占主导，新兴系统多被其吸收融合，强调开源组件与标准的重要性。 https://luoyuxia.github.io/posts/redpanda-%E5%92%8C-kafka-%E6%80%A7%E8%83%BD%E5%88%B0%E5%BA%95%E5%A6%82%E4%BD%95---%E6%9D%A5%E8%87%AA-redpanda-%E7%9A%84%E5%AE%98%E6%96%B9%E8%AF%84%E6%B5%8B%E5%92%8C-kafka-%E7%9A%84%E9%9D%9E%E5%AE%98%E6%96%B9%E5%9B%9E%E5%BA%94/ Sat, 27 Sep 2025 12:51:27 +0800 https://luoyuxia.github.io/posts/redpanda-%E5%92%8C-kafka-%E6%80%A7%E8%83%BD%E5%88%B0%E5%BA%95%E5%A6%82%E4%BD%95---%E6%9D%A5%E8%87%AA-redpanda-%E7%9A%84%E5%AE%98%E6%96%B9%E8%AF%84%E6%B5%8B%E5%92%8C-kafka-%E7%9A%84%E9%9D%9E%E5%AE%98%E6%96%B9%E5%9B%9E%E5%BA%94/ RedPanda宣称性能优于Kafka，但其基准测试存在争议，Kafka在多种场景下表现更优，实际性能需结合具体工作负载验证。 https://luoyuxia.github.io/posts/%E6%B5%85%E6%B5%85%E8%81%8A%E4%B8%80%E8%81%8A%E5%9B%9B%E5%A4%A7%E6%B9%96%E6%A0%BC%E5%BC%8F%E7%9A%84%E5%86%85%E9%83%A8%E6%9C%BA%E5%88%B6%E5%92%8C%E4%B8%80%E8%87%B4%E6%80%A7%E6%A8%A1%E5%9E%8B---hudi-%E7%AF%87/ Sat, 13 Sep 2025 20:07:52 +0800 https://luoyuxia.github.io/posts/%E6%B5%85%E6%B5%85%E8%81%8A%E4%B8%80%E8%81%8A%E5%9B%9B%E5%A4%A7%E6%B9%96%E6%A0%BC%E5%BC%8F%E7%9A%84%E5%86%85%E9%83%A8%E6%9C%BA%E5%88%B6%E5%92%8C%E4%B8%80%E8%87%B4%E6%80%A7%E6%A8%A1%E5%9E%8B---hudi-%E7%AF%87/ 文章深入解析了Hudi的内部机制与一致性模型，重点阐述其基于Timeline和FileGroup的读写流程、乐观并发控制及对写入端的时间戳单调性等严格要求，揭示了其复杂性与潜在数据一致性风险。 https://luoyuxia.github.io/posts/%E6%B5%85%E6%B5%85%E8%81%8A%E4%B8%80%E8%81%8A%E5%9B%9B%E5%A4%A7%E6%B9%96%E6%A0%BC%E5%BC%8F%E7%9A%84%E5%86%85%E9%83%A8%E6%9C%BA%E5%88%B6%E5%92%8C%E4%B8%80%E8%87%B4%E6%80%A7%E6%A8%A1%E5%9E%8B---delta-%E7%AF%87/ Sat, 13 Sep 2025 13:16:11 +0800 https://luoyuxia.github.io/posts/%E6%B5%85%E6%B5%85%E8%81%8A%E4%B8%80%E8%81%8A%E5%9B%9B%E5%A4%A7%E6%B9%96%E6%A0%BC%E5%BC%8F%E7%9A%84%E5%86%85%E9%83%A8%E6%9C%BA%E5%88%B6%E5%92%8C%E4%B8%80%E8%87%B4%E6%80%A7%E6%A8%A1%E5%9E%8B---delta-%E7%AF%87/ Delta通过递增版本的DeltaLog记录写入，采用Copy-on-write或Merge-on-read实现数据更新，并利用PutIfAbsent或表锁解决并发写入冲突，其一致性模型基于分区级冲突检测。 https://luoyuxia.github.io/posts/%E6%B5%85%E6%B5%85%E8%81%8A%E4%B8%80%E8%81%8A%E5%9B%9B%E5%A4%A7%E6%B9%96%E6%A0%BC%E5%BC%8F%E7%9A%84%E5%86%85%E9%83%A8%E6%9C%BA%E5%88%B6%E5%92%8C%E4%B8%80%E8%87%B4%E6%80%A7%E6%A8%A1%E5%9E%8B---paimon-%E7%AF%87/ Sun, 07 Sep 2025 11:10:19 +0800 https://luoyuxia.github.io/posts/%E6%B5%85%E6%B5%85%E8%81%8A%E4%B8%80%E8%81%8A%E5%9B%9B%E5%A4%A7%E6%B9%96%E6%A0%BC%E5%BC%8F%E7%9A%84%E5%86%85%E9%83%A8%E6%9C%BA%E5%88%B6%E5%92%8C%E4%B8%80%E8%87%B4%E6%80%A7%E6%A8%A1%E5%9E%8B---paimon-%E7%AF%87/ Paimon通过LSM树和Deletionvector优化主键表读写，多写者不同bucket无一致性问题，但同bucket写入可能导致更新丢失或悬空Deletionvector。 https://luoyuxia.github.io/posts/%E6%B5%85%E6%B5%85%E8%81%8A%E4%B8%80%E8%81%8A%E5%9B%9B%E5%A4%A7%E6%B9%96%E6%A0%BC%E5%BC%8F%E7%9A%84%E5%86%85%E9%83%A8%E6%9C%BA%E5%88%B6%E5%92%8C%E4%B8%80%E8%87%B4%E6%80%A7%E6%A8%A1%E5%9E%8B---iceberg-%E7%AF%87/ Sat, 06 Sep 2025 18:49:52 +0800 https://luoyuxia.github.io/posts/%E6%B5%85%E6%B5%85%E8%81%8A%E4%B8%80%E8%81%8A%E5%9B%9B%E5%A4%A7%E6%B9%96%E6%A0%BC%E5%BC%8F%E7%9A%84%E5%86%85%E9%83%A8%E6%9C%BA%E5%88%B6%E5%92%8C%E4%B8%80%E8%87%B4%E6%80%A7%E6%A8%A1%E5%9E%8B---iceberg-%E7%AF%87/ 本文深入解析Iceberg数据湖格式的内部机制与一致性模型，涵盖写入流程、快照管理、并发控制及冲突检测机制，确保多写者场景下的数据一致性。 https://luoyuxia.github.io/posts/vldb-2025-best-industry-paper---ursa--a-lakehouse-native-data-streaming-engine-for-kafka/ Wed, 03 Sep 2025 10:12:08 +0800 https://luoyuxia.github.io/posts/vldb-2025-best-industry-paper---ursa--a-lakehouse-native-data-streaming-engine-for-kafka/ Ursa是兼容Kafka协议的湖仓原生存算分离流引擎，通过将数据直接写入对象存储并内置Compaction服务，降低存储成本并支持高效分析。 https://luoyuxia.github.io/posts/kip-1150-%E6%B5%85%E6%B5%85%E8%A7%A3%E8%AF%BB%E8%81%8A%E4%B8%80%E8%81%8A-kafka%E7%A4%BE%E5%8C%BA%E7%9A%84%E5%AD%98%E7%AE%97%E5%88%86%E7%A6%BB%E6%8F%90%E6%A1%88/ Fri, 15 Aug 2025 09:35:09 +0800 https://luoyuxia.github.io/posts/kip-1150-%E6%B5%85%E6%B5%85%E8%A7%A3%E8%AF%BB%E8%81%8A%E4%B8%80%E8%81%8A-kafka%E7%A4%BE%E5%8C%BA%E7%9A%84%E5%AD%98%E7%AE%97%E5%88%86%E7%A6%BB%E6%8F%90%E6%A1%88/ KIP-1150提出Kafka存算分离架构，通过将数据存储至远程对象存储（如S3）并采用无Leader设计，降低跨可用区复制成本，提升可扩展性与成本效率。 https://luoyuxia.github.io/posts/lance---ai%E6%97%B6%E4%BB%A3%E7%9A%84%E6%95%B0%E6%8D%AE%E6%A0%BC%E5%BC%8F%E6%A0%87%E5%87%86/ Sat, 26 Apr 2025 18:17:56 +0800 https://luoyuxia.github.io/posts/lance---ai%E6%97%B6%E4%BB%A3%E7%9A%84%E6%95%B0%E6%8D%AE%E6%A0%BC%E5%BC%8F%E6%A0%87%E5%87%86/ Lance是一种专为机器学习和AI优化的列式数据格式，通过摒弃RowGroup、引入DataPage及内置索引，解决Parquet在随机访问、超大列、大宽表支持上的不足，更好适配AI工作负载并对接主流AI生态。 https://luoyuxia.github.io/posts/qcon-%E5%8C%97%E4%BA%AC%E5%8F%82%E4%BC%9A%E6%80%BB%E7%BB%93/ Sat, 12 Apr 2025 23:54:45 +0800 https://luoyuxia.github.io/posts/qcon-%E5%8C%97%E4%BA%AC%E5%8F%82%E4%BC%9A%E6%80%BB%E7%BB%93/ QCon北京大会大模型正在重新定义软件参会总结 https://luoyuxia.github.io/posts/automq-%E5%A6%82%E4%BD%95%E5%AE%9E%E7%8E%B0%E5%AD%98%E7%AE%97%E5%88%86%E7%A6%BB%E7%9A%84-kafka/ Tue, 25 Feb 2025 16:04:12 +0800 https://luoyuxia.github.io/posts/automq-%E5%A6%82%E4%BD%95%E5%AE%9E%E7%8E%B0%E5%AD%98%E7%AE%97%E5%88%86%E7%A6%BB%E7%9A%84-kafka/ AutoMQ是一款开源的，存算分离架构的Kafka发行版，目前在Github上有4.2kstar。AutoMQ是基于Kafka代码改的，只改了底层存储的代码，所以也天然兼容Kafka协议。AutoMQ的核心亮点就是存算分离，本文也主要介绍AutoMQ存算分离的实现。 https://luoyuxia.github.io/posts/kafka-%E5%A4%8D%E5%88%B6%E5%8D%8F%E8%AE%AE%E4%B8%8D%E5%8F%AF%E4%B8%8D%E7%9F%A5%E7%9A%84%E6%8A%80%E6%9C%AF%E5%86%85%E5%B9%95---%E5%85%B3%E4%BA%8E-kafka-%E8%B8%A9%E8%BF%87%E7%9A%84%E5%9D%91/ Sun, 19 Jan 2025 21:32:52 +0800 https://luoyuxia.github.io/posts/kafka-%E5%A4%8D%E5%88%B6%E5%8D%8F%E8%AE%AE%E4%B8%8D%E5%8F%AF%E4%B8%8D%E7%9F%A5%E7%9A%84%E6%8A%80%E6%9C%AF%E5%86%85%E5%B9%95---%E5%85%B3%E4%BA%8E-kafka-%E8%B8%A9%E8%BF%87%E7%9A%84%E5%9D%91/ Kafka通过主从复制的协议对消息进行备份以实现高可靠的分布式系统，但是在如何正确地实现复制的协议中，Kafka作为一款公认的稳定可靠的分布式消息队列，也踩了不少坑。本文首先深入介绍了Kafka的复制协议，然后引出了Kafka在这套复制协议上踩的若干坑和修复方案。通过理解Kafka踩的坑和解决这些问题的思路和方案，希望可以对读者的在分布式系统设计上有所借鉴和启发。 https://luoyuxia.github.io/posts/flink-forward-asia-2024-%E5%8F%82%E4%BC%9A%E6%80%BB%E7%BB%93/ Mon, 09 Dec 2024 21:08:50 +0800 https://luoyuxia.github.io/posts/flink-forward-asia-2024-%E5%8F%82%E4%BC%9A%E6%80%BB%E7%BB%93/ Apache Flink在诞生10周年之际，回顾了其从实验项目到流计算标准的历程，并介绍了Flink 2.0的新特性如存算分离、流批一体及AI集成，同时发布了Paimon 1.0 和Fluss 0.5，旨在提升实时数据分析的效率和灵活性。 https://luoyuxia.github.io/posts/hello-world/ Sun, 01 Dec 2024 00:00:00 +0000 https://luoyuxia.github.io/posts/hello-world/ 博客的第一篇文章，简单介绍一下自己和这个博客。