0

0

为啥 DeepSeek-3FS元数据无状态,CephFS 的 元数据 要搞得这么复杂?

爱谁谁

爱谁谁

发布时间:2025-11-17 09:42:11

|

982人浏览过

|

来源于php中文网

原创

为啥 DeepSeek-3FS元数据无状态,CephFS 的 元数据 要搞得这么复杂?毛线编织, 手工, 黄色, 针织图案面试官提问:

请描述查找 /mnt/icfs/dir01/file.txt 的过程?


一页纸精简回答:

用户执行 cat /mnt/icfs/dir01/file.txt 后,流程如下:

Bolt.new
Bolt.new

Bolt.new是一个免费的AI全栈开发工具

下载
  1. 客户端通过 FUSE 捕获请求
    系统调用经 VFS 进入内核 FUSE 模块,转发至用户态 Ceph 客户端。

  2. 路径逐级解析,定位 MDS 节点
    CephFS 采用分层目录树,元数据分散在多个 MDS 节点。查找过程为:

    • 客户端连接任意活跃 MDS(如根目录权威 MDS);
    • / 开始逐级查询:mnt → icfs → dir01 → file.txt
    • 每一级目录有“权威 MDS”,当前 MDS 若非管辖者,则转发请求到对应 MDS;
    • 最终获取 file.txt 的 inode 信息。
  3. 获取 inode 后直连 OSD 读取数据
    文件数据以对象形式存储于 RADOS,命名格式为 <inode>.<object_index>,客户端直接与 OSD 通信完成读写,无需经过 MDS。


关键对比:CephFS vs 3FS 元数据架构

维度 CephFS 3FS
元数据存储 目录树结构,MDS 分区管理 KV 存储(如 FoundationDB),扁平化
查找方式 递归转发,依赖 MDS 边界协商 路径转 Key,任意节点可查
一致性 MDS 协同 + 日志事务 KV 数据库原生事务支持
扩展性 动态子树迁移,复杂但成熟 无状态设计,扩展简单
故障恢复 MDS 重启需重建目录视图 节点重启即用,数据一致由 DB 保证
✅ 结论: CephFS 因兼容 POSIX 和历史架构,MDS 复杂但稳定; 3FS 将文件操作转为 KV 查询,元数据无状态,架构更简洁,适合云原生场景。

插播广告:#曙光诚聘分布式存储#

?工作地点:天津
? 招聘岗位:分布式存储研发工程师
✅ 熟悉 Ceph、文件系统、KV 存储优先
? 可内推,联系小王获取通道


为啥 DeepSeek-3FS元数据无状态,CephFS 的 元数据 要搞得这么复杂?
系统架构:多节点集群,模块化设计(MDS、OSD、Client),支持 EB 级扩展

为啥 DeepSeek-3FS元数据无状态,CephFS 的 元数据 要搞得这么复杂?
物理视图:2U 服务器,NVMe+HDD 混合部署,IB 网络互联

为啥 DeepSeek-3FS元数据无状态,CephFS 的 元数据 要搞得这么复杂?
部署配置表(略)

为啥 DeepSeek-3FS元数据无状态,CephFS 的 元数据 要搞得这么复杂?
FUSE 架构:用户态文件系统入口

为啥 DeepSeek-3FS元数据无状态,CephFS 的 元数据 要搞得这么复杂?
Ceph 架构示意

为啥 DeepSeek-3FS元数据无状态,CephFS 的 元数据 要搞得这么复杂?
单机文件查找:多轮磁盘 IO

为啥 DeepSeek-3FS元数据无状态,CephFS 的 元数据 要搞得这么复杂?
3FS 查找:路径转 KV,任意节点处理

为啥 DeepSeek-3FS元数据无状态,CephFS 的 元数据 要搞得这么复杂?
Key 设计:DENT:{parent_inode}:{name} → child_inode

为啥 DeepSeek-3FS元数据无状态,CephFS 的 元数据 要搞得这么复杂?
CephFS 查找链路:MDS 间跳转

为啥 DeepSeek-3FS元数据无状态,CephFS 的 元数据 要搞得这么复杂?
RADOS 对象存储:扁平化结构

为啥 DeepSeek-3FS元数据无状态,CephFS 的 元数据 要搞得这么复杂?
MDS 分布式锁机制

为啥 DeepSeek-3FS元数据无状态,CephFS 的 元数据 要搞得这么复杂?
MDS 状态同步

为啥 DeepSeek-3FS元数据无状态,CephFS 的 元数据 要搞得这么复杂?
MDS 启动流程:协同重建目录视图

为啥 DeepSeek-3FS元数据无状态,CephFS 的 元数据 要搞得这么复杂?
海洋, 日出, 半岛, 法国, 景观, 地平线

热门AI工具

更多
DeepSeek
DeepSeek

幻方量化公司旗下的开源大模型平台

豆包大模型
豆包大模型

字节跳动自主研发的一系列大型语言模型

WorkBuddy
WorkBuddy

腾讯云推出的AI原生桌面智能体工作台

腾讯元宝
腾讯元宝

腾讯混元平台推出的AI助手

文心一言
文心一言

文心一言是百度开发的AI聊天机器人,通过对话可以生成各种形式的内容。

讯飞写作
讯飞写作

基于讯飞星火大模型的AI写作工具,可以快速生成新闻稿件、品宣文案、工作总结、心得体会等各种文文稿

即梦AI
即梦AI

一站式AI创作平台,免费AI图片和视频生成。

ChatGPT
ChatGPT

最最强大的AI聊天机器人程序,ChatGPT不单是聊天机器人,还能进行撰写邮件、视频脚本、文案、翻译、代码等任务。

相关专题

更多
什么是分布式
什么是分布式

分布式是一种计算和数据处理的方式,将计算任务或数据分散到多个计算机或节点中进行处理。本专题为大家提供分布式相关的文章、下载、课程内容,供大家免费下载体验。

407

2023.08.11

分布式和微服务的区别
分布式和微服务的区别

分布式和微服务的区别在定义和概念、设计思想、粒度和复杂性、服务边界和自治性、技术栈和部署方式等。本专题为大家提供分布式和微服务相关的文章、下载、课程内容,供大家免费下载体验。

251

2023.10.07

数据库三范式
数据库三范式

数据库三范式是一种设计规范,用于规范化关系型数据库中的数据结构,它通过消除冗余数据、提高数据库性能和数据一致性,提供了一种有效的数据库设计方法。本专题提供数据库三范式相关的文章、下载和课程。

385

2023.06.29

如何删除数据库
如何删除数据库

删除数据库是指在MySQL中完全移除一个数据库及其所包含的所有数据和结构,作用包括:1、释放存储空间;2、确保数据的安全性;3、提高数据库的整体性能,加速查询和操作的执行速度。尽管删除数据库具有一些好处,但在执行任何删除操作之前,务必谨慎操作,并备份重要的数据。删除数据库将永久性地删除所有相关数据和结构,无法回滚。

2111

2023.08.14

vb怎么连接数据库
vb怎么连接数据库

在VB中,连接数据库通常使用ADO(ActiveX 数据对象)或 DAO(Data Access Objects)这两个技术来实现:1、引入ADO库;2、创建ADO连接对象;3、配置连接字符串;4、打开连接;5、执行SQL语句;6、处理查询结果;7、关闭连接即可。

357

2023.08.31

MySQL恢复数据库
MySQL恢复数据库

MySQL恢复数据库的方法有使用物理备份恢复、使用逻辑备份恢复、使用二进制日志恢复和使用数据库复制进行恢复等。本专题为大家提供MySQL数据库相关的文章、下载、课程内容,供大家免费下载体验。

259

2023.09.05

vb中怎么连接access数据库
vb中怎么连接access数据库

vb中连接access数据库的步骤包括引用必要的命名空间、创建连接字符串、创建连接对象、打开连接、执行SQL语句和关闭连接。本专题为大家提供连接access数据库相关的文章、下载、课程内容,供大家免费下载体验。

329

2023.10.09

数据库对象名无效怎么解决
数据库对象名无效怎么解决

数据库对象名无效解决办法:1、检查使用的对象名是否正确,确保没有拼写错误;2、检查数据库中是否已存在具有相同名称的对象,如果是,请更改对象名为一个不同的名称,然后重新创建;3、确保在连接数据库时使用了正确的用户名、密码和数据库名称;4、尝试重启数据库服务,然后再次尝试创建或使用对象;5、尝试更新驱动程序,然后再次尝试创建或使用对象。

420

2023.10.16

C# ASP.NET Core微服务架构与API网关实践
C# ASP.NET Core微服务架构与API网关实践

本专题围绕 C# 在现代后端架构中的微服务实践展开,系统讲解基于 ASP.NET Core 构建可扩展服务体系的核心方法。内容涵盖服务拆分策略、RESTful API 设计、服务间通信、API 网关统一入口管理以及服务治理机制。通过真实项目案例,帮助开发者掌握构建高可用微服务系统的关键技术,提高系统的可扩展性与维护效率。

76

2026.03.11

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
HTML5/CSS3/JavaScript/ES6入门课程
HTML5/CSS3/JavaScript/ES6入门课程

共102课时 | 7.3万人学习

前端基础到实战(HTML5+CSS3+ES6+NPM)
前端基础到实战(HTML5+CSS3+ES6+NPM)

共162课时 | 21.6万人学习

第二十二期_前端开发
第二十二期_前端开发

共119课时 | 13.3万人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号