登录
联系我们
English
博客
用户案例 解决方案 版本发布 使用技巧 工程技术 公司 全部 归档 RSS
稳定且高性价比的大模型存储：携程 10PB 级 JuiceFS 工程实践

稳定且高性价比的大模型存储：携程 10PB 级 JuiceFS 工程实践
2025-03-10
吴松林
本文将介绍携程如何使用 JuiceFS，以及基于 JuiceFS 实现的关键管理能力，包括多租户权限管理、计费功能、故障排查和监控等方面。同时，还将分享 3 个生产环境中的排障案例。
代码级解析：JuiceFS 元数据、数据存储设计原理

代码级解析：JuiceFS 元数据、数据存储设计原理
2024-11-25
Arthur
为了提升性能，JuiceFS 在数据存储过程中实施了分块策略，chunk、slice 、block 等概念以及他们的工作原理对于新用户来说，并不容易理解。本文转载自社区用户 Arthur ，他将结合代码示例深入解析 JuiceFS 的设计原理，包括数据存储及元数据存储。
SeaweedFS + TiKV 部署保姆级教程

SeaweedFS + TiKV 部署保姆级教程
2024-07-12
杨进豪
在使用 JuiceFS 时，我们选择了 SeaweedFS 作为对象存储，以及 TiKV 作为元数据存储，目前在 SeaweedFS 上已经存储了近1.5PB 的数据。本文将为社区各位用户提供我们的部署实践，并提供详细的命令示例，希望能给社区各位用户一些参考。
基于 JuiceFS 构建高校 AI 存储方案：高并发、系统稳定、运维简单

基于 JuiceFS 构建高校 AI 存储方案：高并发、系统稳定、运维简单
2024-06-26
徐国昊
iSEE 实验室基于 JuiceFS 构建了存储方案结合 TiKV 已成功管理超过 5 亿文件，本文详细介绍了方案的选型与实践历程。
多点 DMALL：大数据存算分离下的存储架构探索与实践

多点 DMALL：大数据存算分离下的存储架构探索与实践
2023-08-16
李铭
本文分享了多点DMALL 存算分离的云原生大数据架构的经验和挑战，并用 JuiceFS 社区版实现了与 Ranger 组件进行权限的对接
思谋科技：构建易于运维的 AI 训练平台

思谋科技：构建易于运维的 AI 训练平台
2023-08-04
孙冀川
伴随着思谋科技业务的发展，数据量持续增长，存储平台面临大图片的高吞吐、超分辨率场景下数千万小文件的 IOPS 问题、运维复杂、运维人员紧张等问题，经过比对 NFS、GlusterFS、Lustre 和 CephFS等文件系统，最终选择了JuiceFS，帮助实现高吞吐易运维存储平台的优化。
之江实验室：如何基于 JuiceFS 为超异构算力集群构建存储层

之江实验室：如何基于 JuiceFS 为超异构算力集群构建存储层
2023-06-09
洪晨
由于算力资源的天然异构性，以及不同技术实现的计算能力往往出自不同的系统架构或指令集，会导致软件不兼容性，从而提高了算力使用的门槛，也使得算力利用率难以有效提高。对面挑战最终选择了 JuiceFS 来优化存储系统，实现了简单的部署、多样元数据引擎选项、跨节点文件原子性和一致性，以及缓存功能，减轻底层…
存算分离实践：JuiceFS 在中国电信日均 PB 级数据场景的应用

存算分离实践：JuiceFS 在中国电信日均 PB 级数据场景的应用
2023-03-17
杨磊
中国电信大数据团队需要处理数据形式多，数据流转过程复杂，涉及 31 省位置，DPI 等数据，大数据平台需加工聚合后再供各业务方使用。面对上述痛点，团队最终选择 Hadoop 3+JuiceFS+TiKV+Ceph 方案进行存算分离改造，打通 Hadoop 生态与 Ceph 对象存储，实现多集群数据…
JuiceFS 元数据引擎选型指南

JuiceFS 元数据引擎选型指南
2022-10-12
Sandy
文件系统 （File System）是常见的存储形式，主要由数据和元数据两部分组成。其中数据是文件的具体内容，通常会直接展现给用户；而元数据是描述数据的数据，用来记录文件属性、目录结构、数据存储位置等。一般来说，元数据有非常鲜明的特点，即占用空间较小，但访问非常频繁。当今的分布式文件系统中，有的（…