JuiceFS

62
获赞数
1
关注数
11
粉丝数
IP 属地浙江
2021-08-30 加入
浏览 16k

JuiceFS 是一款面向云环境设计的高性能共享文件系统。提供完备的 POSIX 兼容性,可将海量低价的云存储作为本地磁盘使用,亦可同时被多台主机同时挂载读写。

欢迎关注我们 Juicedata/JuiceFS 哟! (0ᴗ0✿)

188 声望|学徒
云存储
86
数据库
45
运维
32
负载均衡
30
云储存
27
黄金勋章
暂未获得该勋章
如何获得
白银勋章
暂未获得该勋章
如何获得
1 青铜勋章
个人动态
  • 发布了文章6 月 18 日
    JuiceFS PB 级数据同步优化:断点续传、安全与带宽控制 审核中
    在数据迁移、跨云同步与对象存储备份等场景中,juicefs sync 常用于执行大规模数据同步任务。当数据规模达到 TB 到 PB 级、对象数量达到数百万甚至数十亿级时,单次任务执行周期通常会延长到数小时甚至数天。
  • 发布了文章6 月 12 日
    42 倍小文件性能提升、85% 吞吐增长:多云 AI 场景下的 JuiceFS 存储实践
    星辰征途是一家聚焦 AI 搜索与电商场景多模态 AIGC 应用的初创公司,成立两年多,业务主要面向海外市场。公司目前的主要产品包括:Gensmo(gensmo.com) 聚焦时尚穿搭,提供虚拟试穿、造型推荐和商品搜索;ZooClaw(zooclaw.ai) 面向更广泛的生活与工作场景,提供 A...
  • 发布了文章6 月 5 日
    JuiceFS 1.4|大规模元数据操作优化:批量删除、克隆与 Redis 缓存全解析
    在 AI 训练、数据集管理等大规模文件访问场景中,随着文件数量和访问并发增加,元数据层往往更早成为性能瓶颈。无论是删除百万级小文件、克隆大规模数据集,还是高并发目录遍历,元数据引擎的响应能力都会直接影响上层业务效率。
  • 发布了文章5 月 29 日
    共绩科技:跨云弹性推理场景下,模型分发如何跟上算力调度
    共绩科技 2023 年成立于清华,面向 AIGC 企业和科研机构提供算力平台与 MaaS 服务,致力于缓解弹性算力需求与供给之间的错配。平台通过聚合 IDC 闲置资源和边缘资源,以容器化服务为主,为 AI 推理、视频渲染、数据处理和数据合成等波动性场景提供可快速调度的算力资...
  • 发布了文章5 月 22 日
    降低数据存储成本:JuiceFS v1.4 分层存储设计解析
    JuiceFS 社区版 1.4 增强了分层存储能力,支持以单文件或目录为粒度指定对象存储类型,使用户可以在文件系统语义下管理不同数据的存储层级。本文将围绕这一能力,介绍其应用背景、方案演进、使用模型、实现思路以及后续演进方向。
  • 发布了文章5 月 12 日
    AI 战略下架构演进:小米基于 JuiceFS 的统一存储实践
    小米存储团队自 2021 年起推进基于 JuiceFS 的文件存储平台建设,最初主要面向云原生及部分业务场景提供文件存储能力。2024 年,小米提出全面 AI 战略后,原有异构存储体系在选型接入、数据流转和研发运维等方面的问题进一步显现。基于多协议接入、弹性扩展、多云适...
  • 发布了文章4 月 23 日
    分布式架构下配额设计:JuiceFS 的实现与典型案例
    在分布式存储环境中,存储资源通常由多个用户、项目和业务共享使用。如果缺乏有效的约束机制,单一主体的异常写入或误操作,可能迅速消耗大量空间或 inode,进而影响系统稳定性与成本控制。配额管理正是为共享环境建立可预测资源边界的重要手段。
  • 发布了文章4 月 15 日
    浅析 Amazon S3 Files:工作机制、性能边界与 JuiceFS 对比
    4 月 7 日,AWS 官方发布了一项新服务——Amazon S3 Files,允许用户无需搬迁数据,即可将 S3 存储桶作为高性能共享文件系统挂载到计算节点上。
  • 发布了文章4 月 3 日
    一文解锁 JuiceFS 在 AI 场景中的性能优化
    大模型训练的算力规模持续扩张,GPU 算力不断提升的同时,数据访问瓶颈对系统整体性能的影响愈发突出。本地存储性能优异但扩展性有限,对象存储在成本与扩展性上具备优势,却在海量小文件、高并发场景下面临吞吐不足的问题,团队往往需要在二者之间艰难取舍。
  • 发布了文章3 月 27 日
    ARM 架构 JuiceFS 性能优化:基于 MLPerf 的实践与调优
    随着国产芯片与 ARM 生态的快速发展,如何在 ARM 平台上构建高性能存储基础设施成为技术焦点。Linaro 是一个专注于 Arm 生态和开源软件的国际化技术组织,联合产业链上下游厂商解决共性问题,并协助企业客户在开源基础上完成产品化落地。Linaro 团队在 MLPerf Storag...
  • 发布了文章2 月 12 日
    韩国国民搜索 NAVER:使用 JuiceFS 打通 Hadoop 与 Kubernetes 存储实践
    NAVER 是韩国领先的互联网科技公司,运营着韩国最大的搜索引擎,并在人工智能、自动驾驶等高科技领域积极布局。作者 Nam Kyung-wan 来自 NAVER Infra 团队,自 2023 年参与 JuiceFS 社区代码贡献 (GitHub: kyungwan-nam),为 Hadoop 场景提出了多项改进。本文是作者...
  • 发布了文章2 月 4 日
    JuiceFS 企业版 5.3 特性详解:单文件系统支持超 5,000 亿文件,首次引入 RDMA
    JuiceFS 企业版 5.3 近日发布,单文件系统支持超 5,000 亿文件,实现里程碑式突破。此次升级针对元数据多分区架构进行了多项关键优化,并首次引入 RDMA 技术,以提升分布式缓存效率;此外,5.3 版本还增强了可写镜像,为跨桶导入的对象提供数据缓存等多项功能,旨在...
  • 发布了文章1 月 16 日
    仅两台缓存节点,如何支撑 1.45TB/s 大吞吐业务
    随着面向大规模并发读取与数据分发的业务需求增加,如影视渲染等场景,传统存储方案(如 NAS)在并发客户端数量增加时,往往需要投入更多缓存资源;为了提升响应时效,通常还需提前进行数据预热,不仅带来额外的时间开销,也进一步加重了资源负担。
  • 发布了文章1 月 7 日
    3D-AIGC 存储架构演进:从 NFS、GlusterFS 到 JuiceFS
    光影焕像(Lightillusions)是一家专注于空间智能技术,结合 3D 视觉、图形学和生成模型技术,致力于打造创新的 3D 基础模型公司。公司由谭平教授领导,谭教授曾担任阿里巴巴达摩院实验室负责人,目前是香港科技大学的教授,同时担任冯诺伊曼人工智能研究室副院长,...
  • 发布了文章1 月 5 日
    JuiceFS 2025:迈入千亿文件规模,开源第五年持续高速增长
    又到了给大家汇报全年社区工作的时候。2025 年, JuiceFS 企业版发布的第九年,社区版的第五年。这一年,我们专注一如既往,打造一款高效易用的文件系统。
  • 发布了文章2025-12-08
    JuiceFS + MinIO:Ariste AI 量化投资高性能存储实践
    Ariste AI 是一家专注于 AI 驱动交易的公司,业务涵盖自营交易、资产管理、高频做市等多个领域。在量化交易研究中,数据的读取速度和存储效率,往往直接决定了研究迭代的速度。
  • 发布了文章2025-11-20
    NAS、对象存储与 JuiceFS:百亿量化基金的存储选型实践
    在量化投资领域,存储系统的性能与可扩展性是支撑高效研究与计算任务的关键基础。JuiceFS 已广泛应用于多家头部百亿级量化私募机构,在回测与模型训练等核心环节中支撑高性能、低成本、可弹性扩展的存储体系。
  • 发布了文章2025-11-03
    深入解析 JuiceFS 垃圾回收机制
    在使用 JuiceFS 的过程中,用户可能会遇到以下常见问题:删除文件后,为什么对象存储空间未能及时释放?回收站中堆积大量文件,如何高效清理?在短时间内批量删除文件时,删除操作为什么这么缓慢或性能下降?JuiceFS的垃圾回收机制背后的执行流程相对复杂,用户难以...
  • 发布了文章2025-10-17
    基于 JuiceFS 构建 AI 推理:多模态复杂 I/O、跨云与多租户支持
    随着 AI 技术的快速发展,推理服务的需求在市场中不断增长,已成为各行各业广泛关注的关键应用。随着思维链、慢思考等技术的出现,模型的推理能力也在不断的增强。推理能力的实际应用覆盖了更多行业和场景,成为企业部署 AI 基础设施时不可忽视的关键因素。更多企业...
  • 发布了文章2025-09-24
    九识智能:基于 JuiceFS 的自动驾驶多云亿级文件存储
    九识智能 Zelos 是一家专注于自动驾驶与无人配送技术的高新技术企业,具备自动驾驶系统及 AI 芯片的自主研发与规模化落地能力。公司核心产品已在全国 200 多个城市广泛部署,整车销售市占率超过 90%,在中国 L4 城配自动驾驶领域持续领先。