海量小文件
海量小文件
该主题还没有描述

文章

存储·2024-03-08
李毕生 · 华为数据存储解决方案中心 擅长领域:存储, 灾备, 双活
30 会员关注
近日,与一金融机构交流,客户反馈迁移老的NAS存储非常慢,时间很长,几千万个小文件,要实现新老设备替换很费劲。之前的方案是见下图,原NAS共享文件挂载给一台服务器,目标存储文件也挂载给这台服务器,然后采用迁移工具通过这台中转服务器不断迁移数据,先全量,再追增量,直到增量数据比较...(more)
浏览636
数据安全·2023-12-20
峨眉山修行者 · 北京 擅长领域:数据库, 关系型数据库, 数据库系统改造
9 会员关注
海量小文件以其目录深且广、文件量大等特点,带来了扫描速度慢、小文件多导致网络交互高、传输效率低备份时间耗时长等痛点。要想解决好海量小文件备份场景,从文件级出发可以通过以下方式提高效率:采用高效扫描算法,综合目录广度和深度的自适应扫描算法;采用多线程,多线程扫描文...(more)
浏览654
taizi5112005 · 资料共享科技集团 擅长领域:云计算, 大数据, 数字化转型
7 会员关注
据IDC预测,到2025年全球数据量将增长至175ZB,其中80%~90%都是非结构化数据,而海量非结构化数据备份恢复是一个世界性的难题。特别是对于含有海量KB级或KB级以下的小文件场景,其备份恢复性能一般只有10+MB/s,对于一个拥有30TB数据量的用户,其执行一次全量备份需要一个月左右的时...(more)
浏览657
分布式存储·2019-09-19
adamshao · XSKY星辰天合 擅长领域:存储, 分布式系统, 分布式架构
3 会员关注
突破存储规模和地域限制的海量非结构化数据存储平台产品定义随着云、大数据、移动互联、社交网络的快速发展,非结构化数据呈现爆炸式的增长。在海量数据的新业务形态下,如何保证存储系统的整体安全性、访问的高效和便捷性?XEOS(XSKYEnterpriseObjectStorage)通过全新的存储技...(more)
浏览4830

    描述

    该主题还没有描述
    X社区推广
  • 提问题