记者获悉，小红经过一年奋战，书将数据小红书已把业界体量最大的业界数据湖0故障迁上阿里云。据统计，最大至该项目共有1500人参与，湖迁迁移数据500PB。小红

作为中国头部互联网公司之一，书将数据小红书月活已过3亿，业界其数据湖存储了过去11年的最大至所有原始数据，包括结构化、湖迁半结构化和非结构化数据。小红近年来，书将数据随着业务的业界高速增长，小红书在线处理数据的最大至需求不断增加，同时离线处理所积累的湖迁历史问题，也会在未来的切换中带来更多成本与风险。

为此，2023年11月，小红书发起迁云项目——计划一年内，把小红书的数据湖搬上阿里云。

迁移至阿里云上后，数据湖可通过多个OSS Bucket支持纳入统一资源池，实现多个Bucket共享资源池内的OSS吞吐及QPS能力。这样的流控能力在面向小红书复杂业务场景，可灵活调配资源，高效利用吞吐性能，降低不同业务租户间的互相影响。阿里云原生HDFS+DLA元数据可实现无缝对接Hadoop EMR体系，支持元数据线性扩展能力，轻松应对小红书数百PB数据下的元数据线性增长。

较于过往业界体量最大的案例，小红书的本次迁移的数据体量更大。

*注：任务=数据处理过程

（图片来自小红书官方公众号）

据介绍，小红书的迁云项目经历了三个阶段。第一步，项目组首先解决标准问题，然后根据标准进行治理；第二步，完成治理后，项目在2024年5月正式进入双跑阶段。把数据拷贝到阿里云上，两边同时跑数，验证正确性与及时性；第三步，2024年8月，项目结束双跑，进入割接阶段。阿里云团队全程在现场保障，顺利完成了割接。

2024年11月，小红书迁云项目正式宣告结束。在0故障的情况下，迁移数据500PB，任务11万，参与人数1500人，涉及部门40多个。项目涉及产品之多和数据体量之大均创下业界记录。

• ·16岁男孩每天只睡5小时头秃了 医生：睡眠不足 精神压力大导致
• ·近25场仅胜2场！热刺17/18赛季大胜利物浦的首发11人，你还记得吗
• ·伊万科维奇：一切都没那么糟
• ·迎“新”扩“圈” 交通运输成绩亮眼
• ·媒体人谈国产教练去向：李霄鹏很可能加盟青岛海牛，陈洋去三镇
• ·身价5500万！哈兰德&瓜帅赛后和维拉兽腰奥纳纳连续拥抱寒暄
• ·全英巡回演唱🎶太阳报：维拉球迷唱歌嘲讽瓜帅“你明早就下课”
• ·[流言板]状态火热！杰伦
• ·南征北战，双向奔赴😂曼城曼联相差5分，今晚曼联赢球将进前十
• ·劳塔罗：赛季目标意甲冠军+欧冠决赛，我和小因扎吉都被低估了
• ·巴斯滕：马竞赢球当然会高兴，但也应该为踢得如此糟糕感到羞愧
• ·[流言板]湖人首发：詹姆斯、戴维斯、八村垒、克里斯蒂、里夫斯
• ·[流言板]2019年的今天，霍勒迪三兄弟成为历史唯一同时在场的三兄弟
• ·郑钦文追梦之路繁花生
• ·[流言板]Shams：热火与后卫以赛亚
• ·广州一公园被指将枯草喷涂成绿色 真相曝光：肥料增绿剂