业界最大数据湖0故障迁上阿里云！数据量达500PB
发布时间：2024-12-27 21:25:49 作者：玩站小弟 
我要评论
我要评论11月6日消息，今天阿里云宣布，小红书技术团队近日完成了一项业界前所未有的壮举，将业界最大数据湖0故障迁移至阿里云。作为中国头部互联网公司之一，小红书月活用户已超过3亿，其数据湖存储了过去11年的所有
。
11月6日消息，业界今天阿里云宣布，最大障迁小红书技术团队近日完成了一项业界前所未有的数据上阿数据壮举，将业界最大数据湖0故障迁移至阿里云。湖故
作为中国头部互联网公司之一，云量达小红书月活用户已超过3亿，业界其数据湖存储了过去11年的最大障迁所有原始数据，包括结构化、数据上阿数据半结构化和非结构化数据。湖故
随着业务的云量达高速增长，小红书对在线处理数据的业界需求不断增加，同时离线处理所积累的最大障迁历史问题也提高了切换的难度。
2023年11月，数据上阿数据小红书共有1500人参与迁云项目——计划一年内，湖故把小红书的云量达数据湖搬上阿里云，彼时即便是业界体量最大的案例，也远小于小红书的本次迁移。
2024年5月，项目正式进入双跑阶段，作为切换到正式环境前最后的测试，是稳定性最大的保障。
在这一阶段，团队需要解决的问题数不胜数，每周平均新增500多个问题。
在阿里云团队的全力保障下，小红书技术团队顺利完成了割接，没有发生任何一个P2及以上故障。
2024年11月，小红书迁云项目正式宣告结束，在没有故障的情况下，迁移数据500PB，任务11万，参与人数1500人，涉及部门40多个。
相关文章
12月23日讯 尤文vs蒙扎第22分钟，蒙扎左路传中，比林德利后点没人防，凌空斩进了！此时比分变为尤文1-1蒙扎。2024-12-27
科乐美公布了根据真岛浩的太空幻想漫画/动画《伊甸星原》改编的同名 3D 动作 RPG 游戏《伊甸星原》Steam页面）的PC 配置要求。这款游戏将于 2025 年推出。官方给出的最低配置为英特尔酷睿2024-12-27
PGC 要打两天，那17…由JR_0v0发表在绝地求生 pubg有没有一种可能17拿的是后两天的剧本，比赛倒数第二天狂拉，比赛最后一天猛猛追分希望PCL的队伍都能打出最好的表现！有没有一种可能17拿的2024-12-27
龙王时刻命我已提策划想好由听说昵称长的很厉害发表在NBA2KOL2 NBA2Konline龙王嚎叫 龙王怪叫 嚎叫怪龙 龙王嚎叫 龙王怪叫 嚎叫怪龙2024-12-27
12月23日讯 巴西球星内马尔更新社媒动态，晒出与DJ互动跳舞的视频。内马尔参加巴西扑克系列赛活动，并在活动中与现场DJ打碟互动跳舞。内马尔去年夏天加盟利雅得新月以来长期伤缺，他在今年10月短暂复出，2024-12-27- 龙王时刻命我已提策划想好由听说昵称长的很厉害发表在NBA2KOL2 NBA2Konline龙王嚎叫 龙王怪叫 嚎叫怪龙 龙王嚎叫 龙王怪叫 嚎叫怪龙2024-12-27
最新评论