Workflow
《气象服务的“存储密码”:京东云云海如何破解行业难题?》
中金在线·2025-04-09 09:46

有数据表明,同一批GPU集群,存储配置的差异,模型训练速度可能相差3倍。 在大模型训练中,算力一直是核心驱动力。但大模型竞速中还有一个很重要的隐形变量,那就是存储。 墨迹天气原有的存储模式采用"三副本"机制,一份数据需要进行三次备份,这种模式虽然保证了数据的 可靠性,但对物理存储资源的消耗极大,成本高昂。 京东云云海存储通过自研的存算分离架构,为墨迹天气带来了全新的存储模式。热数据采用三副本机制 保存,提供高效的访问性能;冷数据则采用EC机制保存,1.1x副本的超低冗余,有效降低了存储成 本。 云海的存算分离架构,将计算和存储解耦独立,存算资源独立调度,不再有固定配比。这种架构不仅提 高了资源利用率,还提升了系统的可靠性和性能。在引入京东云云海存储后,墨迹天气成功将磁盘利用 率提升至90%,数据可靠性高达99.9999999%。 如今,墨迹天气的气象服务广泛应用于多个领域。例如,在"气象+交通"领域,墨迹天气通过分钟级、 公里级的精细化气象预报,为轨道交通和高速公路提供实时监测和预警服务,助力交通管理部门优化调 度,提升道路安全和畅通。在物流行业,墨迹天气通过精细化的气象监测和灾害预警,帮助物流企业优 化运输 ...