火山引擎ByteHouse助力大地量子精准、高效预测天气
伴随着气象技术的发展以及城市气象设施的完善,气象监测服务能力在不断提高,实现短期甚至中长期的气象预测成为可能。
短期、长期的天气形势预测,不仅能帮助相关行业、有关部门针对性地进行极端天气防范准备,降低气象灾害带来的影响;还可以提升对风力、水力等可再生能源的利用效率,实现可持续发展,推动环境保护。
而大地量子正是这样一家深耕气象领域的公司。作为定位为AI大模型与数字孪生的公司,大地量子通过对PB级卫星遥感数据、气象数据的AI开发,打造业界领先的天气预测、清洁能源功率预测、绿电交易预测、碳汇碳排等技术产品,并利用自有的AI与超算优势,完成下一代气象预报系统。
(相关资料图)
预测一个地理位置的气象情况,实际是根据周围的观测站点的大量信息,做重合面积的地理信息查询,包括经纬度、温度、湿度等具体数值。除此之外,大自然中变幻莫测的风、雨、云、电,也会为数据的计算能力和实时查询也带来了巨大的难点。具体可以包括以下三点:
第一,地理信息数据处理能力,业务需要丰富的geo函数,用于整合海量的历史气象数据,对目标点位/区域实现天气预测;第二,高时效性查询需求,风场、云层预测等模型需要实时查询能力,快速做到结果反馈;第三,由于查询的接口众多,高并发扩展也是交互式业务不可或缺的能力之一。
如何解决这些痛点?大地量子选择了与火山引擎云原生数据仓库ByteHouse进行合作。
随着字节跳动业务的快速发展,产生了海量的产品使用数据分析需求。这类场景数据指标计算相对复杂、数据总量大且查询模式多变,要求底层数据计算引擎具备高可用性,以及具备应对超大数据规模下交互式实时响应的能力。ByteHouse的极致性能和强大计算能力,正是源于内部场景的多年积累和检验。
在字节跳动内部实践场景和海量数据打磨下的技术能力也复制在大地量子上,并进行了进一步升级。
据介绍,ByteHouse起初是基于开源ClickHouse引擎进行技术架构重构和优化。但相比起原生的ClickHouse,火山引擎ByteHouse基于独家自研的高可用引擎及查询优化器,可以为企业提供快速、稳定、安全的查询服务和数据写入性能。
从技术层面看,ByteHouse 提供了 PB 级数据秒级响应,通过增强的自研引擎,确保95%以上的查询均可在秒级返回,同时通过自研的HAEngine和元数据持久化等优化,ByteHouse提供了新的生产级高可用方案,能够保障其在大数据量场景下依然不会影响到查询分析体验。
大地量子通过将现场采集及大模型生成的气象数据导入到ByteHouse中,通过ByteHouse的多边形计算、方差、平均值等计算函数能力,支撑GEO查询和空间计算,满足其对预测系统以及交互式查询需求。另外,针对大地量子不同阶段数据波动情况,ByteHouse也提出了定制化解决方案。例如,在业务数据低谷期,ByteHouse提供集群节点进行自助升级能力,在保持产品功能更新的同时,能更灵活帮助大地量子控制产品版本,降低运维负担。
在降本增效层面,大地量子也利用ByteHouse进行了极致优化。ByteHouse 能支持用户自定义冷存储的比例,该能力帮助大地量子将查询频次较少的历史数据进行冷存,起到降低存储成本的作用,最终实现查询效率和成本之间的平衡。
目前,在业务实践中,平均查询任务时长始终保持在50毫秒以内,同时可以做到400QPS的峰值并发,火山引擎ByteHouse的高效率表现为大地量子提供了最有力的用数支持。
未来,大地量子将把部分功能作为API接口对外开放,ByteHouse的高查询性能足以满足预测系统及后续交互式查询需求,进一步为大地量子提供了查询并发的保障,为业务扩展提供基础。除此之外,由于ByteHouse 支持无损和自助水平扩容,随着数据量持续增加,大地量子也计划通过 ByteHouse 集群的水平扩容来动态调整和支持计算、存储能力,为高性能查询提供更强保障。
除了在气象领域落地,火山引擎ByteHouse还与中国地震台网中心、海王集团、莉莉丝游戏、极客邦科技等诸多行业企业达成了深度合作,凭借新一代的云原生架构,高效方便的运维模式,以及高性能更灵活的实时查询能力,为企业抓稳数字化机遇建立了夯实的地基,推动企业的数智化转型升级。
标签:
精彩推送
【盈喜】柠萌影视(09857.HK)料上半年转亏为盈净利润1.29亿至1.32亿人民币
柠萌影视(09857 HK)公布,预期集团2023年上半年录得净利润约人民币1 29
新闻快讯
X 关闭
X 关闭
新闻快讯
- 火山引擎ByteHouse助力大地量子精准、高效预测天气
- 民国十年银元价格(2023年08月08日)
- 网易数帆发布有数ChatBI,打造可信AIGC分析新范式
- 黑芝麻:公司的储能电池项目正按原定计划积极有序推进
- 乘联会:8月1日至6日新能源车市场零售8.8万辆 同比增长38%
- 下跌或仅是开端,养殖户的考验远超想象?
- 实力认可!荣联科技集团获评“2023数字化服务领军企业”
- 郑州楼市出现新型“0首付” “高评高贷”风险几何?
- 2023年浙江高温津贴的发放标准几个月 浙江省的高温补贴标准是怎样
- 风险偏好收紧 理财公司主攻“固收+”
- 热闹的Vision Pro开发者实验室,还需要些时间
- 华伍股份(300095):8月10日技术指标出现观望信号-“黑三兵”
- 逆水寒手游职业新手入门推荐 逆水寒手游职业新手职业推荐
- 海马汽车:公司并无您所述相关合作
- 独家 | 三星VR头显曝光,其能否构建XR的“安卓时刻”
- 时隔四年半,万科27亿抢得北京通州地块,释放什么信号?
- 从“销声匿迹”到“排队复活”:被外资雪藏的国产汽水,如何逆风翻盘?
- 卫生球变小是什么物理现象,卫生球变小是什么原因
- 房地产板块异动拉升,深振业A涨停
- 厄瓜多尔总统候选人费尔南多·比利亚维森西奥被枪杀,一名嫌疑人被捕
- 荣泰健康(603579.SH):争取收入比去年实现增长,利润端恢复到21年的水平
- 中航电测收重组问询函 被要求说明定价依据合理性等
- wlk3.35鸟德输出手法(鸟德输出手法)
- 我不配做你男朋友歌曲 我不配做你男朋友
- 蒲察郑留(关于蒲察郑留简述)
- 医药持续反弹,AI集体调整,但今天领涨的医药基金和昨天不太一样
- 吹睡保!蒂格:爵士德隆>黄蜂保罗 德隆+布泽尔>保罗+大卫西
- “中天31”核心设备100%国产 欧美2300亿海上风电开发项目突生变故
- 烟台高新区依法取缔一处超期临建
- 【夏季行动·平安守护】麦积公安深耕“旅游警务”筑牢景区安全防线
- 8月10日上午10:00,嘉定区卫生健康委员会主任方云芬做客“我爱我嘉”民生访谈直播间
- 华特气体(688268.SH):上半年净利润7461.88万元,同比下降36.85%
- 发展环境将进一步改善 中小企业将迎来更多发展机遇
- 陈啸天:锚定ESG,新平衡下的行业发展路径
- 蒸扫帚苗苦累(关于蒸扫帚苗苦累简述)
- 曼德光电-翻转机构Turnover mechanism丨确认申报2023金辑奖·中国汽车新供应链百强
- 【利率债新发公告】23厦门债28今日发布发行公告
- 你知道该怎样补充维生素A和D吗?
- 《异人之下》为什么不更新了?《异人之下》冯宝宝的扮演者是谁?
- 世界刑法规定刑事责任年龄
- 小M的那一年(关于小M的那一年介绍)
- 海南:到2030年全省将累计推广新能源汽车超150万辆
- 最有诡辩才能的三大星座,总是能把人劝服
- 知名品牌紧急道歉:全部下架!并非孤例……
- 1945年,如果美国没有对日本投下原子弹,那二战战局会如何?
- 最高3000元 湖科启动受灾学生紧急资助
- 促消费“组合拳”来袭!景顺长城邓敬东:消费板块或迎配置窗口期
- 夏季“充电刺客”来袭,你会为电费上涨而感到焦虑吗?
- 一加 11木星岩版电池寿命怎么看
- 海报丨推动我军建设高质量发展——六论全面深入学习贯彻习近平强军思想