Cloudera助力上汽大众车辆数据实时监测,实现存算性能升级

图灵汇官网

概览

2023年9月18日,全球知名的企业人工智能与数据分析解决方案提供商Cloudera宣布,已成功携手中国汽车制造业巨头——上汽大众,共同构建了一套先进的车辆数据监控平台。此平台旨在通过上汽大众的车联网业务,满足对智能车辆数据的收集与监控需求,以响应监管要求。

技术应用与效能提升

借助Cloudera Data Platform(CDP),上汽大众实现了车辆数据监控作业的核心性能显著增强。通过部署CDP,上汽大众不仅在存储空间上节省了高达67%,而且优化了数据运营效率,大幅提高了车辆监控效率与车辆数据管理的效能,从而实现了成本的降低与效益的提升。

数据挑战与应对策略

随着新能源汽车市场的迅速扩张,车辆监控产生的数据量呈现指数级增长。同时,国家对新能源汽车监控信息的共享要求更为严格,这对车企的数据处理能力提出了更高要求。面对这一挑战,上汽大众于2017年开始基于大数据技术构建全新的车辆数据监控平台,以支撑新能源车辆的关键业务发展。

平台演进与成果

自2017年起,上汽大众引入Cloudera的CDH,并在2018年建立数据湖。至2022年,仅用六个月便完成数据平台升级至CDP,成为国内汽车行业中首批实施升级的企业之一。平台升级后,HBase存储空间减少约73TB,节省了67%的存储空间,有效提升了车辆数据监控作业效率。此外,集群文件数量减少约8千万,优化了文件管理,核心报表与跑批业务性能平均提升2.5倍,最高可达6.6倍。这些升级确保了上汽大众能够完整存储与深入分析车辆监测数据,符合国家车辆数据管理法规。

应用拓展与业务驱动

基于此数据平台,上汽大众开发了面向车主的上汽大众APP,为车主提供了智能汽车服务,包括远程监控车辆状态、智能导航等。该平台自上线以来,用户量已突破600万。上汽大众数据库大数据平台负责人谢聪表示,通过CDP,上汽大众成功解决了海量数据存储、管理与计算难题,为车联网业务的持续发展奠定了基础。

合作展望

Cloudera大中华区副总裁王刚指出,车联网市场的发展促使行业对智能汽车数据管理尤为重视。通过与Cloudera的合作,上汽大众实现了数据存储与批量作业性能的全面优化,为构建车联网生态系统提供了有力支持。未来,上汽大众将继续深化与Cloudera的合作,充分利用CDP的湖仓一体优势,不断升级监测数据平台,为智能网联汽车服务创新提供坚实的数据支撑。

本文来源: 图灵汇 文章作者: Peakevents
    下一篇

北京商报讯(记者 杨月涵)9月16日,昆仑万维发布消息称,在权威推理榜单Benchmark GSM8K 测试中,昆仑万维自研的通用基座大模型天工大模型以80%的正确率脱颖而出,大幅领先GPT-3.5(57.1%)和LLaMA2-70B(56.8%),标志着天工大模型的推理能力达到全球领先