北京2020年10月23日 /美通社/ -- 随着城市化进程加快,经济和社会活动日益频繁,城市交通在人、车、路、环境等方面面临资源失衡、行车难、停车难、拥堵频发等问题,亟需城市交通管理者找到适合的疏解方案。
作为智慧交通领域先行者,浪潮合作伙伴易华录以数据湖为主体,发展大交通,致力于为客户提供智慧大数据解决方案,建设城市数字经济基础设施,努力降低全社会长期保存数据的能耗和成本,构建数字孪生城市,实现数字永生。
智慧交通系统面临海量数据快速读写挑战
在智慧交通大数据业务中,智慧交通系统对各类违法车辆进行实时监控抓拍,快速智能识别各种违法行为,并第一时间通知一线民警对违法车辆进行拦截以及现场处罚,能够有效监督和消除车辆违法行为,净化交通环境。
在易华录智慧交通业务中,广泛使用Redis集群缓存配置下发及中间结果数据,系统对于Redis读写并发性、实时性以及数据持久化要求都较高。Redis是一个高效的key-value内存数据库,基于其高并发下较高的数据查询效率,是易华录智慧交通大数据平台中不可缺少的组件。
图一 智慧交通业务架构
图一为典型的智慧交通业务,系统采集海量的设备、下级平台及视频结构化产生的车辆及人像特征数据,经ETL清洗转换,借助Spark流计算框架,与Redis中缓存的黑白名单数据按照空间、时间及其它逻辑规则,进行比对产生各类告警数据。该业务场景下面临的主要挑战为:
作为流计算的支撑外部数据源,Redis集群中缓存大量的黑白名单配置数据及中间计算结果,单位时间读写并发数较高,该操作需要低延时,其中缓存数据规模在数十亿级别,客户要求读写时延在毫秒级;
Redis中缓存了业务计数等中间计算结果,这些数据通常以分钟/小时粒度周期性同步至关系型及MPP数据库中,因此缓存数据需持久化到硬盘中,防止因集群故障、断电等异常情况,导致数据无法恢复。同时,因为涉及到交管核心业务,当系统异常情况产生后,迫切需要快速恢复集群,并确保异常前后数据一致性,其中数据持久化存储和性能是一个亟需解决的问题。
智慧交通大数据解决方案实现高吞吐率、低延时、高耐用
浪潮与易华录联合推出Redis解决方案,以易华录交通大数据平台为高效数据处理平台,面向城市数据湖、新型智慧城市业务、政府及企业用户提供更高效、更低成本的智慧交通大数据解决方案。
相较于传统DRAM方案,新方案提供了行业领先的高吞吐率、低延时、高服务质量和超高的耐用性,新增内存扩展打破服务器内存容量限制而优化,单机内存容量可以扩展1.5TB,较之前的单机内存容量大幅提升200%。
同时,易华录还实施了多种调优方案。首先在数据读取场景中,通过采用非一致内存访问节点绑定的方式(NUMA进程绑定),避免内存在进行数据存取时,在不同的NUMA节点间切换,以实现更好的读写性能。
其次,新设计的Redis服务获得秒级的故障恢复速度,与之前分钟级的恢复速度相比,提升达几十倍之多。而且还能帮助易华录交通大数据平台的TCO 降低30%。
测试结果显示新方案吞吐能力可提升200倍
为了验证新方案的应用优势,浪潮与易华录共同围绕Redis数据库的常规操作以及用户最关心的业务性能指标进行了测试。测试使用了benchmark工具,选取SET、GET等10余条Redis数据库常用命令,全面覆盖Redis五种数据结构,每个操作执行 32次并发,共640万次的性能测试。测试结果显示新方案在总吞吐能力和延迟上相较于传统的DRAM方案性能有100~200倍的性能提升。
该方案能够有效支撑城市数据湖中海量数据采集、加工、治理、建模各环节对Redis持久化、高效读写等共性需求,与易华录城市大脑、葫芦APP、交通大脑等核心业务存在广泛的契合点,帮助易华录解决智慧交通大数据平台系统中面临的Redis难题。
不知从何时开始,买车变得像是投资期货了。千百年来一手交钱一手交货的老规矩,现在也不好使了。不少车友看到宣传一时心动,激情下单之后却陷入了“购车无现车,变相无补贴”的陷阱,让买新车这
进入12月份后,各品牌相继公布自家的最新销量,可谓“几家欢喜几家愁”。日前,《车壹圈》获取了日系三强销量情况,数据显示:11月份丰田在华销量为16.3万辆,同比增长29.3%,也是
日前,我们通过梅赛德斯—奔驰官方渠道了解到,梅赛德斯-AMG PureSpeed正式发布,作为Mythos series系列的首款量产车型,新车定位将高于迈巴赫,采用了诸多创新设计
10月底,欧盟正式宣布对华电动车加征关税,但到了11月,态度又有所松动。德国大众汽车工人罢工、唐唯实辞任Stellantis CEO、号称“欧洲宁德时代”的北方伏特申请破产....
继第一波悬念图引发广泛热议后,12月9日,长安汽车在其官方社交账号上又放出了一组新车美图。相较于首波“犹抱琵琶半遮面”的悬念图,这次的图片信息量更大,让这款内部代号C798新车瞬间
极越07Passion版,27.99万值不值?
长安启源C798官图发布,分享一下我们在官图上找到的深度信息
等了一天,小米SUV终于来了!工信部在昨晚八点多的时候,公布了第六十九批《新能源汽车车型目录》,而小米SUV赫然在列。咱们就说,工信部的小伙伴都要加班的吗(手动狗头)?几乎是同一时
继第一波悬念图引发广泛热议后,12月9日,长安汽车在其官方社交账号上又放出了一组新车美图。相较于首波“犹抱琵琶半遮面”的悬念图,这次的图片信息量更大,让这款内部代号C798新车瞬间
在漳州碧湖万达,汽车嘉年华不仅便利广大车迷和消费者到场参与,还为朋友们提供了一个购物与购车的双重选择。
随着国内汽车市场家庭观念的加深,MPV市场不再是别克GL8一家独大,不少新兴的MPV车型开始在市场里站稳脚跟。尤其是来自丰田的赛那和格瑞维亚,在今年10月份双双交出8千台以上的销量
随着智能驾驶技术的迅猛发展,越来越多的消费者开始关注车辆的安全性和驾驶体验,特别是在智能驾驶和主动安全功能方面的提升。在这个背景下,问界新M7系列凭借着全面升级的HUAWEI AD
12月9日消息,上汽乘用车正式任命周钘担任MG品牌事业部总经理一职。原MG品牌事业部总经理陆家俊另有任命。 周钘在汽车行业深耕多年,长期服务于上汽通用五菱,在品牌塑造、产品开发、市场营销、渠道拓展等多个核心岗位得到历练。 加入MG之前,周钘的职位是上汽通用五菱品牌与传播总经理。 ......
长安启源C798官宣外观,聊聊定位和品控,针对家庭用户的又一抢眼选择
日前,我们通过一汽-大众官方渠道了解到,新款大众T-ROC探歌正式上市,新车此次共推3个配置,指导价区间为15.89万-17.87万元,新车顶配车型指导价下降0.12万元,并对部分
继第一波悬念图引发广泛热议后,12月9日,长安汽车在其官方社交账号上又放出了一组新车美图。相较于首波“犹抱琵琶半遮面”的悬念图,这次的图片信息量更大,让这款内部代号C798新车瞬间
1、长安启源C798这是对着理想L6来打吗?近日,长安启源发布了全新车型C798的官图,有望于年底正式发布;从设计来看,新车采用了全新的设计风格,前脸是贯穿式灯带和分体式大灯;车身
继第一波悬念图引发广泛热议后,12月9日,长安汽车在其官方社交账号上又放出了一组新车美图。相较于首波“犹抱琵琶半遮面”的悬念图,这次的图片信息量更大,让这款内部代号C798新车瞬间