① 大数据,数据挖掘在交通领域有哪些应用
交通领域大数据分析和应用的场景会相当多,这里面要注意两点,一个是大数据本身的技术处理平台,一个是数据分析和挖掘算法。具体场景当时写过点内容,如下:
对于公交线路规划和设计是一个大数据潜在的应用场景,传统的公交线路规划往往需要在前期投入大量的人力进行OD调查和数据收集。特别是在公交卡普及后可以看到,对于OD流量数据完全可以从公交一卡通中采集到相关的交通流量和流向数据,包括同一张卡每天的行走路线和换乘次数等详细信息。对于一个上千万人口的大城市而言,每天的流量数据都会相当大,单一分析一天的数据可能没有相关的价值,而分析一个周期的数据趋势变化则会相当有价值。结合交通流量流向数据趋势变化,可以很好的帮助公交部门进行公交运营线路的调整,换乘站的设计等很多内容。这个方法可能很早就有人想到,但是在公交卡没有普及或海量数据处理和计算能力没有跟上的时候确实很难实际落地操作,而现在则是完全可以落地操作的时候了。
从单一的公交流量流向数据动态分析仅仅是一个方面,大数据往往更加强调相关性分析。比如对于在某一个时间段内公交流量和流向数据发生明细的趋势变化的时候,这个趋势变化的究竟和哪些潜在的大事件或其它影响因素的变化存在相关性,如何去分析这些相关性并做出正确的应对。举个简单的例子来说,当市中心区内的房屋租金持续增长的时候一定会影响到交通流的变化,很多人可能会搬离到更远的地方去居住,自然会形成更多的新增公交流量和流向信息。在《大数据时代》里面谈到更多的会关心相关性而不是因果只是一个方面的内容,实际上往往探索因果仍然很重要,就拿尿片和啤酒的例子来说看起来很简单,但是究竟是谁发现了这种相关性才更加重要,发现相关性的过程往往是从果寻因的过程,否则你也很难真正就确定是具备相关性。
其次就智能交通来说,现在的智慧交通应用往往已经能够很方面的进行整个大城市环境下的交通状况监控并发布相应的道路状况信息。在GPS导航中往往也可以实时的看到相应的拥堵路况等信息,而方便驾驶者选择新的路线。但是这仍然是一种事后分析和处理的机制,一个好的智能导航和交通流诱导系统一定是基于大量的实时数据分析为每个车辆给出最好的导航路线,而不是在事后进行处理。对于智能交通中的交通流分配和诱导等模型很复杂,而且面对大量的实时数据采集,根据模型进行实时分分析和计算,给出有价值的结果,这个在原有的信息技术下确实很难解决。随着物联网和车联网,分布式计算,基于大数据的实时流处理等各种技术的不断城市,智能的交通导航和趋势分析预测将逐步成为可能。
还有一个在国外大片中经常能够看到的就是实时的车辆追踪,随着智慧城市的建设,城市里面到处都是摄像头采集数据,当锁定一个车辆后如何根据车辆的特征或车牌号等信息,实时的追踪到车辆的行走路线和位置。这里面往往需要实时的视频数据采集,采集数据的实时分析和比对,给出相应的参考信息和数据。这个个人认为是具有相当大的难度,要知道对于视频流和图像信息的比对和分析往往更加耗费计算资源,需要更长的计算周期,要从城市成千上万个摄像头里面采集数据并进行实时分析完全满足大数据常说的海量数据,异构数据,速度和价值等四个维度的特征。基于车辆能够做到,基于人当然同样也可以做到,希望这类应用能够逐步的出现,至少现在从硬件水平能力和技术基础上已经具备这种大数据应用的能力。
-
② 城市交通大数据行业发展现状剖析
城市交通大数据行业发展现状剖析
人们在城市中生活每天产生大量的数据,有结构化的也有非结构化的,有一些与交通出行密切相关,而有一些又看似与交通出行没有什么关系,这些数据分布在不同的行政管理部门、互联网公司或者传统运营企业。举个例子来说,随着智慧城市建设热潮,很多城市中已经布满了传感设备(交叉口进口道地磁、电子警察、卡口等),通过地磁可以采集到一定时间间隔交叉口进口道交通流量、速度以及占有率;通过电子警察或卡口可以实时获取经过卡口的车辆车牌号、通过时间以及地点车速,这些数据基本都汇聚在地方交警部门。互联网公司通过为城市居民提供即时通信、导航以及共享服务,可以通过客户终端定位实时获取居民的位置。传统运营企业范围也很广泛,包括了公交公司客运企业、出租车公司、通信运营商等,公交公司和客运企业汇聚了客流数据(IC卡、第三方支付以及零票)、车辆定位数据等,出租车公司汇聚了出租车定位数据、而通信运营商则可以汇聚客户手机MAC地址。上述列举的数据,都可以为城市交通规划、政策制定、设计以及管理提供数据支持。后续笔者会结合自身十几年的理论研究以及交通工程经验,阐述每种数据未来的应用场景及潜在价值。
城市交通系统分析是一个复杂巨系统,尤其是在交通供需矛盾日益突出的当下,如何提高整个交通系统效率、提升居民出行品质是对每个交通管理者、研究者、工程师的挑战。交通科学自诞生之日起,就与数据结下不解之缘,这是一门基于统计学的工程科学。
互联网公司最早认识到了数据在交通领域的应用价值,也极大推动了云计算、大数据等新一代信息技术在交通领域的应用。高德、滴滴拥堵排名、阿里城市大脑就是互联网公司借助自身的数据资源开展交通领域大数据应用的探索。
互联网公司进军传统智能交通行业,一边是互联网公司频频发布基于大数据分析的各种报告,另一边也开始产生了各种质疑的声音。当前城市交通已经有一只脚迈入了大数据时代,而另外一只脚则需要传统交通理论与移动互联数据有效融合进行驱动。拨开当前交通大数据行业的繁华伪装,我们以冷静的眼光去审视,看到当前还存在很多问题,今天就略谈一二:
第一、所谓的交通大数据基本还是针对单一数据源开展分析,分析精度有待进一步提高,应用场景有待进一步丰富。大部分的研究集中在基于车载GPS数据以及视频数据提取车辆描述信息、交通流状态信息,研究拥堵的表征指标以及交警执法应用;
第二、城市交通传感设备布局并未从交通大数据的视角进行优化分析。城市智能交通系统规划一个重要的任务就是研究城市交通采集设备布局方案,目前,较少有人从城市交通规划与管理智库顶层设计的高度,对检测器的分布进行研究。此外,提高传感设备的适用性以及稳定性,也是有效提高当前数据质量的重要手段。
第三、城市交通大数据缺乏统一的数据标准。前面也论述了当前可以用于交通系统分析的数据,这些数据来源不同,要想未来能够将上述数据利用起来,打破数据壁垒,形成城市交通数据池,就需要共同探讨数据共享机制,并制定统一数据标准;此外,形成城市数据池后,城市交通数据治理将是一项复杂而艰巨的任务。
第四、大数据时代城市交通理论的创新面临巨大挑战。传统的交通理论基本都是基于统计学,也就是基于样本开展研究,而大数据时代的到来变革了交通理论数据来源,使得数据由抽样变为了全样,数据由有针对性的调查变为从大数据中抽取有用信息。因此,交通需求预测、交通通行能力分析、交通管控等基本理论将产生巨大变革,交通学者们应当既要仰望天空又要脚踏实地,在基础领域研究中投入更多的精力,不应被当前的浮云遮住望眼。
城市交通系统理论与大数据技术的融合发展任重而道远,也期望与广大交通工程师以及研究人员共同探讨、共同进步。
③ 如何运用交通大数据智慧出行
2015年两会上,“大数据(big data)”一词首次写入政府工作报告。在交通领域,大数据一直被视作缓解交通压力的技术利器。应用大数据有助于了解城市交通拥堵问题中人的出行规律和原因,实现交通和生活的和谐,提高城市的宜居性,为政府精准管理提供基于数据证据的综合决策。
随着手机网络、全球定位系统(global positioning system,GPS)/北斗车载导航、车联网、交通物联网的发展,交通要素的人、车、路等的信息都能够实时采集,城市交通大数据来源日益丰富。在日益成熟的物联网和云计算平台技术支持下,通过城市交通大数据的采集、传输、存储、挖掘和分析等,有望实现城市交通一体化,即在一个平台上实现交通行政监管、交通企业运营、交通市民服务的集成和优化。
④ 作为大数据背景下的产物,共享单车大数据是如何采集的,又是如何储存和传输的
本发明涉及一种基于共享单车GPS大数据的数据处理方法,包括:将案件发生的实际地点转换成第一GPS信息;根据所述第一GPS信息一次筛选出距离该第一GPS信息预定距离D内的共享单车GPS记录信息,其中,所述共享单车GPS记录信息为每一共享单车使用时所产生的相关数据,其包括每一共享单车的编号、使用时的用户信息、使用时的GPS数据以及与每一使用时的GPS数据对应的时间点;根据案件发生的实际时间从一次选出的共享单车GPS记录信息中,二次筛选出距离该实际时间预定时间T范围内的共享单车GPS记录信息;以及获取二次筛选出的共享单车GPS记录信息中的用户信息,并根据所述用户信息辅助案件侦破。本发明还提供一种基于共享单车GPS大数据的数据处理系统。
二十世纪以来,由于互联网行业的飞速发展,"信息化","智能化"成了当今社会炙手可热的重点词汇,不论是交通领域,医学领域,甚至是航空领域,都在追求产品的智能化,而大数据技术是实现智能化有效而准确的工具;自2015年北大学生创立ofo共享单车并投入校园使用至今仅仅3年左右的时间,共享单车已经成了人们最普遍的短距离交通工具,但随着共享单车的大量使用,很多运营与治理问题也逐渐显现,因此获取共享单车运营本身产生的海量数据,应用大数据技术来解决其自身问题成为共享单车能够持续发展的唯一出路.本文从大数据的基本概念出发,重点介绍了大数据在共享单车运营和治理方面的应用,并在文章最后提出了大数据在应用过程中所遇到的问题,阐述了了大数据技术对于共享单车发展的重要意义.
⑤ 大数据和智慧交通有哪些应用的案例
智能交通成为改善城市交通的关键所在。为此,及时、准确获取交通数据并构建交通数据处理模型是建设智能交通的前提,而这一难题可以通过大数据技术得到解决。
智能交通整体框架主要包括物理感知层、软件应用平台及分析预测及优化管理的应用。其中物理感知层主要是对交通状况和交通数据的感知采集;软件应用平台是将各感知终端的信息进行整合、转换处理,以支撑分析预警与优化管理的应用系统建设;分析预测及优化管理应用主要包括交通规划、交通监控、智能诱导、智能停车等应用系统。
系统利用先进的视频监控、智能识别和信息技术手段,增加可管理空间、时间和范围,不断提升管理广度、深度和精细度。整个系统由信息综合应用平台、信号控制系统、视频监控系统、智能卡口系统、电子警察系统、信息采集系统、信息发布系统等组成。以达到四方面的目标:提高通行能力、减少交通事故、打击违章事件、出行信息服务。
在各城市建设智慧交通的过程中,将产生越来越多的视频监控、卡口电警、路况信息、管控信息、营运信息、GPS定位信息、RFID识别信息等数据,每天产生的数据量可以达到PB级别,并且呈现指数级增长。