1、,大数据与智慧城市建设,概念、案例与思考,提 纲,2、城市化与城市管理复杂性,3、从数字城市到智慧城市,4、启示与思考,1、大数据时代来临,1 大数据时代来临,“大数据”就在你身边!,“大数据”就在你身边!,“啤酒”与“纸尿裤”,美国塔吉特百货(Target)“大数据” 选出了25种典型商品的消费数据构建了“怀孕预测指数”;Target的“大数据”分析技术从孕妇这个细分顾客群开始向其他各种细分客户群推广,从Target使用“大数据”的2002年到2010年间,Target的销售额从440亿美元增长到了670亿美元。,“怀孕预测指数”,“大数据”就在你身边!,淘宝大数据:淘宝数据平台显示,购买最
2、多的文胸尺码为B罩杯。B罩杯占比达41.45%,其中又以75B的销量最好。其次是A罩杯,购买占比达25.26%,C罩杯只有8.96%。在文胸颜色中,黑色最为畅销。以省市排名,新疆妹子购买大号最多。,“大数据”就在你身边!,朋友圈是个什么圈?在微信朋友圈中,最多的好友类型是“同学”“家人亲戚”,其次是“普通同事”“普通朋友”和“密友”,最少关注的是“领导”和“客户”;男性较“猎奇大胆”,女性较“封闭谨慎”资料来源:2013年8月零点远景关于“微信使用”的线上调查,什么是“大数据”?, 大数据的提出? 大数据的基本概念? 大数据的特征? 大数据的产生? 如何准确理解大数据? ,“大数据”的提出,2
3、008 年,Nature 推出了Big Data 专刊,计算社区联盟在发表了报告Big- Data Computing: Creating revolutionary breakthroughs in commerce, science, and society2011 年2 月Science 推出专刊Dealing with Data,麦肯锡(McKinsey)咨询 公司发布了一份关于大数据的详尽报告Big data: The next frontier for innovation, competition, and productivity进入2012 年,大数据的关注度与日俱增:1 月
4、达沃斯世界经济论坛,大数据是主 题之一;3 月美国政府发布了大数据研究和发展倡议,正式启动“大数据发 展计划”;5月联合国发布报告Big Data for Development:Challenges & Opportunities;纽约时报文章The Age of Big Data,使普通民众开 始意识到大数据的存在,以及其对于日常生活的影响。,从百度指数看“大数据”在中国的兴起,“大数据”在,2012年上半年开 始兴起,而“云 计算”要早4年,左右,在2008年 开始发端。,“大数据”百度指数“北上广”差异北京“大数据”热度居首,广东次之,上海再次之。,在移动端,总体滞后于PC 端,广东与
5、北京齐头并进, 并有后来居上之势。,对“大数据”的理解, 2010年经济学人“The data deluge”:“海量数据”、“数据,洪流”。, 麦肯锡公司:大数据指的是大小超出常规的数据库工具获取、存储、,管理和分析能力的数据集。, 国际数据公司(IDC)从大数据的四个特征来定义,即海量的数据规模(Volume)、快速的数据流转和动态的数据体系(Velocity)、多样的数据类型(Variety)、巨大的数据价值(Value)。, 大数据时代的历史机遇赵国栋:大数据是“在多样的或者大量数据中,迅速获取信息的能力”;这个定义更关心大数据的功用;大数据的核心能力是“发现规律和预测未来”。,1 V
6、olume; 2 Variety; 3 Velocity;4 Veracity大数据往往比小样本数据更有价值,从频繁模式和相关性分析得到的一般统计量通常 会克服个体的波动,会发现更多可靠的隐藏的模式和知识。,大数据的“4V”特点,引自:李清泉“社交大数据分析”,传统数据库与大数据的区别,池 塘 捕 鱼,大 海 捕 鱼, ,规模 类型 对象 工具 模式,人类自古以来,在科学研究上,先后历经了实验、理论和计算三种范式,Jim Gray 提出了一种新的“数据探索型研究”。参考:孟小峰等 ,大数据管理:概念、技术与挑战,对 比,传统数据库与大数据的区别, 传统数据来源:, 统计年鉴、行业统计资料;社会
7、调查、深度访谈; 大数据来源, 移动、联通、电信等通信和互联网运营商, 互联网网站:SNS(微博、twitter、FaceBook等社交网站);,YouTube等视频网站、淘宝等电子商务网站;, 政务、企业及公共服务数据:公交IC卡;医疗;保险等 传感器、摄像头监测数据;, 移动终端数据:智能手机、GPS等个人位置数据 海量遥感对地观测数据等,引自:甄峰,基于大数据的智慧城市研究与规划ppt(略改),大数据的关键技术:云计算, 没有互联网就没有云计算,没有云计算模式就没有大数据处理技术。 将大数据的应用比作一辆辆“汽车”,支撑起这些“汽车”运行的“高速公路”就是云计算。正是云计算技术在数据存储
8、、管理与分析等方面的支撑,才使得大数据有用武之地。, 云计算时代会有更多的数据存储于”云端“。数据是资产,云是数据,资产保管的场所和访问的渠道。,大数据的关键技术:物联网, “The Internet of things”,物联网就是物物相连的互联网。 利用互联网等信息技术把传感器、控制器、机器、人员和物等通过新的方式联在一起,形成人与物、物与物相联,实现信息化、远程管理控制和智能化的网络。,大数据的关键技术:数据挖掘与分析, Analytic Visualizations(可视化分析) Data Mining Algorithms(数据挖掘算法), Predictive Analytic C
9、apabilities(预测性分析能力) Semantic Engines(语义引擎), Data Quality and Master Data Management(数据质量和管理),大数据应用的技术体系,大数据采集技术,RFID技术传感器技术,Web2.0技术移动终端技术,大数据文件系统技术,大数据数据库技术,大数据分析技术,大数据可视化技术,分布式文件系统GFS,HDFS,Lustre,Haystack,分布式数据库,并行数据库,集成数据库,A/B测试,聚类分析,集成学习,神经网络,自然语言学习,元胞自动机,空间分析,宇宙星球图,标签云,历史流图,条形码技术穿戴设备,引自:宋刚,城市管
10、理复杂性与基于大数据的应对策略,互联网进化论,2,城市化与城市管理复杂性问题与挑战,城市的起源“城”筑城而居,军事;“市”集市贸易,经济,孟菲斯,埃及,公元前3200年,二里头城市遗址,公元前2000年左右,现代城市四大基本功能,居住、工作、交通、游憩,中国人口城市化率变化趋势,城市化是人类社会发展不可阻挡的趋势 联合国人口基金会2007年世界人口状况报告报告称,在20世纪,世界城市人口增长飞速,从2.2亿增长到28亿。 2008年成为人类历史上的一个重大分水岭,全球67亿人口中,有超过一半生活在城市里。城市化率%,城市化的两种模式, 人口转移型的城市化,强调的是人口由农村向城市的空间转移;
11、结构转换型的城市化,强调的是城市区域的经济社会结构由传,统社会向现代社会的转型。,土地利用存在的问题1、建设用地盲目扩张2、土地粗放式使用3、生态用地忽视4、社会保障类用地不足5、棕色地块简单改造6、城市“弱势空间”产生,中国城市化驱动与土地利用问题,新型城市化,新型城市化的追求朱江,新型城市化下的广州市土地利用总体规划,桑基鱼塘三来一补专业化市镇产业集群区域创新体系,农村城镇化城市化城市区域多中心城市区域全球城市区域,城 市 化 水 平,1990年珠三角建设用地,1995年珠三角建设用地,2002年珠三角建设用地,珠三角城市化空间与组织体系演化蔡瀛,从乡村城市化到全球城市区域,现代城市管理复
12、杂性,城市管理与社会管理融合背景下的城市管理三维结构图,现代城市及其管理是一 类开放的复杂巨系统: 非线性 开放性 关联性 不确定性 自组织性 涌现性,宋刚,张楠,朱慧. 城市管理复杂性与基于大数据的应对策略研究J. 城市发展研究,2014,21(8),摆在眼前的问题,医疗健康,防洪排涝,金融服务,人,社会子系统科学子系统,自然子系统 经济子系统,知识 体制文化,序,空,时,构 量,还原,消费,调控,流通,生产,生,气,土,能,城市复杂系统示意图水,来源:中科院生态环境研究中心,城市管理复杂性与基于数据的综合集成现代城市及其管理是一类开放的复杂巨系统,需要一个城市管理综合集 成体系。通过城市规
13、划、建设、运行各方面海量数据的集成,运用数据挖掘 等多种科学和信息化手段,通过人的参与、知识的汇聚、集大成,方能成智 慧,是开展智慧城市管理的必由之路。,城市管理综合集成体系图宋刚, 唐蔷. 现代城市及其管理一类开放的复杂巨系统J. 城市发展研究,2007,14(2),3,从数字城市到智慧城市基于案例的解读,生态城市(ecological city), 生态城市这一概念是在70年代联合国教科文组织发起的“人与生,物圈(MAB)”计划研究过程中提出。, 生态城市:就是按照生态学原理进行城市设计,建立高效、和谐、,健康、可持续发展的人类聚居环境。, 生态城市:包含了生态产业、生态环境和生态文化三个
14、方面的内容。生态城市建设不仅仅是单纯的环境保护和生态建设,它涵盖了环境污染防治、生态保护与建设、生态产业的发展、人居环境建设、生态文化等方面。, 从生态学的观点,城市是以人为主体的生态系统,是一个由社会、,经济和自然三个子系统构成的“复合生态系统”。,低碳城市(Low-carbon,City), 指以低碳经济为发展模式及方向、市民以低碳生活为理念和行为特征、政府公务管理层以低碳社会为建设标本和蓝图的城市。,低碳经济低碳生活低碳社会,生态产业生态环境生态文化,低碳、生态城市,低碳城市强调减“碳”的生态城市低碳生态城市:强调城市建设管理的理想目标与状态,对具体技术支撑、实施步骤欠缺深入的考量。,数
15、字城市(digital city),“数字城市”:基于互联网和现代测绘地理信息技术,对城市进行多分 辨率、多尺度、多时空和多种类的数字化描述与管理。数字城市是将城市地理、资源、环境、人口、经济、社会社情和各种社 会服务等复杂系统进行数字化,整合城市信息资源,构建基础信息平台, 建立电子政务、电子商务等信息系统和信息化社区,实现城市管理与公 众服务的信息化。,“数字城市”:为智慧城市建设奠定物质基础,但更多停留在信息化技术管理层面,对人的需求和城市运行内在规律缺乏深度发掘和应对,数字城市建设的效益被弱化。,城市通信网络基础设施建设为数字城市(乃至后来的智慧城市)铺设了“信息高速公路”,数字城市建
16、设,城市空间信息基础设施建设为数字城市奠定了“地理空间基准框架”,数字城市建设, 国家测绘地理信息局已经初步建成(验收)了280多个数字城市空间地理信,息基础设施项目;, 国家地理信息公共服务平台已有300多个城市的高分辨率影像; 城市网络地图已经能够满足市民的基本要求。,城市空间信息基础设施基本完善,电子政务和各部门业务应用系统建成并逐渐投入使用,数字城市建设,数字企业、电子商务与现代物流平台开始建设并产生效益,数字城市建设,数字城市的社会公众服务有了良好开端,实现了从二维到三维的跨越,数字城市建设,城市网格化管理系统建立及应用,传感网技术及其在城市中的应用,数字城市建设成就,截至2013年
17、10月底,中国的 数字城市建设已经形成了城市综 合管理水平的服务平台,作为牵 动国家测绘地理信息局的“牛鼻 子工程”,取得了辉煌成果。全 国31个省、自治区、直辖市的 310余个城市开展了数字城市建设, 智慧城市时空信息云平台试点开 始启动。,数字城市建设成就,2 Europe 5,1 2 3 4 5 6,普通手机 智能手机(拥有互联网和数据订阅服务) 智能手机(无互联网和数据订阅服务) 平板电脑(拥有互联网和数据订阅服务) 平板电脑(无互联网和数据订阅服务) 以上皆非,1,3 4,6,59%,57%,65%,64%,54%,57%,28%,34%,26%,41%,38%,14%,11%,15
18、%15%,10%,6%,4% 2%,7%,5% 3%,35%,16% 11%,2%,1%,1%,0%,2% 2% 3%,5%,7%,8%,6%,4% 2%,2% 0%,13%,United States,Brazil,Australia,China,India,Japan,数据来源:InSites Consulting, Social Media around the world 2011,微博,微信,移动互联网、大数据、智慧城市移动互联网是移动和互联网融合的产物,继承了移动随时随地随身特性,也继承了互联网分享、开放、互动的优势,移动互联网是自适应的、个性化的、能够感知周围环境的服务,移动互联
19、催生大数据,激发智慧城市。73%,数字城市,智慧城市,物联网云计算、大数据,现实城市, “智慧城市”:利用新一代信息技术,以整合、系统的方式管理城市的运行,让城市中各个功能彼此协调运作,为城市中的“人”提供更高的生活品质和更优质的发展空间。, “智慧城市”的建设是信息化、城市化不断向纵深发展的一个综合性,表现;其内涵简单来说,就是更聪明的城市。, 技术进步催生了智慧城市,它并不止于技术,更重要的是贯穿其中的,思想,以及背后隐藏的人文社会因素。,智慧城市,安全食品追踪即给放养的牲畜中的每一只羊都贴上一个二维码,这个二维码会一直保 持到超市出售的肉品上,消费者可通过手机阅读二维码,知道牲畜的成长历
20、 史,确保食品安全。,因特网,羊肉的种类、产地、出栏时间?,种类:山羊 产地:宁夏香山 出栏时间:09年9月,智慧 食品,智慧城市实践,智慧 医疗,个人保健通过人身上安装的不同传感器,对人的健康参数进行监控,并且 实时传送到相关的医疗保健中心,如果有异常,保健中心通过手机, 提醒您去医院检查身体。,智慧城市实践,远程医疗,即实现各级医院之间医疗卫,生人才资源、医疗信息资源和医 疗文件资源共享,医学检验、影 像检查结果互认,大型贵重和特 殊医学仪器设备共享,药物不良 反应监测结果共享,重要医疗救 治资源共享,将有效提高医院资 源使用效率,提升管理水平和医 疗服务质量。,智慧城市实践,摄像机及云台
21、.,含可移动摄像机,.,.,.,.,摄像机及云台,.,.,.,视频监控网,互联网/VPN,访问客户端,10M/100M专线/VPN,报警输出,采集点1,采集点n,报警输入,POWERFAULTDATA ALARM 全球眼视频服务器(本地录像),监控点,网络存储单元,视频分发单元,数字矩阵中心管理服务器,元数字显示墙(电视墙)控制台客户监控中心,采集点1,采集点n,报警输出 报警输入,POWERFAULTDATA ALARM 全球眼视频服务器(本地录像),监控点,互联网/专线/VPN,互联网/专线/VPN,监控管理平台,智慧城市实践平安城市利用部署在大街小巷的监控摄像头,实现图像敏感性智能分析并
22、与110、119、112等交互,实现探头与探头之间、探头与人、探头与报警系统之间的联动,从而构建和谐安全的城市生活环境。网络存储单,智慧 家居,智能家居以计算机技术和网络技术为基础,实现各类消费电子产品、通信产品、 信息家电及智能家居等设备,通过不同的互连方式进行通信和数据交换,实现 家庭网络中各类电子产品之间的“互联互通”的一种服务。,数字 家庭,娱乐生活,信息通信,智慧城市实践,智慧 交通,智慧城市实践,DMSP/OLS非辐射定标夜间灯光强度,遥感对地观测大数据,遥感对地观测大数据,城市餐饮,中规院 李栋博士 规勒个划,城市用地空间变化,1997-2013年,17年间北京核发用地规 划许可
23、证的年际空间变化趋势图。(中规院 李栋博士供图),广州停车场分析,停车场核密度估计,住宅核密度估计,Number of pick-ups and drop offs,1st June,5am,5am,9am,14pm,14pm,2,2nd June,June,3rd June,4th June,5th June,6th June,7th June,19pm,城市内部人类活动节律,18000 16000 14000 12000 1000080006000400020000,Pickup,Dropoff,Mobile phone calls, Harbin, China,Pick-ups and
24、drop-offs of Taxi Trips, Shanghai,北大刘瑜博士供图,“百度迁徙”:http:/ 体签到数据,基于钱币追踪数据获取,来源:北京大学 刘瑜,美国做了一个网上调查,拿出一幅世界地图,让ta找到乌克兰,离 实际位置越近标点越红,反之越蓝。结果是不是很可笑啊?通过分析发 现,标注越是不准的人的政治态度越是倾向于美国出兵干涉。数据很重 要,具有地理信息的数据更很重要。,地理大数据,多类型传感:红外探测,646651 | PNAS | January 14, 2014 | vol. 111 | no. 2,Bodily maps of emotions,多类型传感:眼动仪,
25、启示与思考,4,启示与思考:, 不管你喜欢还是不喜欢,BIGdata来了;在你还没有来得及反,应时,大数据走进你的生活。, 大数据不单纯是数据,更是一种能力和资源;大数据将改变很,多传统的生活、工作、管理和思维模式。, 大数据之“大”,不仅在于其规模容量之大,更在于人类可以处理、分析并使用的数据在大量增加,通过这些数据的处理、整合和分析,可以发现新规律、获取新知识、创造新价值。 离开了“人”,就不存在“大数据”,“城市”是一个人口高度聚集空间区域,城市大数据是城市宝贵的资源,也是大数据聚集与应用的主战场。,启示与思考:, 大数据与“小数据”是否存在明显得界限?, 阻碍当前大数据应用与作用发挥的主要障碍有哪些? 大数据自身的问题与风险何在?, 大数据与云计算、物联网如何关联互动?, 大数据的“富矿”在哪里?具有时空特征的大数据是否是当前大数据,的主体?, 城市管理中如何更智慧?城市与政务大数据的潜在价值?,