参考大数据平台项目方案总结(16页).doc
下载文档
上传人:正***
编号:875850
2024-01-05
16页
379KB
1、范文典范指导参照大数据平台建设方案(项目需求与技术方案)一、项目背景“十三五”时期,跟着我国现代信息技术的蓬勃发展,信息化建设模式发生根天性转变,一场以云计算、大数据、物联网、挪动应用等技术为核心的“新IT”浪潮汹涌澎拜,信息化应用进入一个“新常态”。*(某政府部门)为踊跃应付“互联网+”和大数据时代的机会和挑战,适应全省经济社会发展与改革要求,大数据平台应运而生。大数据平台整合省社会经济发展资源,打造集数据收集、数据办理、监测管理、展望预警、应急指挥、可视化平台于一体的大数据平台,以信息化提高数据化管理与服务能力,及时正确掌握社会经济发展状况,做到“用数听说话、用数据管理、用数据决议、用数据2、创新”,紧紧掌握社会经济发展主动权和话语权。二、建设目标大数据平台是适应当前信息化技术水平发展、服务政府职能改革的架构平台。它的主要目标是增强经济运转监测剖析,实现公司信誉社会化监察,成立规范化共建共享投资项目管理系统,推动政word版整理范文典范指导参照务数据共享和业务共同,为决议供给及时、正确、靠谱的信息依照,提高政务工作的前瞻性和针对性,加大宏观调控力度,促使经济连续健康发展。1、拟订一致信息资源管理规范,拓宽数据获得渠道,整合业务信息系统数据、公司单位数据和互联网抓取数据,建立汇聚式一体化数据库,为平台打下坚固牢固的数据基础。2、梳理各有关系统数据资源的关系性,编制数据资源目录,成立信3、息资源互换管理标准系统,在业务可行性的基础上,实现数据信息共享,推动信息公然,成立跨部门跨领域经济局势剖析制度。3、在大数据剖析监测基础上,为政府掌握经济发展趋向、预示经济发展潜伏问题、协助经济决议供给基础支撑。三、建设原则大数据平台以信息资源整合为要点,以大数据应用为核心,坚持“兼顾规划、分步实行,整合资源、共同共享,突出要点、着重实效,深入应用、创新驱动”的原则,全面提高信息化建设水平,促使全省经济连续健康发展。word版整理范文典范指导参照1、兼顾规划、分步实行。联合我省经济发展与改革领域实际需求,明确整体目标和阶段性任务,科学规划建设项目。先期完成大数据平台的整体架建立设,后期分步达成4、业务系统的整合及相互间数据共享问题。2、整合资源、共同共享。对信息资源一致梳理,成立经济发展与改革信息标准资源库和数据规范,逐渐消灭“信息孤岛”,加快推动数据资源整合,建设共享共用的大数据中心,实现业务协同。3、突出要点、着重实效。以用户为中心,以需求为导向,以服务为目的,突出要点,着重实效,增强平台可用性和易用性。4、深入应用、创新驱动。深入认识用户需求,亲密追踪信息技术发展趋向,不停深入应用、拓展新技术在应用中的广度和深度,促使跨界交融,丰富管理和服务手段。四、建设方案为了保证项目的顺利进行和建设目标的可行性,我们采纳以下几种建设方案。1、数据收集方案。我们一致信息资源标准规范,成立多维度5、数据库,拓宽数word版整理范文典范指导参照据根源,经过不一样的方式汇聚数据,增强剖析力度,提高监测预警的正确性和时效性。1、预留接口,支持其余系统各样数据的上传导入办理。将现存有关经济运转业务系统中的历史数据和时效数据,经过上传数据文件至服务器、剖析提取有效数据导入服务器数据库等方式收集起来,在本平台上复用。2、支持外接数据的上传导入办理。能够将公司单位或定点监测机构的数据经过相同的方式收集起来,在本平台上复用。3、支持非构造化数据,即搜寻引擎数据、交际媒体数据、地理空间数据和音视频数据等等。2、数据剖析方案。大数据之大其实不是难点所在,其真实难以应付的挑战来自于数据种类多样、要求及时响应和6、数据的不确立性,而我们所面对的也正是这样。我们采纳批量数据办理系统,借助于深度学习、知识计算和可视化等大数据剖析技术,经过对数据的批量办理发掘此中的价值来支持决议和发现新的洞察。3、业务整合方案。在对社会发展有关业务子系统充足调研基础上,联合项目需求,可对其进行整合或嵌入办理(本方案整合公共信誉信息word版整理范文典范指导参照服务平台、投资项目信息管理平台等)。1、整合办理。将原有数据经过上传或导入方式进行收集,原有功能模块整合到本平台中,合二为一,完满的将数据汇聚起来。弊端是耗时较长。2、嵌入办理。以单点登录的方式将原有系统链接嵌入到本平台中,作为子系统独自存在。弊端在于数据共享难以实现。7、五、建设内容1、宏观经济监测展望及可视化平台政府信息化的最后目标是提高政府的决议水平,此中经济决议是核心内容。为了提高宏观调控决议水平,我们一定从依赖传通通计数据向依赖互联网非统计数据转变,从监测展望宏观经济总量向监测展望宏观经济先行指标转变,从中长久监测展望向及时监测展望转变。word版整理范文典范指导参照宏观经济监测展望及可视化平台环绕网络搜寻、交际媒体、电子商务、终端定位和业务交易等五个方面全面整合互联网有关数据资源,建设以“容量大、形式多、分类细、响应快”为目标的宏观经济监测展望数据库,建立鉴于互联网数据的宏观经济非统计指标监测展望应用平台。环绕要点家产活跃度、地区经济关系度、宏观经济8、走向社会预期、社会花费热门、大宗商品供求及价钱走势、全国就业局势、外贸订单变化趋向等方面,建立大数据宏观经济先行指标和现时展望指标库,研究能客观、正确反应我省宏观经济运转状况的指标系统,编制“山东指数”。word版整理范文典范指导参照在健全完美监测预警数据库的基础上,充足运用大数据技术和理念,增强数据发掘力度,增强定量剖析,成立宏观经济剖析系列模型,确实提高展望剖析的前瞻性、正确性和靠谱性。踊跃拓宽信息公布渠道,成立可视化平台,采纳Unity3D引擎,三维界面高度仿真,所见即所得。平台针对多源易构的海量数据,经过数据办理、储存管理、可视化交互剖析等技术,实现图形化数据查问、可视化关系剖析、凭证9、链和情报线索发掘等功能。利用展望信号灯系统,形象地刻画出宏观经济整体运转状况,剖析经济颠簸原由,及时认识各地区经济发展的不均衡性,正确判断和测定经济景气循环运转状态,提高宏观经济决议水平。2、公司信誉监测预警服务平台公司信誉危机不单给社会带来严重危害,也是关系到公司自己存亡存亡的重要事件,它是中国公司以致中国市场经济发展的巨大阻碍。所以,成立公司信誉危机的预警体制和管理体制,对公司信誉危机进行有效的预警及管理是十分重要的。公司信誉监测预警服务平台,全面整合社会信誉看管信息和word版整理范文典范指导参照社会民众反应信息,经过整理归类与加工,将这些信誉危机信息转变为能够量化的指标系统,依照失期行10、为的严重程度和影响范围区分三个预警级别,分别向公司自己、金融机构、其余政府部门及全社会进行通告。归入公司信誉预警系统的公司信息包含入侵花费者权益且不执行有关义务的信息、花费者投诉未及时办理信息、行政处分逾期未执行信息、查无着落公司信息等23种信息。能够动向配置预警信息项目和相应预警等级,增强监测预警的全面性和灵巧性。公司信誉监测预警服务平台以信息技术为支撑,以信誉看管为手段,全面提高信誉看管信息共享程度,及时预警影响社会交易安全和社会公共安全的不良信誉信息,依照“对外警告社会和公司;对内明确要点,踊跃采纳应付举措”的原则,增强公司信誉看管防备体制,有力推动“信誉保税区”建设,增强公司信誉监察管11、理的主动性、前瞻性,更好地服务经济发展,减少交易风险,促使公司信誉看管到位,实现公司信誉的社会化监察。3、投资项目信息管理平台建设投资项目(特别是一些大型项目)拥有管理上的复杂性特色,主假如建设周期长、参建方多。投资项目信息管理平台的成立和应用,可有效解决投资建设项目管理动向过程的信息剖析、信息建立,达到各参建方信息共享的目的。word版整理范文典范指导参照投资项目信息管理平台,支持重要项目推介,成立规范的项目审批流程和项目信息库,管理项目启动、计划、执行、监控和扫尾的整个生命周期,覆盖进度、质量、成本、资源、风险等项目管理的各个因素,建立集成项目、流程、知识的信息化平台。逐渐实现与有关部门业12、务系统的接入,形成全覆盖的投资项目管理一致工作平台,真实做好资源共享,为项目的后期评论、领导决议供给支持服务。环绕设计、招标、监理、质量、安全、进度、施工、资本、更改、合同管理“十大环节”,成立起对投资项目进行事先计划、事中控制、过后评估、全程管理的有效管控模式,促使投资项目管理系统发挥全方向、全过程的计划、组织、协调与控制作用。投资项目信息管理平台,以现代项目管理方法论为基础;以项目管理为主线,全面组织、全程贯串各个业务环节;以项目计word版整理范文典范指导参照划为依照,科学协调各个部门的工作;以成本、进度、质量为最后控制目标;以完好、及时、正确的项目信息和科学的剖析模型为项目管理、决议供13、给依照;依照“以计划为龙头,以合同为中心,以投资控制为目的”的现代项目管理理念,建立高效、适用的项目共同管理综合平台。4、政务数据共享互换平台政务数据共享互换平台是各个平台中的基础性和综合性平台,是解决“信息孤岛”、实现数据互连互通的基础设备,有益于提高各种信息资源整合共享,以及信息资源的综合利用。建设政务数据共享互换平台的首要目标就是要创建一个信息互换、信息共享的方式和环境,依照一致标准和规范,成立信息资源整合体制,规范数据收集口径、收集方式,规范数据的服务方式,成立一致的资源信息整合与互换体制。我们依照一致、集约、高效的数据开发利用理念,经过研究成立多级互换管理系统,形成政务信息资源物理分14、别、逻辑集中word版整理范文典范指导参照的信息共享模式,经过以应用为抓手,进一步打通数据流,知足政府部门多方向、多层次的数据需求,为跨地区、跨部门、跨平台不一样应用系统、不一样数据库之间的互连互通供给包含提取、变换、传输和加密等操作的数据互换服务。经过散布式部署和集中式管理架构,有效解决各节点间数据的及时、高效上传下达,在安全、快捷、方便的进行信息互换的同时精确的保证数据的一致性和正确性。政务数据共享互换平台的全局目标是成立“一个系统”,解决“两个问题”,支持“三个应用”,面向“四个服务”。成立“一个系统”,即成立一个可扩展、可集成、有一致数据模型、可互换和安全靠谱的散布式系统,对各种政务资15、源进行组织和管理。解决“两个问题”,即解决政务信息资源的发现与定位问题,解决政务信息资源规划与整理问题。支持“三个应用”,即支持信息集成整合应用、各业务部门办公应用和政府职能决议应用。面向“四个服务”,即面向政务协作、宏观决议、市场看管和社会管理服务。六、技术支持与平台性能1、系统架构联合该项目以大数据平台为核心,多业务子系统并存的业务需求,以及存在不一样种类操作系统、应用软件、系统软件的现word版整理范文典范指导参照状,我们采纳面向服务的系统构造,即SOA架构。SOA是一个组件模型,它将应用程序的不一样功能单元(称为服务)经过这些服务之间定义优秀的接口和契约联系起来。接口是采纳中立的方式进16、行定义的,它独立于实现服务的硬件平台、操作系统和编程语言。这使得建立在这样系统中的服务能够以一种一致和通用的方式进行交互。它的实质是实现服务和技术的完好分别,从而最大程度上实现服务的集成和重组。SOA实行是以业务服务为导向的,业务服务独立于技术之上,技术处于附属地位,采纳SOA架构的主要优势有:1、SOA与平台没关,减少了业务应用及业务子系统整合的限制。2、SOA拥有低耦合的特色,各个业务子系统对整个业务系统的影响较低,在各个系统不停变化状况下,节俭的花费会愈来愈多。3、SOA拥有可按模块分阶段进行实行的优势。能够成功一步再做下一步,将实行造成的冲击减少到最小。SOA服务交互表示图以下:wor17、d版整理范文典范指导参照2、技术支持1、技术当先的J2EE框架。Java2平台公司版(Java2PlatformEnterpriseEdition,J2EE)是一种利用Java2平台来简化且规范应用系统的开发与部署,从而提高可移植性、安全与再用价值。基核心是一组技术规范与指南,此中包含的各种组件、服务架构及技术层次,均有共同的标准及规格,让各样依循J2EE架构的不一样平台之间,存在优秀的兼容性,解决过去公司后端使用的信息产品相互之间没法兼容,公司内部或外面难以互通的困境。基主要的技术规范有JDBC、EJB、JSP、JavaServlet、XML等。JDBC为接见不一样数据库供给了一致的路径,使18、对数据库的接见拥有平台没关性。EJB供给了一个框架来开发和实行散布式商务逻辑,简化了拥有可伸缩性和高度复杂的公司级应用程序的开发。JSP页面由HTML代码和嵌入此中的Java代码构成,简化word版整理范文典范指导参照了页面的输出,保存了脚本语言易于使用的长处。Servlet是一种小型Java程序,扩展了Web服务器的功能。XML供给了一种描绘构造数据的格式,简化了网络中数据互换和表示,使得代码、数据和表示分别,作为数据互换的标准格式。2、强盛灵巧的SSM整合框架。SSM框架整合,即整合SpringMVC、Spring和Mybatis框架。此中SpringMVC属于SpringFarmeWor19、k的后续产品,它供给了建立Web应用程序的全功能MVC模块,分别了控制器、模型对象、过滤器以及办理程序对象的角色,这类分别让它们更简单进行定制。Spring是一个轻量级开源框架,它的主要特色是方便解耦、简化开发、面向切面(AOP)的编程支持和申明式事务支持,其主要长处有低侵入式设计、独立于应用服务器、同意将一些通用任务如日记等进行集中办理。Mybatis是轻量级ORM框架,它除去了几乎全部的JDBC代码和参数的手工设置以及结果集的检索,使用简单的XML或讲解用于配置和原始映照,将接口和Java的POJOs映照成数据库中的记录。其框架架构图以下:word版整理范文典范指导参照对比于传统SSH整合20、,SpringMVC对比Struts更轻量级,讲解的使用减少开发耗费,数据库操作层采纳Mybatis,一致管理SQL甚是方便。3、平台性能1、先进性、开放性。鉴于B/S构造的Java应用技术和SOA开放式的系统框架,构造化设计,灵巧可拆分,拥有灵巧的可扩大接口,易于改正调整、二次开发和扩大,最大限度降低因上游技术升级带来的系统实行风险,保证投资的有效性和连续性。2、可扩展性。因为采纳了平台化建立思想,整个系统可做到与基层多种硬件环境、操作系统、数据库的自由适配,保证系统在软件、硬件环境方面的灵巧配置以及将来的拓展应用。采纳鉴于SOA思想的模块化设计,可依据需要进行灵巧动word版整理范文典范指导参照态的模块扩大,并保证原系统环境不受影响。系统供给开放的标准接口,可实现与外头业务系统的无缝集成应用,灵巧扩展系统的业务应用范围。3、稳固性、靠谱性。系统采纳B/S构造应用模式,集中安装部署,客户端零安装,所以系统的运转不受任何客户端单点故障的影响。技术框架的支撑,能够实现数据库的长久、稳固连结,保证事务办理的连续和完好,保证业务数据正确完好。4、其余优势。word版整理