首页 > 文章中心 > 信息平台论文

信息平台论文

前言:想要写出一篇令人眼前一亮的文章吗?我们特意为您整理了5篇信息平台论文范文,相信会为您的写作带来帮助,发现更多的写作思路和灵感。

信息平台论文

信息平台论文范文第1篇

Abstract:Tofacilitatethemanagementofthecomplexandvastdistributionnetwork,theEastDistrictPowerDistributionDivisionofGuangzhouPowerSupplyBranch,GPGestablishedadistributionnetworkmanagementinformationsystembasedonArcinfoplatformofGIS(geographicalinformationsystem)technique.Thispaperdescribestheobjective,configuration,structureandtechnicalfeaturesofthesystem,andpresentsthekeytechnicalproblemsneedingattentionduringitsconstruction.

Keywords:geographicalinformationsystem(GIS);Arcinfo;powerdistributionmanagement;network

随着广州市供电用户的增加和配电网络的日益发展,如何更好地对结构复杂、覆盖面积广的配电网络进行管理,成为管理层和基层生产部门面临的重要问题。采用传统的以纸图为主的管理方式,已经无法满足生产管理和提高供电服务质量的要求,必需建立一个企业级的配电网管理信息系统。2001年我们建立了广州东区配营部配电网管理信息系统,采用的是Arcinfo平台。下面就该系统的一些技术问题及项目在建设、实施过程中遇到的问题等进行探讨。

1、Arcinfo平台简介Arcinfo平台由美国ESRI(美国环境系统研究所)开发,是具有丰富功能的专业GIS(地理信息系统)平台软件,包含了以下信息处理的各种高级功能:

a)数据输入和编辑功能。可从数字化仪、图形扫描、图形转换中获取数据,编辑图形和属性。

b)数据转换和集成。可以对标准数据格式进行转换,支持符合SQL标准的关系型数据库。

c)基本GIS功能。地图投影及投影变换、数据维护及管理、缓冲及叠加分析。

d)空间数据和属性查询,并进行相应图形显示,包括栅格图像显示和管理。

e)地理数据管理。利用info数据库或ArcSDE可以对大型分布式数据库进行管理。

f)提供了界面设计工具和系统的二次开发工具。利用所提供的aml语言和MO组件库及支持工业标准的VC,VB等作为开发的主要工具。

g)数据的输出。提供数字地图制作、报表生成及制作高品质地图功能。

h)支持版本管理及长事物处理。最新的ArcGIS83,整合了以前版本中的workstation和desktop,强化了Arccatalog,Arcmap,Arctoolbox三个功能模块的功能,并对地理数据库geodabase增加了拓扑规则库和拓扑校验。

2、系统目标配电网地理信息系统的建设本着“统一规划,分布实施”的原则来进行,先建立一个静态的配电网GIS,即电力设施的AM/FM/GIS应用,包括系统的功能开发、基本图形数据的录入工作和设备台帐数据的录入,实现图形及设备的查询、统计和图形输出等基本GIS功能;

再建立一个动态GIS,在静态中引入配电网自动化所提供的动态采集数据,可实现诸如停电管理、故障线路跟踪分析和处理等多种高级功能。为以后的配电网GIS建设奠定良好的基础,并积累项目实施经验。

3、系统配置

作为电力设施的AM/FM/GIS应用,配电网GIS的开发对GIS平台的要求较高。该平台应具备以下条件:

a)建模能力强,有较强内建网络拓扑结构并具备强大的网络编辑和分析能力;

b)有较强的功能扩展能力,同时能够提供完善的图形即Webgis功能;

c)支持对海量图形数据的管理,数据库方面支持Oracle;

d)可以在软件升级和数据量膨胀时更好地保护用户投资。基于以上技术要求,我们采用了ESRI的Arcinfo平台作为配电网地理信息系统的图形平台,使用的是Arcinfo802的workstation版(内含1个license)。数据库采用Oracle,用Mapobject和VC进行开发。服务器采用两台DELLPowerEdge6400,分别用于数据库服务器以及图形服务器,可以满足性能和稳定性要求。图形数据采用Arcinfo的coverage格式,数据的管理利用了info关系数据库管理系统,实现对图形数据的管理和维护,以文件共享方式存储在物理硬盘中。如果采用ArcSDE技术,可由Oracle管理图形数据。

4、系统结构及技术特点4.1结构特点整个系统采用C/S结构,由三大部分组成:

a)CoolEdit.提供了全面的图形编辑功能,它是在windowsNT环境下,利用Arcinfo平台搭建起来的。CoolEdit在整个配电网GIS管理系统中属于数据输入部分,是所有其它子系统的数据入口。所有设备的沿步图和逻辑图图形编辑属性录入全部在这里完成,使用人员为生产分部的图形资料员。

b)GISmanager.配电网管理部分,实现对配电网络图形和设备属性的交互查询和管理。数据同时可供其他部门的人员共享。还包括设备运行资料、检修记录、试验记录、急修管理、两票管理等功能模块,是目前大部分生产人员使用的模块。

c)Webgis.可通过IE浏览器实现图形及其属性的查询。它是一个基于企业内部网的以Web形式浏览配电网GIS设备图形和属性数据的系统,使全局的各台机器都可以通过广域网共享配电网系统的基本设备图形信息。三个模块的关系是:首先,由维护系统转入由规划部门提供的背景图(或者通过扫描仪来矢量化产生地理背景图),然后由CoolEdit模块绘制出设备图并录入设备参数(即Arcinfo图层),当电力设备图层绘制完毕后可以直接为Shape文件格式供GISManage使用。如果再将CoolEdit的图层数据进行分层处理后可更新到Webgis服务器上。编辑用户和班组的用户可使用C/S结构来完成图形的编辑、查询和统计功能,在这种结构下用户可操作的功能较多。对于管理职能部门的用户,可以使用ArcIMS所提供的Webgis,通过IE实现图形查询等功能。属性数据利用Oracle进行管理,图形数据库利用了Arcinfo中coverage特征属性表作为外部info数据文件存储。这些文件在coverage目录内分别以单独的文件名TIC,BND,PAT,AAT存储和维护。

在info数据库中记录了指向外部数据文件的指针,指向存储在coverage目录内的这些文件。info数据库由Arcinfo自动维护。在该系统完成升级后,将图形数据由coverage文件管理方式转换为通过ArcSDE中间件由Orcle数据库管理,在Webgis上数据,不需要对数据进行分层预处理,图形编辑人员提交更新后,即可在Webgis上看到最新的图形。

4.2技术特点

4.2.1Webgis

利用ArcIMS建立webgis站点,设计网站。主要提供给查询用户使用,用户在安装了Java控件和Arcexplore之后,通过IE浏览器即可浏览东区配营部所管辖范围的配电网图形,还可自行设置显示图形和属性的方式,更改设备显示符号等,实现图形和属性的交互查询。使用ArcIMS不用license.

4.2.2数据共享

东区配营部各个部门,如用电、调度等都可以通过网络共享图形数据。以手工为特点的传统运行管理经常发生数据不一致、信息不完整、查询困难的情况,通过配电GIS管理信息系统可以在配电网变动频繁时,改变传统运行管理方式不相适应的局面。

4.2.3开放性

系统的开放性意味着系统有能力应付硬件和软件的升级,同时为以后建立企业级的数据交换平台打下了良好的基础。可以直接读取不同图形数据格式,或者将其转化为其它标准格式供其它信息系统使用。

4.2.4安全性

图形数据的建设周期和工作量都比一般的数据要复杂得多,因此图形数据的安全性和准确性是系统建设的重点。通过以下两种方式实现其安全性:

a)加强系统中权限管理功能。东区的配电网管理信息系统采用统一的权限管理。其中图形部分的权限管理是通过不同权限的用户加载不同的工作空间来实现的,管理部分的权限管理是通过为用户设置不同的字段功能来实现的。

b)在管理机制中建立相应的保证数据安全的管理制度,如定期的数据库的逻辑备份、物理备份、异地备份等,以及操作系统的备份等等。在系统升级后通过数据库备份完成对图形和属性数据的备份,一旦发生宕机、系统崩溃、数据库坏掉时都可利用Oracle的恢复机制,使图形数据及时得到恢复,大大提高了图形数据的安全性。

5、系统建设中的关键问题5.1数据方面地理背景数据购买了广州市规划局的电力管线图,格式为coverage.配电网沿步图数据不完整,有的不准确,所以录入数据前先让班组人员将本班管辖的设备标注在地理纸图上,然后录入,包括每个电房地理位置、内部接线图及连接电缆。由于我们的背景图上只有电力管线和标注,而其它的地物如道路、居民地等都没有,所以有些设备的地理位置和实际地理位置会存在偏差。

严格来讲,我们已有的沿步图并不是基于GIS的配电网图形数据,而仅仅是示意性的,系统的图形信息不能准确反映其实际空间位置信息,使某些高级功能无法实现。因此做好对整个广州市配电网的地理数据普查(除电子地图已提供的管线数据和电房位置信息),是以后系统建设中首先考虑的问题。与平台、应用有关的问题

由于整个配电网的数据是基于GIS的,在提取配电网图形时,无法自动生成我们工作中最常用的规则的逻辑接线图,需要对提取出的馈线进行部分编辑整理,增加了数据维护工作量。这个问题要在以后进行版本升级时解决。整个系统的开发是针对一个编辑license,采用coverage文件方式进行管理。在编辑用户少的时候这种处理方式是高效率的,但随着系统使用规模的扩大,这种数据处理方式的效率就会大大降低。在数据编辑时,由于一些临时文件无法及时清除,需要对一些拓扑关系重建,这些都给使用带来不便。目前升级后的系统采用ArcSDE加MO的方式开发,支持多用户操作并有较快的图形显示速度。

GIS平台选择方面应结合企业自身发展的需要进行慎重选择,因为不同图形格式转换就意味着数据拓扑关系的丢失,同时很难确保属性数据的完整性,对保护原有投资是极其不利的。

信息平台论文范文第2篇

近年来,以物联网、云计算等新一代信息技术的“智慧城市”改变了政府、企业和市民相互交往的方式。对于城市服务、公共安全、交通、环保、民生等各种需求做出快速、智能的响应,提高城市运行效率,将政府各个部门的职能发挥至最大限度,创造更美好的城市生活。在北京、上海和南京等国内城市,城市管理经历了电子政务、电子管治到智慧管治的类似转变,转变过程伴随着市民参与度的提升。除了政府和市民的纵向合作之外,智慧城市建设是一项多部门、多主体共同参与和合作的协作性事业,因此在政府各个职能部门之间必须加强横向沟通和交流,促进资源共享。

2天地一体卫星技术城市综合信息共享平台解决方案

2013年卫星应用学术交流与研讨会上,相关专家学者提出了标准化、体系化的建设思路,通过技术平台之间的接口统一、协同配合、综合生产指挥调度建设、信息集成化管理和综合运用,为政府部门、企事业单位、行业用户提供即时信息的互联互通,提高资源利用效率和管理水平。为充分利用天地一体卫星技术,促进政府部门间的信息共享,厦门精图信息技术有限公司研发了综合信息共享平台,其以高分辨率遥感数据为主要数据源,以北斗导航定位和卫星通信为技术支撑,面向城市管理综合决策部门进行应用,同时又为城市管理的专业机构提供通用基础服务。卫星、无人机等技术手段获取到多时相、不同分辨率的遥感影像,结合城市基础矢量数据,嵌入在城市综合信息共享平台,由共享平台提供接口发放给政府部门。城市综合信息共享平台架构图对于国土、测绘、规划、民政等强GIS部门,数据的获取处理为日常工作的一部分,但对于社保局、计生局等弱GIS部门,遥感数据作为工作底图在民生项目中发挥了日益重要的作用。平台的作用在于将数据实现政府部门之间的共享,尤其对于弱GIS部门而言,通过接入信息共享平台,可以不再通过传统方式获得数据,节约了时间成本,提高了管理效率。从天地一体产业化发展角度,以本项目架构的城市综合信息共享平台为辐射点,平台开放统一标准接口,政府部门以接口形式进入平台,通过搭建桥梁,为城市各部门应用卫星影像、平面矢量数据提供统一的服务平台,实现遥感影像等空间信息资源的融合、共享、服务、二次开发拓展能力。该系统在厦门市先试先行,实现了城市地理信息的一站式服务,以平台出发辐射到规划管理、应急服务和民生服务等应用领域,为数据资源整合、技术结合到业务应用搭起桥梁,满足现代城市管理的智能化、移动化、可视化、协同化、集约化的需求。实现了国民经济和社会发展规划、土地利用总体规划、城乡规划的“多规合一”,形成全市空间布局的“一张蓝图”;为城市精明增长的扩展模式奠定基础,处理好山、水、城和人之间的关系。在平台基础上,厦门消防、安监、地震等应急部门,充分融合共享专业数据,在共享平台上嵌入物联传感技术,提高灾害事故的应对效率和应急指挥能力。

3平台展望

信息平台论文范文第3篇

1.1国内社区信息化建设现状

上海社区信息化建设己有十多年历史,经历了从简单的社区便民服务信息转向整合各类社区事务服务的综合体。广州把社区信息化作为提高社区服务水平的重要手段,推动了市、区、街、居委会四级联网。重庆基于三网融合和多屏互动建设了“信息化社区平台”,市民可在电视或手机上实现实时路况查询、医院挂号、水电费交纳等。福建将全面建设“民生信息化社区”作为为民办实事项目,在街道、社区推广使用“海西智慧社区平台”,基本覆盖全省。一些地市还开展了富有特色的社区信息化建设,潍坊高新区推出的数字社区,是以社区服务中心为主,整合各方资源的综合性信息服务平台。中西部地区积极推进社区信息化建设。兰州市建设了实现城市社区多元数据共享集成的“三维数字社区”集成管理应用系统。呼和浩特赛罕区建成了集行政管理、社会事务、便民服务为一体的社区综合信息服务网络,为市民提供上百项服务。

1.2社区信息化建设存在的问题

从目前的情况可以看出,我国社区信息化建设还滞后于我国经济社会发展,整体水平仍然偏低,还有较大提升空间。目前还存在着一些亟待解决的问题,主要表现在:信息基础设施不完善;社区信息化工作的领导和协调机制不完善;缺少统一的规划,缺乏统一的标准;基础数据有重复采集的现象,数据采集质量不高;资源开发力度和开放不够等。

2社区信息化管理服务平台总体设想

2.1总体需求

(1)政府需求对政府来讲,大力发展社区信息化有助于加强对社区的治理,也使对社区的服务更完善、更便捷,从而实现和谐社会。总体上来说,政府需求主要是信息采集、信息、统一管理、全面服务等方面的内容,需要建立一种简单有效的获取、信息的渠道,通过该渠道还可以对社区进行管理和服务。基于数据库、网络技术和现代通信技术而构建的社区信息化管理服务平台能够满足这样的需求。(2)企业需求在社区信息化中,企业多指一些跟社区居民有关的商家。商家要求社区信息化平台提供的服务应该是准确、合适和及时的,能够通过平台提高自身的市场竞争力,或者能够通过社区信息化获得一个简单的途径来获取市场信息,远程完成一些工作,优化自身的供应链,减少工作量,提高工作效率,同时也方便了社区居民。此外,企业也可以通过社区信息化系统实现与社区管理机构之间的协同工作,通过系统解决如审批、报税和审计等一些行政性事务。(3)社区居民需求社区居民是社区信息化管理服务平台最主要的用户,在一定程度上政府和企业也都是为居民服务。居民对这一平台的需求主要集中在服务方面,要求政府提供的服务要方便快捷,企业提供的服务要全面周到,最好是能够覆盖生活的每一个方面。社区信息化管理服务平台为居民提供的服务应及时有效,并且能方便获取。居民所需的各类信息和服务有:医保、社保、公积金、养老保险、低保等相关电子政务服务;远程教育、远程医疗、电子娱乐、商务信息,包括电视家教、电视健康监控、电视银行、订票、天气等多种增值服务。此外,还有针对特殊群体的一些服务,如针对儿童、老人、孕妇、弱势群体等的专门服务。总而言之,政府、社区居民和相关企业是社区信息化管理服务平台的三大类主要用户。从哪些方面来满足这三者的需求是社区信息化建设所必须考虑的问题。

2.2总体架构设想

综合运用云计算技术、互联网通信技术、物联网技术和有线电视网络技术,构建安全高效、通畅规范的社区信息化系统。系统框架如图1所示。通过社区服务与管理信息共享系统,实现对社区的网格化管理;为社区居民提供生活工作服务;实现社区数据采集,包括社区范围内人口信息、地理信息、事件信息、物品信息、组织信息的采集。建设社区基础数据库,数据库内容包含人、地、事、物、组织的相关信息。实现服务方式的多元化,用户通过电脑、电视、电话、移动终端设备获取相关信息,工作人员可以通过多种方式提供主动服务。

2.3总体功能

2.3.1社区管理功能建设社区管理信息平台,覆盖社区各类业务,以社区综合数据库为支撑,全面支撑社区管理工作,实现社区管理无死角、公共服务全覆盖的目标。(1)可视化管理以社区综合数据库为基础,引入空间地理框架建设的GIS数据,结合虚拟现实技术与仿真技术,实现基于空间位置的可视化社区管理和服务。使社区日常管理、报表统计等工作实现网络化与可视化,街道和上级政府部门可对辖区信息进行浏览、查询和统计、分析、管理,实现信息共享。(2)一站式服务系统主要涉及事件受理、办理监督、办事指南、公共办事查询、申请、服务办理材料管理、服务收费、服务项目管理、统计分析、报表处理等模块。通过一站式服务系统,把这些待办事项整合到一个统一的平台中,同时与社区综合数据库中的数据交换,通过调用数据库中的数据简化了操作,提高了数据的准确性,方便这些事项的办理。(3)社会救助信息系统社会救助信息管理平台可分为城乡居民最低生活保障、低收入、教育救助、医疗救助、社会救助、住房救助等多方面的管理。具备网上受理、网上审批等功能,还具有对被救助人员的分类统计、管理、查询等功能,可以实现救助工作从申请、受理、核准到审批全过程的信息化、网络化和透明化。(4)社区养老服务信息系统对老年人基本信息、补助申请与审批信息、服务信息等进行统一管理。主要包括老年人信息管理、老年人优待证管理、居家养老补贴管理、居家养老服务管理模块。2.3.2社区服务功能(1)社区呼叫服务可以在公众服务热线的基础上,以因特网、移动电话网、固定电话、有线电视平台“一键通”等为接入方式,建立社区呼叫系统,服务对象为社区全体居民。在社区呼叫系统的基础上还可以建设社区平安联防系统。(2)社区生活服务结合线上线下的模式,建立实体与网络、电视相结合的社区生活服务超市,为社区居民提供属地的电子商务、生活便民服务,居民在服务点通过刷卡的形式办理购物、通讯费、水电燃气费、有线电视费缴纳、公交卡充值等业务。居民还可在社区平台、电视平台上、查询相关生活工作信息,如物品交易、求职招聘、房屋租售等。(3)社区教育建立社区、学校、家庭三位一体的全方位社区青少年教育网络。(4)商务服务通过电脑、电视、手持设备等媒介,可以实现B2C、C2C、O2O等模式的商务活动。2.3.3数据归集功能建设社区综合数据库,具体内容涵盖社区楼院、辖区人口、地理位置、重点对象、社区组织、社工队伍、公益性设施及服务记录等基础信息,整合公安、民政、劳动、国土、文化、计生、卫生、建设、工商等部门相关信息。社区工作人员、居民依权限对社区居民、流动人口的相关信息进行录入、更新到社区综合数据库。工作人员在进行相关事项办理时,可以直接调取数据库中信息,避免了信息的重复录入。社区综合数据库的信息通过交换平台传送到上级政府部门,分别用于公安、民政、劳动、国土、文化、计生、卫生、建设等部门,与基础数据库中的数据进行比对、更新,使社区成为最终的数据归集点,如图2所示。

2.4使用途径

社区管理信息平台系统建设多种展示方式,为社区居民提供多种方式的使用,包括电脑、手机、电视机访问、电话咨询、大屏幕展示、触摸屏展示等。

3结束语

信息平台论文范文第4篇

当前“大数据技术”充满了新的机遇和挑战,其在企业IT基础架构、数据管理、分析和服务这些关键规划领域的应用,将会对社会经济发展带来长远深刻的影响。大数据指的是从各种各样的数据中快速获得有价值信息的能力,具有数据量大、种类繁多、价值稀疏、处理速度快的特征,这些特征对目前社会各个行业的信息架构、系统的冲击非常大。大数据技术对整个社会经济发展来说既是机遇也是挑战。

(一)必要性

根据IDC在2011年6月的《数字宇宙》(DigitalUniverse)研究报告,2011年全球新建和复制的信息量超过1.9ZB(1.8万亿GB),五年时间增加了近九倍。随着数据量的指数级增长、数据源种类(包括结构化数据源和非结构化数据源,如社交媒体、富媒体文件以及地理空间信息)的飞速增加,以及数据产生速度的加快(如实时传感器数据),传统的数据库和架构无法处理、管理和分析如此庞大的数据集。政府、金融、电信、互联网等大数据应用的行业先锋目前均面临大数据的问题。不仅如此,随着物联网、云计算、移动互联网、车联网、智能手机、平板电脑的飞速发展,大数据技术拥有了更为广泛的数据资源。因此,IT产业界及行业用户都亟需针对大数据设计和优化大数据存储、管理和查询平台,来替代传统关系型数据库平台。在技术发展的前沿阶段进行实验平台建设对我学院师生具有重要意义。该实验平台能够为学生提供一个了解最前沿技术的机会,不仅能够提高学生学习兴趣、自学能力,还为学生就业、更好地规划未来的职业发展提供了机会。大数据技术的机遇与挑战带来了很大的人才缺口,目前大数据技术平台开发、方案实施人才紧缺;由于云存储、大数据技术带来的信息安全问题,也亟需大量信息安全领域的人才;由于大数据技术在物联网、电子商务、移动互联方面的应用,对了解大数据技术的电子商务专业人才也更青睐。通过本实验平台的培养,感兴趣的优秀学生还可以尝试考取与大数据技术密切相关的Hadoop专业认证———ClouderaCertifiedDeveloper/AdministratorforApacheHadoop,为学校、学院在该领域带来正面影响,增加更多合作和就业的机会。该实验平台能够为信息系统专业试点班培养计划的很多核心课程(包括管理统计学中的业务报表与分析、商务智能方法与应用、商务智能实践、数据挖掘和BA综合实训等)形成较好的前后衔接关系,能够丰富实践教学环节,深化教学大纲的内容,从建设更合理的课程建设体系来说具有很大的必要性。近几年学生就业压力越来越大,迫切需要对教学内容和实践环节不断突破创新,才能具备持续发展能力。因此在原有课程体系和实践教学环境的基础上增设本实验平台非常必要。

(二)可行性

教学计划中的相关程序设计课程为学生学习云存储技术、熟悉大数据开发平台、了解最新大数据技术的发展、进行大数据平台基础上的开发、实现对大数据的分析、可视化演示打好了基础。英特尔ApacheHadoop平台是目前大多数大数据处理的技术基础,目前该技术已经发展成熟,并随之产生很多基于该平台的大数据处理工具,可供实验室建设实验平台使用。

二、建立大数据实验平台的基本构想

(一)实验平台人员

实验平台人员负责实验平台的建设、维护,实验设计与指导人员由在大数据相关领域、课程建设以及实践教学方面都有着丰富的经验的教师与实验室工作人员构成,同时与大数据企业进行合作,获得其核心技术人员的支持、培训和大力配合,可以共同组成一个经验丰富、精炼实干的建设团队。

(二)软件调研

大数据的特点为4个“V”:第一,“Volume”,指的数据量大,包括大的数据块,或数据总量巨大,从TB跃升到PB;第二,“Variety”,指的是数据种类繁多,包含大量非结构化数据,例如网络日志、音频、视频、地理信息等;第三,“Value”,价值稀疏性,大量数据中有价值数据很少;第四,“Velocity”,指的是处理速度快,这与传统数据挖掘有很大区别。选择有数据分析基础、在业内发展领先的企业进行调研并选择适合高校规模的合作企业是建立实验平台的重要工作。很多公司给出了可供使用的大数据平台:IBM誖InfoSphere誖BigInsightsTMBasicEdition是一款基于开放源码ApacheHadoop的分析平台,用于分析大量本机格式的非常规数据,支持结构化、半结构化和非结构化内容,以实现最大程度的灵活性;IBM誖InfoSphere誖Streams是一个高级计算平台,帮助用户开发的应用程序快速摄取、分析和关联来自数千个实时源的信息;惠普公司Vertica分析平台6.1,能够通过Hadoop分布式文件系统连接器来优化大数据;ClearStoryData大数据分析新创公司,通过Clearstory,公司客户可以将自身的数据与行业的公共数据融合,寻找统计上的新视角,目标是取代目前市场上的主流数据可视化工具,包括QlikView和Tableau等老牌工具;Informatica9.1提供首款Hadoop编译器Hparse,这是一种针对Hadoop而优化的数据转换环境,该软件支持灵活高效地处理Hadoop里面的任何文件格式,为Hadoop开发人员提供了即开即用的解析功能,以便处理复杂而多样的数据源;Datameer:Hadoop海量数据分析平台允许用户在缺乏技术知识的情况下能够分析大量数据;Infochimps平台以其完备的基础设施和专业知识,为客户提供端到端的大数据解决方案,Infochimps是一家位于美国德克萨斯州奥斯丁的创业公司,2012年2月从数据市场转型为大数据平台提供商后获得谷歌投资;甲骨文大数据机———OracleBigDataAppliance集成系统融入了Cloudera的DistributionIncludingApacheHadoop、ClouderaManager和一个开源R;微软SQLServer新增PDW功能,可以帮助客户扩展部属数百TB级别数据的分析解决方案;亚马逊将MapReduce作为一项服务,其弹性MapReduce编程是一项能够迅速扩展的Web服务,运行在aws的亚马逊弹性计算云和亚马逊简单存储服务上;Teradata是企业级数据仓库(EDW)的领导者,在结构化数据、半结构化数据和大部分非结构化数据领域几乎没有很大成果,因此收购了AsterDa-ta———一家提供SQL-MapReduce框架的公司。AsterData是高级分析和管理各种非结构化数据领域的市场领导者和开拓者,为Teradata带来了大数据分析市场商机。

(三)方案实施

实验平台的设计同时立足于大数据技术的发展的前沿性与本学院学生专业特点,与学生前序的理论、实践课程均有良好的衔接,符合人才培养计划,深化了教学大纲的内容,并针对不同专业学生设计实践学时、内容和难度。本实验平台可以同大数据行业中的公司科研部门共同合作建设,双方确定在人才培养、师资培训、共建实验室和实训基地、推动大学生校外实习和社会实践活动的开展等方面开展全面、广泛、长期、深入的合作。该实验室建设将丰富实践教学体系,也可推动学院科研项目立项、新课题研究、专项基金申请和联合开展商用项目开发等;该实验室使师生能接触高新大数据开发平台,了解最新大数据技术的发展,进行大数据平台的开发,实现对大数据的分析、可视化演示,增强学生的动手能力并提升就业质量;与此同时,提升了教师的项目管理能力和教学能力。

三、结论

信息平台论文范文第5篇

数据通讯是当前十分活跃与热门的计算机与信息技术的应用领域。某大型通信公司开发了其业务的主要支撑平台,在这里,我们简称之为“通信信息服务平台”,用于在全国与全球开展数据业务的需要。该平台是一个典型的Java技术应用于Internet的项目。

作为信息技术公司中的一名技术骨干,我有幸参加了该系统的分析与设计工作,承担了相当多的Java应用开发任务。此系统中的软件部分大多由Java来实现,在全系统中我们是这样来用Java构架系统的:

(1)本系统可分为4层,分别是Browser、表示层、中间件层和数据层。

(2)表示层用Java中的Java Script来实现页面输出。

(3)中间件层用Java来实现CORBA,即实现Component(构件),主要实现业务逻辑的封装与复用。

(4)数据层主要是数据库和存储过程的实现。

我们在应用Java技术时,所采用的技术和策略可大致上归纳为以下5个方面:

(1)使Java Script尽量简单,因为Java Script在我们系统中是放在服务器端执行的,该语言是通过一个解释器解释执行的,相对速度很慢,我们采用了两台HP前置机来运行Java Script,但是其运行速度还是不理想,所以我们在设计中把Java Script仅用来显示从中间件层所得到的数据,生成动态页面。在最初的设计中表示层(Java Script)曾承担了一些业务逻辑处理操作,导致效率不理想,因此,我们不得不尽量地减少Java Script的程序量。

(2)用Java实现CORBA时,应尽量考虑共享和复用。在本系统中,最初的设计是让Java在实现Component时,只是执行一些数据库表的操作,导致表示层的负载较大。后来,我们重新设计时,总结归纳了所有的Use Case,找出了其中可供共享和复用的接口,把相同的业务逻辑操作封装到一个接口中去。因为 Java的执行效率比Java Script要高,因此提高了系统效率。

(3)在别的项目中,我们曾大量地使用过Java中的JSP技术和Servlet技术,一般人可能不能区分这两种Java技术的区别。为了得到系统的一些执行速率的数据,我们采用了一个著名的压力测试软件——Load Runner来测试这两种技术的差别。测试表明:用JSP和Servlet完成同样的一个操作,并且保证是在相同的测试环境中(相同服务器、压力测试工作站与数据库环境),得到的测试数据却有着很大差别,JSP完成一个操作的平均执行时间大致会是Servlet程序的两倍。在一个企业级应用项目中,这可能是一个很关键的瓶颈。因此,我们得出的结论是:在可能的条件下,尽量地多使用Servlet。当然,与Servlet相比,JSP编程快速,修改方便,在访问量不是很大的应用场合下也是可以接受的。

(4)使用Java作为整体解决方案时,应尽量使用相同版本的JDK。在用Java作为编程语言的项目中,几乎大多要遇到“汉字”问题,即Java在没有经过转换的情况下,在输出汉字时,很可能会出现乱码。采用不同版本的JDK,解决的方案是不一样的,比如V1.2.2版本的JDK和V1.3版本的JDK解决方法就会有一些不一样,把V1.2.2的Java程序放在V1.3的JDK中,就不能顺利输出汉字了。其根本原因在于Java使用了Unicode编码,和我们中国的国标编码不一样。所以在这个意义上一些人竭力鼓吹的“一次编写,到处运行”似乎不一定能在所有的场合都行得通。

(5)使用Java时,应尽量遵从软件规范。在Java中有一个JVM的概念,即在Java虚拟机中使用了一个垃圾收集器,专门用来回收内存。但是该垃圾收集器在给编程人员带来方便的同时,也隐埋下了隐患。在程序设计中,并不能强制执行垃圾收集器,所以,开发人员不能确定某对象是否已释放,常常让编程人员养成依赖自动收集的坏习惯,因此我们要求:在Try,Catch之后必须明确要求回收内存(当然,也只能是通知垃圾收集器来回收垃圾),这样可以有效地提高系统稳定性。

以上这些实用性的技术与策略,是我们在实践中的一些实际体会,仅供各位开发人员根据实际情况参考。

当然,在使用Java作为解决方案时,也会遇到很多让我们头疼的问题,这些问题导致同时执行的并发性比较差,系统速度慢等等。归纳起来看,我们曾遇到过的主要具体的问题有:

(1)用Java来实现CORBA中的Component,有时效率会比较低。

(2)用Java来建立数据库连接往往会比较慢。

(3)用JSP编程时容易导致系统信息的扩散。比如,如果有黑客攻击一台运行JSP程序的服务器,他可以故意地输入一些非法字符或异常信息给JSP程序,于是程序执行将出现异常。这时,就会在页面上打印出相应的错误信息。很不幸的是,这些信息极有可能暴露出这台服务器的JDK的版本号与路径信息等内容。这往往容易让黑客们有机可乘,有可能去抓住系统的漏洞。

在发现了这些问题后,我们经过仔细研究,找出了一些解决办法。比如:

(1)既然用Java实现Component比较慢,我们就尽量减少Component所执行的业务逻辑量。争取把能够放在存储过程中实现的操作,尽可能在存储过程中加以实现。众所周知,数据库的存储过程操作,比起在Java程序中执行数据库操作要快得多。

(2)既然用Java建立数据库连接比较慢,我们就可以把数据库连接封装成连接池(Connect Pool),从而能非常有效地提高系统效率。我们也曾经用“Load Runner”作过压力测试,使用连接池比不使用连接池的速度要快上3~5倍。

(3)为了对付JSP程序与Servlet程序会打印出异常系统信息的问题。我们曾查阅了很多JSP或Servlet的资料,最终是毫无头绪。但是我们可以换另一种思路,即是不从程序下手,而从Web Server着手,我们可以把Apache配置成为使这类异常信息不再打印出来,而是使之仅出现一个通用的异常说明的页面,这样,就能十分有效地解决这个问题。

在我们使用Java作为编程语言的这么多项目中,绝大多数是比较成功的。Java语言作为一种快捷、稳定的计算机语言,开发基于因特网应用的项目大多是相当稳定和比较适用的。

在我个人看来,Java的应用前景十分光明,大体上可以着眼于以下方面:

(1)在因特网上将会有更加广泛的应用。

(2)在嵌入式设备中,Java也大有用武之地。比如,在最新推出的Java技术中,Java已经进入了手机领域。

(3)Java程序大多以线程运行,占用资源少,会逐步代替ASP与CGI程序。根据第三方测试表明:JSP程序比ASP程序要快2倍以上。用JSP代替ASP应是大势所趋。

(4)Java在无线互联网中的应用将会更加广泛。Java支持WAP,可以方便地用Java开发WAP程序,实现WAP应用。

(5)Java与XML的无缝连接使Java在数据传输和异构网络通信方面有着很大的优势。