前言:想要写出一篇令人眼前一亮的文章吗?我们特意为您整理了5篇云计算技术的研究重点范文,相信会为您的写作带来帮助,发现更多的写作思路和灵感。
关键词:云计算技术;电信经营分析系统;海量数据;分布式存储、 SMB-DP算法;AGB-ETL算法
中图分类号:TP311.13
随着信息技术的高速发展和普及,各个领域都积累了海量的数据并且还在迅速增长,数据量动辄以Tbyte计。海量数据持续消耗着计算机软硬件资源,资源的无限制扩张,使得单个计算机无法承担起相应的重任。目前电信行业在数据分析的支撑方面注意面临三个突出的问题,一是电信业发展到今天,历史数据的存储需求和电信业务量的不断增大,电信运营商的数据已经变成海量,中等规模的省级移动公司,每天的数据增长已经达到2-3TB,如此海量的数据需要计算机具有极强的处理能力和足够大的存储空间;二是各级运营商都是各自为阵,配备硬件设备和存储数据资源,造成了计算资源和存储资源的严重浪费;三是现有的数据库查询功能已经满足不了电信行业竞争日益激烈的决策支撑和服务。电信经营分析系统(BASS)作为电信业务支撑系统的一个主要支系统,数据的分析处理和挖掘对电信业务的发展起着重要作用,利用云计算平台,整合优化资源,形成具有超级计算能力的资源池,提高资源利用效率,处理数据并为用户提供服务。
1 经营分析系统概述
1.1 经营分析系统简介
电信经营分析系统是电信运营商的核心系统之一,通过对底层数据的抽取、处理、装载,实现数据的界面化展示,主要展示公司KPI指标,满足企业决策需求和业务支撑发展的需要。
电信BASS采用两级系统架构,由位于集团公司一侧的一级BASS和位于省公司一侧的省级BASS共同组成,两级系统之间通过一定数据通信网进行数据通信。如图1所示。
1.2 电信BASS面临的不足和挑战
目前电信BASS系统还是以指定数据库服务器为载体进行数据的运算和装载,但由于业务发展的需要和对数据分析要求的不断提高,目前BASS系统主要面临以下几个突出的问题:
(1)依靠单服务器存储数据的模式已经不能适应海量数据的急剧扩张,无法承载如此高的数据量。
(2)海量的数据源无法做到资源共享,经典的数据分析案例很难被借鉴和参考。
(3)服务器一旦出现故障,经分系统将会立即瘫痪。
(4)底层数据的存储和导入目前还需人工处理,因人工导入数据需要一定的周期性,所以无法满足经分系统实时访问最新数据的需求。
1.3 电信BASS海量数据产生的原因
为了适应通信业日益发展的需要,电信BASS系统面临着海量数据如何高效存储和处理的挑战,电信BASS海量数据产生的原因如下:
(1)现有数据随着时间的推移和业务的发展,数据信息每天都在不断增加,如客户资料信息,语音通话信息,短彩信发送信息,数据流量信息等。运营商需要将这一系列数据进行数据挖掘,提取有价值的营销资源信息,为业务发展提供更好的决策支撑。
(2)运营商期望充分运用已有历史数据挖掘新的商业契机与营销机会,也就意味着历史数据将会为运营商提供大量的潜在价值信息,历史数据中往往蕴含着有利用价值的潜在市场发展规律、包括市场发展的潜在危机和市场发展的重大机遇,因此需要将大量历史数据进行长期保存。
2 云计算的特点
(1)超大规模集群:集群可以将本地及异地的计算机资源有效的整合起来,形成具有一定规模计算能力的资源池,提高设备计算能力。
(2)分布式存储:大量的数据信息存储在云端物理位置相互隔离的主机当中,提高了数据的存储性能、安全性能和容灾备份性能。
(3)高扩展性:云端计算集群的规模可以动态伸缩,按需提供服务,实时满足计算的需求。
(4)低成本:云处理实际上是大幅提高云端设备的处理性能,客户端的处理性能则要求不是很高,对企业来说,无疑大幅减少了成本支出。
3 基于云计算技术的经营分析系统
基于云计算的经营分析系统不但改变了以往依靠单一服务器存储、计算的服务模式,而且提高了资源的利用效率和节约了企业成本,涉及的关键技术主要包括数据存储、数据管理、编程模式等,解决的主要问题是海量数据如何存储、海量数据如何索引和定位,海量数据如何抽取、海量数据如何更有效的运算。
3.1 海量数据存储技术
通过分布式的异地存储是解决海量存储的有效方法。云计算技术发展到今天,目前数据存储技术主要有Google的GFS(Google File System)和Hadoop开发团队开发的GFS的开源实现HDFS(Hadoop Distributed File System)。
(1)Google 的GFS。GFS是由Google设计并实现的一个分布式文件系统,其中包括数据的存储、管理、定位等多层面,其主要框架架构是把大量安装有Linux操作系统的普通PC形成一个具有庞大的存储处理能力计算机集群,分别有控制节点和存储节点构成。
(2)Hadoop的HDFS。HDFS采用管理节点/存储节点架构,如图2所示。一个HDFS集群由一个管理节点和一定数目的存储节点组成。
GFS与HDFS技术有效地将异地计算机资源整合在一起,形成具有超大存储容量的计算集群,同时,为了优化系统的性能,提高资源的数据利用率,需要对数据进行并行处理,目前省属各地州运营商的存储系统都是各自为阵,独立存储,信息的存储效能不但低下,而且在信息共享方面和信息处理速度方面存在瓶颈,云计算的分布式存储技术将能够有效解决面临的这一突出问题。
3.2 海量数据管理技术
要高效管理和处理大规模数据集,首先必须解决如何在庞大的数据中心定位所需数据的问题。如何能够快速在异地分布的存储节点上找到所需的数据,提高数据管理效率是面临的又一突出问题,目前电信BASS经分系统主要采用互动管理来实现对经分数据的调动和管理,主要还是通过ETL调度管理和服务管理两个方面来实现,ETL负责数据的抽取、转换、装载,服务管理负责数据访问的安全和效率。现在这种技术已经不能适应当前业务发展的需要。云计算数据管理技术主要有Google的Big Table和Apache的Hbase等,Hbase是一个分布式的,面向列的开源数据库,它不同于一般的关系数据库,是一个适合于非结构化数据存储的数据库。
3.3 编程模式(分布式运算模式)
Map/Reduce的编程模式是目前云计算的核心和关键。任务如何分解,分解后的任务运用什么技术如何分配给终端去处理是其主要任务,Map/Reduce实际上就是任务分解和任务汇总的集合,在电信行业当中,其实主要是数据的分解和汇总Map/Reduce的工作模式如图3所示。
Map/Reduce的实现机制使得任务如何分解和合并更加流程化,为后续的分布式计算提供了有利的条件。
3.4 海量数据处理模式
(1)现有经分系统中海量数据的一般处理方法。越来越多海量数据的出现,使得现有BASS系统在处理数据的容量存储、处理速度及兼容性方面存在诸多不足,目前数据处理的一般方法有如下几种:
1)通过高效的数据库进行集中处理,如SQL、ORACLE数据,但一旦服务器出现故障,经分系统将会直接崩溃,无法运行,容灾性能较差。
2)高效的SQL语句,由于对数据提取精确性的要求,要从海量的数据表中提取有效数据需要编写更简洁和高效的SQL语句。
3)分类存储。对海量数据按类别进行细分,再对其进行分区存储
4)建立合适的索引。对海量数据进行处理时,需要对数据进行分类、排序、这样在数据提取和处理时能够快速在服务器中定位。
(2)基于云计算技术的海量数据ETL处理算法的改进设计。由于目前ETL算法在对数据的处理和任务调度方面存在诸多不足,本文从以下两个方面进行了改进和处理,一是通过借鉴Map/Reduce原理,将其充分运用到ETL的数据抽取环节,从而做到数据处理更高效,(简称SMB-DP)算法;二是对ETL任务调度进行优化,主要是将任务的优先级和任务处理时间考虑在内(简称AGB-ETL)。
整个算法的核心思想是:将原来的多次抽取数据改为一次性抽取数据,通过借鉴Map/Reduce原理对源数据进行拆分,形成多个目标文件,此次过程称之为SMB-DP算法;然后再将这些目标文件的任务优先级及运行时间考虑在内对这些任务进行分配调度和数据处理,此过程称之为AGB-ETL算法。具体如图所示。
SMB-DP算法的基本思想是:将现有ETL处理流程中的多次抽取化成单次抽取,拆分后再进行并行的转换装载等处理。
该算法的实现关键包括单次抽取、对源数据进行拆分和并行转换装载三部分。具体描述如下:
(1)单次抽取。通过关键字段把所要提取的数据源表进行有效的合并。假设A表需要读取“1、2、3、4、a、b、c、d ”8个字段,假设B表需要读取“4、5、6、7、c、d、e、f”8个字段,那么可以一次性将源表所需的11个字段从源表中抽取,然后从中抽取A、B各需的字段,分别保存成两个文件进行存储。
(2)对源数据进行拆分。抽取数据的目的最终是为了拆分数据,通过借鉴Map/Reduce原理,把数据文件按照一定的字段划分后存储的云终端当中。
(3)并行转换装载。对于拆分后形成的多个目标文件,可以采用各种有效的并行处理技术进行并行的转换及装载处理,如将多个目标文件分配到不同的计算终端去运行,有效提高BASS的处理效能。
AGB-ETL算法的基本思想是:以任务优先级和任务运行时间为首要遵循的分配原则,将最需要处理的任务分配到处理时间最少的终端中去,这样既提高了资源的利用率,又满足了任务处理的实时需求,从而达到了资源的优化配置和调度。
目前常用的ETL任务调度算法主要有顺序调度、随机调度和基于贪婪算法的任务调度等三种。
(1)顺序调度:按照顺序将需要处理的任务逐个分配到终端中去处理。这没有考虑任务的执行时间,执行效率比较低。
(2)随机调度:从需要处理的任务当中随机选取任务并随机分配到任务组中,这种调度算法随机性很差,也是没有考虑任务的运行时间和任务优先级,因此处理效率也很低下。
(3)基于贪婪算法的任务调度:相对于前两种算法,这种算法的处理性能和效率有了较大的提高,先通过系统内日志记录算出任务最近几次的运行时间,一般取10次左右,算出任务的平均运行时间进行排序,一般将任务运行时间最长的分配到当前估算执行时间最小的任务分组中,由于没有考虑任务的优先级,因此任务的处理效能依旧不是很完善。
AGB-ETL算法涉及的过程主要是三个方面,描述如下所述:
(1)执行优先级的确定。优先级是根据相关业务规范以及移动BASS实时性处理的需求设定的。首先我们需要设定任务优先级的规范标准,以阿拉伯数字1为最高优先级,以此类推。
(2)估算时间的确定。一般我们会从系统日志中获取每个任务的执行时间。通过查询系统操作日志,获取任务最近N次的执行时间,我们就可以算出该任务的平均执行时间。
(3)处理流程的描述。
1)首先将任务进行调度的判断,如有则加入队列,没有则等待。
2)将任务队列进行排序,排序的原则是优先级从高到低,优先级相同的,再按照任务执行时间从高到低排列。
3)将最需要处理的任务放入执行时间最少的单元当中。
4)更新该任务分组的总估算执行时间。
5)判定任务队列L是否分配完毕。
4 结论
针对电信行业所面临的海量数据处理的突出问题,本文通过对云计算关键技术研究应用,提出了基于云计算技术的经营分析系统对海量数据的处理和优化方法;通过对海量数据存储、海量数据索引和定位、海量数据抽取与处理、海量数据分布式运算等几个方面的研究,特别是对海量数据的抽取和处理,提出了基于拆分机制的海量数据处理算法和改进的基于贪婪算法的ETL任务调度算法,从而对海量异构源数据进行快速抽取、有效拆分和并行处理,可以更加合理地进行任务调度,实现资源的优化处理和按需分配。
参考文献:
[1]杨胜琦.基于复杂网络的大规模电信数据分析研究[D].北京邮电大学硕士学位论文,2010,5.
[2]孙少陵.云计算变革下电信运营商的机遇及中国移动云计算探索[J].移动通信,2010,11.
[3]孔令山.运营商虚拟化实践与思考.
[4]张海涛.基于云计算平台的电信经营分析系统研究.
[5]王金伦,樊秀菊.基于云计算的新一代电信业务支撑系统测评平台的设计与实现[J].计算机应用与软件,2011,3.
[6]秦润锋,樊勇兵,唐宏,金华敏.开源云计算管理平台技术在电信运营商私有云建设中的应用研究.
[7]段云锋.中国移动经营分析系统建设及应用电信经营分析.
[8]毛晓晨.电信经营分析系统中的应用和对策江西通信科技.
关键词:图书馆 云计算技术 应用
云计算技术随着计算机技术以及网络技术的快速发展而日渐完善与成熟,同时该项技术在现代图书馆中也起着十分重要的作用。云计算技术在图书馆中的运用进一步提升了图书馆的网络信息管理和服务能力,而且不仅使得图书馆的遭侵入率大大下降,同时也使得信息外泄率下降。总之,通过对信息资源的管理和存储,云计算技术利用先进的网络手段极大的促进了现代图书馆的快速发展。
一、云计算技术概述
云计算实际上就是一种新的对计算机和互联网进行充分利用的方式,具体来说就是从并行处理、网格以及分布式处理计算发展而来的新技术,其通过处理器资源和数据的有机组合,使得数据中心能够类似于互联网的形式运行。云计算这种模式能够将虚拟的、可以扩展的、动态的信息资源连接起来,从而提供随时的访问和分享。这样通过云计算计算,在全球任何地方的数据中心或者服务器就能够实现对某一相关资源和功能的使用与管理,其实际上就是作为互联网来服务的。传统的IT设施在使用时不仅需要进行机房的建立,而且还要购买足够的设备,并配备相关技术部门的IT人员。为了企业信息基础设施的完善运转,传统的IT设施甚至还要组建一支专门的开发维护队伍,因此其应用十分复杂。云计算技术的出现不仅使IT架构实施得以简化,而且还可以让IT应用实现按需付费、实时定制和随时取用的功能与特点。
二、云计算技术在图书馆中的应用分析
(一)图书馆资源海量存储和并行计算对云计算技术的应用分析
基于云计算理论,海量存储模型属于一种面向海量资源数据的云存储。该模型主要是针对图书资源的存储需求,如全国性大规模以及行业性和区域性的图书资源等存储需求,基于云计算平台实现跨域自适应云文件系统。另外,针对海量元数据资源特征,海量存储模型的研究开始面向现代化图书馆结构化资源的特定云存储模型,同时提出了结构化元数据存储机制,该存储机制和方法具有高效、简单以及适应现代化图书资源特点的优势。对于并行计算模型来说,其参考Map Reduce云计算框架,根据全国性大规模以及行业性和区域性的图书资源海量分布特征,开发适合现代化图书馆图书资源的索引和检索算法。并行计算模型利用云计算的海量数据处理优势,其能够实现对特定海量资源检索逻辑的定义,提高了图书资源的检索和索引性能。另外,该项模型还能够实现分布式检索算法,该算法能够适应海量图书资源,从而大大提高了图书资源检索的效率,最终为海量数据存储的高效并行检索提供支持。
(二)图书馆海量资源检索对云计算技术的应用分析
这一方面对云计算的运用主要集中在图书馆海量资源检索的统一服务与调度中。对于图书馆来说,其基本上都具有自己的电子资源数据库运算模式和服务系统。针对图书馆的这一特性,需要建立一个统一调度管理模型,而且该模型必须能够实现分类、分发去重以及检索调度。对于这一模型的建立,需要在多个电子资源和多个图书馆之间进行构建。基于开放链接的标准,统一调度管理模型采用向第三方提供电子资源注册的标准、以动态脚本技术以及多级调度制定调度的规则以及接口等方法的调度管理模型。海量资源检索对云计算技术的应用使得图书馆的每一个检索请求都能够成功发送出去,而其检索结果也能够快速的反馈到用户手里,最终实现了充分有效的利用图书馆每个电子资源的目的。作为并行计算和海量存储模型的应用升华,统一调度管理模型的开发具有十分重要的地位。
(三)图书馆咨询服务对云计算技术的应用分析
首先,对于图书馆区域联合虚拟参考咨询服务的构建来说,其要能够有效整合信息资源,并实现资源的无缝衔接。另外,为了与用户进行多渠道沟通,该参考咨询平台还要能够提供多种途径,方便用户提取所需信息。联合参考咨询服务平台的构建,云计算技术能够帮助其实现对各个成员馆的多个虚拟咨询台的同时控制,并达到数据库跨库检索的目的。总之,云计算技术的应用能够帮助图书馆以及用户实现快捷而有效的咨询服务。
其次,对于图书馆服务器无间断运行来说,云计算技术的应用能够实现对服务器中数据的快速拷贝。由于图书馆内的服务器中集中储存了馆内的所有数据,所以一旦该服务器出现问题,那么图书馆的所有数据有可能会丢失,从而导致该馆将无法为用户提供服务。应用云计算技术,该技术中含有上百万台服务器,如果其中一台出现问题,那么其他服务器也能够将图书馆中的数据快速的完全拷贝到运行良好的服务器中,并让该服务器来及时为用户提供正常服务。
三、图书馆中云计算技术应用的要求
首先,必须掌握云计算技术在图书馆中的使用需求,如要对书籍借阅需求以及管理模式进行充分了解和把握,按照该技术水平,确定其在图书馆应用中的可实现性。同时,对云计算技术的运用要求通过谈话和讨论的方式掌握清楚,并对图书馆工作人员在工作过程中遇到的问题进行详细了解。这样通过对这些问题的了解和掌握,通过系统设计,结合当前技术水平来满足图书馆的需求,并切丁云计算系统目标。
其次,在云计算技术应用过程中,要根据以往经验对应用方案进行合理改动。设计人员在使用云计算技术之前必须要进行设计方案的初步制定,该方案应当包含系统结构构成、系统具体情况和描述以及各个系统的具体实施计划。另外,要结合文字和图形的方式来进行设计方案的撰写,从而使得整个方案既形象又具体,方便相关人员理解。
四、结语
综上所述,在现代化图书馆的建设中,云计算技术起着十分重要的作用,其为行业图书馆群统一服务的实现提供重要的技术支持。因此,在图书馆未来的发展中,一定要根据以往经验,对云计算技术进行不断优化,从而为现代化图书馆的完善构建提供技术支撑。
参考文献:
[1]晋征.云计算技术在图书馆中的应用探讨[J].网络安全技术与应用,2015,(04).
【关键词】云计算 数据库 存储 检索
随着信息技术的快速发展,数据存储和处理技术也随之取得了快速发展。云计算技术也应运而生。与传统的数据处理方式相比基于云计算的分布式高性能数据库优势更加明显。基于云计算分布式实时数据库能够实现数据的永久存储,同时它还能够尽可能地在同一地点处理数据,这样可以有效降低数据传输时间的消耗。
基于云技术的分布式实时数据库能充分利用高性能广域网络。这种挂数据库主要是通过数据流的形式来对存储云中的数据来进行专业化地处理,通过这种方式定义的计算函数就能够对存储云所管理的刷数据进行有针对性处理。
1 云计算技术介绍
研究分布式数据库高性能数据存储检索机制,首先就需要掌握云计算技术。了解云计算技术是研究的重要前提。近些年来云计算技术获得了迅猛发展,依托于云计算技术本身的产品也获得了较快发展。云计算技术主要是将效用计算、网络存储、网格计算以及负载均衡等领域进行综合而形成的一种专业性技术。
通常情况下云计算技术本身包含海量数据的分布式存储技术、分布式实时事务提交协议、网络动态路由与负载均衡技术、事务实时调度机制等核心技术。这几种技术对于分布式实时数据库的构建具有重要意义。
2 分布式实时数据库的框架
分布式实时数据库是云计算技术与实时数据库技术深度融合的产物,该数据库主要是通过计算机集群来进行构建。该数据库具有可扩展、系统性、可靠性、可维护性高等特点。负载均衡、事务调度、冲突处理、数据存储等是其主要内容。分布式实时数据库主要是通过分布式通讯服务平台的客户端结构接入到该平台中的。某个节点在接入分布式应用服务之后就可以实现与同样服务的其他节点的有效连接。
多台数据服务器的数据存储,检索组件则是通过接入平台结成一个统一的数据存储以及数据检索服务来向外提供服务的。这样一种服务机制实际上打破了原来那种单台实时数据处理服务器的孤岛。对于数据的查俊则是用平台接口把客户端同服务平台连接起来实现的。
3 分布式实时数据库存储机制
针对基于云计算分布式实时数据库存储机制的设计,重点是要在规模动态调整能力、数据一致性、分布式冗余存储等方面来进行调整和设计。在实际设计过程中必须要能够达到以下目的:一是适当增加服务器节点从而实现系统并发处理能力,最终提升数据存储容量。二是系统数据存储的实时性和高可用性得到增强。三是实现高效的数据备份冗余,从而来有效避免数据读写失败情况的出现。有的条件下甚至是可以用一致性维护机制来保证备份数据的一致。四是服务器节点可崩溃,恢复以及在线加入。
存储云结构主要是由主管服务器、安全服务器、客户端以及从属节点等构成。这些设备在系统中承担的功能各有不同。主管服务器主要是维持系统内的元数据,提供目录服务、响应用户请求、控制从属节点运行等。从属节点主要指的是那些存储数据的文件,这些节点通常是基于存储云客户端的请求而需要处理数据的节点。从属节点一般只接受主服务器的指令,客户端、从属节点的关系以及从属节点之间的关系则主要是由主节点来进行协调。
存储云结构能够实现高速缓存数据连接,这样就能够有效改变同一队节点间,数据传输需要多次连接的现状。该系统的安全机制主要是通过存取控制列表来实现的。存储云结构中的数据需要由存取控制列表来进行控制,客户端IP地质也需要在服务器内部。数据的组织和处理是按照以下方式来实现的:在存储云结构中每个数据文件一般都附有一个索引文件,数据文件和索引文件都存在与相同节点中。复制数据文件的同时,牵引文件也将会被复制。索引文件本身包含每个记录的起始地址以及末端地址。那些没有索引文件的数据文件则主要是通过文件为单位的方式来进行处理。此时就需要通过特定函数来解析以及提取数据。
数据服务器在加入分布式通讯服务平台之后就会形成一个分布式系统整体,服务器节点加入之后就可以通过平台来转发数据并进行备份。在存储云结构中点歌服务节点只需要关注自身的数据接手法以及存储。通过该结构能够实现单个节点数据处理同复杂分布式架构逻辑的分离。这对于最大程度利用实时数据库存储技术具有重要意义。
4 分布式实时数据库检索机制
高性能数据检索具有明显特点,它的查询耗时和结果正确率是影响数据库性能的重要指标。分布式实时数据库检索机制有以下几个特点:一是数据最终的一致性。通常情况下数据在同步完成之前,数据备份之间往往存在不一致情况,此时系统通过一致性维护机制就可以实现数据的最终一致性。二是数据一致性修复。系统中数据一致性恢复主要是通过数据一致性对比、修复机制来实现备份数据间的一致性,从而最终达到分布式的最终一致性。三是查询的一致性等级。所谓查询的一致性等级主要指的是用户指定查询结果的一致性等级。对于那些一致性要求较高的一般四通过数据点的主备份节点来进行查询处理,对于那些一致性要求不高的请求则是要尽可能降低数据检索耗时。
分布式数据查询,按照查询位置不同可以分为当前节点数据查询和备份节点数据查询两种情况。针对备份节点的数据查询主要是通过当前节点数据查询来实现的。本地节点数据查询本身又可以分为实时数据查询和历史数据查询两种方式。历史数据的查询则可分为存档缓存查询和磁盘数据查询。
云计算技术是当前一种先进的信息技术,这种技术在分布式实时数据库中的应用是时展的必然要求。在今后应该不断加强云计算技术的研究。本文首先分析了云计算技术,而后分析了分布式实时数据库的总框架,之后重点分析了存储结构和检索机制。基于云技术的分布式实时数据库中数据存储和检索是其中的重要功能。加强这两方面的研究有重要意义。
参考文献
[1]柴天佑.流程工业信息化的发展状况及对策[J].中国制造业信息化,2003(50).
[2]褚健,荣冈.流程工业综合自动化技术[M].北京:机械工业出版社,2004.
[3]刘云生,卢炎生.实时数据库系统(RTDBS)及其特征[J].华中理工大学学报,1994(6).
关键词:云计算;存储安全;系统设计
在信息化技术不断发展的今天,虚拟经济得到了快速的发展,同时依赖大数据和云计算等先进技术的支撑,很多行业得以快速提升。可以说,社会的发展已经不能离开大数据技术、云计算技术等先进的信息化技术,这就需要在实际的发展过程中不断完善技术体系建设,保证技术应用的完整性与安全性。但是,网络安全问题也伴随着网络技术的不断发展而增长,计算机存储安全系统已经经过了较长时间的发展,但是黑客技术也在不断进步,很多黑客可以通过信息技术直接入侵公司的电脑盗取数据,严重的会造成公司重大的社会经济损失。因为很多计算机存储着大量的机密材料,这也使得窃取资料能够获得较大的经济利益,很多不法分子趋之若鹜,导致目前计算机存储过程中存在很大的隐患。目前只有在云计算技术使用过程中加强网络安全管理,保证信息的整体安全,才能有效地保持各个行业的基本运转。本文针对计算机网络安全存储的应用进行了相应的论述,希望能够为云计算技术模式的安全稳定发展提供技术参考。
1云计算技术概述
云计算是将虚拟和分布技术进行相应结合的技术。在这个过程中满足不同数据对于计算功能的需求,能够提高共享资源的利用,通过软硬件的结合实现信息的合理化存储和利用。在这个过程中,高效地使用了计算机相应的资源、应用程序、IP地址等相应的模式。云计算技术目前可以分为SAAS、PAAS和IAAS的基础构架,能够满足多种业务的计算需求[1]。
2云计算技术网络安全的关键处理技术分析
2.1身份认证
相比于传统的身份认证技术,云计算技术的身份认证具有更高效、快捷和安全性的特点。面对复杂的局面,其可以有效地应用APP数据、动态口令和授权等多种模式,实现身份认证的作用。一是对APP资源的利用。当客户访问资源平台时,可以通过webservice服务的应用程序进行相应的访问。这个过程实现了有效的第三方身份识别,能够有效地满足安全的访问。二是动态口令技术。主要是通过动态口令的发送进行相应的确认,使得通过动态确认的信息得以在硬件上运行。三是授权技术。在这个过程中,可以通过网络协议的授权来进行相应的口令加密,有效确认用户的身份,保证系统安全。
2.2分布存储技术
分布存储技术是目前具有高效性、安全性的一项存储技术。在这个过程中,可以将不同的数据进行合理化的分割,并相对应地进行存储,以实现多副本的存储效果。在这个过程中,就可以有效地避免信息在存储过程中出现丢失的现象,因为始终在系统运行中可以有多个副本运行,保证了网络信息存储的安全。
2.3数据加密
数据加密是目前先进的安全保障技术,通过对称和不对称的加密排列,使用DES算法进行相应的加密。通过网络密匙的方式,对于加密非对称技术,可以使用公钥与密钥两个部分进行相应的操作,这样使得加密算法复杂化。在信息存储过程中,也能够有效地对安全性加以保障。
2.4密匙管理
数据加密在密匙管理过程中是非常重要的。因此如何保障密匙的管理安全具有重要的作用。云计算在运转过程中,其自带的密封系统能够有效地保证密匙访问的功效。大部分密匙的源头需要在客户访问数据时,能够有效地得到密匙的支撑和控制权,这样才能够在应用性和安全性两方面都得到合理的应用。
3安全存储系统整体构架要点分析
信息存储的种类较为繁杂,因此其存储设备是整个云计算技术的核心,利用存储软件可以完成相应的存储过程[2]。基于云计算,在登录过程中使用HTTPS协议,确保相应通信过程安全。通过用户注册环节,使信息在存储过程中保证安全不泄露,而整体的优化过程需要在服务器接收相应的数据后实现解密。处理数据证书同样也在应用过程中起到了关键的作用,可以实现数据的首先加密、然后进行传输的作用,有效地保障了云计算模式下信息存储的安全性。
3.1云构架
在目前云计算技术发展的过程中,存储技术必须要融合云计算不断发展,而使用拓扑结构能够有效地保障计算的优化。因为云计算对于各个节点的要求较高,其动态化的分配功能可以有效地实现计算的自由度。通常需要借助整体的控制器完善拓扑结构。在拓扑设计中,需要明确其重要的影响因素,使其在控制中心的位置能够有效地发送处理请求、科学地进行相应的分配,在实际的应用过程中和云端客户进行相应的对接,实现良好的互动运算功能。在构架设计当中,主要节点应重点进行设置,不仅要与各个节点的通信功能有良好的保证,同时应对整体构架的完善起到积极作用。
3.2云计算服务
在存储系统的整体构架完成之后,需要对云计算服务进行相应的设计。首先,应分析相应用户的需求,针对用户的需求对存储系统进行相应的测试,对其安全性能否抵御黑客的相应攻击进行评分。在这个过程中,找出相应的隐患并加以解决。根据实际检测的结果,对系统进行一定的漏洞补充,从而有效地起到防护安全的作用。云计算的存储功能因涉及海量数据的处理,因此在支撑整个系统运转的过程中,可以使用的主机端的数据和传统存储技术相比,其存储的数据来源更为多样、覆盖面更广。因此,在实际的管理过程中,也应对其安全的存储功能进行重点把控,避免存在漏洞和节点方面的不足。同时在进行云计算处理过程中,不仅需要进行相应的计算功能设置,同时对其存储功能也有较高的要求,需要精准地进行计算和评估产生的相应风险,这样云计算服务的安全性能才能满足实际的要求[3]。
3.3节点管理
在云计算功能当中,节点管理是非常重要的一个过程。其能够有效地分配完成节点,对于整体系统的运行效率和安全性能都具有重要的保障作用,应利用相应的资源进行一定的评估。在综合算法的模式下,对节点进行相应的调整。在云计算的模式下,云节点的管理模型能够有效地应用到实际的过程当中,同时分析节点数量是否能够满足用户的实际需求。通过对客户现有需求的实际满足,使拓扑结构更加完整。如果出现节点闲置的情况,就必须及时进行收回,进行妥当处理,保障信息存储的整体安全。
3.4加密上传
在系统设置中,为了提升安全存储系统的整体功能,需要进行加密上传的操作[4]。目前主要使用明文的方式,这种方式没有使用加密措施,使得信息在存储过程中存在着一定的漏洞。为了弥补这样的漏洞,就必须在系统中使用加密模块,对涉及保密的数据进行加密。这个过程可以用数字信封的方式,使整体的数据得以保护。其原理较为简单,即使用有效的数据密匙,对非对称密匙进行二次加密。这样双重加密的模式,对于云计算背景下,实现信息存储系统的有效安全具有重要的保障作用。该加密模式可靠性较强,使稳定性和安全系数得以广泛提升,但是也存在着操作不是非常简便、技术要求较高等问题。目前也同样可以使用PBE的算法实现精确的数字加密技术,该技术在加密过程中可以有效地提升便捷性,且在加密过程中不需要硬件支撑。实际应用中,多重加密的方式对于安全存储系统的整体安全具有重要的作用,同时也可以利用口令替代的加密技术,更好地实现加密效果。
3.5存储功能优化
通过以上云计算整体构架的设计,有效地提升了存储方面的逻辑性和安全性。在该功能的重点存储功能设计优化过程中,应重点做到以下几点:(1)重视平面和数据通信功能的整体完善。通过平面CPU的强大功能,使用LINUX系统,基于双向数据的传输机制,实现数据包的转发安全功能。依靠ZOL运算,两者可以实现共享共用的通信功能,数据平面可以传输重要的安全参数、信息和反馈功能。通过智能化的操作,有效地规避系统中可能存在的数据存储漏洞。通过平面发挥支撑作用,为数据的初始参数和后期的实时监控创造良好的条件。(2)网络报文处理。针对该功能的优化,重点是要加强重点模块的建设。该功能存在不同的层次,一是网络接口报文的重要信息,其是整体数据的核心组成。二是需要分拣到加密模块,在系统处理之后可以恢复原始保存的格式,这样对于保证信息存储系统的安全具有重要的作用。三是数据加密模块。该模块是整体安全系统的核心部分,应重点对安全指标进行相应的分析。
4系统测试
在云计算模式下,其网络安全存储构架设计之后,需要对其有效性进行整体的测试[5]。利用身份验证等方式注册信息,使用户进行登录并直接进入系统,只有验证密码和相应的账号准确后才能有效地进入。与此同时,系统将自动对用户的基本信息进行判定,即可进行有效的登录分类,一旦出现密码错误问题,需要及时控制用户相应的信息。当用户匿名访问时,要记录用户的IP地址和身份,可以有效地实现回溯等方面的功能。如连续三次输入相应错误的信息,账号锁定不能登录。该系统使用了相应的加密网关系统,在整体过程中确保了其源头数据方面的安全,有效地实现了软硬件系统的同步优化,并将数据平面与平面支撑相互分开,在系统高模块化的处理之后,能够有效地提升网络安全存储方面的性能,大大提高了工作的效率。
5结语
通过以上的论述,在信息化技术不断发展的今天,虚拟经济得到了快速发展,同时依赖大数据和云计算等先进技术的支撑,很多行业得以快速提升。随之而来的是信息化技术应用过程中出现的存储安全隐患,比如黑客技术的不断提高给计算机存储安全带来了很大的危害,其能够快速入侵电脑盗取机密文件,导致各公司较大的损失。因此应不断加强云计算技术在安全体系建设中的应用,通过技术创新发展,使计算机存储防护系统不断改进,为维护我国信息系统安全创造良好的基础。
参考文献
[1]周公平.云计算技术下的网络安全防御技术研究[J].网络安全技术与应用,2021(06):74-76.
[2]常亚楠.云计算技术在计算机网络安全存储中的应用分析[J].信息记录材料,2021,22(05):235-237.
[3]李盛.云计算技术在计算机网络安全存储中的应用分析[J].电子测试,2019(01):117-118.
[4]王红梅.试析云计算技术在计算机安全存储中的应用分析[J].新型工业化,2021,11(05):96-97+111.
1云计算的基本概念
计算机与互联网出现不久,便被广泛地应用于各个领域。在早期“,云”一般是指较为大型的计算机网络。谷歌公司在2007年首次正式提出了“云计算”概念,同时他们还与IBM公司及多所大学进行了云计算方面的项目研究。从此以后“,云计算”便成了一个非常热门的网络词汇、技术词汇,并迅速发展与成熟,各个IT企业都开始相继推出了自己的云计算产品,不少大型企业也开始将云计算技术引进到自身的管理工作中。但是就云计算的准确定义来说,各界都还没有形成一个统一的观点。目前一个相对被广泛认可定义是:云计算是分布式计算、网格计算、并行计算等IT技术的融合发展和商业应用[1]。这个定义是比较全面的,它既认定了云计算的技术特征,同时又体现出了云计算的商业属性,总而言之就是用户能够通过云计算应用,获得更加全面、丰富、廉价的网络资源与网络服务。中小企业通过借助云计算服务,能够使自身的管理工作更加简洁、高效、低成本,这是中小企业提高自身管理工作信息化水平、现代化水平的关键途径。
2云计算技术环境下中小企业管理创新措施
2.1加强对企业IT部门管理的创新
在一个企业当中,IT部门的关键作用是为企业的运营提供IT服务,在传统的企业信息化管理模式下,IT部门主要任务包括IT战略制定、职能划分、运行维护等。但是在云计算技术环境下,IT部门的工作任务就将发生变化,因此需要加强对企业IT部门管理的创新。
首先,从IT战略方面来说,不论是中小企业还是大型企业,其IT战略都可以大致的划分为三个组成部分:跟踪学习战略、应用开发战略、系统维护战略。
(1)跟踪学习战略。主要是识别企业管理所需求的IT技术,关注IT技术的发展,在云计算技术被应用到企业管理之前,中小企业的跟踪学习战略一般都是跟随行业中领先企业的发展,也就是做得好的怎么做,自己就怎么做,即使这会导致操作性过低。在云计算技术出现后,软硬件限制被打破,中小企业应当改变以往的战略方法,要基于自身的实际情况,在自身战略目标的指引下,主动识别、选择真正符合自身所需的技术。
(2)应用开发战略。主要是实现IT技术在企业管理中的实际应用,是现代企业参与市场竞争的一个重要工具。传统的应用开发战略是实现企业管理“自动化”,以提高企业管理工作的效率,但是在云计算技术环境下,中小企业应当将“自动化”与“重规划”联系起来,既要实现企业管理的自动化,又要对企业的管理体系、运营流程进行科学详细的规划,利用云计算技术对业务进行全面的整合,全面提升企业的市场竞争力。
(3)系统维护战略。主要是对企业管理IT信息化系统进行维护,在传统的技术条件下,IT部门需要承担大量的工作内容,如管理软件的升级、系统的安全保护、病毒防护等。但是在云计算技术环境条件下,中小企业作为云计算系统的用户终端,不再需要承担这些工作,云计算供应商将会处理好相关的事务,IT部门主要应当做好的就是系统成本、风险与故障的分析评估[2]。
其次,再从IT人员结构方面来说,在将有关IT的应用转移到云计算服务后,企业只需为自己实际使用的服务付费,并不实际拥有IT基础设施,从IT的前期建设、使用到运行维护,将会大大减少企业的各项投入。IT交付模式到云计算模式的转变,大大减少了企业对IT专业技术人员的需求,IT部门将最大限度地实现瘦身。但中小企业的IT人员要了解云计算系统,帮助企业与云计算供应商沟通,为企业提供满足需求的服务。同时企业IT人员工作的重点将在于维护企业云计算终端的正常运行以及故障的解决,关于软件的升级维护、数据中心的安全、服务器购买等都将由云计算供应商负责。最后,企业的IT人员不仅要精通计算机技术,更要熟悉本企业业务。
2.2加强对云计算管理技术的创新与研发
诚然,借助云计算技术中小企业可以有效提高自身的管理水平,但前提是企业必须要加强对云计算管理技术的创新与研发。中小企业的领导层必须要转变思想认识,不要再以为“大力抓生产”就能够让企业在市场中占据一席之地。在当前这个信息化的时代下,企业必须要加强对科学技术的应用,注重对信息的整合,科学地规划自身发展战略,这样才能真正提升自己的市场竞争力。中小企业尤其要重视对企业云计算管理技术的创新与研发。在云计算技术环境下,运算器、存储器、信息系统等都是统一集中的配置,管理技术研发人员所需要的一切服务、一切资源,都可以通过网络获得。所以,企业要建立能够共享的资源平台,完善相关机制,采取网络组织等灵活的组织方式,加强组织外部和组织内部的交流和沟通,使企业的研发环境得到改善,研发效率得到提高。另外,企业还要保证流程的统一性和规范性,制定有效的政策和制度,并且设置专门机构,切实保证资源共享的实现。企业的研发部门要加强与其他各个部门的合作,提高技术研发效率;企业要与其他机构做好合作,加强与其他机构的沟通,推进企业与各个机构的开发工作[3]。
2.3加强企业人力资源管理创新
人力资源管理是企业管理工作的核心组成部分,在云计算技术环境条件下,企业的人力资源管理也应当做出相应的调整变革与创新。就中小企业而言,必须要借助云计算管理技术,将自身人力资源管理的灵活性特征与规范化相结合,优化业务流程与岗位设置,实现人力资源管理的信息化与规范化。同时,由于云计算技术具有跨时间、跨地域的优势,而且中小企业可以根据自身的实际需求,来选择管理模块,或是制定针对自身特殊业务的管理模块。所以企业在进行人力资源管理的过程当中,既可以不受空间限制,也可以进行更加动态与灵活性的管理,这可以使企业的人力资源结构随时贴合企业战略发展所需。另外,中小企业还应当借助信息化的云计算技术,加强自身的人力资源网站建设,为企业中的员工提供一个直接接触到云计算的途径,让他们也能够对云计算产生一种直观的认识,以“以人为本”的人力资源管理理念,促使企业全员都参与到云计算管理中来。
3结语