首页 > 文章中心 > 大数据迁移方案

大数据迁移方案

前言:想要写出一篇令人眼前一亮的文章吗?我们特意为您整理了5篇大数据迁移方案范文,相信会为您的写作带来帮助,发现更多的写作思路和灵感。

大数据迁移方案

大数据迁移方案范文第1篇

北京伟仕云安科技有限公司(简称伟仕云安)是伟仕佳杰旗下的全资子公司,是伟仕佳杰的云计算业务平台,与国内外知名厂商如VMware、Barracuda、NUTANIX,以及Mellanox等私有云平台,与AWS、AZURE、华为、青云等公有云平台展开深度合作,为企业客户提供专业的云计算服务。

通^整合公有云平台和私有云平台,伟仕佳杰在PaaS平台基础上还提供SaaS增值解决方案,为用户提供企业上云常用的应用类SaaS服务。

云迁移服务将本地数据中心的系统和数据部分或整体的搬迁到公有去中。以迁移到Amazon AWS公有云为例,在不改现有应用和系统架构的情况下,EBS(弹性的负载均衡器)替代了负载均衡设备、EBS(弹性块存储)替代了SAN存储,AWS EFS替代了NAS,AWS S3或Glacier(冷存储)替代了磁带备份。传统数据中心所有组件都可以在公有云平台中找到最适合它的服务。

云备份服务将本地数据中心的备份数据保存至云存储中,充分利用云存储可靠性高、容量大、成本低的优势,轻松实现数据的异地备份。

云容灾将本地数据中心的核心业务系统容灾到公有云中,只需利用网络专线或VPN让两套系统之间保持数据同步,云中的备用系统可以以最小资源(保证数据同步需求)运行,故障切换时,可快速更换计算资源实例类型即可接管生产系统,前期调入少,运行成本低,轻松实现高可用和异地容灾。

云安全安全是数据中心永恒的关注点,云计算也不例外,伟仕云安结合云计算平台的特点,继续为你在云中的安全保驾护航。

大数据传统的数据分析系统,在应对海量数据处理需求时,系统资源无法负载任务强度,处理时间大大增加,处理质量也难以满足需求。互联网时代信息爆炸式增长,亟须重塑数据分析系统,这需要完整的大数据处理服务做支撑。

伟仕佳杰大数据平台从数据的采集,存储,处理到最后的消费,提供批量数据接入、海量数据存储、大规模计算到前端展现等;帮客户实现海量数据的获取、处理、展现、打造一站式数据处理系统。

云桌面(Workspace)是一种由伟仕佳杰联合公有云厂商提供的虚拟Windows桌面与应用的服务,用户可随时随地接入云桌面办公。云桌面服务提供专业的办公应用,帮助用户打造更精简、更安全、更低维护成本、更高服务效率的IT办公系统云办公。

随着移动设备的普及,利用移动设备办公已慢慢变为一种常态,我们的解决方案可以让你在任何有网络连接的地方轻松处理公务。

为用户提供制定业务迁移,从调研、评估、规划设计、POC、生产环境迁移、验证、监控、管理和售后运维的一整套服务方案,助力企业实现平稳、快速的云转型、数字化转型。

通过采用混合云架构,实现VMware vcloud 、Azure、青云、AWS和华为云等统一监管与运营管理,在一个管理窗口即可实现多种云平台的统一监控、运维等操作。从而为用户提供一套公有、私有及混合云并存的方案。

为用户提供公有云和私有云最经济合理的方案和价格,节省TCO。

大数据迁移方案范文第2篇

今年是摩尔定律50周年。50年来,摩尔定律就像一座不停摆的钟表,滴答滴答地提醒着处理器的研发者按照它的周期不断地将产品更新换代,推动着计算技术的发展。时至今日,谁又能说清楚,如果没有摩尔定律,是用户的需求驱动着处理器性能的不断提升,还是处理器的日益强大激发了更多的应用?

这也许是个“鸡生蛋,还是蛋生鸡”的问题,没有答案。不过,眼下炙手可热的大数据潮的确对计算性能提出了更高的需求,实时数据分析和关键业务计算为企业带来的也许就是竞争力,就是利润和真金白银。近日,英特尔至强处理器家族的旗舰产品E7v3背负着实时数据分析和关键业务计算的重任问世,其业务处理应用性能最高可提升至上一代产品的6倍。

更强的内存计算平台

目前许多行业都希望从大量的数据中快速提取可指导实际行动的洞察性的信息,由此带动了对内存计算和大数据分析等新技术的渴求。Gartner预测,到2018年年底,至少有50%的大型企业或机构将通过采用内存计算来实现数字企业战略,届时该市场的收入将会超过95亿美元。

不过,大数据分析目前也面临着诸多挑战,英特尔公司数据中心事业部副总裁Rob Hays表示,有数据显示,只有27%的高管表示他们的大数据计划获得了成功。他认为,可信度、速度和规模是这些企业需要面对的挑战。英特尔至强处理器E7v3正是为实时数据分析而生,它就是要帮助用户在系统内存中更安全地处理和分析大型数据集,从而更快地制定决策,提高运营效率,帮助企业提升竞争优势。

至强E7v3的性能的确是震撼性的。根据Rob Hays的介绍,E7v3针对英特尔事务同步扩展指令集(TSX)进行优化的内存交易工作负载,其业务处理应用性能在全新处理器产品家族的支持下最高可提升至上一代产品的6倍;E7v3具有18个内核,这比上一代产品增加了20%,同时具有45MB的末级高速缓存,使它每小时可处理的决策支持分析会话数量最多可增加70%;它可支持32路配置,而且每个处理器插槽可支持行业内最高的内存容量,如8路系统最高可支持12 TB的DDR3或DDR4内存。当然,安全性和可靠性也都有全新的提升。

现在有越来越多的企业应用SAP基于内存的HANA技术进行实时数据分析。SAP全球战略合作伙伴总监董波说,基于英特尔至强E7v3,SAP与华为一起为中国石化提供了全新的基于HANA技术服务器的解决方案,实际测试表明,从E7v2到v3,为用户带来了2倍以上的性能提升,实现了内存计算性能的再次飞跃。

用友从2004年就开始与英特尔开展一些合作。用友网络科技股份有限公司股份市场部总经理李凯介绍说,用友NC管理软件在至强E7v3平台进行的基准测试和性能优化中取得了不错的效果,相比E7v2,效率提升了1.21倍,各种核心的企业典型业务场景都能够获得大幅的优化和提升。

为与小型机的竞争中再添筹码

近年来,基于x86平台的服务器市场风生水起,其在高端市场不断蚕食小型机的份额,竞争愈演愈烈。这与英特尔处理器性能的不断提升有直接的关系,特别是高端至强处理器的性能不断攀升,促使小型机的用户开始考虑向x86平台迁移。

这从近年来x86服务器市场的增长情况也能看出端倪。去年4路和8路服务器的增长率已经超过了2路服务器,而4路以上的大型服务器、高端服务器正是主要应用在企业级计算。究其原因,英特尔(中国)有限公司数据中心及云计算业务产品市场总监贺晓东分析说,其中企业级用户从传统的RISC架构向x86架构迁移是重要因素,推动了4路和8路服务器的增长。贺晓东介绍说,在性能和TCO方面,基于E7v3的8路服务器与同级RISC架构相比较,性价比高10倍,而TCO却降低了85%,这意味着将有更多的应用移植到x86平台上。

中国太平洋保险公司在过去的2年里向x86平台迁移了100多个数据库、700多核资源。中国太平洋保险集团有限公司资深架构师张文若介绍说,“最初我们将系统部署在小型机上,主要是考虑到小型机的稳定性较好。2012年,我们看到x86服务器和小型机的稳定性已不相上下,于是开始尝试把数据库从小型机迁移到x86平台,最终确定将x86平台作为数据库可选平台之一,并且逐渐迁移非核心关键系统。今年我们计划完成所有非核心关键数据库的迁移,规模可能达到1500核,并开始一些核心数据库的迁移。”张文若说,迁移带来的最直接收益是成本的降低,包括硬件成本和维护成本。

爱普生2015年春季新品

2015年爱普生春季新品会目前在苏州隆重举行。本次会上,爱普生推出了基于爱普生原创技术的全新商用墨仓式打印机系列和世界首款激光光源家用投影机等一系列新品,并展示了其为商务、家庭、商业和工业市场领域提供的100多款产品、技术及40多个解决方案,其中包括:利用PrecisionCore 打印头技术变革打印方式;使用微显示技术(3LCD/HTPS)变革视觉交流方式;利用传感技术制造智能可穿戴式设备,为顾客提供医疗、健身和运动效果的有价值信息,提高人们生活质量;通过机器人自动化操作从而变革制造业等。

开发者云服务联盟成立,千亿美元扶植O2O

首家针对移动互联网企业级和创客级开发者的云服务联盟权威组织――“开发者云服务联委会”日前京成立,主要成员单位包括环信、京东云平台、钱方、本地科技、机智云、七牛、OneAPM、云适配等。由联盟企业联合发起的“O2O成长扶植计划”也同期启动,该计划将为创业者打造一个成长扶植平台,即由联盟成员共同打造储备资源规模达1000亿美元的O2O扶持平台,为O2O创业者提供免费服务和整体解决方案,同时还将在O2O创业热点城市开展免费培训及路演活动,并以hackathon活动形式举办创业大赛甄选种子创客团队等。

神舟电脑彩色战神和优雅系列笔记本电脑

神舟电脑公司近日了2015年年度新品――彩色战神游戏笔记本电脑和多彩优雅系列笔记本电脑新品。无论是以高配置著称的游戏笔记本战神系列还是年初回归的优雅系列,今年神州都在色彩上做足文章。在一贯以黑色为主色调的战神系列游戏本中添加了红色元素,展示了古典的黑红相间以及大气的中国红两种外观。神舟优雅系列笔记本则在轻薄时尚之外再加入多彩元素。本次会上推出的优U5-i3/i5,分别拥有妖娆艳红、深邃雅黑、闪耀纯金等9种外观;定位于商务人群、年轻白领的轻薄时尚笔记本电脑系列则机身轻薄若翼,最厚处仅21mm,重量不足1.9kg。

中金数据与华为达成云战略合作

中金数据系统公司(以下称中金数据)2015年用户大会日前举行。大会上中金数据与代表们分享了其在云计算、大数据等多个领域的最新研究成果以及一批针对行业应用的最新技术、解决方案及成功案例。在“中金数据2015用户大会”上,还举行了中金数据与华为的“云战略合作协议”的签约仪式,双方宣布将强强联合携手打造金融云。今年恰逢中金数据成立10周年。10年来中金数据从BCM起步,逐渐将业务扩展到企业数据中心、云计算和大数据等业务领域,并成长为国内知名的云服务商和领先的行业应用运营服务商,特别是在金融领域基于多年的技术积累,推出智能语音云等一批很受欢迎的大数据行业应用。

网银联盟直销银行发展论坛杭州论剑

中国网上银行促进联盟聚焦金融互联网发展热点,推出直销银行发展论坛系列活动,继今年3月论坛在北京首度亮相后,第一站活动于5月8日在杭州圆满落幕。来自12家银行的直销银行或网络金融相关部门的负责人齐聚杭州,活动主题直指核心,就直销银行业务团队能力建设和网络营销两大话题展开交流。此外,活动还邀请到阿里金融云、蚂蚁金服、中加基金、鹏元征信等机构参与,共同探讨同业、跨业合作推进直销银行业务发展的创新思维。

高德推交通信息公共服务平台

近日,高德联合北京、广州等8个城市的政府交通管理部门,以及北京交通台共同推出“高德交通信息公共服务平台”。基于高德提供的实时交通信息和交通大数据能力,该服务平台为相关交通机构提供“城市堵点排行”、“热点商圈路况”、“权威交通事件”、“堵点异常监测”等交通信息分析,并提出智能出行躲避拥堵方案。这是“高德交通大数据云”系统与相关交通机构进行数据合作对接之后的首款产品。

大数据迁移方案范文第3篇

日前,以“科技创新,成就智慧增长”为主题的“IBM论坛2012”盛大开幕。就如何利用科技创新推动中国企业成长,振兴经济发展成为热议的话题。IBM提出:信息科技正迎来新一轮创新大潮。业务分析洞察、云计算、智慧城市、智慧商务及移动互联为企业提供了可实践的新思路和新手段。以新方式驾驭IT,企业将获得独特的市场优势和增长机会,而软件等领域的创新更将为实现智慧成长提供企业所需的关键能力。

IBM院士、IBM技术创新全球副总裁Bernard S.Meyerson博士表示:“过去十年里,信息技术几乎改变了社会中每个方面。我们正进入重大的跳跃阶段,‘大数据’的到来,开启了信息技术的新时代。使用大数据,可以将解决方案从反应型转变为规范型;借助智慧的解决方案,可以促进行业的转型。我们作为信息技术行业,与合作伙伴共同承担寻找智慧地球解决方案的重任。”

智慧成长的“抓手”

随着大数据时代的来临,各类企业和机构都希望通过有效运用大数据,改善其产品和服务,保证体验品质。IBM认为:业务分析洞察将成为推动企业智慧成长的重要抓手,帮助企业基于大数据进行分析、预估与优化,把信息技术应用提升到一个新境界。

“智慧云”落地

云计算将对IT资源使用和运营方式进行颠覆性创新,以更好支持云计算在全球落地,IBM将软件、硬件与服务解决方案整合为三大类云计算解决方案:“IBM智慧云基础解决方案(Foundation)”,“IBM智慧云行业解决方案(Industry Solution)”,“IBM智慧云服务解决方案(Service)”。据悉,云计算现已成为IBM2015年路线图四大核心发展计划之一。作为这一路线图的一部分,IBM预计2015年云计算收入将达到70亿美元。

论坛上IBM还提出了政府、组织与企业切入云计算的四个路径:通过云化数据中心实现削减IT支出及复杂性(IaaS),通过云化开发平台实现产品快速上市(PaaS),通过云化企业应用实现快速应用支持(SaaS),以及为成为云服务提供商进行的相关的云构建。

实现“智慧商务”

另外,IBM提出了一套领先市场的“智慧商务”理念与实践,不但包括传统的电子商务,更将企业在销售、运营、供应链、市场营销等环节完全打通整合,以推动企业前后台以及ERP系统的大变革。通过“智慧商务”可实时了解客户对营销手段的反应,调整营销方案,重新定位客户并实现与销售对接。商家可实时了解采购者行为,以提供更好的服务并优化运营。

构筑“智慧城市”

新一代信息技术在城市的应用,将启动划时代的城镇化变革。今天的城市,可以收集和分析数据,以监测、衡量和管理复杂的系统;管理者们能够了解、分析交通、水和能源等系统之间的相互作用,并单独或整体优化其运转方式;同时预测其变化和影响,从而制定明智的决策。为构筑智慧城市,2011年IBM正式智能运行中心解决方案,江苏省镇江市已通过此方案实现交通系统中央指挥中心,利用公交车调度系统提升公共交通效率。

应用“移动互联”

通过对移动科技与应用需求趋势的敏锐洞察,IBM宣布对移动应用开发和基础软件提供商Worklight收购,并吸纳和融合Worklight在行业内领先的创新技术,进一步拓展和深化包括移动应用、软件和设备的安全管理及移动数据分析等的终端对终端综合性解决方案。同时IBM已经开创性地整合了WebSphere、Rational、Tivoli、Lotus等核心软件产品的优势,通过端到端的移动解决方案,以提供客户利用移动互联这一至关重要的能力拓展其移动客户、改善其运营效率、实现其业务转型。

IBM大中华区董事长及首席执行总裁钱大群表示。“今天,中国正处在信息科技产业发展的崭新战略机遇期,IBM相信广大中国企业一定能够抓住信息科技升级的重大机遇,充分发挥新一代信息科技的杠杆作用,使信息科技在转变经济发展方式和创建和谐社会当中成为最有力的工具;IBM也愿意贡献自己的专业经验和服务,支持中国企业创新转型,引领智慧的成长。”

会闻赛事

SAP Business One中国峰会登场

本刊讯 日前,首届 SAP Business One 中国峰会在北京拉开序幕。峰会以“助力企业成长,实现远大理想”为主题,探讨如何结合企业信息化规划和SAP 创新技术,会上宣布全线升级产品,并首度公布成长型企业市场战略。

第十一届LSI亚太存储论坛举办

本刊讯 日前,LSI在京举行了第十一届亚太存储论坛。论坛以“加速数据中心”为主题,向与会的客户、合作伙伴、技术人员、媒体等人士,分享了适用于三大类型数据中心的最新解决方案和典型成功案例,会上技术专家还介绍了12Gb/s SAS在技术方面的新突破。

2011年IBM DB2迁移之星大赛圆满落幕

本刊讯 日前,2011年IBM DB2迁移之星大赛颁奖典礼在北京举行。本次赛事为中国企业程序员和数据库管理员们提供了展现自我的舞台。通过举办本次赛事,能够推动数据库工程师和数据库管理员甚至数据库产业重新理解新的计算理念,推广新技术,推动各方共同进步。

微播新品

·Teradata 数据仓库专用平台2690在全球范围内全面供货。较之于上一代平台,其突破性地将性能提升了一倍、数据容量提高了两倍。

·Oracle推出Right Now CX新版,进一步提升客户体验套件性能。该套件通过新的知识API(应用编程接口)、多因素身份验证、Facebook会话访问和改进的需求引导功能等提升客户体验。

·惠普公司在国内宣布推出HP ProLiant Generation 8(Gen8)服务器。Gen8通过自我检测、自我诊断及主动支持,可使客户解决计划外宕机问题的速度最高提升66%。

·椒图科技推出JHSE安全云解决方案,致力于解决云计算信息系统基础架构平台安全问题。

信息安全

产品升级降低风险

CA Technologies推出CA SiteMinder和CA DataMinder升级产品,以进一步构建其基于内容感知的身份认证与访问管理 (IAM) 愿景,并提供针对微软SharePoint 的安全解决方案,以帮助提升信息安全、降低风险并满足合规任务。

呼吁立法保护信息安全

第十一届政协委员,神州数码董事局主席郭为在今年两会上提出《加强个人信息保护立法,为互联网服务保驾护航》提案,倡导通过国家立法来保护公民的个人信息,以确保个人信息安全及隐私得到相关保护,同时有利于国家信息安全和互联网服务的健康发展。

微评天下

打造智慧卢浮宫

本刊讯 近日,IBM宣布与巴黎卢浮宫博物馆合作开展设施及艺术品维护工作,欲打造欧洲第一个智慧博物馆。在更好管理和维护馆内设施和艺术品的同时确保各展馆始终向每年数百万参观者开放。

点评:只有与行业用户的具体需求相结合,IT才能具有更强大的生命力和更大的价值。

随心所欲管理据

大数据迁移方案范文第4篇

黄海海洋观测研究站和东海海洋科学综合观测浮标站是中国近海海洋观测研究系统建设的重要组成部分,通过位于青岛的陆基数据接收站每十分钟进行一次数据采集,包括气象数据(气温、湿度、气压、风速等)、水文数据(波浪、水温、盐度、海流等)和水质数据(温盐、浊度、叶绿素等),日复一日,年复一年。而这些定点、长期连续海洋观测数据将会被存储下来,为海洋科学研究和地方经济发展提供支撑。

这些海量的数据,存储在中国科学院海洋研究所(以下简称“海洋研究所”)的数据中心,为海洋科学研究工作提供了源源不断的科研依据。

海量数据亟待高性能存储

中国科学院海洋研究所是国家知识产权局全国专利战略试点单位,建所 60 多年来,重点在蓝色(海洋)农业优质、高效、持续发展的理论基础与关键技术,海洋环境与生态系统动力过程,海洋环流与浅海动力过程,以及大陆边缘地质演化与资源环境效应等领域开展了许多开创性和奠基性工作,取得了 900 多项科研成果,为我国国民经济建设、国家安全和海洋科学技术的发展做出了重大创新性贡献。

海洋科学的研究是一项浩繁的工程,涉及到基础研究和应用探索,需要对大量的信息数据进行高效可靠的处理。因此,海洋信息系统的建设至关重要。中科院海洋所高性能计算中心的高性能集群计算能力达到了10万亿次/秒,为海洋信息的研究提供了很多便利。

随着海洋科学研究的不断深入,以及全社会对海洋信息需求的不断扩大,海洋信息的需求量和实效性要求也越来越高。为了适应新的形势,中科院海洋所决定建立一个大型海洋信息资料中心,在此基础上建立一个统一的信息存储、处理和系统,不仅为所里科研提供信息,还可以为社会提供海洋信息服务。在这种情况下,建立一个既满足大容量数据存储、保护,具有高可靠性,又能保证多主机、多用户、多应用系统并发数据访问性能的存储系统成为系统建设的关键。

1个中心+5个平台

根除海量存储忧患

结合现实的业务需求,海洋研究所提出构建自己数据中心的想法,并很快进行了项目实施。数据中心的总体方案规划,即海洋科研数据产品研发和数据收集/分发管理平台,通过此平台实现了块数据、文件数据的集中存储与管理。后期,来自近海观测网络、海洋开放共享航次、潜标观测以及大量历史调查、分析测试这五大平台的数据将逐渐迁移、存储到该数据中心上,实现统一存储和管理。同时,数据中心还将管理运行近海观测网络陆基站,承担近海观测网络数据的接收、处理和数据产品。

数据中心存储系统每秒读写可以达到50万,即使是海洋研究所极高的并发数量,也可以游刃有余。在扩展性方面,存储资源池可以无缝的接入新的存储设备,并且随着容量的增加,数据存储性能也将呈现线性增加的趋势,满足其海量存储的需求。

存储安全

助力数据中心维稳

那些数量巨大、难于收集、处理、分析的数据集被业界人称大数据,亦指那些在传统基础设施中长期保存的数据。这里的“大”有几层含义,它可以形容组织的大小,而更重要的是,它界定了企业中IT基础设施的规模。海洋研究所收集存储的海洋数据信息就是大数据,对于海洋研究所数据中心数据的安全性一直备受瞩目。因为定量数据采集工作关系到整个研究所的评估评价,数据的准确性、全面性和安全性至关重要。

比如中国科学院的科考船,出海考察带回来的从中国近海到西太平洋的海洋综合观测数据,攸关西太平洋暖池变异对中国气候的影响、临近大洋对中国近海环境的影响、海洋生物多样性和深海环境与生命探测等课题的研究,一旦丢失,损失不可估量。

海洋研究所在数据中心的建设中增加了云存储的技术,为海洋研究所数据中心吃上了“定心丸”。信息中心在存储设计时采用全冗余架构,实现零单点故障,可以说在安全性上无可挑剔。

在数据的备份保护上,海洋研究所信息中心也做了充分考虑。基于存储设备的快照、卷复制等功能可以实现海洋研究所数据的本地备份。另外,在发生火灾、地震等自然灾害,本地备份的数据也同样会遭受破坏,同样会对系统造成灾难性后果。存储技术可提供更高级别的数据保护功能,可以实现基于存储的数据容灾,在异地存放数据副本,即便发生了不可抗力带来的灾难时,也可以快速地恢复数据,保证科研所宝贵的数据资料不丢失,保障海洋科研工作的顺利进行。

此外,在业务连续性方面,海洋研究所原有的大量数据及系统,可在不中断应用的情况下,轻松地转移到新的存储系统中,实现了真正的无缝数据迁移。

效率提升 成效显著

“之前的信息平台数据存储及管理分散,科研部门调取数据非常麻烦;现在数据都将集中存储在数据中心,点点鼠标,数据就出来了,方便了我们的科研人员,工作的效率明显提升了”,海洋科研所数据中心负责人介绍。

海洋研究所每天都有大量的海洋数据采集并存储,过去分散、粗放的数据存储方式已经成为科研工作高效进行的“绊脚石”。研究所信息中心打造的数据平台实现数据的融合、统一管理,使系统平台管理变得更集中、更简单,减少了管理人员的负担;同时服务器、存储和网络的自动化操作也减少了大量潜在的人为错误,保障了系统的可靠性,提升了工作效率。据称,因为存储、调取数据的速度大大提升了,海洋科考项目的周期预计将缩短近30%。这也就意味着,研究所将会腾出更多的时间、更多的精力,做好海洋科研工作,早日达成有国际影响力的海洋科学和技术研究机构的目标。

大数据时代下的安全思考

大数据迁移方案范文第5篇

作为大数据系统软件,云谷是浪潮大数据战略落实的关键点,浪潮能否由此握住大数据的七寸?

从数据库一体机到大数据一体机,软硬垂直整合不仅是IT厂商的产品趋势,也成为企业用户未来的主流选择。之所以成为主流,关键词就在于性能——软硬优化后的一体机性能更为优异。于是,自甲骨文、IBM等具有自有软硬件品牌的大型IT企业推出一体机后,市场上也出现了形形的软硬厂商联合优化捆绑的一体机产品。

尤其对于大数据一体机来说,由于Hadoop的开放架构,使得不少具有软件开发能力的IT企业都得以有机会开发自己的Hadoop商业版本,从而进入大数据领域。而有着硬件技术优势的浪潮,自去年云海大数据一体机之后,也一直围绕大数据一体机的核心——系统软件紧锣密鼓地进行技术积累。

近日,浪潮终于了其大数据一体机系统软件——浪潮云谷Cloud Canyon V1.0。作为大数据系统软件,云谷对于浪潮的大数据战略可谓四两拨千斤。它不仅在技术战略上让浪潮云海大数据一体机有了核心引擎,还进一步聚焦了浪潮的大数据行业市场战略,而其向ISV、SI开放总线开发平台的做法,则奠定了浪潮布局平台化软硬件整体解决方案,以开放推动“大数据生态链”发展全新产品的战略,开启了浪潮“产品+服务”的端到端交付大数据整体战略。

聚焦行业大数据

正如当初进入云计算领域时,面对国际厂商在私有云领域的优势,浪潮选择行业云作为主攻方向一样,在大数据领域,浪潮智慧地选择了行业大数据为主攻方向。浪潮集团大数据产品部总经理王峰明确表示,金融、通信、公安、交通是浪潮重点发力的四大行业。

为什么选择这四大行业?就浪潮的定位来看,金融和通信的行业大数据应用重点在于历史数据的管理解决方案,主要为海量结构化数据的应用与分析;公安和交通的行业大数据应用重点则在于智能治安卡口支持系统解决方案,主要为图片、视频等非结构化数据的处理与应用。

在浪潮看来,金融和通信两大行业的历史数据含金量最高,它们就如同两张并行的网络,描绘出每个人的资金交易和生活圈。“但是,基于传统交易型数据库的成本原因,这些结构化数据被作为存储备份档案的方式存储,从热数据变成了长尾数据,又从长尾数据变成了死数据,最后被销毁。”王峰表示,“这些海量的历史数据没有被好好利用和分析,它们可以被用于提升客户体验,甚至可以构成一套准确的信用体系。”

而在公安和交通行业,每天摄像头都会产生大量视频信息,身份证、指纹识别等图片也是重要的非结构化数据。以交通行业为例,北京有超过50万个卡口摄像头,每天会记录过亿条数据,产生几十TB的数据量。卡口系统的数据既有结构化的车辆信息数据,又有非结构化的图片、视频数据。如果可以迅速处理某张车辆照片对应的车主,就可以提高公安系统追踪违法车辆的效率,及时发现驾驶员异常或车辆异常,提前报警,还可以降低交通事故的发生率。 据悉,浪潮与某省交通行业合作的以云海一体机为基础的机动车套牌系统不久即将上线。

软件定义一切

在软件定义一切的今天,大数据的核心竞争力依然是软件的竞争。浪潮去年的云海一体机奠定了其在大数据领域硬件自主研发的技术基础,而云谷则使得大数据可以运行在浪潮自有的平台软件之上。

尽管这只是云谷1.0版本,但它在底层架构上已经具备了一个商业版Hadoop在关键领域应用的雏形,并已可以应对金融、电信、公安、交通四大行业的结构化历史大数据与卡口系统非结构化大数据的特定大数据应用。王峰表示,与互联网公司拥有强大的技术背景不同的是,行业用户和传统企业往往缺乏基于开源Hadoop构建大数据应用的相关能力和经验,而集成大数据系统软件并针对行业应用场景调优的平台化整体解决方案,才是行之有效的应对之道。

云谷1.0版本是浪潮自主研发的面向行业海量数据整合、分析、挖掘的大数据平台,具备电信级可靠性、数据驱动的弹性扩展能力、与现有系统的无缝集成、自适应的智能管理等特性。通过包括HDFS、MapReduce、HBase、HIVE等多个维度的创新算法、规模化改进和优化,云谷1.0版本在性能方面实现了突破。据王峰透露,相关测试数据表明,在数据排序、联合查询等应用场景中,云谷1.0版本可让传统系统的性能提升10倍以上。同时,用户可获得可视化的管理界面,有效管理和调配资源,节省物理服务器资源,提高资源利用率,保障业务可靠运行与数据安全。

“苹果”模式

一体机虽然提升了性能,但软硬一体化的后果往往就是将行业用户与一家IT厂商牢牢捆绑在一起,从而削弱了用户的议价权。浪潮则期望在大数据领域构建“苹果”模式。

在浪潮看来,大数据应用的难题在于如何有效贯穿企业的业务流程。从用户的应用环境到底层的基础架构平台,产业链的参与者缺乏完整的端到端的能力和经验。具体到不同行业的应用场景,大数据的特征和需求也不尽相同。例如,金融行业更加关注系统的可扩展性,在此基础上才能进一步解决数据挖掘及数据业务价值的问题。在公安、交通等行业,在海量的非结构化和半结构化数据存储之上,如何有效地关联与分析资料代表了未来的应用前景。

“针对不同的行业大数据应用需求,浪潮的产品策略是以平台化的产品思路和专属化的系统优势切入市场,为行业大数据应用搭建通道。”王峰认为,“从数据的积累、流转、处理到价值‘变现’,大数据是一条尚待完善的,需要系统厂商与SI、ISV等合作伙伴携手共荣的生态链。”