时间:2023-09-01 16:35:18
导言:作为写作爱好者,不可错过为您精心挑选的10篇云计算基础技术,它们将为您的写作提供全新的视角,我们衷心期待您的阅读,并希望这些内容能为您提供灵感和参考。
1云计算技术内涵
云计算技术是计算机技术中的一种,主要是借助网络,将庞大处理程序拆分为几个小的子程序,之后借助多个服务器以构建出高效的处理系统,该系统可借助数据收集及计算分析,最终将结果回传给用户[1]。借助云计算技术处理庞大信息仅仅需要数秒,这样大大提高了信息的处理效率。根据用户需求差异,云计算技术包含如下类型:1)公共云。该技术类型在于为公众提供云服务,这在多数互联网公司中应用广泛。2)私有云。主要面向的是单个机构,面向个体用户,借助内部往来获取云服务,一般无盈利需求。3)混合云。该类型主要将公有云及私有云进行有机结合,包含混合类型的优缺点。
2高校计算机基础教学现状
计算机基础教学是高校的公共课程,该课程教学肩负着为我国计算机行业发展培养应用型及技术型专业人才的重任,因此计算机基础课程是大多数理科专业学生必须学习的课程,一些专业还要求学生通过计算机等级考试[2]。但从高校计算机基础教学情况来看,却存在诸多问题,比如实践教学实践短,教学内容过于陈旧,教师教学方式单一等,这导致计算机基础教学质量不佳。在当前高校计算机基础教学中,教学主要开展场所为综合机房,机房中配备了电脑设施。从多数高校机房建设情况来看,普遍存在机房硬件设施老旧问题,这样就导致计算机基础教学质量长期处于较低水平。而在具体的课程教学中,虽然在“新课改”背景下相关教师经常应用项目距驱动法、小组合作讨论法及讲练结合法等开展计算机基础课程教学,但是在实际教学过程中却存在教学模式应用不合理问题,比如小组合作讨论的具体实施上,常常让学生自由组成小组进行学习,不考虑学生间的差异性,这样势必影响合作教学效果。在计算机教师教学上也存在一些突出的问题,如有的学校常常只配置几名教师来担任全校的计算机基础教学工作[3]。虽说配备的专业课程教师具有丰富教学经验,但是由于教学任务繁重,使得教师无法对每一节课都集中精力讲解,这使得计算机基础教学效果较差。针对高校计算机基础教学问题,借助云计算技术辅助教学是科学有效的。在计算机基础教学中,利用云计算技术,可让相关教师针对课程实际情况,通过应用优秀教学方法、设置巧妙教学缓解及明确课程的教学目标等教学信息及存储到云端,可以让新进教师或者老教师合理利用形式丰富的教学资源,提高教师的备课质量及教学方法,进而提高高校计算机基础教学质量。
3利用云计算技术辅助高校计算机基础教学的策略
3.1借助云计算技术构建虚拟资源库,为教师提供丰富的教学资源
云计算技术充分结合了计算机技术及互联网技术,在实际应用中能够为使用者提供高效数据处理服务以及安全的信息资源存储服务[4]。对于高校计算机基础课程的教师,可以根据自己的教学需求,借助云计算技术在互联网中建立起自己的虚拟资源库,将互联网搜集到的信息或者他人传输的信息均存储到资源库中,同时也可将自己存储的优秀资源同其他教师进行共享,拓展信息的应用范围。同传统的借助课本教材讲解方式相比较,借助云计算技术构建的虚拟资源库可摆脱知识禁锢,为学生带去大量的丰富知识,这样可以大大提高学生的学习积极性。在实际的教育教学中,教师还可以将网络资源同课本资源进行结合,帮助学生更好掌握计算机基础知识,拓展学生的认知,以获得显著的教学效果。
3.2借助云计算技术搭建协作平台,充分激发学生个性化学习兴趣
高校计算机基础教学中,常以教师讲解为主体,常常是教师讲解什么学生就接收什么,这样不利于学生主观能动性的发挥。在素质教育背景下,高校教学中更加关注学生的主体性,为转变高校计算机基础教学模式,可以借助云计算技术来搭建便捷的师生协作平台,让学生在学习过程中根据自己的兴趣及实际水平,选择出适合自己的学习方式,以不断提高自己的计算机能力。利用云计算技术还可将零散学习资源整合在一起,整合过程中将一些劣质的教学资源摒弃,这样可让学生在自主与协作学习的时候充分利用各种学习资源来提高自身的基础能力与操作水平,通过学生主动探究知识,丰富学生的认知范围。
3.3利用云计算技术转变学生的学习方法,显著提高学生计算机操作能力
云计算技术的显著特征为可存储庞大的信息资源,同时存储的信息资源有很高的安全保障。高校在运用云计算技术为学院及教师提供各种教学研究所需的信息内容之外,还可以将云计算技术应用到辅助学生计算机知识学习及操作实践中,让学生借助云计算技术构建的云端来获取自己所需的各种资源信息[5]。比如,在计算机基础课堂的学习中,针对学生未能完成的案例内容,可提供给学生云端下载,让学生可以借助自己的课余时间继续处理,这不仅可帮助学生掌握相关的知识内容,而且可在学生自主实践中提高学生的操作能力。在计算机基础教学中,教师也可借助学生的日志库来了解学生的学习情况,结合学生实际情况制定出针对性的教学方法,以提高学生的计算机操作能力。
3.4借助云计算技术构建虚拟实验室,培养学生的创新能力
0引言:
云计算 [1]网格计算、分布式计算、并行计算、效用计算、网络存储、虚拟化、负载均衡等传统计算机技术和网络技术发展融合的产物。它旨在通过网络把多个成本相对较低的计算实体整合成一个具有强大计算能力的完美系统,并借助先进的商业模式把这强大的计算能力分布到终端用户手中。云计算的一个核心理念就是通过不断提高“云”的处理能力,进而减少用户终端的处理负担,最终使用户终端简化成一个单纯的输入输出设备,并能按需享受“云”的强大计算处理能力!
云计算的核心思想,是将大量用网络连接的计算资源统一管理和调度云存储,构成一个计算资源池向用户按需服务。云存储是在云计算概念上延伸和发展出来的一个新的概念,是指通过集群应用、网格技术或分布式文件系统等功能,将网络中大量各种不同类型的存储设备通过应用软件集合起来协同工作,共同对外提供数据存储和业务访问功能的一个系统。当云计算系统运算和处理的核心是大量数据的存储和管理时,云计算系统中就需要配置大量的存储设备,那么云计算系统就转变成为一个云存储系统,所以云存储是一个以数据存储和管理为核心的云计算系统。
云存储[2]不是存储,而是服务,就如同云状的广域网和互联网一样,云存储对使用者来讲,不是指某一个具体的设备,而是指一个由许许多多个存储设备和服务器所构成的集合体。使用者使用云存储,并不是使用某一个存储设备云存储,而是使用整个云存储系统带来的一种数据访问服务。所以严格来讲,云存储不是存储,而是一种服务。
云存储的核心是应用软件与存储设备相结合,通过应用软件来实现存储设备向存储服务的转变。
1云计算体系结构
云计算平台是一个强大的“ 云” 网络, 连接了大量并发的网络计算和服务,可利用虚拟化技术扩展每一个服务器的能力,将各自的资源通过云计算平台结合起来,提供超级计算和存储能力。 一个通用的云计算体系结构如图 1所示怎么写论文。
图1
云端用户:提供云用户请求服务的交互界面,用户通过Web 浏览器可以注册、登陆及定制服务、配置和管理用户。
服务目录:用户在取得相应权限后可以选择或定制的服务列表。
管理系统和部署工具: 提供管理和服务,能管理云用户,能对用户授权、 认证、 登录进行管理, 并可以管理可用计算资源和服务, 接收用户发送的请求,根据用户请求并转发到相应的应用程序,调度资源智能地部署资源和应用, 动态地部署、 配置和回收资源。
监控:监控和计量云系统资源的使用情况, 以便作出迅速反应, 完成节点同步配置、 负载均衡配置和资源监控,确保资源能顺利分配合适的用户。
服务器集群: 虚拟的或物理的服务器, 由管理系统管理,负责高并发量的用户请求处理、 大运算量的计算处理、 用户Web 应用服务, 云数据存储时采用相应数据切割算法, 采用并行方式上传和下载大容量数据。
用户可通过云用户端从列表选择所需服务, 其请求通过管理系统调度相应的资源,并通过部署工具分发请求、 配置Web 应用。
2云存储系统结构模型
与传统的存储设备相比,云存储不仅仅是一个硬件,而是一个网络设备、存储设备、服务器、应用软件、公用访问接口、接入网、和客户端程序等多个部分组成的复杂系统。各部分以存储设备为核心,通过应用软件来对外提供数据存储和业务访问服务。
云存储系统的结构模型由 4层组成,如图2所示。
图2
一、存储层
存储层是云存储最基础的部分。存储设备可以是FC光纤通道存储设备,可以是NAS和 iSCSI等IP存储设备,也可以是 SCSI或SAS等 DAS存储设备。
存储设备之上是一个统一存储设备管理系统,可以实现存储设备的逻辑虚拟化管理、多链路冗余管理,以及硬件设备的状态监控和故障维护。
二、基础管理层
基础管理层是云存储最核心的部分,也是云存储中最难以实现的部分。基础管理层通过集群、分布式文件系统和网格计算等技术,实现云存储中多个存储设备之间的协同工作云存储,使多个的存储设备可以对外提供同一种服务,并提供更大更强更好的数据访问性能。
三、应用接口层
应用接口层是云存储最灵活多变的部分。不同的云存储运营单位可以根据实际业务类型,开发不同的应用服务接口,提供不同的应用服务。比如视频监控应用平台、IPTV和视频点播应用平台等。
四、访问层
任何一个授权用户都可以通过标准的公用应用接口来登录云存储系统,享受云存储服务。云存储运营单位不同,云存储提供的访问类型和访问手段也不同。
3云存储服务器配置
在云存储系统中,重复数据的删除技术是十分重要。在存储的数据中,有很多文件经过反复修改,造成了大量重复的资料,这时,重复数据的删除实现后,网络优化的效果就变得比较明显。根据云存储的特点,可将其过程描述为:将数据分块后云存储,保存在不同的数据存储节点并写入数据文件存储信息表。需要删除时,在数据文件信息表中查找文件ID,找到后
删除该文件的数据信息怎么写论文。其核心程序代码如下:
1)将一个数据块保存在三个不同节点,成功返回1
intWriteStorInfo(fStorInfo fInfo)
{
fStorInfo temp;
memset(&temp, 0, sizeof(fStorInfo));
int id = 1;
int num = 0;
FILE *fd;
if( (fd = open(fileinfo, "rb+"))== NULL)
fd = fopen(fileinfo, "wb+");
while(fread(&temp,sizeof(fStorInfo),1,fd)==1)
{
if(temp.flag == 0)
break;
++num;
}
fInfo.flag = 1;
fseek(fd, num * sizeof(fStorInfo),0);
fwrite(&fInfo, sizeof(fStorInfo),1, fd);
fclose(fd);
return 1;
}
2)获得文件保存信息的顺序表intGetStorInfo(int fID, StorInf OList *L)
{
fStorInfo temp;
memset(&temp, 0, sizeof(fStorInfo));
FILE *fd;
if((fd = fopen(fileinfo, "rb")) ==NULL)
fd = fopen(fileinfo, "wb+");
while(fread(&temp,sizeof(fStorInfo),1,fd)==1){
if(temp.flag == 1 && temp.fID ==fID)
AddStorInfoList(L, temp);
}
fclose(fd);
return 1;
}
3)获得文件ID信息,若存在返回文件ID,不存在返回-1int GetfID
(Char* user, char* load, char*name)
{
struct fnode dir, src;
memset(&dir, 0, SIZE);
memset(&src, 0, SIZE);
strcpy(dir.user, user);
strcpy(dir.load, load);
strcpy(dir.name, name);
FILE *fp;
if( (fp = fopen(filebase, "rb"))== NULL)
fp = fopen(filebase, "wb+");
int id = -1;
while(fread(&src, SIZE, 1, fp) == 1)
{
if(src.flag==1&&strcmp(src.user,dir.user)==0&&strcmp(src.Load,dir.load)==0&&strcmp(src.name,dir.name) == 0)
{
id = src.ID;
break;
}
}
fclose(fp);
return id;
}
4)根据文件ID删除该文件所有信息,成功返回1int DeletStorInfo(Int fID)
{
fStorInfo temp;
memset(&temp, 0, sizeof(fStorInfo));
FILE *fd;
if( (fd = fopen(fileinfo, "rb"))== NULL)
fd = fopen(fileinfo, "wb+");
while(!feof(fd)){
fread(&temp, sizeof(fStorInfo), 1, fd);
if(temp.flag == 1 && temp.fID == fID)
temp.flag = 0;
fseek(fd,ftell(fd)-sizeof(fStorInfo), 0);
fwrite(&temp, sizeof(fStorInfo), 1, fd);
fseek(fd,ftell(fd), 0);
}
memset(&temp, 0, sizeof(fStorInfo));
}
fclose(fd);
return 1;
}
4云存储的优点
云存储技术的使用,使我们无须知道存储设备的型号、接口和传输协议以及存储系统中磁盘的数量和容量,经过授权的用户均可与云存储连接并进行数据访问。
1)硬件冗余自动故障切换。
2)存储设备升级不会导致服务中断。云存储不是单独依赖一台存储服务器。当服务器硬件更新和升级时,系统会将旧的存储服务器上的文件迁移到别的存储服务器,等新的存储服务器上线后,文件会再迁移回来。
3)容量分配不受物理硬盘限制。
4)海量并行扩容。云存储采取的架构是并行扩容,容量不够时只要添加新的存储服务器即可。
5)负载均衡。云存储将工作量均匀分配到不同的存储服务器上云存储,避免个别存储服务器因工作负荷过大造成瓶颈,使存储系统能够发挥最大效能。
5结论
在云计算技术的发展和数据存储需求的共同影响下,为了实现更好的利用现有设备,快速访问数据资源并降低存储成本,云存储的概念和模型逐渐形成。经过了从模型到规模化实验的过程,现在基于云计算技术的云存储产品,形成了具有一定性能优势的成套产品。云存储作为云计算技术的典型应用实例,从架构上彻底改变了传统存储系统的模式,增强了数据应用的灵活性和可靠性。
参考文献
[1]陈全、邓倩妮,云计算及其关键技术[J].计算机应用,2009,29(9)
[2]石利平,浅析基于Web的云存储技术[J].现代计算机,2010,3:67-69
[3]HayesB. Cloud Computing [J].Communications of the ACM, 2008, 51(7):9-11
引言
随着网络技术的不断发展,云计算也不断完善,不仅可以为计算机数据运行提供平台,也能为计算机发展提供方向,因此,相关计算机技术人员要注重云计算技术,通过发展混合云计算、进行云计算迁移,能够保证数据传播的安全与稳定。
1云计算技术的内涵
云计算(cloudcomputing)是基于计算机技术的一种增加服务和使用交付模式的技术,主要为计算机运算提供虚拟化的动态链接资源。所谓的“云”是指一计算机互联网的比喻方法。“云”由原来的比喻,逐渐转变为计算机处理数据时的动态以及基础设备的抽象化概念。由于云计算具有开放式运算特点,它能够在每秒内进行15万亿次的运算,因此,拥有如此强大的数据计算能力的云计算,能够模拟核爆炸、预测天气变化和推测金融市场走势。用户端只需要通过电脑、笔记本电脑、手机就能够接入数据中心,从而按自己所需,进行数据处理。现阶段,接受最广的云计算定义:云计算是一种按照数量来付费的数据处理模式,这种模式能够为用户端提供可靠的、具有针对性的网络访问权限。用户端能够接入可共享计算资源池,包括网络资源、服务器资源等,这些资源可以被用户端快速搜索出并被使用,从而只需非常简单的操作,就可以和服务供应商交互。
2云计算技术在计算机数据处理过程中的应用
2.1保障数据传输提供安全
云安全(CloudSecurity)是一个云计算延伸的概念,主要是指用户端在进行计算机数据处理的过程中,使用云计算,能够保证数据信息安全。用户端越多,每个使用者的数据就越安全,因为,用户端群体增大,能够覆盖所有计算机互联网数据角落,只要出现木马病毒或者被病毒感染,云计算技术就可以及时截获病毒,从而保证用户端安全。云安全主要表现在以下三个方面。(1)安全问题。用户端在进行数据传输的过程中,会遇到访问权限,需要输入正确的密码,才能够完成数据传输。这是云计算基于原有的安全方法不断加密,从而使“输入图片中的数字”问题,变得更加深奥,避开一眼就能看出答案的问题,保证个人密码安全。(2)双重认证。用户端在进行计算机技术传输过程中,还会遇到允许其他用户访问或者拒绝访问的情况。在云计算中,除了用户名和密码外,还需要验证码。验证码一般是通过信息的形式发送到手机,同时,也有语音、图片等验证码,通过这样的方法,如果用户端处于被访问的状态,能够拒绝登录,从而保障数据的安全性。(3)登录地点。定位系统能够显示出用户端的实际位置,这样会导致信息安全问题,因此,云计算对登陆地点进行保护,用户可以隐藏自己的位置,同时,云计算会提供邮件服务,显示用户账号的异地登录现象,保护数据信息安全。
2.2云计算可以为数据处理提供平台
云计算技术主要包括两个层次的服务:(1)IaaS基础设施级服务。用户者通过网络能够完善计算机基础设施,包括存储空间、网络连接等基本计算资源,在此基础上部署和运行各种软件,包括操作系统和应用程序。现如今,主要的iaas平台产品有华胜天成、OPENStack、Cloudstack等。(2)PaaS平台级服务。PaaS平台主要包括操作系统、编程语言的运行环境、数据库和Web服务器,用户在此平台上部署和运行自己的应用,不能管理和控制底层的基础设施,只能控制自己部署的应用[1]
3云计算技术在计算机数据处理中的发展策略
3.1保障云计算安全
随着计算机技术的不断发展,人们的信息数据安全意识也逐渐提高,更加注重在计算机数据传输过程中,云计算技术是否能够发挥保护数据作用,因此,相关技术人员在进行云计算技术研发时,要注重云计算发挥安全保障作用,主要体现在以下两个方面。(1)研发新的加密技术。加密技术是通过数学或物理手段,对数据在传输过程中和存储体内进行保护,以防止泄漏的技术。加密技术具有一定的标准,技术人员在研发新的技术时,需要应用到数据加密标准,一次性将64位明文打乱顺序,接着将把64位的明文分解成两个32位块,在用机密算法将每个32位块打乱为16位,最后使用初始置换的逆置换。(2)安全协议。安全协议是通过一种建立在密码基础上的通信交互协议,运用密码算法和逻辑,来实现密匙认证与分配。因此,技术人员在进行安全协议架设的时候,要注重熟悉加解、解密等密码运算,从而能完成加密密钥和解密密匙。
3.2研发混合云计算
混合云计算是指私有云计算和共有云计算二者混合运用。混合云计算能够良好协调两者,可以为企业、个人带来融合应用体验。混合云计算主要有资源自动化和提升硬件价值的优点。其中,资源自动化能够在单一域中,使用自动化方法,来控制、管理计算机数据;而实现硬件的价值,主要是降低数据运行成本。例如,一家企业购买了数据采集和监控系统的硬件,当迁移至公共云计算时这些硬件投入就失去了价值。
3.3研发移动云服务
随着移动端的普及,未来云计算技术发展趋势一定是移动云服务。移动云服务能够起到扩充移动端的能力,同时还可以增强多媒体、Web离线及本地数据存储的能力。现如今,大部分移动设备都能够用来信息传递、数据通信,因此,技术在研发移动云服务的时候,需要注重以下两点。(1)实现Windows应用的无缝迁移。用户端应用迁移到移动端会面临着运行不畅的问题,影响用户体验,因此,技术人员要提高移动端数据传送的流畅,降低开放应用数量和容量减材,从而确保计算机数据的传送和安全。(2)基于信息系统进行开发。技术人员要保证移动云服务的数据安全,通过集中管理应用、完善用户权限管理、对数据加密保护和多种登录验证,包括信息、语音验证等。从而降低数据被盗用和被截取风险。
4结束语
云计算能够促进计算机数据处理技术发展。在此基础上,通过研发新的加密技术、架构安全协议,能够防止技术泄漏、确定参与协议的主体标识,同时,通过“跨链通信”区块链安全协议、混合云计算方法唤醒硬件设备,能够扩充基础设备容量、降低数据运行成本。
参考文献
1 云计算
云计算作为一种计算的模式,主要是基于网络来实现的,在云计算技术发展中,将分布式与并行处理的思维充分融合到一起,结合网络的计算与存储功能,运用虚拟的方式来实现数据的存储和运算。在云计算中,数据不再依赖于本地的计算机或其它的终端来进行存储,而是运用网络技术,移驾到网络上大量的闲置资源上,这是资源运用的改革创新,通过云计算大大解放了本地设备的资源占用率,释放了大量的存储运算空间。“云”作为一个资源共享的平台,任何用户都可以用手中的设备终端通过网络与“云”相连,实现资源的管理,免去了购买更多存储空间。“云”实际上包含了巨大的存储空间,这些存储空间都是由无数的计算机和服务器构成的,云计算的方式相当于一个资源合理分配的过程。
2 云计算体系结构和服务模式
2.1 云计算的体系结构
云计算的体系并不复杂,简单来说可以通过各个结构的功能不同将其分为三个层次。首先,最基层的就是提供资源共享的基础管理层;其次,云需要与外界的设备进行连接,为其提供服务,我们将这一层次称为应用接口层;再就是运用云计算来实现具体的操作层次——访问层。这三个层次之间看似独立运作,各自实现一定的功能,实则具备相互递进的关系,由下到上依次深入云计算的核心功能。
2.2 云计算的服务模式
云计算有三种不同的服务模式,基础设施、平台和软件。基础设施又可称为服务IaaS,是最基础的服务模式,它使用起来没有特别的严格规范,适用于一些基础设备,例如虚拟的服务设备;平台服务即PaaS,用户可以通过这个平台提供的服务将自己的一些应用进行托管,平台服务不想基础设施服务那样自由,在使用中需要按照具体的细则要求来开展;软件服务也称SaaS,它通过浏览器将完整的软件输送到用户,实现软件资源的共享,在日常生活中有很多的应用实例,例如人力资源管理就需要用到这样的软件服务模式。
3 云计算关键技术问题
3.1 访问控制管理
访问控制管理的主要目的是保障数据的匹配性,不同的用户将数据存储到云端,如果没有相应的管理技术,那么云计算的安全性就岌岌可危,云计算所构造的美好蓝图也将沦为泡影。为了控制访问权限,需要对于每一位用户做一个安全保障,这就需要密码学的应用,通过加密的方式将每一份数据资源存储起来唯一面对一个用户开放。在密码钥匙设置中还需要解决很多问题,如密码忘记,有效时限等,这都需要有一个系统的管理。
3.2 数据安全问题
用户需要通过云端来实现数据的存储及运算,这就涉及到数据传输、数据存储、数据清理、数据隔离等多种相关的关键技术,这些技术的核心都是保障数据在云计算过程中的安全性。在数据传输过程中,为了保证数据传输过程中不会发生泄漏,需要进行加密处理,但是在加密保障安全性的同时数据可能会出现丢失情况;相反的,如果保证数据传输完整性,那么数据的安全性能又将降低。因此,如何协调安全保密与完整不丢失的关系式数据传输中需要解决的问题。目前主要采用的数据存储技术有GFS和HDFS两种,为了保证存储的安全,以及数据在读入与写出之间的流畅有序,相关的存储计算还需要不断的改进发展。数据隔离技术是对数据动态变化过程的一个控制,可以有效的隔绝病毒的入侵,保证数据的安全,因为云计算利用成百上千的计算机及服务器,我们不能保证每一个空间都是绝对安全的,因此相应的隔离技术是必须的。当数据删除之后,如果还存在残留不但占用存储空间,通过一定的技术手段还可以对其进行恢复,这将导致用户信息的泄露,因此,云计算技术发展需要开发一定的残留鉴定并清除功能,使得用户能够放心的使用云计算。
3.3 虚拟技术
中图分类号 TP3 文献标识码 A 文章编号 2095-6363(2017)08-0070-01
云计算技术融合了负载均衡、网络存储、效用计算和分布式计算等计算机网络技术,具有扩展性、通用性、大规模、虚拟化等特点及可提供可靠、廉价的服务。云计算的服务包括IaaS(基础设施即服务)、PaaS(平台即服务)及SaaS(软件即服务)3种模式。据艾瑞咨询数据显示,2016年中国企业云服务的市场规模或达520亿,同比增长31.9%,且在未来几年中,云服务市场仍会以超过30%的年复合增长率高速发展。在这一背景下,社会非常关注云安全的问题,具体涉及云端、应用服务层和基础设施层的安全层次。针对这一问题,中国建立了BIM云计算中心、360、绿盟、启明星辰、瑞星等公司制定了网络安全解决办法,并出现了阿里云、BIM云和百度云等,从而为云计算技术应用的安全性提供了重要保证。
1 网络安全存储的关键技术
1.1 身份认证
身份认证是保护计算机网络存储系统安全的第一道关口,其主要采用下列几种技术方式:一是口令核对验证,即在身份认证时,用户仅需输入事先建立的合法用户名与口令,便可校验用户是非法的或是合法的;二是智能IC卡,即事先在智能IC卡中录入用户的合法信息,而在身份认证时,仅需输入合法的用户名与口令,便会由智能卡向认证服务器发送随机数,以验证用户身份的合法性;三是Kerberos身份认证,即先利用授权服务器、资源访问机制使用户口令生成密钥K,再经授权服务器提供的票证认证身份,并在获得合法凭证后获得相关服务;四是PKⅠ身份认证,即通过利用彼此匹配的密钥,实现加、解密,并采用密钥备份、更新与恢复机制,以提供计算机网络安全服务。
1.2 数据加密
数据加密是先运用加密密钥、加密算法使明文变为密文,再在解密时采用同样的办法使密文为明文。目前,数据加密技术的常用方法包括对称、非对称加密算法。其中,对称加密算法使用的密钥加、解密数据相同,详见图1。
结合图1,对称加密算法要求发送方、接收方知晓全部数据的加密密钥或具有访问权限,因此密钥在传递与管理上的难度很高。不对称加密算法的运用可有效弥补对称加密算法的不足,即其会使用一对公、私钥组合,且唯有私钥能解密经公钥加密的或公钥能解密经私钥加密的密文,其中公钥对外公布,而私钥由自己保存。
1.3 纠删码
在计算机网络存储系统中,可运用纠删码技术来应对误码信息位置的未知性、不确定性,且其要素包括分组码、码集、码字、监督与信息码元等。目前,常用的纠删码技术包括级联低密度纠删码、无速率编码和RS纠删码,从而实现了加速编、解码及保证计算机网络安全的目的。
2 云计算技术的应用
在计算机网络安全存储中,云计算技术的应用条件是规模化的分布式存储技术,即其适合用在声音、图像、视频和文档等文件中,且可保证这些文件存储的稳定性与可扩展性,同时要求用户按需付费。在这一应用过程中,一般通过副本、编码冗余存储和备份数据,以保证云计算技术的安全应用。
2.1 可取回性证明算法
可取回性证明算法是一种基于“挑战-响应-验证”机制的算法,其运用冗余纠错编码,以帮助需求用户验证云计算中数据的状态,即:在查询数据时,先由用户向云端发起挑战,再由云端据此作出响应,而用户通过验证云端响应信息,便可确定归档数据是否处在安全状态下。倘若验证未能通过,表面归档文件受损,要求尝试性恢复,而若破坏值处在阈值范围内,则可用编码冗余信息恢复原始数据,同时亦可利用副本冗余安全存储保障,以使恢复错误数据的几率更高。应用表明,可取回性证明算法可验证云中数据的完整性,可准确定位错误数据及进行深入的分析与处理。但若在原始数据的冗余编码中运用RS纠删码,会在一定阈值范围内出现数据丢失或错误现象。为此,通过可运用冗余数据进行修复,并分开放置,以使提取归档文件的速率更高,从而使得系统应用功能的便捷性更高。
2.2 MC-R应用策略
在计算机网络安全存储中,云计算技术在应用中采用的MC-R策略包括:一是用户端MC-R策略或用户端MC加密算法,即:针对数据伪装与隐藏能力较差的应用现状,运用用户端MC加密算法,可构建数据伪装、隐藏和标记模块,且这些模块的协同状态影响着云计算的安全应用;二是云端MC-R策略或云端RSA,即其仅加密核心隐私数据,以免云端RSA陷入大数据量消耗的状态中,其中对于加、解密模块,其应用流程如下:先由需求用户生成、保存一组RSA公、私密钥,再采用MC加密算法处理数据,并连同密钥传入云端,然后先云端加密数据,而在下载加密文件及用密钥解密数据时,要求需求用户的下载请求满足一定的条件。对于恢复、利用初始数据的问题,可先用云端数据标记模块寻找隐藏数据,再撤除伪装。
3 结论
在本案,笔者结合云计算技术的理论知识,探讨了其在计算机网络安全存储中的具体应用。研究表明,云计算技术具有性能高、可扩展性等优点,因此有助于保证网络数据的隐私性与完整性,同时通过运用M-POR、MC-R安全存储策略,可实现对网络数据的完善、保护及实现部分数据的安全共享。总之,云计算作为一种新起的商业计算模型,其为下一代网络计算平台提供了可靠的数据存储、优质的网络服务。换而言之,为了适应互联网的深入发展,在计算机网络安全存储中引入云计算技术及保证云计算的安全存储具有现实意义,值得高度重视。
参考文献
[1]张菁菁.新时期云计算环境下的计算机网络安全技术研究[J].中国新通信,2016(4):44.
[2]袁玉珠.云计算模式下的计算机网络安全储存系统设计[J].电子技术与软件工程,2016(7):227.
Data Computation and Data Storage in Cloud Computing
DONG Yu , GUAN Qun
(College of Computer Science, Sichuan University, Chengdu 610065, China)
Abstract: With the continuous growth of the network bandwidth, the conditions are more mature that access non-local computing servic? es through the network, so there is a technology what we call "cloud computing".The cloud computing is a new application model for de? centralized computing which can provide reliable, customized and maximum number of users with minimum resource.With the constantly expanding and deepening of the cloud computing applications, it asks for higher demand, therefore, many researchers also strive to improve the cloud computing performance. The article explains the basic concepts of cloud computing. and on this basis, it also introduced the technology of data computation and data storage, it has a detailed description to the multi-user isolation mechanism, and finally to predict the development of cloud computing and its future.
Key words: cloud computing; data computation; data storage; isolation mechanism
云计算[1]是I T基础设施的交付和使用模式,它指的是通过网络以按需、易扩展的方式获得所需的资源(硬件、平台、软件)。提供资源的网络被称为“云”。“云”中的资源在使用者看来是可以无限扩展的,并且可以随时获取,按需使用,随时扩展,按使用付费。这种特性经常被称为像水电一样使用I T基础设施。近年来,云计算的研究和应用发展非常快,主要原因是云计算具有如下优点:超大规模、虚拟化、高可靠性、通用性、高可扩展性、按需服务、极其廉价、安全、方便。
[1]朱近之.智慧的云计算[M].北京:电子工业出版社,2010.
[2] Dean J,Ghemawat S.MapReduce: Simplified Data Processing on Large Clusters[J].Communications of the ACM, 2008,51(1):107-113.
[3]李远方,贾时银,邓世昆,等.基于树结构的MapReduce模型[J].计算机技术与发展,2011,21(8 ):149-152.
[4]韩燕波,王桂玲,等.互联网计算的原理与实践[M].北京:科学出版社,2010.
[5] Sacha K. Middleware architecture with patterns and frameworks[Z].2007.
[6]王鹏.走进云计算[M].北京:人民邮电出版社,2009.
云计算是当前一个热门的技术名词,很多专家认为,云计算会改变互联网的技术基础,甚至会影响整个产业的格局。几年之内,云计算已从新兴技术发展成为当今的热点技术。云计算是一个产生于IT领域的概念,目前,云计算如一阵飓风席卷整个IT界,已经渗透到了各个行业当中,它已经成为下一代信息应用的发展趋势,而掌握云计算技术开发使用已经使企业在市场中占据主动。
近年来,地处西北兰州市的国内知名文化企业读者出版集团,秉成“推进数字出版、做强读者品牌”的发展目标,将最新的电子信息技术和互联网技术等科技成果应用到文化出版领域,打造包括《读者》杂志内容、云读书馆、终端在内的数字阅读全产业链,开始走从内容生产到终端阅读的数字出版的新战略,形成了以“读者电纸书”为主体,以数据加工业务和云图书馆为两翼的“一体两翼”的发展格局。
读者集团看好深圳惠州市良好的政治生态环境和优越的产业优惠政策,落户惠州建立“读者云图”。所谓云图书馆平台,就是利用云计算技术,把数字化出版的内容,通过移动终端,展现给全世界任何一个角落的“读者”。随之配合云图书馆,研发生产了的“读者”平板电脑,读者定制版智能手机,无疑也是“读者”集团引领数字化出版的潮流方向。“读者”手机,是国内首次由传统媒体介入定制智能手机领域,无论对于传统媒体,还是智能终端,这都是一种全新的开拓。在“读者“手机中,不仅将会内置30年来全部的读者杂志内容,同时也会通过云图书馆平台将版权内容和数字出版相结合,借助”读者“手机,为身处不同区域的读者,提供阅读服务。
基于传统的互联网技术和新的移动互联网技术,公司开发筹建了数字平台“读者云图书馆”项目,该项目已成为国家新闻出版总署“十二五”规划中的重大项目。
读者(惠州)数字出版基地建设读者云图书馆,成为国内首家云计算的工业化数据加工中心,搭建了大型的内容原创园区。基地总体规划用地为300亩,总投资20亿元,力争通过5年左右的努力,在基地内形成大规模的数字出版产业集群,并建立起较为成熟完整的数字内容产业链,数字出版产业年产值达到10亿元以上。预计在基地建成后,经济收益以及带动相关产业的收益将超过100亿元。
云图书馆平台内置读者杂志30年的内容。借助这个载体,普通读者可以下载《读者》创刊30年来的精华内容,同时还可以实现有声阅读。读者(惠州)数字出版基地项目融信息服务、策划创意、数字出版、数据处理于一体,集研发、孵化、创新服务于一身。按照规划设计要求,基地建成后将带动综合信息服务、策划创意与营销、研发与人才培训、多种媒体出版、数字出版结算五大板块协同发展,使网络学习、电子图书、数字会展、数字博物馆、移动阅读器、数字期刊、手机娱乐、数字视听、数字地图、数字动漫等新兴数字出版业务实现高度集中。
读者集团携手惠州市政府,建设了云计算技术的“读者云图”网络平台,实现统一内容的多层次、多平台、多媒体,为全民阅读提供更丰富的内容和更便捷的方式,真正实现“云阅读”。该平台建设,促使“读者云图”网络平台走向世界、走向未来,不断延伸自身的业务。读者云图”的建立,将推动惠州成为中国数字出版中心之一,助推读者数字出版领域转型升级。
2013年4月,读者云图”网络平台的建成开通,是读者出版集团和地方深化合作的成功典范,将对数字出版行业产生积极深远的影响,也为地方文化建设注入了新活力。实现了在线编辑、排版、审阅、出版发行及数字产品销售,既能帮助出版商快速具备数字出版能力,也可为独立作者提供出版、营销便捷环境,兼具用户阅读分享及社会化网络等新形式的互联网应用功能。
喜欢看《读者》杂志的读者朋友,随时随地查看海量期刊?今后,只要在有网络的地方,持有手机、iPad、电脑等设备,便可通过该“网络图书馆”(.cn)随时随地阅读《读者》杂志及各类书籍,还可以实现上网交友。
1 引言
云计算的快速兴起和广泛应用,给用户提供了前所未有的数据存储服务体验。在互联网和云计算服务高速发展的今天,人们可以将存储在本地的数据上传到云端,也可以通过互联网来访问存储在云平台上的数据,这无疑极大地方便了用户。但与此同时我们也要清醒地看到,正是因为云计算这种对数据进行集中存储和管理的特点,造成云计算存储也面临着一定的安全威胁,一旦云平台上存储的数据遭到泄漏或破坏,那么就可能会给用户造成巨大的损失。
因此,加强对云计算存储安全技术的研究和应用工作,制定可靠的数据存储解决方案,是一项非常有意义的工作。本文致力于云计算存储安全技术的研究,在充分分析了当前云计算数据存储安全现状的基础上,就如何提高云计算数据存储安全性的技术措施进行了探讨,希望对促进云计算的进一步发展和应用工作能够提供参考和借鉴。
2 云计算数据存储服务概述
云计算是一种基于互联网的计算方式,用户通过互联网可以直接访问云平台,在通过一定的身份验证措施后就可以对自己存储在云中的数据进行操作。事实上,当前云计算除了发展出了数据存储服务外,还开发出了很多其他服务类型,如云平台可以对各种软件甚至硬件资源进行充分地配置,用户可以通过支付比较低廉的价格就获得对这些资源的使用,这不仅提高了资源的共享效率,还同时为用户节省了直接购买这些资源的大量成本,具有极大的应用和发展潜力。
过去的云计算数据存储服务往往需要借助PC端,即用户通过安装在PC端的浏览器或专门的客户端应用软件来访问云平台,在通过身份验证后就可以实现对自己存储在云中数据的访问和操作(如上传、下载、修改以及删除等等)。这种方式随着移动互联网的发展而被逐渐替代,目前有很多知名的云服务商都提供有专门安装在智能手机端的app应用,用户随时随地都可以通过手机登录访问存储在云中的数据,如百度云、iCloud等等,这种模式方便、易用,对云计算数据存储服务的发展提供了极大的促进作用。总体来说,当前的云计算数据存储服务具有很多的优点,如对客户端的设备要求较低、使用户摆脱了对专门存储介质的依赖等,但同时也对云平台的数据存储安全提出了更高的要求。
3 云计算数据存储安全的现状
在使用云平台存储数据的模式下,用户逐渐摆脱了对存储介质的依赖,只需要付出很小的代价甚至是免费就可以使用云平台提供的空间来存储数据。而云计算平台在为用户提供数据存储服务时,往往需要借助虚拟化技术来实现,这虽然提高了服务质量,但同时也给数据存储带来了一定的安全威胁。其中,威胁最大的就是用户对数据的使用权和管理权被分割,对数据存储环境更是缺乏控制权。近年来,随着云计算数据存储服务的发展,当前云平台上存储的数据更是打破了地域的限制,它们可能并不是存储在某一固定的物理节点上,而是存储在由云服务商提供的动态空间内。
通过上述分析不难看出,用户在云计算模式下丧失了对数据的完全控制权,而各类云应用也不再具有固定的基础设施和安全边界,数据的存储和管理完全依靠云服务商来负责,而这可能会造成以下两个方面的问题:(1)云中的存储设施一旦遭受黑客、病毒等攻击或者受到不可知因素的破坏,那么就可能给用户数据造成严重损失;(2)用户数据因为存储在云端的缘故,就造成用户数据的隐私保护难以得到实现。同时,为了提升服务质量,当前云中应用了大量的虚拟化技术,并且各种虚拟化平台随着云计算功能的逐渐完善而变得日益庞大和复杂,但虚拟平台本身就存在着安全漏洞,并且各种漏洞也会随着虚拟平台的发展而不断出现,这就对虚拟平台的漏洞弥补以及控制提出了更高的要求。
最后,云计算体系中的多层服务模式也将引发安全问题,这主要是因为云平台上可能集成有多个服务商,在用户使用平台上提供的服务时可能就伴随着多层服务的转包问题,这就进一步增加了问题的复杂性,同时也加深了数据存储的安全风险。
4 云计算存储安全技术探讨
1.云中存储数据的保密性解决方案
对云中传输和存储的数据进行加密,是应对数据泄露风险的最直接有效的技术手段。当前在云存储安全系统中应用较为广泛的数据加密技术包括对消息传输前进行加密处理;使用基于X.509标准的PKI和PMI体系进行数字加密的技术与动态密码技术;对传输层加密的TLS/SSL技术等。
2.云中存储数据的完整性解决方案
与数据加密是从数据保密性的角度出发不同,数据完整性是为了使用户数据不被意外或蓄意的删除、篡改、伪造、乱序等行为的破坏。具体则分为以下两个方面:(1)对存储在云端的不同用户间的数据进行有效隔离,通过采用物理隔离或虚拟隔离等技术手段来避免用户数据发生交叉或丢失;(2)对数据的备份和恢复计划工作要做到位,即使遭到突发事故的影响而导致存储数据遭到破坏,也能及时通过备份和数据恢复技术来找回数据。
5 结束语
总之,云计算虽然为数据存储服务提供了极大的便利,但它本身也面临着一定的安全风险,需要相关技术人员在云计算存储安全技术方面投入更多的努力,通过不断完善技术来促进云计算存储服务取得长远健康的发展。
参考文献
[1] 褚烽.云计算中数据存储安全关键技术研究[J].电信技术,2015,(9):40-42
中图分类号:TP333 文献标识码:A 文章编号:1007-9416(2013)12-0089-01
云计算是一种现代的架构体系,这种体系主要是以服务作为其主体运运而生的。为了可以很好地区分云计算的服务方式,在计算机领域把云计算分为了两种最为基本的服务形式,这两种服务形式为云计算,以及云存储。云计算作为一种新型的技术手段被广泛的运用到现代的网络系统,以及现代的金融服务领域;作为计算机技术快速发展的一种形式的云计算,是一种以服务为主体的现代运用系统。为了能够在各种各样的环境下对计算机的数据进行相应的处理,就需要加入另一种服务形式,这种服务方式就是云存储。为了能够适应社会的发展需求,有必要对云计算进行更加深入的研究。
1 云计算,以及云存储
1.1 云计算
云计算是一种新型的技术形式,它通过向对象提供提供技术服务来实现的。云计算提供的计算模式可以分为两种,一种是动态化的可伸缩的计算模式,另一种是动态化的虚拟资源计算模式。虽然说云计算是一种新型的技术形式,但是从它的本质来说,云计算指的就是互联网,以计算机网络,所以说云计算中的云是一种比喻性的说法。在以往的电信行业中,也存在云的概念,当时的云指的就是电信网。但是随着近几年计算机网络的不断发展,为了满足互联网,以及基础设施抽象表达的要求,才逐渐把云的概念扩大到互联网等方面。在计算机中使用云计算,可以很好地满足现实的需求。传统的数据信息基本上是以本地的计算机,或者远程服务器为载体进行存储。而云计算的使用,则是将大量的数据存储到计算机之上。大部分的企业可以很方便的把资源信息转换到比较客观的应用上,这主要是由于这些企业的数据系统与计算机互联网比较相似,所以,可以很容易的对存储体系,以及计算机进行相应的访问。
1.2 云存储
随着云计算的推广,为了适应这一发展趋势,就从云计算中总结出了一个全新的概念,这个全新的概念就是云存储。云计算具有一定的基础功能,而由于云存储是从云计算当中延伸出来的,所以,云存储具有与云计算相类似的功能,即计算机的网格技术,以及计算机的集群应用,还有就是计算机的分布式文件系统。以上的这些基本功能对于云存储发挥其功效具有重要的作用。通过相应的应用软件,可以把计算机网络当中的各式各样的存储设备有效的集中起来,以保证这些存储设备可以进行有效的协同合作。云存储的这种新型的存储模式,是在原有的原有的存储模式的基础之上,进行相应改进的一种存储模式,但是这种新型的存储模式还可以提供一种特别的架构服务。由于云具有广域网,以及互联网的特性,所以具有相对比较的形象特征,而对待遇使用云存储的人来说,云存储具有一定的透明性。把一些有关联的存储设备,以及应用程序软件进行有效的而结合起来,因为存储设备的服务转换抓哟是要通过相关的应用软件来进行实现的。
2 云计算的环境下数据存储体系的构建
在实际的云计算的操作过程当中,对于云计算环境下数据存储体系的建立是十分的必要的。建立云计算环境下数据存储体系,通常会涉及到很多方面的内容,比如说,云计算的数据中心,以及云服务的接口,还有就是云的用户和与计算的服务协议等等各方面的内容。首先,我们先来了解一下什么是数据中心。所谓的数据中心,实质上指的就是数据的存储基础,数据中心是要通过云计算的环境下来进行实现的。数据中心所涉及的内容,包括了数据的存储管理,以及数据的存储设备,还有就是计算机中分布式的文件系统等等。云存储可以有很多不同的类型,一种是根据企业发展的不同程度会采用的专门的存储设备,另一种是运用于个人的存储设备,还有一种就是把专门的存储设备与个人的存储设备进行有机的结合起来。虽然有以上的三种分类,但是对于云存储设备来说,并没有硬性的规定说要根据那个条件进行分类。根据客户机,或者服务器的模式可以对分布式的文件系统进行相应的设计。运用网络节点之间的联接可以很好地吧文件系统管理当中的一些物理存储紫玉进行有效的存储。
3 云计算服务器架构的构建
云计算存储服务器在云计算中占据着关键性的作用,所以对与计算服务器的架构的构建显得至关重要。对于云存储服务器架构的建立,一定要保证是在进行建立云储存体系之前进行建立。比较常见的云存储服务器架构有两种,一种是存储区域网,另一种就是附网存储。对于云存储服务器架构的建立,可以通过多变的架构技术来实现云存储服务器架构的建立的。
附网存储是一种文件存储系统,附网存储是依附于分布式架构系统而存在的。在附网存储当中,是相互独立,而且又相互统一的。所以说,附网存储是一种松散结合型集群,说附网存储是独立的,主要是因为在附网存储中的每一个节点都是相互独立的;而说附网存储是相对统一的,主要是因为附网存储是以系统集群的形式存在着的。附网存储是一种结合比较紧密的集群系统。一旦有一个文件产生请求,附网存储中的热河一个节点都会对这个文件中的不同数据进行同时的访问,与此同时,云计算还会对于用户的相关要求进行相应的处理。一般的存储系统不同的是,附网存储系统的性能不会由于请求越多而越弱,相反的是,附网存储是随着用户的访问请求越多,就会具有越强的性能,因为用户的请求越多,会使得节点数越来越多,所以附网存储系统的性能越强。
4 结语
总的来说,作为现代计算模式的代表的云计算,在实践当中具有很大的数据集群,因此云计算具有最优化的服务功能。云计算中的数据存储,可以通过冗余存储方式来进行数据的存储,进而可以确保数据的安全性,以及可靠性。
参考文献
随着物联网、网络、移动通信等的快速发展,特别是互联网的普及使得信息传播的规模和速度呈现几何增长,人们获取信息的途径和方式开始变得异常丰富,人们事实上已经进入了“信息大爆炸”时代。与此同时信息传播的大容量、高效性和准确性也对现有的数据处理体系提出了更高要求。根据大数据摩尔定律,人类世界的数据产生量将按照每两年一倍的速率增长,预计2020年世界数据量将超过35亿GB,“大数据”时代迫在眉睫。“大数据”具有离散型、随机性、发散性、爆发性等特点。近年来,随着云技术的兴起全面革新了传统的数据技术,大容量、多样化、快速处理、信息价值性和准确性为了云技术背景下大数据处理的五大主要特征。如何利用云计算技术对大数据进行高效处理已经成为了信息技术发展亟待解决的关键问题。
1 大数据和云计算的关系
云计算技术是指利用集中式远程计算资源池,通过按需分配的方式,为终端用户提供强大而廉价的计算服务技术。云计算技术作为一种数据处理方式,其技术特点包括:一是资源池在物理上是对终端用户完全透明的;二是能够为任何行业提供规模化计算服务,其服务能力可看做是“无限”的;三是其应用部署快速便捷,服务能力和方式是可以完全按照终端客户要求定制的,具有极强的弹性伸缩能力;四是云端数据获取方便,能够资源共享,用户使用成本低廉。
云计算技术是目前最强大的数据存储、传输和处理平台,它是大数据处理的最优选择。云计算能够为大数据提供几乎“无限”的存储空间和处理能力,满足其超大容量存储和超级复杂的处理需求,也是传统存储方式无法实现的。云计算侧重数据的计算处理,而大数据需要强大数据处理能力,因而它是云计算的处理对象。此外大数据所产生的业务需求也为云计算的实现提供了更多的形式。
2 基于云计算的大数据处理技术
2.1 大数据的采集技术
目前数据采集方式主要分为集中式和分布式两大类。其中分布式的灵活性较强,而集中式的全局性较好。实际上大数据采集的对象通常包括组织内部和相互独立组织间的各类数据,而云计算恰好具有并行处理的优势,因而可采取混合式采集方式能够更加有效地完成数据采集任务。即在各个组织内部采用集中式数据采集方式,通过在组织内配置中心服务器,作为集中式数据注册机构,用于存储和共享内部的数据。在相互独立组织间,采用云计算的集群技术、虚拟化技术等在各独立组织中心服务器间采用分布式采集方式实现数据采集、组织间对接和共享。大数据结构类型包括结构化、半结构和非结构化数据,因而在应用云计算技术进行分布式采集时,可依托其超强的扩展性和容错力,将数据池内数据进行同构化,从而实现数据进行分类存储。
2.2 大数据的存储技术
由于超大体量、离散、复杂的数据特点,传统数据存储模式已经难以满足大数据存储要求。一方面单结点的数据仓库在容量上难以满足呈几何增长的数据量,在运行效率上也难以满足大数据的分析处理需求。另一方面传统数据仓库按行存储模式,虽然可以实现大容量索引和视图,但实际操作中其时间和空间过高。而云计算主要采取列式存储模式,即区分数据不同属性,不同属性列都单独存放。云计算中列式存储的优势在于在投影数据时只需查询其属性列,系统处理量和处理效率显著提升。此外按数据属性进行列式存储,数据仓库中相邻列数据的相似性更高,因而能够得到更高的数据压缩率,进一步减少存储所需空间。
2.3 大数据的挖掘技术
联机分析能够完成数据的复杂处理,得到直观结果,实现决策性分析。云计算并行模式下联机分析能够基于数据全局,建立多维分析模型对数据进行多维度分析,从而尽可能获得全面的分析结构。由此可见多维度分析是联机分析的重要特征,而云计算技术下数据仓库正好是通过多维数据组织的。
联机分析对数据的处理仅仅只是表面的,其获取的信息价值并不高,难以得到数据深层次的含义与内在关联。而数据挖掘正是在联机分析的基础上,从超大体量的数据仓库中提取数据所蕴含的隐性信息,并将这些信息用规律、概念或是模型等表现出来。基于云计算的数据挖掘主要采用分布式并行挖掘技术。与其他串行方式相比,云计算技术下并行数据挖掘能够利用机器集群拆分分布式系统中的并行任务,并将拆分后的各个任务分别交由不同的机器去处理,从而实现大规模数据处理,其时间成本也大大降低。
2.4 大数据的可视化技术
上文所述数据挖掘可实现大数据的深层次、多维度分析,获取更多有用信息。而云计算平台下可视化技术则能够将上述信息具体化,从而使数据及其有关结构的相关信息能够更直观地表现出来,更容易被发觉和理解。可视化技术是指在存储空间中,将数据库及其中数据以图像(图形)的形式表示出来,并在其中再采用其他的分析手段获取图像中所蕴含的未知信息。而原有的数据处理仅仅只能够从数据本身入手,分析和观察数据中的内在信息。云计算下的可视化技术不但能够实现非空间数据的多维度图像显示,而且能够实现检索过程的直观图形显示,从而帮助人们更好地挖掘和理解信息,信息检索效率也大大提升。
3 结语
在数据爆炸时代,云计算的出现为大数据的存储和处理提供了可能,也为数据处理系统的功能扩展提供了重要保障。以往的数据管理将收集和存储作为重点,而在云计算模式下,大数据管理将更多地侧重数据分析、挖掘及管理模式的创新。目前数据采集和统计技术已经较为成熟,利用云计算进一步丰富大数据的存储和处理方式,实现更高层次的数据挖掘和可视化将是今后需要解决的问题之一。
参考文献
[1]孟小峰,慈祥.大数据管理:概念,技术与挑战[J].计算机研究与发展,2013,50(1):146+169.
[2]吴雪琴,基于云计算的大数据信息检索技术研究[J].电脑知识与技术,2014,10(10):38-41.