摘 要 我们日常网络活动中的搜索引擎、网络邮箱、云查杀等,都是一种简单的大数据技术的应用形式。随着大数据的不断被应用,大数据对于最初涉足其领域的企业来说,带了了丰厚的利润,当前各种各样的“云”不断涌现,大有泛滥之势,对大数据背景下的计算机信息处理技术发展也带来了考验。本文通过对大数据概念、大数据下的计算机信息处理关键技术及应用现状的分析研究,简要的说明了大数据的发展状况,针对当前大数据的形势,我们应该看到起发展中的问题,来促进大数据的健康发展。
【关键词】大数据 信息技术 大数据 发展现状
“大数据不是忽悠,它确实是一个真事,是产业大的变革。对it产业、经济都是一次重要的机遇。”2012年4月2日,微软全球资深副总裁张亚勤在博鳌亚洲论坛“大数据、移动、社交媒体:改变商业的创新力量”上如此表示。就其主要言论而言,主要是:第一,大数据需要大量的数据、软件、应用,把它简化放在云,其实质是一中简化;第二,大数据最重要是应用软件;第三,大数据的发展是一个长期的过程;第四,大数据不是忽悠,它是产业大的变革,对it产业、经济都是一次重要的机遇。
从这一段资料分析可以看出,大数据计算机信息处理技术是在不断发展的计算机技术中脱颖而出的能够处理大量数据、计算大量数据的超级计算技术。这种技术必须要有完善的硬件与软件资源作为支撑,需要虚拟化的调度完成各项数据服务功能。各it企业已经注意到了大数据商业价值,基于大数据的各项数据服务已经不断应用于各个行业的创新领域。
1 大数据的概念
目前,it界对大数据的定义不下于20种,但就其本质和应用领域来看,其实是一种基于大数据应用而新兴的商业计算模式。相较于传统计算,大数据具有虚拟化、超大规模、按需服务、资源利用率高、低成本等特点。
从用户角度来看,大数据能为多个大数据用户(企业或个人等)提供似乎是无限的互联网计算资源,便于用户虚拟拥有和按需使用共享在“云”上的网络计算技术资源服务,大数据用户可以对自己所需的服务只需付费就可以直接得到,不需要到处跑去跑来去买、去找、去打听。实际上它所提供的是一种超大规模的网络资源共享。另外,简单的说,“云”就是资料存储以及应用服务的中心,把你想要的都放进“云”里,当你想要的时候,基于互联网,你可以随时随地拿到,当用户不需要这些数据资源时,就可以删除、释放这些资源,从而提高了使用资源上的多样性。
2 大数据下的信息处理关键技术
大数据的应用核心是按用户需求进行网络大数据资源分配。在解决好资源分配之前,最主要的是解决好超级资源云系统的构建和存储,以及自动化资源部署分配等问题。所以,大数据除了需要仔细研究其体系结构外,还应该在其虚拟化技术、高性能云存储技术、高速的云处理技术、以及相关的对数据安全技术上进行突破。
2.1 虚拟化技术
所谓虚拟化技术是通过利用虚拟的网络设置、资源配置进行数据的存储与管理。而虚拟化技术是大数据计算机信息处理技术的基础,虚拟化技术构建的大数据信息处理技术一方面可以搜集与整合各项有利资源,对必要的信息资源进行存储;另一方面可以通过这种技术对大数据处理任务进行资源优化、灵活调度来提高对大量数据的运算、处理能力与效率。可见,虚拟化处理技术也是大数据下的信息处理的关键技术。
2.2 云存储技术
云存储实际上是由多个存储设备组成,通过集群功能、分布式文件系统或类似网格计算等功能联合起来协同工作,共同对外提供数据存储和业务访问功能的一个系统。所以实质上,云存储就是大数据存储的核心技术,为大量数据的保存提供了关键性的作用。
其中,因为大数据系统需要同时满足大量用户的需求服务,并要为对大数据集进行处理、分析向用户提供高效的服务。这样云存储技术必须具有高吞吐率和高传输率的特点,数据管理技术也必须能够高效的管理大数据集。因此,云存储技术对于大数据信息处理的顺利展开起到了关键性的作用。首先,为了保障大数据处理任务的顺利完成,云存储技术要对大数据系统内的海量数据进行管理与分析,在利用云存储技术进行大数据管理时读操作要远远多于数据更新操作,云存储技术实际是对大数据系统中数据的读优化处理。其次,分布式的数据存储方式在云计算中起到高效计算的
作用,云存储技术中对于数据库采用了高效的列存储模式,这也为海量数据中查询到某一数据带来了方便,查询效率非常高。可见,云存储技术对于提高大数据运算效率必不可缺。
2.3 大数据自动化资源调度
大数据在服务过程中,将虚拟云资源中的信息数据进行划分、安装和调度成可以为用户提供各种服务和应用的过程。大数据信息处理技术还离不开自动化资源调度技术,所谓资源调度就是将所有的大数据信息资源进行合理的配置与整合,以更好的为服务程序提供便捷。这些资源除了重要的数据库信息资源以外,还包括大数据系统涉及到的各类软件资源、硬件资源以及网络资源等等。
2.4 云安全技术
海量数据的管理与运行需要安全可靠的安全防范技术作为保障,云安全技术就是在这种背景下产生的专门为大数据信息处理保驾护航的安全保障技术。云安全技术可以对外来网络干扰信息进行识别,对黑客的刻意侵犯做出防范,对网络信息中存在的病毒进行查杀。近年来,行业内也逐渐在完善和出台相应的网络安全政策,云安全技术在良好的政策扶持下,对于大数据信息网络安全的构建更加游刃有余。由此可知,云安全技术对于大数据信息处理的安全有重要作用。
3 大数据的应用发展现状
3.1 大数据应用产品形式
当前大数据开发应用产品有很多,it行业及其他行业对于大数据都有着各自的理解,因此当前对大数据的产品形式仍然存在较大的差异,但是最基本的应用服务主要有一下三个层次构成:基础设施作为服务交付(infrastructure as a service,简称iaas)、平台即服务(platform as a service,简称paas)及软件即服务(software as a service,简称saas)。
将开发和计算环境通过大数据的软件平台提供给用户的模式被称为大数据平台服务模式,这种模式需要web支持。例如azure、force.com、google app等都是比较实用的大数据软件平台。还有比较知名的elastic compute cloud平台也是通过web对数据与软、硬件资源进行优化与管理的大数据平台模式。
3.2 大数据的应用发展现状及趋势
现今社会已经步入了信息化快速与高度发展的崭新时代,无论是医疗、交通、教育、军事等等方面都涉及大量信息数据的录入、存储与计算,海量数据的管理需要有基础技术、高效技术与安全技术作为支撑。目前it行业中应用的例如360“安全云计划”、 “蓝云”计划等都是大数据信息技术的典型应用。
未来的大数据信息技术对于信息处理必然会更加高效、快捷,大数据系统的应用也会越来越普遍。例如美国最新体术的disc数据密集型的超级计算、谷歌即将推行的大数据服务academic cloud computing initiative,都意味着大数据高效信息时代很快就能到来。
4 结语
总之,大数据为我们的云用户、企业、以及网络服务提供商都带来了好处,并且也成为一个新兴的产业模式。但就目前的大数据发展状况来看,我国的大数据还处于刚起步阶段,在未来,随着各种技术的不断纵向发展,人类社会在迎来高度信息化同时,相应的大数据带来的一些弊端也会凸显,只有在实践中不断的完善和加以改进,真正的让大数据显示出优势,发挥其作用,才能使得大数据惠及普通个体用户、企业、乃至国家的发展。
参考文献
[1]王秀苏.计算机信息处理技术在办公自动化上的应用[j].科技经济市场,2010(03).
[2]张连杰.企业管理中计算机技术的应用[j].电脑知识与技术,2011(26).
[3]陈静.浅谈计算机处理技术[j].科技与企业,2012(11).
作者简介
李春辉(1973-),男,山东省德州市人。硕士学位,副教授。主要研究方向计算机应用技术、计算机网络、物联网。
作者单位
德州职业技术学院 山东省德州市 253034