大数据时代内存计算先行

时间:2022-06-02 12:51:57

大数据时代内存计算先行

【关键词】大数据 内存计算 研究

科学技术的发展有赖于社会经济的进步,而社会经济又会因为科学技术的发展进一步提升,二者相互影响相互促进,置身于大数据时代,其对各行各业引发强烈的影响,但是我们必须重视内存计算,不然大数据时代难以实现,基于此,笔者对其进行分析和研究。

1 大数据与云计算

基于广泛的需求背景,尤其是大数据时代被提出后,计算内存的技术开始出现,正如国内学者所说,我们能够科学的计算这个数据,不管该数据是结构性的还是非结构性的。我们有不同类型的商业模式进行模拟,对制造结构进行科学的调整,对市场战略和价格执行情况充分的考虑和细化,所有的一切,在大数据时代以及内存计算面前都仅仅需要几秒钟,这种速度令人惊叹。

如果说大数据时代是计算内存技术出现的首要前提,企业需要更高的数据处理,那么我们有理由认为内存价格的持续降低,是发展内存技术的首要前提。在内存计算的作用下,需要在内存中装载更多的数据,和传统的数据库解决方案相比,内存的开销要大很多。但是,我们欣喜地看到,1T中间件的发展在摩尔定律的作用下不断发展,内存的价格早已经一泻千里,就如张志琦曾经说过的案例:十几年前你要是和别人谈论1TB的内存,别人会认为你疯了;但是当前4兆内存条已经非常便宜,对从事计算机行业的人员而言,相对价格会更低。因为半导体技术显著改变,进一步改变软件行业,推动该产业迅速提升,这也是今后的必然趋势。

同时使用其他相关技术,也能够把使用内存代替硬盘的成本降低,如SAP HANA内存压缩技术,和过去压缩数据的速度相比,该技术压缩数据的速度提升了20倍。1TB数据,压缩20倍,仅仅需要50G,通过这种转嫁方式进一步降低内存成本。

通过处理大数据速度的提升,会让我们的生活、商务活动等等从量变走向质变,以张志琦所举某饮料供应商的例子:SAP内存计算技术的第一个客户为该饮料供应商,在H ANA里把所有该公司的销售记录都融入其中,然后进行计算和分析。在其原有的平台中,是不可能把所有的历史数据都完全加载计算的。要是必须计算,其所花的时间可能较长,如一年、两年等。通过该技术,把所有的数据进行统筹分析也仅仅需要花费几秒钟,同时还可以分析出区域销售记录,不同天气情况下的销售等,这些分析在原有系统中无法实现。

不仅仅是针对大型企业,对规模较小的企业而言亦是如此,在大数据时代背景下更需要内存计算,有学者认为:业界就是这样的趋势,大数据和大企业并不对等,不管是何种规模的企业都要面临大数据这一话题。如通过微博营销,产生的数据是几何级的,这一产品的的销售情况,消费者的销售程度,提升空间怎样等信息的获取需要通过消费者舆情,这和企业的规模没有必然关系。

在大数据背景下,不仅仅在商业领域应用内存计算技术,还能够把我们的生活予以改变,我家人口政策、医学研究、民生工程等等,都涉及到复杂的计算和运算,在这些事业和行业中使用内存计算技术能够保障其获得更好的发展和进步。

2 防患于未然

很好的结合内存计算和云计算让人感到极为兴奋,如SAP BusinessObjects,作为SAP HANA的新一代内存应用产品就可以在云端应用。

如果在云端应用内存计算技术,我们需要注意其中存在的问题,最显著的就是在内存计算的帮助下能够对云端信息进行快速的提取并计算,但是数据被计算后,会被终端分散使用,我们至今还记得WEB模式失利的事件,指的是分布式的客户端获取信息需要一定的时间,经过多次请求,传输信息的速度并会因为应用内存计算而提高,甚至会对其速度造成一定的影响,当前我们还应该思考国内宽带能不能负担起大量的数据传输,如果没有宽带的支撑,内存计算的量变指数指的商榷。

通过上述的考虑,和“一片大云”的模式相比,未来内存计算在元计算领域中可能更适用于类似苹果“一些小云”的模式,在苹果强大终端计算能力的帮助下,i C l o u d形成了P2P网络,和服务器比较类似,这种云计算模式把WEB模式的阴影很好的避免,还能够对内存计算的高速度加以利用强化信息处理。

在增大内存的情况下,散热问题怎样处理也值得我们思考并加以重视,全球各大型互联网公司为了把自己数据中心散热问题予以解决,早就头疼不已,使用各种各样的方式。有的使用海水、有的使用冰山,怎么驱散大量数据储存带来的热量,至今还是一个难题。同时,提取数据的过程中使用内存固然能够把信息处理的速度有效提高,但是缓存较大,一些临时存储的内存怎样清理也值得我们思考,要是临时内存清理不及时,必然会严重影响计算速度。不仅如此,内存是当前各类病毒攻击的重点,如果今后大范围普及内存计算技术,甚至把硬盘取代,我们应该保障相关信息的安全,当前攻击内存的手段种类繁多,我们应该做好防范措施。

3 结束语

总而言之,内存计算式今后的发展趋势,且此趋势不可逆转,很多国际性的互联网企业已经把眼光瞄准内存计算领域,但是作为一项新的技术,怎样在出现隐患之前把所有的防范措施都做好,值得我们思考,这也关系到该技术能否立足。

参考文献

[1]吴飞.基于内存计算技术的大数据平台推动电网企业实时运营[J].中国新通信. 2015(23).

[2]赵衍.基于内存计算的计算机快速自动信息标引技术[J].图书馆学研究. 2013(19).

[3]诺拉.EMC Symmetrix DMX-3存储系统超大容量高速存取[J].中国计算机用户. 2005(31).

[4]王珊,王会举,覃雄派,周@.架构大数据:挑战、现状与展望[J].计算机学报. 2011(10).

上一篇:巨鹿县农广校: 构建现代网络服务平台 力促新型... 下一篇:图书馆档案管理探讨