基于MapReduce的Hadoop大表导入编程模型

时间:2022-09-30 06:15:28

基于MapReduce的Hadoop大表导入编程模型

摘要:

针对Sqoop在导入大表时表现出的不稳定和效率较低两个主要问题,设计并实现了一种新的基于MapRe

>> 基于Hadoop平台的MapReduce模型任务调度算法的研究与改进 基于Hadoop的海量网分数据MapReduce排序算法 基于Hadoop/MapReduce 的K_NN算法 基于Hadoop的数据共享模型研究 基于匹配规则的MapReduce任务调度模型 基于MapReduce模型的并行计算平台设计 基于Hadoop 分布式文件系统的模型分析 基于Hadoop的大矩阵乘法处理方法 基于神经网络与MapReduce的科技云数据清洗模型 通过编程把DBF表中的数据导入到SQLServer表中 基于MapReduce的XML编码研究 基于图的分布式并行基因编程模型 基于服务虚拟化的业务编程模型 Cloudera:针对Hadoop的三大预测 基于MapReduce和RDBMS的大数据分析对比 基于MapReduce的KMedoids并行算法 基于迭代式MapReduce的误差反向传播算法 基于MapReduce的并行AES加密算法 基于MapReduce的等值连接中数据倾斜问题研究 基于MapReduce框架下的数据挖掘方法研究 常见问题解答 当前所在位置:.

[4]ABOUZEID A, BAJDAPAWLIKOWSKI K, ABADI D J, et al. HadoopDB: an architectural hybrid of MapReduce and DBMS technologies for analytical workloads[C]// Proceedings of the 35th International Conference on Very Large Data Bases. New York: ACM Press, 2009: 733-743.

[5]覃雄派,王会举,杜小勇,等. 大数据分析——RRDBMS与MapReduce 的竞争与共生[J]. 软件学报,2012,23(1):32-45.

[6]王珊,王会举,覃雄派,等. 架构大数据:挑战、现状与展望[J]. 计算机学报,2011,10(34):1741-1752.

[7]Apache Sqoop Project. Sqoop User Guide(V1.4.3)[EB/OL]. [20130210]..

[8]HWANG K, FOX G, DONGARRA J. Distributed and cloud computing: from parallel processing to the Internet of things[M]. 北京:机械工业出版社,2012.

[9]TANENBAUM A S, VANSTEEN M. Distributed systems principles and paradigms[M]. 北京:清华大学出版社,2012.

[10]周志明. 深入理解Java虚拟机[M]. 北京:机械工业出版社,2011.

[11]Apache Ambari Project. Ambari user guide [EB/OL].[20130210]..

[12]文艾,王磊. Haooop分布式文件系统深度实践[M]. 北京:清华大学出版社,2012.

上一篇:信号分解法降低OFDM符号峰均功率比的算法 下一篇:云模型图像置乱算法