Hadoop 分布式文件系统——导入和导出数据 免费

关注
976 人学过 48人关注 25人评论

一个经典的数据架构中,Hadoop 是处理复杂数据流的核心。数据往往是从许多分散的系统中收集而来,并导入 Hadoop 分布式文件系统(HDFS)中,通过 MapReduce 或者其他基于MapReduce 封装的语言(如 Hive、Pig 和 Cascading 等)进行处理,将这些已经过滤、转换和聚合过的结果导出到一个或多个外部系统中。本章的重点将关注 HDFS 数据的导入与导出,主要内容包含与本地文件系统、关系数据库、NoSQL 数据库、分布式数据库以及其他 Hadoop 集群之间数据的互相导入导出。

实验1
Hadoop分布式文件系统——导入和导出数据
知识点: 1.使用Hadoopshell命令导入和导出数据到HDFS 2.Pig脚本来演示下getmerge命令的功能 3.使用distcp实现集群间数据复制 4.使用Sqoop从MySQL数据库导入数据到HDFS 5.使用Sqoop从HDFS导出数据到MySQL
登录 后发表评论
最新评论
全部 第1节

0% Complete

加载中,精彩就在后面...

卡住了?点击重试