实验报告封面
课程名称: Hadoop大数据处理 课程代码: JY1124
任课老师: 陈宁穗 实验指导老师: 陈宁穗
实验报告名称: 实验13 sqoop数据集成
学生姓名:
学号:
教学班:
递交日期:
签收人:
我申明,本报告内的实验已按要求完成,报告完全是由我个人完成,并没有抄袭行为。我已经保留了这份实验报告的副本。
mysql下载jar包申明人(签名):
实验报告评语与评分:
评阅老师签名:
一、实验名称:sqoop数据集成
二、实验日期:2015年 月 日
三、实验目的:
熟悉sqoop数据集成。
四、实验用的仪器和材料:
硬件:PC电脑一台;
配置:内存,4G及以上 硬盘250G及以上
软件环境:操作系统 XP,vmware,ubuntu,jdk,hadoop
五、实验的步骤和方法:
请用命令完成以下操作
一、安装mysql,准备数据。
1、安装mysql:
sudo apt-get install mysql-server mysql-client
安装过程中,会提示设置root用户密码。
2、登录MySQL:
mysql -uroot -p (用root账户登录),然后输入密码;
3、查看所有的数据库名字:show databases;
4、选择一个数据库操作: use test;
5、查看当前数据库下所有的表名:show tables;
6、创建测试表,插入测试数据。
二、安装Sqoop及将mysql的数据导入到HDFS中
1. 解压Sqoop以及jar包拷贝
1)下载sqoop,解压。
2) 将mysql-connector的jar包复制至sqoop解压后的lib目录下。
3) 把sqoop根目录下的sqoop-1.4.4.jar以及mysql-connector的jar包复制到hadoop根目录下的lib目录
4) 修改sqoop的bin目录下的configure_sqoop
在/etc/profile里配置sqoop环境变量:
2、使用sqoop从mysql中导入数据到HDFS中。
1)bin/sqoop help
2)测试连接
3)导入HDFS数据
4)回到hadoop目录下,检验HDFS上是否存在相应表及数据。
六、数据记录和计算:写语句及截图
七、实验结果或结论:即根据实验过程中所见到的现象和测得的数据,作出结论。
八、备注或说明:可写上实验成功或失败的原因,实验后的心得体会、建议等。
九、引用参考文献:
1. 陆嘉恒 Hadoop实战.机械工业出版社
版权声明:本站内容均来自互联网,仅供演示用,请勿用于商业和其他非法用途。如果侵犯了您的权益请与我们联系QQ:729038198,我们将在24小时内删除。
发表评论