我也要用- 博客(10)
- 资源 (63)
- 论坛 (2)
- 收藏
- 关注
RSS订阅原创 Flume集群搭建
概念集群的意思是多台机器，最少有2台机器，一台机器从数据源中获取数据，将数据传送到另一台机器上，然后输出。接下来就要实现Flume集群搭建。文中的集群如下图所示。 这里我们需要2台机器，node1作为push推送数据，node2作为pull获取数据后显示出来。配置pull.conf【在node2机器上操作】 在conf目录下创建pull.conf文件touch pull.conf编辑pull
2016-04-21 18:44:47
1806
原创 Flume单机安装与配置
下载apache-flume-1.6.0-bin.tar.gz解压tar -zxvf apache-flume-1.6.0-bin.tar.gz 配置cp conf/flume-conf.properties.template conf/flume-conf.propertiescp conf/flume-env.sh.template conf/flume-env.shflume-env.sh
2016-04-21 18:40:54
9674
原创 Sqoop HDFS导出到MySQL
在MySQL中创建表CREATE TABLE `tree1` ( `id` int(11) NOT NULL AUTO_INCREMENT, `treeNumber` varchar(100) NOT NULL, `productinformationId` int(11) NOT NULL, PRIMARY KEY (`id`)) DEFAULT CHARSET=utf8;执行命
2016-04-21 16:54:51
1057
原创 Sqoop MySQL 导入到Hive
将数据库phx中的tree表的数据导入到Hive中命令：sqoop import --connect jdbc:mysql://node1:3306/phx \--username root \--table tree \--hive-import \--hive-overwrite \--create-hive-table \--hive-table tree1 \--target-dir /sq
2016-04-21 16:09:23
1339
原创 Sqoop MySQL 导入到HDFS
从MySQL数据库phx中读取tree表到HDFS执行命令：sqoop import --connect jdbc:mysql://node1:3306/phx \--username root --table tree --m 1命令行输出：Warning: /csh/link/sqoop/../hcatalog does not exist! HCatalog jobs will fail.P
2016-04-21 15:26:27
13272
原创 Sqoop安装与配置
下载sqoop-1.4.6 安装包配置sqoop-env.sh#Set path to where bin/hadoop is available 配置Hadoopexport HADOOP_COMMON_HOME=/csh/link/hadoop#Set path to where hadoop-*-core.jar is availableexport HADOOP_MAPRED_HOME
2016-04-19 19:43:27
615
原创 Linux下MySQL导入导出数据
导入数据create database test;use test;source /home/xxx/data/test.sql导出数据bin/mysqldump -u username -p [-d] database_name > xxx.sql如果没有-d， 则导出表结构和数据；如果有-d，则只导出表结构例如：bin/mysqldump -u root -p test > test.sql
2016-04-10 21:12:13
386
原创 Hive安装配置
1.下载解压安装包 下载链接：apache-hive-1.2.1-bin.tar.gztar -xvf apache-hive-1.2.1-bin.tar.gz2.启动Hadoop 可以参考：Hadoop2.x配置HA4.在$HIVE_HOME/bin目录下执行./hive5.创建表test[root@node1 bin]# ./hiveLogging initialized using co
2016-04-06 19:42:27
353
原创 HBase完全分布式配置
Node Name Master ZooKeeper RegionServer node1 yes yes no node2 backup yes yes node3 no yes yes1.配置conf/regionserversnode2node32.创建conf/backup-mastersnode23.配置 hbase-site.
2016-04-02 23:01:17
365
原创 HBase单机模式配置
1.在hbase-env.sh中修改Java路径export JAVA_HOME=/csh/link/jdkexport HBASE_PID_DIR=/csh/hadoop/hbase/pids2.在hbase-site.xml中修改 <property> <name>hbase.rootdir</name> <value>file:///csh/hadoop
2016-04-02 22:49:41
428
Netty权威指南 第2版 带书签目录 高清完整版.pdf
2016-04-28
算法设计手册 The.Algorithm.Design.Manual,2nd
2015-11-04
Java JNI HelloWorld.rar
2015-10-30
LieBrother的留言板
发表于 2020-01-02 最后回复 2020-01-02
Apache Email 插件
发表于 2016-01-04 最后回复 2016-01-28
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人 TA的粉丝