Snippet 博客主题

技术

hadoop-RedHat5.4-64bit编译安装hadoop2.5.1.md

1 环境 系统:redhat 5.4 软件: jdk 1.7,hadoop- 2.5.1- src.tar.gz,Maven 3.1.1,protobuf2.5.0 IP:192.168.1.231 主机名:hadoop01 需要连接互联网(重要)…

Hadoop2.5.1完全分布式集群部署

1 部署所需软件 操作系统:rhel-server-5.4-x86_64-dvd.iso JDK:jdk-7u79-linux-x64.tar.gz Hadoop:hadoop-2.5.1.tar.gz 远程连接工具:Xmanager Enterprise 虚拟机:vmware 开发工具:eclipse…

Linux添加SFTP公钥步骤

1.首先需要在目录(/home/yangql)创建.ssh文件夹 1[yangql@hadoop01 ~]$ mkdir .ssh 2.在客户端生成公钥和私钥12[yangql@hadoop01 ~]$ cd .ssh[yangql@hadoop01 .ssh]$ ssh-keygen -t rsa 执行创建密钥对命令(一路回车),直至完成公钥与私钥生成。…

虚拟机NetworkAdapter三种方式的区别

Vmware在安装时默认安装了两块虚拟网卡,VMnet1和VMnet8,另外还有VMnet0。这些虚拟网卡的配置都是由Vmware虚拟机自动生成的,一般来说不需要用户自行设置。Vmware提供了三种网络连接模式,分别为…

Hadoop2-hdfs-垃圾箱简介

hdfs为每一个用户创建一个回收站:目录: /user/用户名/.Trash/ 每一个被用户通过shell删除的文件/目录在系统回收站中都有一个周期,周期过后hdfs会自动将这些数据彻底删除周期内 可以被用户恢复。…

Hadoop-windows下搭建hadoop,Hive,HBase

1.搭建Hadoop 安装JDK1.8并设置环境变量 JAVA_HOME。 下载hadoop2.7.2 ,解压到D盘,路径为D:\winbigdata\hadoop2.7.2(注:如何不是根目录,不要带空格) 添加环境变量HADOOP_HOME=D:\winbigdata\hadoop2.7.2\ ,将D:\winbigdata\hadoop2.7.2\bin和D:\winbigdata\hadoop2.7.2\sbin添加到path中。 下载hadooponwindows,下载地址https://github.com/sardetushar/hadooponwindows 删除hadoop下的etc和bin。将hadooponwindows里的etc和bin拷贝到D:\winbigdata\hadoop2.7.2\下。 修改etc/hadoop/core-site.xml…

用Hexo-nexT-GitHub搭建个人博客

第一章 安装Git工具下载GitHub for Windows,直接点击安装,安装完成后,可以看到“Git Shell”和“GitHub”,”Git Shell”用于命令行模式,“GitHub”桌面版。下面介绍一些常用命令: 1. 本地使用…