一、环境 Hadoop集群：使用Ambari搭建 Debug:Windows10 + jdk 1.8.0 +maven 二、步骤 2.1 创建Maven项目 2.2 配置文件 从Ambari中下载Hbase配置文件hbase-site.xml，并放在项目： /src/main/resources/hbase 2.3 将配置路径加入到classpath 2.3 给pom.xml添加依赖 我的pom.xml最终如下： <project xmlns="http://maven.apache.org/POM/4.0.…
1、安装环境说明 安装前请先安装好centos7/jdk/mysql57 #安装常用工具 yum install -y vim wget curl #安装epel yum install -y epel-release #安装java yum install -y java-1.8.0-openjdk.x86_64 yum install -y java-1.8.0-openjdk-devel.x86_64 #安装Mysql57 wget http://dev.mysql.com/get/mysql57-commu…
一、JVM/JDK运行环境配置 1、查看JDK版本 yum search java|grep jdk 2、安装JDK 博主选择的是1.8.0 yum install java-1.8.0-openjdk /usr/lib/jvm/java-1.8.0-openjdk-1.8.0.111-2.b15.el7_3.x86_64/ 3、设置环境变量 编辑/etc/profile文件 vim /etc/profile 顶部插入以下内容： #set java environment JAVA_HOME=/usr/lib/jv…
博主在eclipse使用maven对java源代码进行管理。接下来记录maven打包jar方法。 要想jar包能直接通过java -jar xxx.jar运行，需要满足： 1、在jar包中的META-INF/MANIFEST.MF中指定Main-Class，这样才能确定程序的入口在哪里； 2、要能加载到依赖包。 一、使用maven-jar-plugin和maven-dependency-plugin插件打包 pom.xml中添加 <build> <plugins> <plugin>…
如题WordCount！ 一、普通版本 1、TokenizerMapper.java package hadooptest2; import java.io.IOException; import java.util.StringTokenizer; import org.apache.hadoop.io.IntWritable; import org.apache.hadoop.io.LongWritable; import org.apache.hadoop.io.Text; import org.apache…
Hadoop由Java编写的，所有通过JavaAPI可以调用所有的HDFS的交互操作接口，最常用的是FileSystem类，它是有Hadoop fs 实现。 一、读取文件内容 1、Java.net.URL读取HDFS文件内容 import java.io.InputStream; import java.net.MalformedURLException; import java.net.URL; import org.apache.hadoop.fs.FsUrlStreamHandlerFactory; impo…
由于日常工作关系，想搭建一个内部文件系统，所以就选择了seafile。 环境： 硬件：Minowboard MAX开发板 系统：Windows 10 一、windows上安装seafile 详见seafile官网 二、发现问题！！！ 网页上可以正常使用seafile，但是客户端登录seafile后不能同步文件，始终显示“connecting server”。经过检查后发现，主链接的/seahttp路由始终显示404 ERROR。经过观察之后，找到如下解决方法。 1、安装nginx，做反向 博主使用phpstudy自…
由于之前的机器安装了mysql5.6，现在想升级到mysql5.7。 一、卸载mysql-5.6 初级思路： 1、卸载mysql5.6 2、升级到mysql5.7 初级思路遇到的问题： 1、卸载mysql 5.7后，使用Google的方式，安装mysql57-community-release-el7-7.noarch.rpm时遇到了问题，原因是： Error: mysql57-community-release conflicts with mysql-community-release-el7-5.noarch…
上次测试了不同平台下java编译运行，但是由于很多依赖库，导致程序执行起来比较麻烦，所以测试下eclipse直接打包。 打包环境：Windows: Windows10+jre+eclipse 运行环境：centos 一、步骤 文件目录： 步骤：（我就不详细描述了） * Generate the manifest file：是系统帮我们自动生成MANIFEST.MF文件，如果你的项目没有引用其他class-path，那可以选择这一项。 * Use existing mainfest from workspace：这是…
第一次正式使用java，不知如何编译，遂研究一下。 操作系统：Centos 7 1、安装Java编译环境 yum install java-devel 2、测试java与javac工具 [root@localhost DataStorageSystemRMQDistributeNode]# java -version openjdk version "1.8.0_121" OpenJDK Runtime Environment (build 1.8.0_121-b13) OpenJDK 64-Bit Server …