整套漫画分为三篇,本文是第一篇,主要讲解了:1.系统构成:客户端,NAMENODE(主节点),DATANODE(数据节点)2.写数据原理整套漫画分为三篇,本文是第二篇,主要讲解了:读数据原理容错-故障类型和故障检测整套漫画分为三篇,本文是第三篇,主要讲解...
阅读全文...
配置idea的HDFS Java API 操作。
本次来做的是在windos下面配置idea的hdfs——java api的操作 基础代码 以及配置。下载配置首先我们先下载apache-maven-3.6.3下载完成后配置 conf下面的settings.xml文件。需要配置的有 {仓库存在的路径把仓库...
阅读全文...
阅读全文...
yarn的8088或者hdfs50070 访问不了的原因。
我的原因是vm虚拟机里能打开8088结果windows下就打不开了,防火墙已经关闭也能够ping通。1、检查是否正确的启动了resourcemanager服务没有的话去检查yarn-site-xml配置或者去看看logs日志2.检查客户机和虚拟机之间是否...
阅读全文...
阅读全文...
Linux中Hadoop的安装及环境变量配置
Hadoop的运行需要Java环境,请确保在jdk安装成功的情况下安装Hadoop第一步:从官网下载Hadoop网址:http://hadoop.apache.org/releases.html本文以2.7.6版本为例,作简单介绍第二步,解压并配置环境解...
阅读全文...
阅读全文...
Datanode不启动的问题
Hadoop 启动后使用JPS查看没有DataNode排除hdfs.site.xml本身配置错的问题的话可能是一般由于多次格式化NameNode导致。在配置文件中保存的是第一次格式化时保存的namenode的ID,因此就会造成datanode与namen...
阅读全文...
阅读全文...