首页 > 其他分享 >hadoop 问题集

hadoop 问题集

时间:2023-08-16 17:33:36浏览次数:39  
标签:外网 0.0 端口 hadoop Hadoop 问题 访问

1.Hadoop "Cannot create directory .Name node is in safe mode."解决方案

hadoop dfsadmin -safemode leave

 

2.本地eclipse连接外网Hadoop

通过查询发现,外网中的hadoop如果想要被外网访问,需要在hdfs-site.xml 中添加 <property>     <name>dfs.namenode.rpc-bind-host</name>     <value>0.0.0.0</value> </property>  

3.Hadoop本地开发,9000端口拒绝访问

网址:https://blog.csdn.net/yjc_1111/article/details/53817750 (1)首先,利用netstat -tpnl查看的端口开放情况(yum install net-tools 安装netstat )

 

(2)通过查看端口发现,9000端口只允许本机访问,我远程连接当然会提示拒绝访问了。可能是Hadoop为了保证集群的安全性,默认的是本集群之间的访问,只允许配置的某一个IP访问吧。于是我想能不能把这个端口放开,允许所以IP访问。于是我把hosts中的文件做了下面的修改。

更改为:

 

然后重启hadoop再次netstat -tpnl

 原来127.0.0.1 变成0.0.0.0

结语

学习没有捷径,一步一个脚印!

 

标签:外网,0.0,端口,hadoop,Hadoop,问题,访问
From: https://www.cnblogs.com/anquing/p/17635735.html

相关文章

  • 360浏览器上的对js支持的一些特别的问题
    在做web项目时候,基本测试了IE,火狐,chrome,基本就觉得差不多了。但是国内的用户,经常反而使用搜狗,360之类的伪浏览器,因为他们都稀里糊涂的被捆绑了。这里要说的是,在其他浏览器很兼容的东西,但是到360这边就出问题了。2个表格显示的例子。例1:jq('#classManageTable').append(data);这个......
  • 安防视频监控平台EasyNVR视频监控汇聚平台页面无法上传授权文件的问题解决方案
    TSINGSEE青犀视频安防监控平台EasyNVR可支持设备通过RTSP/Onvif协议接入,并能对接入的视频流进行处理与多端分发,包括RTSP、RTMP、HTTP-FLV、WS-FLV、HLS、WebRTC等多种格式。在智慧安防等视频监控场景中,EasyNVR可提供视频实时监控直播、云端录像、云存储、录像检索与回看、告警等......
  • jquery.ui的bxslider控件在IE下使用的问题
    使用了 bxslider控件进行网页的切换。发现在firefox切换得很稳定,按照设置的切换时间进行切换。但是换成IE浏览器发现,却不是那么回事了。包括IE8和IE10.明明设置了30秒有的时候10分钟都不切换,本以为切换失灵了,结果又在第11分钟切换了。但是刷新页面再来一次,可能又变成5分钟后切换......
  • tonardo做web服务器播放大视频内存泄露问题的解决
    之前为了实现websocket来完成网页的推送,所以使用了tonardo作为web服务器。但是如果网页中含有视频插件的话,特别是经常要播放大视频的话,在linux环境下,经常发现python进程会莫名其妙的死掉。通过内存检测命令动态查看,发现python进程的内存占用一直居高不下,并且需要启用缓存才行。直到......
  • 逻辑删除与唯一索引冲突的问题
    逻辑删除字段原设计是0表示未删除1表示已删除下面举例说明存在的问题和解决方案一个班的学生学号必须保持唯一,因此建立了唯一索引。如果删除了李明的信息之后,再录入李明的数据库无法插入成功。为了支持逻辑删除,将学号字段和逻辑删除字段建立联合索引但是如果是第二次再......
  • vnc Unable to licence server: "XML error 0:0 Error: First Tag not found"问题的解
    windows上安装了vncserver,本来每天访问很正常,忽然一天无法访问了。没办法只能卸载重装。但是发现重装以后,不会自动弹出对话框提示输入注册码。手工触发“EnterVNCServerlicensecode”,提示"XMLerror0:0Error:FirstTagnotfound"。调查后,发现是因为windowseventlog这......
  • 技术干货|如何使用 DolphinDB 解决数据精度问题
    1DECIMAL的计算特性1.1DECIMAL的计算方式DECIMAL的存储分为两部分,即存储整型数据的rawdata和存储小数位数的scale。例如,对于DECIMAL32(2)类型的1.23,它存储了两个数据:(1)rawdata:即整型123,(2)scale:即2。这样存储的好处是,在计算时可以直接使用整型的rawdata进行......
  • 数仓备份经验分享丨详解roach备份原理及问题处理套路
    本文分享自华为云社区《GaussDB(DWS)备份问题定位思路》,作者:yd_216390446。前言在数据库系统中,故障分为事务内部故障、系统故障、介质(磁盘)故障。对于事务内部故障和系统故障,使用日志自动恢复,不需要人工参与。但对于介质故障,需事先备份数据。那么对于DWS来说是如何进行备份的呢?......
  • teamcenter rac 开发 卡死 问题 导出excel 文件时
    解决方法:我对比了,芬尼的这个功能,发现那边在tc配置了查看器的属性,首航这边没配置,然后芬妮没有这个bug,代码也是相同的,所以我交实施配置了查看器的属性就可以了 ......
  • 数仓备份经验分享丨详解roach备份原理及问题处理套路
    本文分享自华为云社区《GaussDB(DWS)备份问题定位思路》,作者:yd_216390446。前言在数据库系统中,故障分为事务内部故障、系统故障、介质(磁盘)故障。对于事务内部故障和系统故障,使用日志自动恢复,不需要人工参与。但对于介质故障,需事先备份数据。那么对于DWS来说是如何进行备份的呢?以及备......