首页 > 其他分享 >Hadoop问题解决(3)

Hadoop问题解决(3)

时间:2023-10-08 14:33:50浏览次数:26  
标签:ccloud100 jobtracker Hadoop 问题 OPTS JOBTRACKER 解决 hadoop HADOOP

在启动hadoop过程中,出现如下错误:

192.168.10.100: Invalid maximum heap size: -Xmx0m
192.168.10.100: Could not create the Java virtual machine.
192.168.10.100: jobtracker 已死,但 pid 文件仍存

  此时查看jobtracker的日志,

1 [root@ccloud100 manager]# vim /var/log/hadoop/hadoop-hadoop-jobtracker-ccloud100.out
2 --Invalid maximum heap size: -Xmx0m
3 --Could not create the Java virtual machine.
  说明是java堆设置错误,继续看问题出在hadoop-env.sh这个文件里。

[root@ccloud100 manager]# vim /etc/hadoop/conf/hadoop-env.sh
--export HADOOP_JOBTRACKER_OPTS="-Xmx0m -Dcom.sun.management.jmxremote $HADOOP_JOBTRACKER_OPTS"
  在HADOOP_JOBTRACKER_OPTS这个属性里,把-Xmx0m改为-Xmx4096m,再重启hadoop,问题就解决了。

标签:ccloud100,jobtracker,Hadoop,问题,OPTS,JOBTRACKER,解决,hadoop,HADOOP
From: https://www.cnblogs.com/zjsdbk/p/17748978.html

相关文章

  • hadoop问题解决(4)
    默认配置是将datanode,namenode,jobtracker,tasktracker,secondarynamenode的pid存放在/tmp目录下,随着linux的定期清理,这些pid就不见了,当然就无法停止了,怎么解决呢?在/tmp目录创建或者修改hadoop-hadoop用户名-datanode.pid 里面写入对应的pid, 可通过jps查看. namen......
  • 奇迹mu在架设过程中出现的问题如何解决
    通常我们在架设奇迹的时候会遇到各种各样的问题,很多用户都不知道该如何解决,今天我们就来详细的说明一下一些常见的问题以及解决办法。1.进入到选线画面没选线之前断线,无选线,选线断线,输入密码后断线,进入游戏后断线,游戏版本不对等。我们找到数据库Dataserver.exe作为游戏的数据服务,通......
  • 解决Windows下pip安装bertopic报错:Failed building wheel for hdbscan
    在安装bertopic的过程中,遇到了Failedbuildingwheelforhdbscan,我先去网站:https://www.lfd.uci.edu/~gohlke/pythonlibs/#hdbscan下载了hdbscan‑0.8.28‑cp310‑cp310‑win_amd64.whl,并且用pip进行了本地安装,依然报错。然后仔细阅读报错信息,发现是build报错,我在Linux系统下并......
  • synchronized解决并发问题实践
    场景一: 场景描述:会议下面可以同时上传多个会议资料,资料是有顺序的,也就是有序号order,上传后可以上下移动资料顺序,移动资料顺序是靠改变order来实现的,这就需要保证每个资料的顺序不能一样,上传一个资料调一次上传接口,同时上传10个资料会同时调10次上传接口。上传接口逻辑是先查当......
  • 彻底解决 WordPress cURL error 28 错误
    cURL连接超时。这种情况最普遍,这里的超时并不是完全不可连接,而是因为网络状况或其它原因数据传输缓慢,超过连接的时间限制导致传输中断引起的错误。不论是何种原因导致连接超时,都可以通过增加超时限制来解决此问题。但URL完全不可访问此方法是解决不了的。首先将WordPress......
  • Linux问题记录
    Linux问题记录​#Linux问题记录#​用户不在sudoers文件中,此事将被报告我们首先使用命令suroot切换至root用户,此时需要验证root用户密码然后我们查看/etc/sudoers文件内容是否包含当前用户权限如果没有权限,使用命令vim/etc/sudoers编辑文件增加shone用......
  • 转:五个步骤解决IDEA开发卡顿
    五个步骤解决IDEA开发卡顿增加编译内存,默认是700 说明:关键的三个参数的说明1、-Xms是最小启动内存参数,2、-Xmx是最大运行内存参数,3、-XX:ReservedCodeCacheSize保留代码占用的内存容量参数。8G配置如果电脑运行内存为8G建议修改参数配置为:-server-Xms512m-Xmx1024m-XX:......
  • Linux:远程Ubuntu服务器误修改sudoers 导致无法sudo的解决办法
    问题复现本来想用腾讯云测试一下用户权限管理,给test用户设置面密码登录,修改/etc/sudoers如下testALL=(ALL:ALL)NOPASSWD:ALL手抖忘了写NOPASSWD后面的冒号,导致关闭后sudo直接报错(base)ubuntu@VM-16-11-ubuntu:~$sudovim/etc/sudoers>>>/etc/sudoers:syntaxe......
  • Maven 引用CDH 5.4 的zookeeper时报错:Could not find artifact javax.jms:jms:jar:1.1
    错误:Couldnotfindartifactjavax.jms:jms:jar:1.1incloudera由于默认5.4.0的包引用了zookeeper3.3.1版本,进而引用了log4j的某个版本,导致的报错,改为如下即可: pom:使用cloudera的源:<repositories><repository><id>cloudera</id><u......
  • Windows平台不同机器字长(x86/x64)程序/库互操作解决方法
    1.问题背景某系统集成软件研发项目中,有设备厂家仅提供了C#可调用的x64动态库,而另有一厂家仅提供x86动态库,均是C++编译版本。x86动态库直接导出函数失败,环境是VS2019,dotnetframework4.7.2。2.解决思路网上查阅大量资料也就几篇博文后,给出的解决方案是:主程序改为x64编译,所......