首页 > 其他分享 >Spark-Web页面(默认端口:4040)

Spark-Web页面(默认端口:4040)

时间:2024-05-21 17:31:47浏览次数:19  
标签:Web 4040 master Master Spark 页面

访问Web UI页面的前提:

启动Spark安装目录下sbin/start-all.sh 。

jps可以看到Master和Worker。

1、Spark的Master页面

http://master:8080/

2、Spark的Worker页面

http://master:8081/

3、Spark的Job页面(只有任务运行过程中可以查看该页面)

http://master:4040/ 

 调用Jar包时如果日志输出:Successfully started service 'SparkUI' on port 4040.说明该页面可以访问了。

 注意:spark程序运行时需要设置Master为: spark://<Master>:7077,否则在页面无法看到job的执行情况。

 

Job WebUI页面详解:https://blog.csdn.net/qq_46893497/article/details/134788500

                                   https://blog.51cto.com/u_16099239/7295161

标签:Web,4040,master,Master,Spark,页面
From: https://www.cnblogs.com/yeyuzhuanjia/p/18204600

相关文章

  • YiShaAdmin:一款基于.NET Core Web + Bootstrap的企业级快速开发框架
    前言今天大姚给大家分享一款基于.NETCoreWeb+Bootstrap的企业级快速后台开发框架、权限管理系统,代码简单易懂、界面简洁美观(基于MITLicense开源,免费可商用):YiShaAdmin。项目官方介绍YiShaAdmin基于.NETCoreWeb开发,借鉴了很多开源项目的优点,让你开发Web管理系统和移动端A......
  • .net 4.8 webApi 文件下载部分代码记录
    privateHttpResponseMessageExportData(stringids,Func<string,string>exportFunc,stringdataNotExistsMsg){varfilePath=exportFunc.Invoke(ids);//检查文件是否存在if(!File.Exists(filePath)){......
  • PySpark-大数据分析实用指南-全-
    PySpark大数据分析实用指南(全)原文:zh.annas-archive.org/md5/62C4D847CB664AD1379DE037B94D0AE5译者:飞龙协议:CCBY-NC-SA4.0前言ApacheSpark是一个开源的并行处理框架,已经存在了相当长的时间。ApacheSpark的许多用途之一是在集群计算机上进行数据分析应用程序。本书......
  • JavaWeb分布式事务处理
    哈喽,大家好,我是木头左!一、分布式事务的概念与特性在开始之前,首先需要理解什么是分布式事务以及其特性。将从最基础的定义和特性开始,逐步深入到其在实际应用中的表现和影响。1.1分布式事务的概念分布式事务是指跨越多个独立的计算机资源(如数据库、应用服务器等)的一组事务的......
  • 火焰杯测试开发大赛赛前辅导——web自动化
    为了帮助各位同学更好地准备比赛并取得优异成绩,测吧将为本次比赛提供竞赛平台技术支持和赛事运营服务,同时免费提供赛前辅导学习资料以及相关技术交流答疑服务。本周赛前辅导内容为Web自动化测试。**直播内容**环境搭建学习路径控件定位与交互自动化测试用例编写自动化关......
  • Unity WebGL的一些配置
    添加自定义值方法:在网页模板中,添加<title>公司名字|{{{PROJECT_NAME}}}</title>///读取PlayerSettings.GetTemplateCustomValue("PROJECT_NAME");///设置PlayerSettings.SetTemplateCustomValue("PROJECT_NAME","这是一个自定义值");修改WebGL模板说......
  • WebP图像格式的原理 与图像压缩的关系
    目录WebP简介原理为什么对预测数据做残差就可以提高压缩率呢?为什么使用算术编码压缩率高于哈夫曼编码?WebP简介\(\quad\)目前在互联网上,图片流量仍占据较大的一部分。因此,在保证图片质量不变的情况下,节省流量带宽是大家一直需要去解决的问题。传统的图片格式,如JPEG,PNG,GIF等格式......
  • C# webform 在aspx页面调用aspx.cs页面的方法
    前台代码--调用后台的GetEcharts1方法,并传入三个参数startDateValue,ipEndDate,ddlTypeValue<inputtype="button"id="loadExce2l"value="查看"onclick="loadEcharts()"/>functionloadEcharts(){console.log(19999999999)......
  • web259(超详细)
    SoapClient看完之后还不是很懂的话就可以去下面的两个网址去补充一下SoapClient是PHP中用于与SOAP(SimpleObjectAccessProtocol)服务进行通信的内置类。SOAP是一种基于XML的协议,用于在分布式环境中交换结构化信息。以下是关于SoapClient类的详细解释:创建SoapClien......
  • BUUCTF-WEB(21-25)
    [HCTF2018]admin这道题目就是admin说明得管理员登录那我直接创一个admin的账号但是显示已经存在了说明用户名就是admin,然后我们直接爆破,也是爆破出来密码就是123直接登录[MRCTF2020]你传你......