在线精品99_中国九九盗摄偷拍偷看_91免费版在线观看_91.app_91高清视频在线_99热最新网站

spark的Web监控页面是怎样的

138次阅读
没有评论

共计 1319 个字符,预计需要花费 4 分钟才能阅读完成。

本篇内容主要讲解“spark 的 Web 监控页面是怎样的”,感兴趣的朋友不妨来看看。本文介绍的方法操作简单快捷,实用性强。下面就让丸趣 TV 小编来带大家学习“spark 的 Web 监控页面是怎样的”吧!

在 SparkContext 中可以看到初始化 UI 代码:

// Initialize the Spark UIprivate[spark] val ui: Option[SparkUI] = if (conf.getBoolean( spark.ui.enabled , true)) { Some(SparkUI.createLiveUI(this, conf, listenerBus, jobProgressListener, env.securityManager,appName))
 } else { // For tests, do not enable the UI None
 }// Bind the UI before starting the task scheduler to communicate// the bound port to the cluster manager properlyui.foreach(_.bind())

创建 SparkUI 对象:

def createLiveUI( sc: SparkContext, conf: SparkConf, listenerBus: SparkListenerBus, jobProgressListener: JobProgressListener, securityManager: SecurityManager, appName: String): SparkUI = { create(Some(sc), conf, listenerBus, securityManager, appName, jobProgressListener = Some(jobProgressListener))
}

进入 create 方法:

SparkUI 继承了 WebUI:

SparkUI 的 initialize() 实现方法:

2、stagesTab:

4、EnvironmentTab:

6、createStaticHandler:

当执行完 initialize() 方法后,我们回到 SparkContext 的 Initialize the spark UI:

从上面代码可以看出来,启动了端口号为 4040 的本地 JettyServer

上面代码分析:

1、创建 ContextHandlerCollection 并将 handlers 设置到 ContextHandlerCollection 中

2、增加一个 filter:

3、创建 Jetty Server 并绑定端口号并创建一个 QueuedThreadPool,设置到 Server 中:

spark 的 Web 监控页面是怎样的

5、试着重试几次启动 startServiceOnPort,如果启动失败,就更换新端口号(规则是 1 +oldPort),重新启动:

spark 的 Web 监控页面是怎样的

spark 的 Web 监控页面是怎样的

到此,相信大家对“spark 的 Web 监控页面是怎样的”有了更深的了解,不妨来实际操作一番吧!这里是丸趣 TV 网站,更多相关内容可以进入相关频道进行查询,关注我们,继续学习!

正文完
 
丸趣
版权声明:本站原创文章,由 丸趣 2023-08-16发表,共计1319字。
转载说明:除特殊说明外本站除技术相关以外文章皆由网络搜集发布,转载请注明出处。
评论(没有评论)
主站蜘蛛池模板: 尤物在线观看精品国产福利片 | 亚洲成熟xxxx | 99精品产国品一二三产区 | 久久婷婷五月综合色欧美 | 91热这里只有精品 | 一级国产20岁美女毛片 | 啪啪链接| 在线播放a | 一区二区三区中文字幕 | 亚洲精品国产美女在线观看 | 国产精品单位女同事在线 | 欧美黑人粗大猛烈18p | 无码人妻一区二区三区免费看 | 99在线免费 | 宅女深夜福利视频在线 | 女女在线观看舒服 | 成视人a免费观看 视频 | 在线天堂最新版资源 | 四虎免费永久观看 | 67194熟妇在线观看线路1 | 婷婷综合色伊人阁 | 亚洲午夜精品久久久久久浪潮 | 日韩午夜理论免费tv影院 | 动漫一区二区三区 | 国产精品青草久久 | 毛茸茸厕所偷窥xxxx | 深夜福利在线播放 | 四虎免费最新在线永久 | 黄色a级毛片 | 中文字幕一区二区三区人妻少妇 | 18禁美女黄网站色大片免费看 | 午夜精品视频在线 | 在线精品亚洲一区二区动态图 | 成人国产日本亚洲精品 | 伊人丁香 | 女人被爽到呻吟gif动态图视看 | 亚洲成在线 | 国产一级做a爰片久久毛片男 | 久久精品美女久久 | 怡红院av亚洲一区二区三区h | 亚洲精品视频区 |