1. 程式人生 > >檢視Spark-Master節點與Slaves節點的網路互動

檢視Spark-Master節點與Slaves節點的網路互動

關於Spark提供的互動埠,預設情況下頁面監控的埠為8080,互動的埠為7077。如何檢視主節點的埠與的互動與連結:

監控頁面可以看到服務監聽的地址與埠

Spark Master at spark://10.130.2.20:7077

通過netstat命令可以檢視佔用的埠及對應的pid
netstat -tnlp | grep 7077



通過lsof命令可以檢視與主節點7077埠互動的slaves節點的連線情況
lsof -i:7077

如果要看真實的IP則

lsof -i:7077 -n


可以看到master的7077埠與slaves節點埠的互動情況,如果沒有連線可能是slaves節點掛了,或者有網路的限制