今天早上，在使用Storm UI檢視日誌處理情況的時候，發現storm叢集中一臺從機掛了，於是我登陸了部署那臺從機的linux檢視，執行jps -m 檢視程序執行情況，發現報了一個warning：

Java HotSpot(TM) 64-Bit Server VM warning: Insufficient space for shared memory file:
   /tmp/hsperfdata_work/10700
Try using the -Djava.io.tmpdir= option to select an alternate temp location.

看這個大概的意思是共享記憶體檔案空間不足，於是df查看了使用情況：

Filesystem                                                1K-blocks          Used    Available         Use%    Mounted on
/dev/mapper/VolGroup01-LogVol00  49384248 49384248                  0         100%     /

發現這個目錄使用率100%，但是這個只是邏輯卷，具體是由於/tmp目錄下，日誌檔案太多，導致空間被佔滿了。

然後用

find / -size +100M -exec ls -lh {} \;

檢視大小超過100M的檔案，發現在zookeeper/中有許多大於100M的日誌檔案，然後進入該目錄，刪除一些日誌檔案，然後重啟zookeeper，重啟storm，一切恢復正常。