我有一个Hadoop集群设置,我想查看这个集群中所有节点之间的networking使用情况,即如果我有N个节点,我想查看NxNnetworking连接,以便我可以查看所有节点之间的所有stream量。
我正在Linux系统上运行集群,我该怎么做?
ntop-ng与交换机的s-flow或netflow连接器相结合。
如果你是一个商业实体,这不是一个免费的解决scheme,如果你想要额外的分析,那么它就更加不是免费的了。
例如下面是截图时我的顶尖人物:

还有很多其他的信息可以从ntop-ng中获得。 就我而言,这几乎是可视化networkingstream量的必要条件。
请注意,在10GbEnetworking中,您将需要一些严重的硬件来运行它,但对于1Gbpsnetworking,则可以根据所监视的交换机和端口的数量来运行它。