1.vt同事排查到是调的下面这个接口有问题,手动在后台调用也报错:服务器忙,请稍后再试!
time perl -e 'use Data::Dumper; use VTP::Network;use VTP::Network::Route; my $res=VTP::Network::Route::query_local_floatip_flow();print(Dumper($res));'
2.查看/sf/log/today/sfvt_sdnctrld.log发现有异常日志:
3.查看/sf/log/today/sfvt_sdnagentd.log发现这里cfs有报错,翻了代码是因为集群不稳定导致sdn服务读cfs卡死
查看sdnctrld进程发现也D住了,重启sdnctrld服务还是一样D住,手动向/cfs目录下的文件输入字符也卡住
4.集群不稳定导致读cfs卡死,集群pmxcfs服务不稳定跟管理网络不稳定有关系,手动后台ping有丢包,黑盒日志中也有丢包,进而抓包确认哪里丢包