Windows Server 2008 R2 – 延迟问题

我正在经历2个服务器箱之间的大量延迟。 (900毫秒)服务器有连接它们的物理局域网 – 所以几乎没有networking延迟。

1个应用程序连接到另一个服务器上的1个应用程序。 没有其他的。

我正在运行Windows Server 2008 R2 – 在一个12核心和32GB内存,英特尔5680的戴尔盒

操作系统没有被调整或configuration – 只是开箱即用,所以我很可能需要启用/禁用某些function。

我附上了整个perfmon报告。

你能看看报告,告诉我有什么不寻常的事情吗?

计算机:BGTWEXSEC07收集date:2011年1月26日星期三8:30:00 AM持续时间:23400秒处理总CPU%:0最前进程组:logon.scr组CPU:0磁盘顶层磁盘IO速率:0 IO /秒:2磁盘队列长度:0.701内存利用率:8%内存:32757 MB顶级进程:mmc私有工作集:279,844 KBnetworking使用率:0%顶端出站客户端:10.51.2.19发送:268字节顶端入站客户端:192.168.139.138接收:587字节资源概览CPU空闲4%低CPU负载。 networking空闲0%最繁忙的networking适配器less于15%。 磁盘空闲2 /秒磁盘0上的磁盘I / O每秒less于100(读/写)。内存空闲8%30016 MB可用。 组件状态利用率详细信息图像统计信息Top:3 of 122空闲0 12 12 95.7 0.0 95.7 logon.scr 3752 1 1 0.2 0.0 0.2 svchost.exe 324 3304 1923 0.0 0.1 0.1 10162 2146 96.2线程映像名称进程ID已启动已用内核CPU%用户CPU%CPU%工艺上:虚拟字节21 21 8278145165 8042393600 8864038912专用字节2118715078 1997709312 2265440256分页文件字节2106033862 1985028096 2252759040工作集1320179694 1183739904 1474002944工作集 - 私人840454234 728547328 981385216页面缓冲池字节13459627 13105288 13637208非分页池字节928471 885548 949036 IO数据字节/秒49,133 0 2,286,673 IO写入字节数/秒40,506 0 2,167,365 IO其他字节/秒11,389 2,175 468,750 IO读取字节数/秒8,627 0 1,564,463%处理器时间1,200 1,195 1,200%特权时间1,198 1,115 1,200页面错误数/秒823 0 47,344线程数813 790 841性能计数器平均值最小值最大值第1页,共11页file:// C:\ PerfLogs \ Ad  min \ TassoneWex \ 20110126-0001 \ report.html 1/26/2011 IO其他操作/秒233 40 11,522 IO数据操作/秒23 0 1,014 IO写入操作/秒13 0 779 IO读取操作/秒10 0 425%用户时间2 0 85优先权基数0 0 0性能计数器平均最小最大处理器上限:9中断/秒1,355 851 22,780 DPC排队/秒765 727 1,365%空闲时间100 91 100 DPC速率11 8 305处理器时间0.455 0 9 %特权时间0.312 0 7%用户时间0.143 0 7%DPC时间0.001 0 0.391%中断时间0.001 0 0.26性能计数器CPU的平均最小最大处理器用户时间Top:13 of 13 2 2 0 62 4 1.047 0 70 3 0.587 0 55 5 0.57 0 86 _总计0.455 0 9 0 0.361 0 55 1 0.344 0 55 6 0.203 0 12 10 0.021 0 5 9 0.011 0 5 11 0.009 0 8 7 0.005 0 27 8 0.002 0 2实例平均最小处理器最大中断CPU Top :13/13 _总数1,355 851 22,780 3 149 67 5,103 0 140 65 8,876 1 140 65 5,018 2 129 67 5,395 6 115 64 2,011 7 105 65 2,036 9 101 67 2,026 5 98 65 2,063 8 95 66 2,02  6 10 95 65 2,013 11 95 65 2,013 4 94 65 2,093实例平均最小最大服务量Top:// C:\ PerfLogs \ Admin \ TassoneWex \ 20110126-0001 \ report.html 1/26 / 2011 svchost.exe 324 0.1 dsm_sa_datamgr32.exe 1488 0.0 svchost.exe 840 0.0 svchost.exe 620 0.0 svchost.exe 976 0.0 dsm_om_connsvc32.exe 1808 0.0 dsm_sa_eventmgr32.exe 1456 0.0 svchost.exe 900 0.0 mysqld.exe 1608 0.0 4484 0.0 dsm_om_shrsvc32 .exe 1636 0.0 FreeSSHDService.exe 1508 0.0 lsass.exe 640 0.0 mr2kserv.exe 1596 0.0 msdtc.exe 1632 0.0 SLsvc.exe 356 0.0 snmp.exe 1820 0.0 snmptrap.exe 1832 0.0 spoolsv.exe 1392 0.0已停止服务 -  0.0 svchost。 exe 268 0.0 svchost.exe 3928 0.0 svchost.exe 1124 0.0 svchost.exe 1900 0.0 svchost.exe 884 0.0 svchost.exe 1784 0.0 svchost.exe 508 0.0进程processId CPU%系统Top:15 15%registry使用率5 5 5上下文切换/秒952 394 15,518exception调度/秒4 0 30,245文件控制字节/秒11,395 3,637 468,750文件控制操作/秒234 40 11,522 F 秒数据操作/秒23 0 1,020文件读取字节/秒8,634 0 1,564,463文件读取操作/秒10 0 425文件写入字节/秒40,511 0 2,183,776文件写入操作/秒13 0 785进程69 67 70处理器队列长度0.009 0 1系统调用/秒14,622 536 232,944系统运行时间3,109,447 3,097,747 3,121,147线程数813 790 841性能计数器平均值最小值最大值服务器顶部26 26阻塞请求被拒绝0 0 0接收字节数0.231 0 587字节总数/秒8 0 19,988字节传输/秒8 0 19,410上下文块排队/秒0.09 0 189性能计数器平均最小值上限第3页,共11页file:// C:\ PerfLogs \ Admin \ TassoneWex \ 20110126-0001 \ report.html 1/26/2011错误访问权限0 0 0授予的错误0 0 0错误login513 513 513错误系统0 0 0文件目录search0 0 0文件打开2 1 11打开的文件总计3,900 3,754 4,012login共计1,277 1,273 1,281login/秒0 0 2池非分页字节5,531,164 5,500,387 5,558,085池非分页故障0 0 0 P  ool未分页高峰6,471,047 6,471,047 6,471,047池分页字节95,106 93,773 97,922分页池故障0 0 0分页池高峰101,731 101,731 101,731服务器会话3 2 4会话错误输出0 0 0会话强制closures0 0 0会话注销85 83 86会话超时0 0 0工作项目短缺0 0 0性能计数器平均最小最大TCP出站stream量上图:24 24 24 10.51.2.19 884 3389 3.5 268 192.168.139.138 3284 52919 1.5 246 10.51.2.19 4 445 0.0 7 192.168.139.135 3284 52941 0.0 4 192.168.139.135 3284 52943 0.0 4 127.0.0.1 3284 52940 3.0 3 192.168.139.130 3284 52944 0.0 10.51.2.19 1508 22 0.0 127.0.0.1 3284 52942 0.0 127.0.0.1 3284 52938 0.0 127.0.0.1 3284 52945 0.0 127.0.0.1 3284 52918 0.0 127.0.0.1 3284 52916 0.0 127.0.0.1 3284 52914 0.0 127.0.0.1 3284 52939 0.0 127.0.0.1 3284 52932 0.0 127.0.0.1 3284 52926 0.0 127.0.0.1 3284 52922 0.0 127.0.0.1 3284 52933 0.0 127.0.0.1 3284 52930 0.0 127.0。 0.1 3284 52929 0.0 127.0.0.1 3284 52925 0.0 127.0.0.1 3284 52928 0.0 127.0.0.1  3284 52924 0.0到机器进程ID端口请求数/秒出站字节数/秒TCP入站数据stream上一页下一页第12页,共12页file:// C:\ PerfLogs \ Admin \ TassoneWex \ 20110126-0001 \ report.html 1/26 / 2011 192.168.139.138 3284 52919 2.6 587 192.168.139.130 3284 52944 3.0 246 10.51.2.19 884 3389 0.4 28 10.51.2.19 4 445 0.0 8 192.168.139.135 3284 52941 0.0 5 192.168.139.135 3284 52943 0.0 4 127.0.0.1 3284 9001 3.0 3 10.51.2.19 1508 22 0.0 127.0.0.1 3284 52917 0.0 127.0.0.1 3284 52915 0.0 127.0.0.1 3284 52913 0.0 10.51.2.19 1808 1311 0.0来自机器进程ID端口请求/秒入站字节数/秒TCP版本4顶部:9 9连接失败2,397 2,397 2,397连接有效2,802 2,784 2,808连接已build立18 2 24连接被动59,644 59,406 59,873连接重置754 753 754接收的分段数15 0 384重传的分段数/秒0.015 0 3分段发送数/秒15 0 327分段数/秒30 0 710性能计数器平均最小最大TCP版本6上:9个连接失败中的9个0 0  0连接激活36 34 37已build立连接0.003 0 2连接被动36 34 37连接重置38 36 39接收的段/秒0.021 0 147段重发/秒0 0 0段发送/秒0.021 0 147段/秒0.042 0 294性能计数器平均最小最大networking接口顶部:每56秒收到56字节/秒Broadcom BCM5709C NetXtreme II GigE [NDIS VBD客户端] _2 0 0 0发送的字节数/秒Broadcom BCM5709C NetXtreme II GigE [NDIS VBD客户端] _2 0 0 0 Bytes Total / sec Broadcom BCM5709C NetXtreme II GigE [NDIS VBD客户端] _2 0 0 0当前带宽Broadcom BCM5709C NetXtreme II GigE [NDIS VBD客户端] _2 9,223,372,036,854,776,000 9,223,372,036,854,776,000 9,223,372,036,854,776,000输出队列Broadcom BCM5709C NetXtreme II GigE [NDIS VBD 0 0 0性能计数器实例平均最小最大页5 of 11 file:// C:\ PerfLogs \ Admin \ TassoneWex \ 20110126-0001 \ report.html 1/26/2011长度客户端] _2包出站丢弃Broadcom BCM5709C NetXtreme II GigE [NDIS VBD C 数据包出站错误Broadcom BCM5709C NetXtreme II GigE [NDIS VBD客户端] _2 0 0 0包/秒Broadcom BCM5709C NetXtreme II GigE [NDIS VBD客户端] _2 0 0 0接收的字节数/秒Broadcom BCM5709C NetXtreme II GigE [ NDIS VBD客户端] _3 0 0 0 Byte发送/秒Broadcom BCM5709C NetXtreme II GigE [NDIS VBD客户端] _3 0 0 0字节总数/秒Broadcom BCM5709C NetXtreme II GigE [NDIS VBD客户端] _3 0 0 0当前带宽Broadcom BCM5709C NetXtreme II GigE [NDIS VBD客户端] _3 9,223,372,036,854,776,000 9,223,372,036,854,776,000 9,223,372,036,854,776,000输出队列长度Broadcom BCM5709C NetXtreme II GigE [NDIS VBD客户端] _3 0 0 0数据包出站丢弃Broadcom BCM5709C NetXtreme II GigE [NDIS VBD客户端] _3 0 0 0数据包出站错误Broadcom BCM5709C NetXtreme II GigE [NDIS VBD客户端] _3 0 0 0包/秒Broadcom BCM5709C NetXtreme II GigE [NDIS VBD客户端] _3 0 0 0接收字节数/秒Broadcom BCM5709C NetXtreme II GigE [NDIS VBD客户端] _4 0 0 0字节发送/  Broadcom BCM5709C NetXtreme II GigE [NDIS VBD客户端] _4 0,2 0,35,854,776,000 9,223,372,036,854,776,000 9,223,372,036,854,776,000 9,223,372,036,854,776,000输出端口队列长度Broadcom BCM5709C NetXtreme II GigE [NDIS VBD客户端] _4 0 0 0数据包出站丢弃Broadcom BCM5709C NetXtreme II GigE [NDIS VBD客户端] _4 0 0 0数据包出站错误Broadcom BCM5709C NetXtreme II GigE [NDIS VBD客户端] _4 0 0 0数据包/秒Broadcom BCM5709C NetXtreme II GigE [NDIS VBD客户端] _4 0 0 0字节接收数/秒Intel千兆位ET四端口服务器适配器251 0 19,336字节数/秒Intel千兆位ET四端口服务器适配器517 0英特尔®千兆位四端口服务器适配器总数57,586字节总数/秒英特尔®千兆位四端口服务器适配器769 0 60,435性能计数器实例平均值最小值最大值Page 6 of 11 file:// C:\ PerfLogs \ Admin \ TassoneWex \ 20110126-0001 \ report.html 1 / 26/2011现在B 带宽英特尔千兆位ET四端口服务器适配器1,000,000,000 1,000,000,000 1,000,000,000输出队列长度英特尔[R]千兆位ET四端口服务器适配器0 0 0数据包出站数丢弃英特尔[R]千兆位四端口服务器适配器0 0 0数据包出站错误英特尔千兆位ET四端口服务器适配器0 0 0包/秒英特尔(R)千兆位四端口服务器适配器7 0 177字节接收/秒英特尔(R)千兆位四端口服务器适配器_2 1,196 0 105,381发送字节数/秒英特尔(R)千兆位ET四端口服务器适配器_2 567 0 41,817字节总数/秒英特尔(R)千兆位四端口服务器适配器_2 1,763 0 146,667当前带宽英特尔(R)千兆位四端口服务器适配器_2 1,000,000,000 1,000,000,000 1,000,000,000输出队列长度英特尔[R]千兆位ET四端口服务器适配器_2 0 0 0数据包出站丢弃英特尔[R]千兆位ET四端口服务器适配器_2 0 0 0数据包出站错误英特尔[R]千兆位ET四端口服务器适配器_2 0 0 0数据包/秒英特尔(R)千兆ET ET  d端口服务器适配器_2 11 0 596接收字节数/秒英特尔(R)千兆位四端口服务器适配器_3 0 0 0发送字节数/秒英特尔(R)千兆位四端口服务器适配器_3 0 0 0字节总数/秒英特尔[ R]千兆位ET四端口服务器适配器_3 0 0 0当前带宽英特尔[R]千兆位ET四端口服务器适配器_3 9,223,372,036,854,776,000 9,223,372,036,854,776,000 9,223,372,036,854,776,000输出队列长度英特尔[R]千兆位ET四端口服务器适配器_3 0 0 0数据包出站丢弃英特尔[ R]千兆位ET四端口服务器适配器_3 0 0 0数据包出站错误英特尔[R]千兆位ET四端口服务器适配器_3 0 0 0数据包/秒英特尔[R]千兆位ET四端口服务器适配器_3 0 0 0接收字节数/秒英特尔(R)千兆位ET四端口服务器适配器_4 0 0 0发送字节数/秒英特尔(R)千兆位四端口服务器适配器_4 0 0 0字节总数/秒英特尔(R)千兆位四端口服务器适配器_4 0 0 0当前带宽英特尔®千兆位四端口服务器适配器_4 9,223,372,036,854,776,000 9,223,3  72,036,854,776,000 9,223,372,036,854,776,000输出队列长度英特尔[R]千兆位ET四端口服务器适配器_4 0 0 0数据包出站丢弃英特尔[R]千兆位四端口服务器适配器_4 0 0 0数据包出站错误英特尔(R)千兆位四端口服务器适配器_4 0 0 0数据包/秒英特尔[R]千兆位ET四端口服务器适配器_4 0 0 0性能计数器实例平均最小最大IP版本4上一页:17/17 file:// C:\ PerfLogs \ Admin \ TassoneWex \ 20110126-0001 \ report.html 1/26/2011已转发的数据报/秒0 0 0丢弃的数据报出站3 3 3出站的数据报否路由0 0 0接收到的数据报地址错误0 0 0接收到的数据报/秒16 0 384收到的数据报丢弃112 110 113数据报收到报头错误0 0 0收到数据报未知协议20 20 20收到数据报/秒10 0 334已发送数据报15 0 327数据报/秒24 0 660分段重组失败0 0 0分段失败0 0 0分段数据报/秒0 0 0片段 创build/秒0 0 0片段重新组合/秒0 0 0片段接收/秒0 0 0性能计数器平均最小最大IP版本6上图:17 of 17数据报转发/秒0 0 0数据报出站丢弃0 0 0数据报出站否路由4 4 4数据报接收地址错误0 0 0收到数据报/秒0.022 0 147收到数据报丢弃0 0 0收到数据报头错误0 0 0收到数据报未知协议0 0 0收到数据报/秒0 0 0数据报已发送/ sec 0.055 0 147 Datagrams / sec 0.055 0 147片段重组失败0 0 0片段化失败0 0 0片段化数据/秒0 0 0片段创build次数/秒0 0 0片段重新组装/秒0 0 0片段接收数/秒性能计数器平均最小最大UDP版本4顶部:5/5数据报无端口/秒0 0 1.002数据报接收错误0 0 0数据报接收/秒0.003 0 2发送数据报/秒0.052 0 5数据报/秒0.055 0 6性能计数器平均最小最大UDP版本6顶部:5  of 5 Datagrams No Port / sec 0 0 0 Datagrams Received Errors 0 0 0 Datagrams Received / sec 0 0 0 Datagrams Sent / sec 0.034 0 4文件:// C:\ PerfLogs \ Admin \ TassoneWex \ 20110126-0001 \ report.html 1/26/2011 Datagrams / sec 0.034 0 4性能计数器引起大多数磁盘IO的平均最小最大文件数顶部:3 of 20 0 C:\ $ LogFile 0.0 0 0.6 10 0 C:\ PerfLogs \ Admin \ TassoneWex \ 20110126-0001 \ Performance Counter.blg 0.0 0 0.6 63 0 C:\ $ Mft 0.0 0 0.2 4磁盘文件读取/秒Kb /读取写入/秒Kb /写入磁盘总数Top:1 of 1 0 0.0 6 1.9 25磁盘读取数/秒Kb /读取写入数/秒Kb /写入物理磁盘计数器Top:17%磁盘读取时间_Total 0.003 0 70%磁盘时间_Total 0.027 0 70%磁盘写入时间_Total 0.024 0 24平均。  Disk Bytes / Read _Total 6,559 0 32,768平均  Disk Bytes / Transfer _Total 25,916 0 183,501平均 磁盘字节数/写_总计26,026 0 183,501平均 磁盘队列长度_Total 0 0 0.701平均 磁盘读取队列长度_总数0 0 0.699平均 磁盘写入队列长度_Total 0 0 0.239当前磁盘队列长度_Total 0.005 0 4磁盘字节数/秒_Total 48,262 0 2,318,959磁盘读取字节数/秒_Total 70 0 1,563,065磁盘读取次数/秒_Total 0.011 0 244磁盘传输/秒_Total 2 0 486磁盘写字节/秒_Total 48,192 0 2,318,959磁盘写入/秒_Total 2 0 486拆分IO /秒_Total 0.044 0 9性能计数器实例平均最小最大物理磁盘空闲百分比上限:2 of 2 0 C:D:100 0.227 300 _Total 100 0.227 300实例平均最小最大物理磁盘平均第二个计数器上一个:3/3平均 磁盘秒/读0 C:D:0.003 0 0.011平均 磁盘秒/传输0 C:D:0 0 0.028平均 磁盘秒/写0 C:D:0 0 0.028性能计数器实例平均值最小值最大值Page 9 of 11 file:// C:\ PerfLogs \ Admin \ TassoneWex \ 20110126-0001 \ report.html 1/26/2011 Memory Top: 70 mmc 4032 759,172 303,068 23,224 279,844 mysqld 1608 1,238,492 158,828 5,072 153,756 WTP 3284 239,160 82,752 31,664 51,088 svchost ## 4 324 723,072 57,284 19,688 37,596 explorer 2920 246,404 64,020 32,504 31,516 dsm_om_connsvc32 1808 491,556 35,792 7,952 27,840 dsm_sa_datamgr32 1488 148,932 35,032 7,720 27,312 explorer# #1 1572 216,768 48,172 24,952 23,220 svchost ## 6 620 130,920 30,644 9,256 21,388 explorer ## 2 176 210,752 44,024 22,808 21,216进程进程ID提交(KB)工作集(KB)可共享的(KB)私有的(KB)内存顶部:28 28%使用中的字节数4 4 5可用字节数31,473,648,067 31,324,831,744 31,604,862,976caching字节数308,574,976 307,150,848 309,473,280caching错误数/秒6 0 1,154提交限制数67,972,259,840 67,972,259,840 67,972,259,840承诺字节数2,919,334,580 2,796,412,928 3, 秒483 0 48,391空闲和零页列表字节30,548,318,032 30,399,991,808 30,648,487,936空闲系统页表条目33,559,793 33,559,498 33,560,003修改页面列表字节37,567,172 37,412,864 37,736,448页面错误/秒894 0 48,528页面读取次数/秒0.076 0 11页面写入/秒0 0 0页input/秒0.083 0 18页输出/秒0 0 0页/秒0.083 0 18非分页池分配348,920 347,335 349,877非分页池176,115,460 176,103,424 176,308,224池分页115,893 114,710 117,091池分页163,979,738 163,135,488 164,085,760池分页驻留字节162,643,676 161,280,000 162,746,368备用高速caching核心字节0 0 0备用高速caching正常优先级字节792,436,374 776,654,848 826,740,736备用高速caching预留字节132,893,561 130,535,424 135,876,608系统高速caching驻留字节141,134,883 140,615,680 142,036,992转换错误数/秒411 0 14,710转换页数重置/秒0 0 0写入份数/秒3 0 286表演柜台我 最小最大句柄数Top:10 of 71 _Total 223,751 223,188 224,085 mysqld 206,300 206,299 206,314 svchost ## 4 1,159 1,142 1,208 lsass 863 854 879 explorer 768 767 794实例平均值最小值最大值Page 10 of 11 file:// C:\ PerfLogs \ Admin \ TassoneWex \ 20110126-0001 \ report.html 1/26/2011系统663 659 728 csrss 656 645 671 mmc 646 635 655 svchost ## 7 587 584 593 explorer ## 1 528 528 531实例平均最小最大计算机信息计算机: BGTWEXSEC07 Windows Build:6002处理器:12处理器速度:3325 MHz内存:32757 MB平台:64位收集信息开始时间:2011年1月26日星期三上午8:30:00结束时间:2011年1月26日星期三3:00 :00 PM持续时间:23400秒缓冲区:423处理事件:475581丢失事件:0跳过事件:22使用计时窗口:是文件文件:C:\ PerfLogs \ Admin \ TassoneWex \ 20110126-0001 \ NtKernel.etllogging器名称:NT内核logging器开始时间:2011年1月26日星期三上午8:30:00结束时间:2011年1月26日星期三下午3:00:00 文件时长:23400秒文件:Performance Counter.blg开始时间:2011年1月26日星期三上午8:30:00结束时间:2011年1月26日星期三3:00:00 PM文件持续时间:23399秒处理事件顶部: 3 of 40 TcpIp RecvIPV4 0 {9a280ac0-c8e0-11d1-84e2-00c04fb998a2} 11 2 211076 TcpIp SendIPV4 0 {9a280ac0-c8e0-11d1-84e2-00c04fb998a2} 10 2 190909 DiskIo写0 {3d6fa8d4-fe05-11d0-9dda-00c04fd7ba7c } 11 2 43348 475581事件操作码任务有效载荷Guid有效载荷ID版本计数第11页,共11页file:// 

我要做的第一件事就是尝试更新这些Broadcom网卡的驱动程序。 我曾经看到很多这样的奇怪的问题,这是由于Broadcom公司的驱动力不足造成的。

Sysadmin1138正确地尝试更新网卡的固件和驱动程序。 之后…

看看下面的MS KB文章Q146005得到一些特定的计数器,将帮助你诊断问题。 您错过了与“可疑瓶颈:networking组件”相关的计数器

你能清楚的设置好吗? 每台服务器上有多less个网卡? 你把他们连接到交换机? 他们在某种特殊的设置(团队)? 什么是交换机,有什么特别configuration的端口? 交换机和服务器上设置了什么速度/双工? 最简单的testing是一个交叉电缆。 从那里你一次增加一个复杂的…