NetApp DataOnTap 8.0.2P2: Sysstat shows only CP Types as "D" -> caused by low datavecs

[udo_braunschweiger]

We have a performance case open, no result so far.

I saw that we are having, even if there is low load on the FAS3210, we have a lot of CF Type D

Any hint or idea??

the aggregate consists of two shelfes with 600GB SAS Disk Drives in two raidgroups

OnTap 8.0.2P2, 64bit aggregate

filer> sysstat -x 1

CPU    NFS   CIFS   HTTP   Total     Net   kB/s    Disk   kB/s    Tape   kB/s  Cache  Cache    CP  CP  Disk   OTHER    FCP  iSCSI     FCP   kB/s   iSCSI   kB/s

                                       in    out    read  write    read  write    age    hit  time  ty  util                            in    out      in    out

30%   1490      0      0    1490    5899  13132   25400  60948       0      0    23s    88%   65%  Df   20%       0      0      0       0      0       0      0

16%   1475      0      0    1475    8549  14340   12096  39992       0      0    23s    87%  100%  :f   21%       0      0      0       0      0       0      0

14%   1492      0      0    1492    5142  14174   12144  25780       0      0    23s    78%   70%  :    18%       0      0      0       0      0       0      0

13%   1504      0      0    1504    7977  13366   11072     24       0      0    23s    75%    0%  -    16%       0      0      0       0      0       0      0

10%   1489      0      0    1494    5109  17379   12880      0       0      0    23s    70%    0%  -    17%       5      0      0       0      0       0      0

12%   1534      0      0    1534    8377  14090   12776      0       0      0    24s    75%    0%  -    17%       0      0      0       0      0       0      0

  9%   1474      0      0    1474    5367  14743   13056     24       0      0    24s    66%    0%  -    16%       0      0      0       0      0       0      0

  9%   1613      0      0    1613    8513  16555   13748      8       0      0    24s    68%    0%  -    14%       0      0      0       0      0       0      0

15%   1453      0      0    1453    6825  13603   12456      0       0      0    24s    70%    0%  -    18%       0      0      0       0      0       0      0

11%   1889      1      0    1896    9166  17486   14816     24       0      0    24s    69%    0%  -    14%       6      0      0       0      0       0      0

10%   1612      0      0    1612    5406  17750   15000      0       0      0    24s    69%    0%  -    14%       0      0      0       0      0       0      0

23%   2166      0      0    2166   19142  13508   17154  18539       0      0    25s    81%   24%  Dn   20%       0      0      0       0      0       0      0

27%   1529      0      0    1529    7386  14031   18504  79148       0      0    25s    91%  100%  :f   26%       0      0      0       0      0       0      0

19%   1771      0      0    1771    8675  15388   14320  34828       0      0     2s    80%  100%  :f   25%       0      0      0       0      0       0      0

11%   1652      0      0    1657    9364  15261   13024  15232       0      0     2s    73%   46%  :    20%       5      0      0       0      0       0      0

11%   1654      0      0    1654    8855  15445   12916     24       0      0     2s    72%    0%  -    17%       0      0      0       0      0       0      0

14%   1832      0      0    1832    6771  24784   13384      0       0      0    25s    66%    0%  -    17%       0      0      0       0      0       0      0

12%   1465      0      0    1465    8467  15887   13528      8       0      0    25s    73%    0%  -    15%       0      0      0       0      0       0      0

33%   1399      0      0    1399    6201  13616   11092     24       0      0    23s    90%    0%  -    13%       0      0      0       0      0       0      0

CPU    NFS   CIFS   HTTP   Total     Net   kB/s    Disk   kB/s    Tape   kB/s  Cache  Cache    CP  CP  Disk   OTHER    FCP  iSCSI     FCP   kB/s   iSCSI   kB/s

                                       in    out    read  write    read  write    age    hit  time  ty  util                            in    out      in    out

11%   1812      0      0    1817    8653  14906   12888      0       0      0    23s    71%    0%  -    16%       5      0      0       0      0       0      0

11%   1585      0      0    1589   11326  15567   12412      0       0      0    26s    71%    0%  -    19%       4      0      0       0      0       0      0

31%   1470      0      0    1470    7037  13834   29420  39344       0      0    26s    88%   47%  Df   24%       0      0      0       0      0       0      0

17%   1566      0      0    1566    8323  15600   14744  39752       0      0    24s    86%  100%  :f   19%       0      0      0       0      0       0      0

22%   1889      0      0    1889   18159  15174   12648  28568       0      0    24s    85%  100%  :f   19%       0      0      0       0      0       0      0

33%   1623      0      0    1632    9088  15076   13512  35732       0      0    24s    90%  100%  :f   20%       9      0      0       0      0       0      0

11%   1619      0      0    1619    9907  14171   12204   5040       0      0    24s    75%   13%  :    16%       0      0      0       0      0       0      0

12%   1679      0      0    1679   11380  15668   13340      0       0      0    26s    72%    0%  -    16%       0      0      0       0      0       0      0

10%   1502      0      0    1502    9718  14629   12564     32       0      0    27s    70%    0%  -    15%       0      0      0       0      0       0      0

13%   1415      0      0    1415    5719  13006   10868      0       0      0     2s    76%    0%  -    22%       0      0      0       0      0       0      0

27%   1537      0      0    1542    9642  13526   26036  29976       0      0     2s    86%   59%  Df   23%       5      0      0       0      0       0      0

35%   1546      0      0    1546   13037  13246   12372  28064       0      0    28s    93%  100%  :f   21%       0      0      0       0      0       0      0

19%   1417      0      0    1417   11904  12371   10916  39036       0      0    26s    88%  100%  :f   22%       0      0      0       0      0       0      0

12%   1560      0      0    1560   10063  11660    9928  37156       0      0    26s    79%   95%  :    18%       0      0      0       0      0       0      0

19%   2464      0      0    2464   17354  11454   10284     24       0      0    26s    80%    0%  -    16%       0      0      0       0      0       0      0

20%   3083      0      0    3088   26806  15423   14245      8       0      0    26s    75%    4%  Dn   23%       5      0      0       0      0       0      0

48%   3374      0      0    3374   45779  16464   19884  95644       0      0    23s    94%  100%  :f   30%       0      0      0       0      0       0      0

18%   2297      0      0    2297   14891  14626   13012  29504       0      0    23s    75%   80%  :    22%       0      0      0       0      0       0      0

17%   2911      0      0    2911   19889  16569   12500      8       0      0    23s    76%    0%  -    17%       0      0      0       0      0       0      0

29%   1880      0      0    1880   10115  12210   22432  28284       0      0    25s    85%   41%  Df   21%       0      0      0       0      0       0      0

CPU    NFS   CIFS   HTTP   Total     Net   kB/s    Disk   kB/s    Tape   kB/s  Cache  Cache    CP  CP  Disk   OTHER    FCP  iSCSI     FCP   kB/s   iSCSI   kB/s

                                       in    out    read  write    read  write    age    hit  time  ty  util                            in    out      in    out

23%   2324      1      0    2330   11538  14820   13740  45948       0      0    23s    88%  100%  :f   22%       5      0      0       0      0       0      0

19%   1781      0      0    1781    9349  14438   21092  38924       0      0    22s    83%  100%  :f   21%       0      0      0       0      0       0      0

21%   3181      0      0    3181   15905  14969   12908  12008       0      0    22s    78%   37%  :    22%       0      0      0       0      0       0      0

15%   2399      0      0    2399    9605  15005   12352     32       0      0    22s    74%    0%  -    21%       0      0      0       0      0       0      0

18%   2510      0      0    2510   13846  12351   10616      0       0      0    22s    79%    0%  -    16%       0      0      0       0      0       0      0

14%   2410      0      0    2415   12098  14300   11784      0       0      0    22s    74%    0%  -    19%       5      0      0       0      0       0      0

18%   2832      0      0    2832   16471  16154   13736     24       0      0    23s    76%    0%  -    19%       0      0      0       0      0       0      0

30%   2445      0      0    2445    9938  24098   25768  34628       0      0    24s    79%   55%  Df   20%       0      0      0       0      0       0      0

20%   2497      0      0    2497   12778  14521   12504  34488       0      0    22s    88%  100%  :f   20%       0      0      0       0      0       0      0

[joker_morgan]

Hello,

Did you ever get anywhere with the type D CP's "caused by low datavecs"?  I have a 3240 HA/Pair with next to no load on it (one vfiler with several VDI's) and when our vmware admins were vmotioning some machines from the 3170 to the 3240 we saw the following:

(Hardware is 3240 running 8.0.2P4) with Flash Cache Modules and 65 disk aggr of 600Gb SAS).... just not finding much online explaining what the TYPE D really means.

thanks,

Keith

CPU    NFS   CIFS   HTTP   Total     Net   kB/s    Disk   kB/s    Tape   kB/s  Cache  Cache    CP  CP  Disk   OTHER    FCP  iSCSI     FCP   kB/s   iSCSI   kB/s

                                       in    out    read  write    read  write    age    hit  time  ty  util                            in    out      in    out

17%   1204      0      0    1204   33995   6804    8596  59496       0      0     7     99%   41%  Df    7%       0      0      0       0      0       0      0

21%   1399      0      0    1399   55227   8310    9668  49892       0      0     7     97%  100%  :f    7%       0      0      0       0      0       0      0

32%   1961      0      0    1971   79048  10205   15488  99892       0      0     7     99%   77%  Df    9%      10      0      0       0      0       0      0

43%   1966      0      0    1966  102951   5263   16136 147708       0      0     7     99%   93%  Df   13%       0      0      0       0      0       0      0

27%   1888      0      0    1888   62703  13707    8092  36768       0      0     7     99%   42%  :     6%       0      0      0       0      0       0      0

26%   1503      0      0    1503   56628   8621    9088 118108       0      0     7     99%   71%  Df   15%       0      0      0       0      0       0      0

20%   1892      0      0    1892   54891  15712    8064  18812       0      0     7     95%   25%  :     6%       0      0      0       0      0       0      0

28%   1638      0      0    1640   72473   6945    7400  73072       0      0     7     99%   66%  Df    7%       2      0      0       0      0       0      0

34%   2032      0      0    2032   85901  11753   21232 113296       0      0     7     99%   73%  Df    9%       0      0      0       0      0       0      0

19%   1491      0      0    1491   37066  12052   11216  72548       0      0     7     99%   71%  :     8%       0      0      0       0      0       0      0

15%   1630      0      0    1630   40998  12825    7984      0       0      0     7     92%    0%  -     4%       0      0      0       0      0       0      0

37%   1335      0      0    1335   48846   7067    9320  75584       0      0     7     99%   74%  Df    9%       0      0      0       0      0       0      0

52%   1562      0      0    1564   66939   4498   11828  51204       0      0     7     99%  100%  :f    8%       2      0      0       0      0       0      0

28%   1551      0      0    1551   57579   4490   16863 109099       0      0     7     99%  100%  Df   10%       0      0      0       0      0       0      0

20%   1363      0      0    1363   60333   3436    6220  26544       0      0     7     98%   57%  :     6%       0      0      0       0      0       0      0

23%   1338      0      0    1338   40089   9218   10840  86092       0      0     7     98%   94%  Df    9%       0      0      0       0      0       0      0

20%   1518      0      0    1518   53723   8836   11616  44768       0      0     7     98%   84%  :     7%       0      0      0       0      0       0      0

36%   2455      0      0    2459   76661  21189   11136 124844       0      0     6     99%   70%  Df    9%       4      0      0       0      0       0      0

19%   1811      0      0    1813   52138  15718   10596   6660       0      0     6     94%   17%  :     5%       2      0      0       0      0       0      0

CPU    NFS   CIFS   HTTP   Total     Net   kB/s    Disk   kB/s    Tape   kB/s  Cache  Cache    CP  CP  Disk   OTHER    FCP  iSCSI     FCP   kB/s   iSCSI   kB/s

                                       in    out    read  write    read  write    age    hit  time  ty  util                            in    out      in    out

23%   1706      0      0    1706   38805  16393   25184  86012       0      0     6     98%   93%  Df   14%       0      0      0       0      0       0      0

22%   1630      0      0    1630   58152  10459    9524  44680       0      0     6     98%   75%  :     6%       0      0      0       0      0       0      0

28%   1420      0      0    1420   74200   4194    3916  77584       0      0     6     99%   79%  Df    6%       0      0      0       0      0       0      0

31%   1571      0      0    1573   86822   3960    5132 101572       0      0     9s    99%  100%  Df   10%       2      0      0       0      0       0      0

40%   1872      0      0    1872  112320   4740    5287 168524       0      0     8     99%   97%  Df   13%       0      0      0       0      0       0      0

20%   1374      0      0    1374   58812   3559    4232  45622       0      0     8     99%   22%  :     6%       0      0      0       0      0       0      0

15%   1102      0      0    1102   42658   4400    9692  26088       0      0     8     94%   20%  Df    5%       0      0      0       0      0       0      0

31%   1677      0      0    1677   83574   6613   12436  95136       0      0     8     99%  100%  :f    8%       0      0      0       0      0       0      0

33%   1394      0      0    1396   70484   4542    7784 128884       0      0     5     99%  100%  Df   11%       2      0      0       0      0       0      0

71%   2169      0      0    2169   79056  16124   13268  66188       0      0     5     99%   46%  Df    9%       0      0      0       0      0       0      0

26%   2010      0      0    2010   51406  19345   14788  79156       0      0     5     98%   72%  :     8%       0      0      0       0      0       0      0

23%   1833      0      0    1833   63100  11645    6784  39512       0      0     5     98%   27%  Df    5%       0      0      0       0      0       0      0

22%   1254      0      0    1254   48747   6173   17708  85080       0      0     5     99%  100%  :f    8%       0      0      0       0      0       0      0

18%   1412      0      0    1414   50980   7569    7352   6248       0      0     5     95%   23%  Dn    4%       2      0      0       0      0       0      0

31%   1766      0      0    1766   80550   6822    8508 116208       0      0     5     99%  100%  :f    8%       0      0      0       0      0       0      0

20%    943      0      0     943   45916   2234    6180  98400       0      0     5     99%   75%  Df    9%       0      0      0       0      0       0      0

24%   1263      0      0    1263   69936   2812    6924  45224       0      0     5     99%   56%  :     6%       0      0      0       0      0       0      0

28%   1286      0      0    1286   62820   4019   17588 123596       0      0     5     99%   80%  Df    9%       0      0      0       0      0       0      0

14%   1038      0      0    1040   44746   3426    2748   5892       0      0     5     98%   14%  :     4%       2      0      0       0      0       0      0

24%   1431      0      0    1431   58481   6863    9148  82580       0      0     5     99%   46%  Df    7%       0      0      0       0      0       0      0

Message was edited by: Keith Morgan