Какой процесс использует весь мой дисковый ввод-вывод

120

Если я использую «верх», я могу видеть, какой процессор занят и какой процесс использует весь мой процессор.

Если я использую «iostat -x», я могу увидеть, какой диск занят.

Но как мне увидеть, какой процесс использует всю пропускную способность диска?

Мэтью Крамли
источник
2
Что ж, технически это верно и для Linux, поскольку пользовательские процессы изменяют только страницы в кэше страниц ...;)
Дэймон
Просто вопрос, который у меня был, и ответ, который я искал, но разве этот вопрос не подходит лучше для SuperUser?
Zeta Two
И вот почему Linux уступает Solaris и MacOS, потому что в них встроена программа dtrace, которая упрощает поиск: - /
Thorbjørn Ravn Andersen

Ответы:

162

Вы ищете iotop(при условии, что у вас есть ядро> 2.6.20 и Python 2.5). В противном случае вы пытаетесь подключиться к файловой системе. Я рекомендую первое.

phresus
источник
8
iotopпохоже, показывает пропускную способность ввода-вывода, а не количество операций ввода-вывода в секунду, потребляемых процессами. Это не суперактуально. Процесс, выполняющий множество мелких операций записи + синхронизации, будет потреблять больше ресурсов ввода-вывода диска, чем процесс, записывающий большой непрерывный пакет данных на высокой скорости.
Арно Ле Блан
Для небольших [jdb2/nvme0n1p1]записей все, что я видел, было в iotop, но мне повезло с включением / proc / sys / vm / block_dump и сравнением вывода с работоспособной / стабильной системой lxadm.com/Simple_filesystem_read/write_tracing_with_/proc/sys/ ... Это помогло найти контейнер-докер, который постоянно порождает запросы kubectl, исчерпывая пакетные кредиты тома EBS записями в /home/spinnaker/.kube/cache/discovery/.../serverresources.json. Как только вы сузите круг до имени пользователя / процесса, что-то вроде iotop -atku systemd-network | grep kubectlможет также помочь
Грег Брей
16

Чтобы узнать, какие процессы в состоянии 'D' (ожидают ответа диска) в настоящее время выполняются:

while true; do date; ps aux | awk '{if($8=="D") print $0;}'; sleep 1; done

или

watch -n1 -d "ps axu | awk '{if (\$8==\"D\") {print \$0}}'"

Wed Aug 29 13:00:46 CLT 2012
root       321  0.0  0.0      0     0 ?        D    May28   4:25  \_ [jbd2/dm-0-8]
Wed Aug 29 13:00:47 CLT 2012
Wed Aug 29 13:00:48 CLT 2012
Wed Aug 29 13:00:49 CLT 2012
Wed Aug 29 13:00:50 CLT 2012
root       321  0.0  0.0      0     0 ?        D    May28   4:25  \_ [jbd2/dm-0-8]
Wed Aug 29 13:00:51 CLT 2012
Wed Aug 29 13:00:52 CLT 2012
Wed Aug 29 13:00:53 CLT 2012
Wed Aug 29 13:00:55 CLT 2012
Wed Aug 29 13:00:56 CLT 2012
root       321  0.0  0.0      0     0 ?        D    May28   4:25  \_ [jbd2/dm-0-8]
Wed Aug 29 13:00:57 CLT 2012
root       302  0.0  0.0      0     0 ?        D    May28   3:07  \_ [kdmflush]
root       321  0.0  0.0      0     0 ?        D    May28   4:25  \_ [jbd2/dm-0-8]
Wed Aug 29 13:00:58 CLT 2012
root       302  0.0  0.0      0     0 ?        D    May28   3:07  \_ [kdmflush]
root       321  0.0  0.0      0     0 ?        D    May28   4:25  \_ [jbd2/dm-0-8]
Wed Aug 29 13:00:59 CLT 2012
root       302  0.0  0.0      0     0 ?        D    May28   3:07  \_ [kdmflush]
root       321  0.0  0.0      0     0 ?        D    May28   4:25  \_ [jbd2/dm-0-8]
Wed Aug 29 13:01:00 CLT 2012
root       302  0.0  0.0      0     0 ?        D    May28   3:07  \_ [kdmflush]
root       321  0.0  0.0      0     0 ?        D    May28   4:25  \_ [jbd2/dm-0-8]
Wed Aug 29 13:01:01 CLT 2012
root       302  0.0  0.0      0     0 ?        D    May28   3:07  \_ [kdmflush]
root       321  0.0  0.0      0     0 ?        D    May28   4:25  \_ [jbd2/dm-0-8]
Wed Aug 29 13:01:02 CLT 2012
Wed Aug 29 13:01:03 CLT 2012
root       321  0.0  0.0      0     0 ?        D    May28   4:25  \_ [jbd2/dm-0-8]

Как видно из результата, jdb2 / dm-0-8 (процесс журнала ext4) и kdmflush постоянно блокируют ваш Linux.

Для получения дополнительной информации этот URL-адрес может быть полезен: Linux Wait-IO Problem

quentinxue
источник
11

atop также хорошо работает и легко устанавливается даже в более старых системах CentOS 5.x, которые не могут запускать iotop. Нажмите, dчтобы отобразить сведения о диске и получить ?помощь.

ATOP - mybox                           2014/09/08  15:26:00                           ------                            10s elapsed
PRC |  sys    0.33s |  user   1.08s |                | #proc    161  |  #zombie    0 |  clones    31 |                | #exit         16  |
CPU |  sys   4% |  user     11% |  irq       0%  | idle    306%  |  wait     79% |               |  steal     1%  | guest     0%  |
cpu |  sys   2% |  user      8% |  irq       0%  | idle     11%  |  cpu000 w 78% |               |  steal     0%  | guest     0%  |
cpu |  sys   1% |  user      1% |  irq       0%  | idle     98%  |  cpu001 w  0% |               |  steal     0%  | guest     0%  |
cpu |  sys   1% |  user      1% |  irq       0%  | idle     99%  |  cpu003 w  0% |               |  steal     0%  | guest     0%  |
cpu |  sys   0% |  user      1% |  irq       0%  | idle     99%  |  cpu002 w  0% |               |  steal     0%  | guest     0%  |
CPL |  avg1    2.09 |  avg5    2.09 |  avg15   2.09  |               |  csw    54184 |  intr   33581 |                | numcpu     4  |
MEM |  tot     8.0G |  free   81.9M |  cache   2.9G  | dirty   0.8M  |  buff  174.7M |  slab  305.0M |                |               |
SWP |  tot     2.0G |  free    2.0G |                |               |               |               |  vmcom   8.4G  | vmlim   6.0G  |
LVM |  Group00-root |  busy     85% |  read       0  | write  30658  |  KiB/w      4 |  MBr/s   0.00 |  MBw/s  11.98  | avio 0.28 ms  |
DSK |          xvdb |  busy     85% |  read       0  | write  23706  |  KiB/w      5 |  MBr/s   0.00 |  MBw/s  11.97  | avio 0.36 ms  |
NET |  transport    |  tcpi    2705 |  tcpo    2008  | udpi      36  |  udpo      43 |  tcpao     14 |  tcppo     45  | tcprs      1  |
NET |  network      |  ipi     2788 |  ipo     2072  | ipfrw      0  |  deliv   2768 |               |  icmpi      7  | icmpo     20  |
NET |  eth0    ---- |  pcki    2344 |  pcko    1623  | si 1455 Kbps  |  so  781 Kbps |  erri       0 |  erro       0  | drpo       0  |
NET |  lo      ---- |  pcki     423 |  pcko     423  | si   88 Kbps  |  so   88 Kbps |  erri           0 |  erro       0  | drpo       0  |
NET |  eth1    ---- |  pcki  22 |  pcko      26  | si    3 Kbps  |  so    5 Kbps |  erri       0 |  erro       0  | drpo       0  |

  PID                   RDDSK                    WRDSK                   WCANCL                    DSK                   CMD        1/1
 9862                      0K                   53124K                       0K                    98%                   java
  358                      0K                     636K                       0K                     1%                   jbd2/dm-0-8
13893                      0K                     192K                      72K                     0%                   java
 1699                      0K                      60K                       0K                     0%                   syslogd
 4668                      0K                      24K                       0K                     0%                   zabbix_agentd

Это ясно показывает, что виновником является java pid 9862.

Стив Кехлет
источник
4

TL; DR

Если можете iotop, сделайте это. В противном случае это может помочь.


Используйте top, а затем используйте эти ярлыки:

d 1 = set refresh time from 3 to 1 second

1   = show stats for each cpu, not cumulated

Это должно отображать значения > 1.0 waпо крайней мере для одного ядра - если нет дисковых ожиданий, значит, просто нет нагрузки ввода-вывода и нет необходимости искать дальше. Обычно начинаются значительные нагрузки > 15.0 wa.

x       = highlight current sort column 
< and > = change sort column
R       = reverse sort order

Выберите «S», столбец статуса процесса. Измените порядок сортировки так, чтобы процессы «R» (выполняющиеся) отображались вверху. Если вы можете обнаружить процессы «D» (ожидающие диска), у вас есть индикатор, в чем может быть ваш виновник.

sjas
источник
3

Для пользователей KDE вы можете использовать 'ctrl-esc' вверху для вызова системного монитора активности, и есть диаграммы операций ввода-вывода с идентификатором и именем процесса.

У меня нет разрешения на загрузку изображения из-за «нового статуса пользователя», но вы можете проверить изображение ниже. В нем есть столбец для чтения и записи ввода-вывода.

Патрик
источник
2

Вы рассматривали lsof(список открытых файлов)?

apolinsky
источник
3
это просто показывает дескрипторы открытых файлов, а не МБ / с для каждого файла. iotop делает это.
oligofren
2

iotop с флагом -a:

-a, --accumulated     show accumulated I/O instead of bandwidth
Крис Годвин
источник