Linux: выяснить, какой процесс использует всю оперативную память?

На Linux в процессе top вы можете нажать клавишу <, чтобы сдвинуть сортировку выходного дисплея влево. По умолчанию она сортируется по %CPU, поэтому если вы нажмете кнопку 4 раза, вы сортируете ее по VIRT, который является размером виртуальной памяти, давая вам ответ.

Другой способ сделать это:

ps -e -o pid,vsz,comm= | sort -n -k 2

должен дать вам и вывод отсортирован по процессам виртуального размера.

Вот длинная версия:

ps --everyone --format=pid,vsz,comm= | sort --numeric-sort --key=2

Показать память процессов в мегабайтах и путь процесса.

ps aux | awk '{print $6/1024 " MB\t\t" $11}' | sort -n

Просто заметка на сервере, показывающая те же симптомы, но все еще показывающая истощение памяти. В итоге был найден sysctl.conf из коробки с 32 ГБ оперативной памяти и настройкой для БД с огромными страницами, настроенными на 12000. В этом ящике всего 2 ГБ оперативной памяти, поэтому он назначил всю свободную оперативную память на огромные страницы (всего 960 из них). Установка огромных страниц на 10, так как ни одна из них все равно не использовалась, высвободила всю память.

Быстрая проверка /proc/meminfo для поиска настроек HugePages_ может стать хорошим началом для поиска и устранения неисправностей хотя бы одного непредвиденного захода в память.

В моем случае проблема заключалась в том, что сервер был виртуальным сервером VMware с включенным модулем vmw_balloon:

$ lsmod | grep vmw_balloon
vmw_balloon 20480 0
vmw_vmci 65536 2 vmw_vsock_vmci_transport,vmw_balloon

Running:

$ vmware-toolbox-cmd stat balloon
5189 MB

So около 5 ГБ памяти на самом деле было восстановлено хостом. Так что, несмотря на то, что 8 Гб на мою ВМ “официально”, на практике их было гораздо меньше:

$ free
              total used free shared buff/cache available
Mem: 8174716 5609592 53200 27480 2511924 2458432
Swap: 8386556 6740 8379816
```.

Вы также можете использовать команду ps для получения дополнительной информации о процессе.

ps aux | less

Я ссылаюсь на this и Total memory used by Python process? - Stack Overflow , вот мой ответ. Теперь я получаю специальную утилиту подсчета процессов (python).

# Megabyte.
$ ps aux | grep python | awk '{sum=sum+$6}; END {print sum/1024 " MB"}'
87.9492 MB

# Byte.
$ ps aux | grep python | awk '{sum=sum+$6}; END {print sum " KB"}'
90064 KB

Attach my process list.

$ ps aux | grep python
root 943 0.0 0.1 53252 9524 ? Ss Aug19 52:01 /usr/bin/python /usr/local/bin/beaver -c /etc/beaver/beaver.conf -l /var/log/beaver.log -P /var/run/beaver.pid
root 950 0.6 0.4 299680 34220 ? Sl Aug19 568:52 /usr/bin/python /usr/local/bin/beaver -c /etc/beaver/beaver.conf -l /var/log/beaver.log -P /var/run/beaver.pid
root 3803 0.2 0.4 315692 36576 ? S 12:43 0:54 /usr/bin/python /usr/local/bin/beaver -c /etc/beaver/beaver.conf -l /var/log/beaver.log -P /var/run/beaver.pid
jonny 23325 0.0 0.1 47460 9076 pts/0 S+ 17:40 0:00 python
jonny 24651 0.0 0.0 13076 924 pts/4 S+ 18:06 0:00 grep python

Ссылка

• memory - Linux: узнать, какой процесс использует всю оперативную память? - Суперпользователь
• Всего памяти, используемой процессом Python? - Переполнение стека
• linux - ps aux выходное значение - Суперпользователь

Сделайте скрипт под названием show-memory-usage.sh с контентом:

#!/bin/sh
ps -eo rss,pid,user,command | sort -rn | head -10 | awk '{ hr[1024**2]="GB"; hr[1024]="MB";
 for (x=1024**3; x>=1024; x/=1024) {
 if ($1>=x) { printf ("%-6.2f %s ", $1/x, hr[x]); break }
 } } { printf ("%-6s %-10s ", $2, $3) }
 { for ( x=4 ; x<=NF ; x++ ) { printf ("%s ",$x) } print ("\n") }
 '

На моем сервере ubuntu DISTRIB RELEASE=18.04 на Hyper-V использовалась большая часть памяти, но все процессы были в порядке. (Признаюсь, я удалил пакеты snapd и unattended-upgr, но 95% памяти все еще использовалось)

Ответ: Hyper-V имеет динамическую память, поэтому он взял память для использования в основной системе и ubuntu пометил ее как использованную.

Надеюсь, это кому-то поможет.

Здесь также берется идентификатор процесса, сортируется по используемому MB и описывается команда (которая создала процесс):

ps aux | awk '{print $6/1024 " MB\t\t" $2 "\t" $11}' | sort -n