Обзор Linux-утилит для анализа диска: как найти "пожирателя" пространства

Вы когда-нибудь просыпались среди ночи с мыслью: «А куда делось место на сервере?» Ну ладно, может, у вас и нет таких кошмаров, а вот у меня как-то был случай, когда за ночь на рабочем проекте диск заполнился под завязку, и система прислала тревожное письмо. После этого я полюбил разные инструменты для анализа дискового пространства в Linux, и сегодня расскажу простыми словами, как они помогают не только найти лишние файлы, но и разобраться в хитрых ситуациях. Гвоздь программы — практические утилиты: dust, duf, gdu, ioping, fio, iotop, rmlint, progress, croc, rclone, и еще пара лайфхаков для автоматизации и мониторинга.

Почему современные админы больше не живут командой du -sh

Давайте честно: команда du -sh — это как зубная щётка Windows XP. Вроде работает, но когда сталкиваешься с реальными загадками пространства, одними числами уже не отделаешься. Мои первые админские будни были похожи: смотришь на цифры, а понимаешь только, что «много»! Потом открыл для себя ncdu, а позже с головой ушёл в визуальные утилиты, где всё нарисовано — прям гимн наглядности.

Зрительные утилиты: dust и её родственники

dust — это как графический комикс для серверов. Вы получаете красивое дерево каталогов со «шкало-полосками». Чем шире полоса — тем больше пространства захавано. Один глаз — и понятно, что папка «backup» весит больше, чем вся база клиентов в REST API. А ещё эта утилита на Rust, и сразу понятно — работает быстрее старых добрых скриптов на Python (сорян, Питон, ты крут, но тут скорость решает).

Кстати, если хочется видеть только верхний уровень, чтобы не утонуть во вложениях, dust поддерживает флаг --depth 1. Лайфхак для паникёров и тех, кто ценит время.

Когда таблицы должны сиять: duf и df — почувствуйте разницу

df -h — элементарно, но вы когда-нибудь смотрели на его таблицы под утро? Столбцы сливаются, псевдо-разделы лезут в глаза. С duf вы сразу понимаете: где реальный диск, где tmpfs, а цветные индикаторы делают хорошо глазу и мозгу. Я лично через --only local часто сразу вырезаю сетевые разделы — меньше инфошума.

Вдобавок duf умеет выдавать JSON — ваша инфраструктура может завести ежедневные отчёты про пространство. Виток автоматизации — и пусть робот следит за диском, а вы — за роботами.

gdu: если нужно не просто посмотреть, а сразу расчистить завалы

На работе был случай: клиент пожаловался, что его виртуалка «чем-то забита». ssh-заход, sudo, gdu — и через пару минут всё видно по полочкам. Можно удалять дубли и ненужные логи прямо в интерфейсе. А ещё тут два режима: анализируете отдельную директорию или весь диск. Важно — работает быстрее ncdu на SSD, потому что использует параллельное чтение. Этот момент реально спасает, когда каждый гигабайт на счету!

Проверка настоящего “сердца” сервера: ioping и fio

Сколько раз вы слышали обещания про NVMe, а потом server вдруг ползёт, будто на древней флешке? Лично я всегда проверяю через ioping — меньше миллисекунды? Отлично. Десятки? Пора писать хостеру! Тут важна скорость отклика, а если хочется знать про реальные нагрузки — в бой идёт fio. Настроили паттерны чтения/записи, запустили тест — вот вам честные IOPS и мегабайты.

Был у меня случай, когда fio-отчёт показал, что SSD еле дышит, хотя хостер уверял: всё по высшему разряду. Помогло быстро добиться замены железа.

Кто ест диск прямо сейчас? iotop на страже правопорядка

Вот люблю я top, но iotop — это отдельная поэзия для системного администратора. Смотрю прямо на процессы: кто сейчас пишет, кто читает, сколько мегабайт уже проглотил. Отлавливали так в одной компании загадочного "логера", который за выходные занял 200ГБ из-за ошибки в настройках логирования.

Для случаев, когда права root получить не удаётся, отлично выручает iotop-c — без заморочек с привилегиями.

Чистим дубли и битые ссылки: rmlint и друзья

Удивительно, сколько мусора может накопиться за пару лет на сервере. rmlint — находка для таких случаев: нашёл дубли, пустые каталоги и битые ссылки, вывел удобный скрипт — останется только приглядеть, чтобы не удалить что-то важное. Был у меня момент, когда благодаря rmlint на тестовом проекте выиграли почти 14% пространства.

Наблюдаем за прогрессом: progress показывает, кто и как «копает»

Иногда кажется, что tar или dd застряли навечно. progress решает эту проблему: запустил и видишь, насколько долго завершится копирование каталога весом в пару терабайт. Мои нервы стали значительно крепче с этим инструментом!

Передать файл без нервов: croc и rclone для быстрой синхронизации

Как передать файл между серверами без лишних плясок с ключами? croc решает за пару команд — шифрование, сквозное соединение, все дела. А для регулярной синхронизации с облаками, резервного копирования или обмена между хранилищами без лишней бюрократии — rclone. Не раз спасало на проектах, где нужно пересылать большие архивы на S3 или в корпоративный облачный сервис.

История развития: как “анализаторы” становятся умнее

Когда-то всё было проще: du, df, чуть позже — ncdu с псевдографикой. А сейчас инструменты виртуального анализа («Filelight», «Baobab», QDirStat) так клиентоориентированы, что сам не замечаешь, как превращаешь рутину в удовольствие. Бывалые коллеги-аналитики отмечают: чем “нагляднее” «чистка», тем выше шансы, что админ сделает всё вовремя, а не в последний момент.

Файловые системы и их влияние на “жизнь” серверных дисков

Заблуждение, что инструменты — всё, что нужно для счастья. Сильно решает файловая система: например, XFS и JFS отлично работают с большими файлами, а их особенности экономят место и ускоряют работу в бизнес-critical проектах. Не раз видел ситуации, когда только смена файловой системы делала сервер “живым”.

Автоматизация мониторинга: скрипты и отчёты на каждый день

Вот мой старый совет: поставьте отчёты с duf или ncdu на крон, пусть приходит вам (или вашему чату) сообщение раз в сутки — где и как заканчивается место. Это сэкономит вам выходные и спасёт от внезапной “паники понедельника”.

Что ждет рынок и наших читателей?

Тренд прост: всё больше задач автоматизируются и стараются быть визуально приятными. В борьбе за каждый гигабайт админы становятся “гуру визуализации”. Предложение рынку — комбинировать классические и современные утилиты, чтобы ваши сервера жили долго, а сон админа был спокойным. Помните: лучше потратить полчаса на анализ диска, чем неделю на восстановление утерянной базы.

Управление дисковым пространством — навык на каждый день. И ваши инструменты — это ваш спокойный кофе в понедельник.

Нужна помощь с серверным анализом дискового пространства и мониторингом? Оставьте заявку, и наши специалисты свяжутся с вами в течение 15 минут — разберем вашу задачу и предложим решение.
Получить консультацию бесплатно