Коротко о главном

awk идеально подходит для файлов с колонками, журналов и простых отчётов. Программа состоит из шаблонов и действий, которые выполняются для каждой строки. В статье разберём поля, условия, агрегаты и собственные скрипты. Для примеров используется gawk, но базовый синтаксис совместим с другими реализациями.

awk заменяет длинные цепочки cut, grep и sort в типовых задачах. Он работает потоково и не требует загружать файл целиком. Встроенные массивы и арифметика позволяют считать статистику на лету. Это хороший инструмент для быстрых проверок и автоматизации.

Этот материал — быстрый старт по awk. За 15 минут вы получите рабочую конфигурацию и поймёте, куда смотреть дальше.

Установка

В Debian, Ubuntu и Linux Mint используется пакетный менеджер APT:

sudo apt install gawk

В Fedora и RHEL-совместимых системах пакет ставится через DNF:

sudo dnf install gawk

В Arch Linux и производных пакет доступен в официальных репозиториях:

sudo pacman -S gawk

Минимальная настройка

1. Выведите нужные колонки

awk автоматически разбивает строку на поля по пробелам. Переменные $1, $2 и так далее содержат значения колонок. Команда print выводит выбранные поля через пробел.

awk '{print $1, $3}' data.txt

2. Отфильтруйте строки по условию

Шаблон перед блоком действия ограничивает обработку. В примере выводятся только записи, где третье поле больше 100. Числовое сравнение не требует преобразования типов.

awk '$3 > 100 {print $1, $3}' data.txt

3. Задайте разделитель полей

Флаг -F устанавливает разделитель входных полей. Для /etc/passwd это двоеточие. Переменная OFS задаёт разделитель в выводе, если нужно сохранить формат.

awk -F: '{print $1}' /etc/passwd
awk -F, 'BEGIN {OFS=","} {print $1, $3}' report.csv

4. Посчитайте сумму и среднее

Блок BEGIN выполняется до чтения данных, а END — после. Переменные можно накапливать по строкам и печатать итог в конце. Используйте printf для контроля количества знаков после запятой.

awk '{sum += $2} END {printf "Сумма: %.2f\n", sum}' data.txt

Шпаргалка по командам

  • Выведите нужные колонки: awk ‘{print $1, $3}’ data.txt
  • Отфильтруйте строки по условию: awk ‘$3 > 100 {print $1, $3}’ data.txt
  • Задайте разделитель полей: awk -F: ‘{print $1}’ /etc/passwd
  • Посчитайте сумму и среднее: awk ‘{sum += $2} END {printf «Сумма: %.2f\n», sum}’ data.txt
  • Соберите статистику по ключам: awk ‘{count[$1]++} END {for (k in count) print k, count[k]}’ access.log
  • Сохраните программу в файл: #!/usr/bin/awk -f

Практические советы

Эти рекомендации проверены на повседневных задачах. Начните с тех, которые закрывают вашу текущую боль, а не со всего списка сразу.

Совет 1. Используйте -v name=value для передачи параметров в awk без изменения

Используйте -v name=value для передачи параметров в awk без изменения текста программы.

Совет 2. printf предпочтительнее print, когда важен формат чисел или выравниван

printf предпочтительнее print, когда важен формат чисел или выравнивание столбцов.

Совет 3. NR — номер строки во всём входе, а FNR — номер строки в текущем файле.

NR — номер строки во всём входе, а FNR — номер строки в текущем файле.

Совет 4. Команда next пропускает оставшиеся правила для текущей строки и упроща

Команда next пропускает оставшиеся правила для текущей строки и упрощает фильтрацию.

Что дальше

Быстрый старт не означает «настроить навсегда». Когда базовый сценарий заработает, вернитесь к конфигурации и проверьте, что она переживёт перезагрузку: файлы на месте, служба включена в автозагрузку, путь к данным не зависит от текущего каталога.

Дальше имеет смысл разобраться с резервной копией и журналами awk. Это не самая заметная часть работы, но именно она превращает эксперимент в инструмент, которым можно пользоваться каждый день.

Чек-лист

  • Команды из шпаргалки выполняются без ошибок после перезагрузки.
  • Пароли и токены не хранятся в истории команд и конфигурации в открытом виде.
  • Понятно, где смотреть логи и что считать признаком проблемы.
  • Есть копия конфигурации, которую можно восстановить.

Короткие ответы на частые вопросы

Нужно ли запускать всё от root?

Нет. Права root нужны для установки пакетов и изменения системных файлов, но сама программа и её данные должны принадлежать отдельному пользователю. Постоянная работа под root превращает любую ошибку в критическую.

Что делать, если после перезагрузки ничего не работает?

Сначала проверьте, включена ли служба в автозагрузку и не изменился ли путь к конфигурации. Посмотрите журнал текущей загрузки: он почти всегда указывает на отсутствующий файл, неверные права или занятый порт.

Как обновлять без сюрпризов?

Читайте примечания к версии, делайте резервную копию конфигурации и проверяйте обновление на тестовом стенде. Не обновляйтесь в пятницу вечером перед выходными: время на откат должно быть частью плана.

Диагностика проблем

Если awk ведёт себя неожиданно, начните с версии и подробного вывода, затем проверьте права на файлы и конфликтующие настройки.

awk --version 2>&1 | head -3
awk --verbose 2>&1 | tail -30 || true
# права и владелец
ls -la ~ | head
# что в логах системы
journalctl --user -b -p err | tail -20

Копию вывода прикладывайте к отчёту об ошибке: без версий и команды воспроизведения исправление ищется в разы дольше.

Итог

Этого достаточно, чтобы начать. Дальше углубляйтесь по мере задач: документация awk станет понятнее, когда появится реальный сценарий использования.

Насколько публикация полезна?

Нажмите на звезду, чтобы оценить!

Средняя оценка 0 / 5. Количество оценок: 0

Оценок пока нет. Поставьте оценку первым.

Поделиться: Telegram ВКонтакте