Коротко о главном

awk идеально подходит для файлов с колонками, журналов и простых отчётов. Программа состоит из шаблонов и действий, которые выполняются для каждой строки. В статье разберём поля, условия, агрегаты и собственные скрипты. Для примеров используется gawk, но базовый синтаксис совместим с другими реализациями.

awk заменяет длинные цепочки cut, grep и sort в типовых задачах. Он работает потоково и не требует загружать файл целиком. Встроенные массивы и арифметика позволяют считать статистику на лету. Это хороший инструмент для быстрых проверок и автоматизации.

Большинство проблем с awk сводится к нескольким повторяющимся ошибкам. Ниже — что проверить в первую очередь и как не усугубить ситуацию.

Почему это происходит

Ошибки почти всегда связаны с контекстом: другая версия пакета, не тот пользователь, устаревший конфиг или команда из руководства для другой системы. awk не исключение. Поэтому сначала фиксируем исходное состояние, затем меняем одну вещь за раз.

Типичные ошибки

Ниже — сбои, которые встречаются чаще всего. Перед исправлением сохраните текущие конфиги и запишите, какие изменения вносите: так проще откатиться.

1. awk: syntax error at or near unexpected token.

Проверьте парность фигурных скобок и кавычек. Разделяйте шаблон и действие пробелом, а программу целиком заключайте в одинарные кавычки.

2. Числа с десятичной запятой считаются неправильно.

Запустите команду с LC_ALL=C или приведите разделитель к точке. Локаль влияет на разбор чисел в некоторых реализациях awk.

3. Поля разделены не так, как ожидалось.

Явно задайте -F или переменную FS. Для нескольких возможных разделителей используйте регулярное выражение.

4. Скрипт с shebang не запускается.

Сделайте файл исполняемым через chmod +x и проверьте путь к awk. Shebang должен содержать -f, например #!/usr/bin/awk -f.

Как настроить правильно

Правильная последовательность проста: проверить версию и зависимости, сделать резервную копию конфигурации, внести минимальное изменение, проверить логи и только потом двигаться дальше.

Установка

В Debian, Ubuntu и Linux Mint используется пакетный менеджер APT:

sudo apt install gawk

В Fedora и RHEL-совместимых системах пакет ставится через DNF:

sudo dnf install gawk

В Arch Linux и производных пакет доступен в официальных репозиториях:

sudo pacman -S gawk

1. Выведите нужные колонки

awk автоматически разбивает строку на поля по пробелам. Переменные $1, $2 и так далее содержат значения колонок. Команда print выводит выбранные поля через пробел.

awk '{print $1, $3}' data.txt

2. Отфильтруйте строки по условию

Шаблон перед блоком действия ограничивает обработку. В примере выводятся только записи, где третье поле больше 100. Числовое сравнение не требует преобразования типов.

awk '$3 > 100 {print $1, $3}' data.txt

3. Задайте разделитель полей

Флаг -F устанавливает разделитель входных полей. Для /etc/passwd это двоеточие. Переменная OFS задаёт разделитель в выводе, если нужно сохранить формат.

awk -F: '{print $1}' /etc/passwd
awk -F, 'BEGIN {OFS=","} {print $1, $3}' report.csv

4. Посчитайте сумму и среднее

Блок BEGIN выполняется до чтения данных, а END — после. Переменные можно накапливать по строкам и печатать итог в конце. Используйте printf для контроля количества знаков после запятой.

awk '{sum += $2} END {printf "Сумма: %.2f\n", sum}' data.txt

Практические советы

Эти рекомендации проверены на повседневных задачах. Начните с тех, которые закрывают вашу текущую боль, а не со всего списка сразу.

Совет 1. Используйте -v name=value для передачи параметров в awk без изменения

Используйте -v name=value для передачи параметров в awk без изменения текста программы.

Совет 2. printf предпочтительнее print, когда важен формат чисел или выравниван

printf предпочтительнее print, когда важен формат чисел или выравнивание столбцов.

Совет 3. NR — номер строки во всём входе, а FNR — номер строки в текущем файле.

NR — номер строки во всём входе, а FNR — номер строки в текущем файле.

Совет 4. Команда next пропускает оставшиеся правила для текущей строки и упроща

Команда next пропускает оставшиеся правила для текущей строки и упрощает фильтрацию.

Профилактика

Большинство повторяющихся сбоев с awk связано не с ошибкой в самой программе, а с окружением: обновились зависимости, изменился путь, закончилось место или другой администратор поправил конфиг. Поэтому профилактика начинается с фиксации исходного состояния.

Сохраните рабочий конфиг в систему контроля версий, добавьте короткий комментарий о том, зачем нужен каждый нестандартный параметр, и запишите команду проверки. Через месяц вы скажете себе спасибо: восстановить логику по чужому файлу без пояснений почти невозможно.

Чек-лист

  • Версия пакета и конфигурация зафиксированы и доступны для сравнения.
  • Есть автоматическая проверка синтаксиса перед перезапуском службы.
  • Журналы ротуются, а диск не заполняется ими за неделю.
  • Изменения проходят через тестовый стенд, а не сразу на рабочий сервер.

Рабочие сценарии

Начните со справки: у awk обычно есть страница man и примеры в описании. Затем повторите типичные операции на тестовых данных, а не на рабочих файлах.

man awk 2>/dev/null | head -40
awk --help 2>&1 | tail -30
# подготовить тестовые данные
mkdir -p /tmp/awk-test && cd /tmp/awk-test
printf 'alpha\nbeta\ngamma\n' > sample.txt

Фиксируйте рабочие команды в заметках или шпаргалке: так вы не будете заново искать синтаксис через месяц.

Итог

Большинство ошибок с awk лечится не переустановкой, а проверкой конфигурации, логов и прав доступа. Действуйте по одному изменению за раз — и причина быстро найдётся.

Насколько публикация полезна?

Нажмите на звезду, чтобы оценить!

Средняя оценка 0 / 5. Количество оценок: 0

Оценок пока нет. Поставьте оценку первым.

Поделиться: Telegram ВКонтакте