Просмотр и обработка текста

Команда awk

Обрабатывать текст по колонкам и шаблонам

Linux · примеры для Bash · команда выполняется на выбранном сервере

Когда использовать awk

Команда awk обрабатывает текстовые записи, выбирает поля и выполняет вычисления. Подберите разделитель под настоящий формат входных данных и заключайте программу в кавычки, чтобы оболочка не раскрыла выражения awk раньше времени.

Синтаксис

awk [ПАРАМЕТРЫ] 'ПРОГРАММА' [ФАЙЛ…]

Квадратные скобки обозначают необязательные аргументы, многоточие — повторение. Замените условные имена файлов, пользователей и серверов своими значениями.

Основные параметры и аргументы

-F РАЗДЕЛИТЕЛЬ
Задать разделитель полей.
-v ИМЯ=ЗНАЧЕНИЕ
Передать переменную программе awk.
$N
Обратиться к полю N; $0 содержит всю строку.

Примеры использования

Показать имена из passwd

awk -F: '{print $1}' /etc/passwd

Каждая запись учетной записи, разделенная двоеточием, создает свое первое поле — имя учетной записи.

Сложить первый столбец

awk '{sum += $1} END {print sum}' ./numbers.txt

Значения в первом поле, разделенном пробелами, накапливаются и печатаются один раз в конце.

Отобрать строки по значению

awk -F, '$3 > 100 {print $1, $3}' ./report.csv

Строки с третьим полем выше порогового значения печатают выбранные поля; этот простой анализатор предполагает несложные данные, разделенные запятыми.

Особенности и ограничения

  • Кавычки защищают программу awk от подстановок оболочки.
  • Разделение по запятой не является полноценным разбором CSV с кавычками и многострочными полями.

Частые вопросы и решение проблем

Можно ли проанализировать каждый файл CSV?

Нет. Запятые в кавычках, экранированные кавычки и многострочные записи требуют анализатора, поддерживающего CSV. Разделитель полей-запятая сам по себе не реализует правила CSV.

Почему в моей команде пропадает номер поля?

Двойные кавычки для программы awk могут позволить оболочке расширить долларовые выражения. Заключите программу в одиночные кавычки, если интерполяция оболочки не является намеренной.

Подробная справка

Параметры могут зависеть от установленной версии и дистрибутива. Проверьте справку с помощью следующей команды: man awk.