Как обработать каждую строку, полученную в результате команды grep

У меня есть ряд строк, извлеченных из файла после выполнения команды grep следующим образом:

var=`grep xyz abc.txt`

Допустим, в результате я получил 10 строк, состоящих из xyz.

Теперь мне нужно обработать каждую строку, полученную в результате выполнения команды grep. Как мне поступить для этого?

Один из простых способов - не сохранять выходные данные в переменной, а непосредственно перебирать их с помощью цикла while / read.

Что-то вроде:

grep xyz abc.txt | while read -r line ; do
    echo "Processing $line"
    # your code goes here
done

Существуют варианты этой схемы в зависимости от того, что именно вы ищете.

Если вам нужно изменить переменные внутри цикла (и сделать это изменение видимым вне его), вы можете использовать подстановку процесса, как указано в ответе fedorqui :

while read -r line ; do
    echo "Processing $line"
    # your code goes here
done < <(grep xyz abc.txt)

Вы можете сделать следующее while read цикл, который будет подпитываться результатом grepкоманды, используя так называемую подстановку процесса:

while IFS= read -r result
do
    #whatever with value $result
done < <(grep "xyz" abc.txt)

Таким образом, вам не нужно сохранять результат в переменной, а непосредственно «вводить» его вывод в цикл.

Обратите внимание на использование IFS=и в read -rсоответствии с рекомендациями BashFAQ / 001: Как я могу читать файл (поток данных, переменную) построчно (и / или поле за полем)? :

Параметр -r для чтения предотвращает интерпретацию с обратной косой чертой (обычно используется как пара новой строки с обратной косой чертой, для продолжения через несколько строк или для экранирования разделителей). Без этой опции любые неэкранированные обратные слэши на входе будут отброшены. Вы почти всегда должны использовать опцию -r с read.

В приведенном выше сценарии IFS = предотвращает обрезку начальных и конечных пробелов. Удалите его, если хотите этот эффект.

Что касается подстановки процесса, это объясняется на странице bash hackers :

Подстановка процесса - это форма перенаправления, в которой ввод или вывод процесса (некоторая последовательность команд) отображается как временный файл.

Я бы предложил использовать awk вместо grep + что-то еще здесь.

awk '$0~/xyz/{ //your code goes here}' abc.txt

Без какой-либо итерации с опцией --line-buffered grep:

your_command | grep --line-buffered "your search"

Пример из реальной жизни с выходными данными команды отладки маршрутизатора Symfony PHP Framework для grep всех связанных с «api» маршрутов:

php bin/console d:r | grep --line-buffered "api"

Часто порядок обработки не имеет значения. GNU Parallel сделан для этой ситуации:

grep xyz abc.txt | parallel echo do stuff to {}

Если вы обрабатываете больше похоже на:

grep xyz abc.txt | myprogram_reading_from_stdin

и myprogramмедленно, тогда вы можете запустить:

grep xyz abc.txt | parallel --pipe myprogram_reading_from_stdin

Переберите результаты grep с помощью цикла while / read. Подобно:

grep pattern filename.txt | while read -r line ; do
    echo "Matched Line:  $line"
    # your code goes here
done

Для тех, кто ищет однострочник:

grep xyz abc.txt | while read -r line; do echo "Processing $line"; done