Есть ли способ перенаправить вывод в файл без буферизации в Unix / Linux?

У меня есть длительный пакетный процесс, который выводит некоторую информацию отладки и процесса на стандартный вывод. Если я просто запускаю из терминала, я могу отслеживать «где он находится», но тогда данные становятся слишком большими и прокручиваются за пределы экрана.

Если я перенаправляю на вывод в файл '> out.txt', я в конечном итоге получаю весь вывод, но он буферизуется, поэтому я больше не вижу, что он делает сейчас.

Есть ли способ перенаправить вывод, но не буферизировать записи?

Вы можете явно установить параметры буферизации стандартных потоков, используя setvbufвызов в C (см. Эту ссылку ), но если вы пытаетесь изменить поведение существующей программы, попробуйте stdbuf( coreutilsочевидно, что это начинается с версии 7.5).

Это буферизует stdoutдо строки:

stdbuf -oL command > output

Это полностью отключает stdoutбуферизацию:

stdbuf -o0 command > output

Вы можете получить буферизованный вывод в файл, используя scriptкоманду следующим образом:

stty -echo -onlcr   # avoid added \r in output
script -q /dev/null batch_process | tee output.log        # Mac OS X, FreeBSD
script -q -c "batch_process" /dev/null | tee output.log   # Linux
stty echo onlcr

В Ubuntu пакет с unbufferпрограммой (из expect-devпакета) помог мне. Просто беги:

unbuffer your_command

и это не буферизует это.

Самое простое решение, которое я нашел (не нужно было устанавливать какие-либо сторонние пакеты), было упомянуто в аналогичной теме на сайте Unix & Linux : используйте scriptкоманду. Он старый и, вероятно, уже установлен.

$ script -q /dev/null long_running_command | print_progress       # FreeBSD, Mac OS X
$ script -q -c "long_running_command" /dev/null | print_progress  # Linux

Обратите внимание, что первым параметром имени файла для scriptкоманды является записываемый файл журнала . Если вы просто запустите script -q your_command, вы перезапишете команду с отступом для запуска с файлом журнала. Проверьте man script, чтобы быть в безопасности, прежде чем пытаться это.

попробуйте scriptкоманду; если ваша система имеет его, он принимает имя файла в качестве аргумента, весь текст, выгруженный на стандартный вывод, копируется в файл. Это очень полезно, когда программа установки требует взаимодействия.

Лично я предпочитаю вывод команды, которую я хочу изучить tee.

scriptзаписывает слишком много информации, включая время нажатия клавиш, и много непечатаемых символов. То, что teeспасает, гораздо более читабельно для меня.

Перенаправьте вывод в файл и выполните файл с помощью tail -fкоманды.

редактировать

Если это все еще страдает от буферизации, тогда используйте средство системного журнала (которое обычно небуферизовано). Если пакетный процесс выполняется как сценарий оболочки, вы можете использовать команду logger для этого. Если пакетное задание выполняется на языке сценариев, в любом случае должна быть возможность ведения журнала.

Вы можете использовать teeкоманду, просто волшебство!

someCommand | tee logFile.logоба отобразятся в консоли и запишутся в файл журнала.