Существует ли утилита Unix для добавления меток времени к стандартному вводу?

В итоге я написал небольшой скрипт для этого на Python, но мне было интересно, есть ли какая-нибудь утилита, в которую вы могли бы вводить текст, которая бы добавляла в каждую строку какой-то текст - в моем конкретном случае - метку времени. В идеале использование будет примерно таким:

cat somefile.txt | prepend-timestamp

(Прежде чем ответить на sed, я попробовал это:

cat somefile.txt | sed "s/^/`date`/"

Но это только оценивает команду date один раз, когда sed выполняется, поэтому одна и та же временная метка неправильно добавляется к каждой строке.)

Можно попробовать с помощью awk:

<command> | awk '{ print strftime("%Y-%m-%d %H:%M:%S"), $0; fflush(); }'

Вам может потребоваться убедиться, что он <command>производит вывод с буферизацией строки, т.е. он сбрасывает свой поток вывода после каждой строки; awkдобавление временной метки будет временем появления конца строки в ее входном канале.

Если awk показывает ошибки, попробуйте gawkвместо этого.

tsот moreutils будет предварять метку времени в каждой строке ввода вы даете ему. Вы также можете отформатировать его, используя strftime.

$ echo 'foo bar baz' | ts
Mar 21 18:07:28 foo bar baz
$ echo 'blah blah blah' | ts '%F %T'
2012-03-21 18:07:30 blah blah blah
$ 

Чтобы установить это:

sudo apt-get install moreutils

аннотировать , доступно по этой ссылке или как annotate-outputв devscriptsпакете Debian .

$ echo -e "a\nb\nc" > lines
$ annotate-output cat lines
17:00:47 I: Started cat lines
17:00:47 O: a
17:00:47 O: b
17:00:47 O: c
17:00:47 I: Finished with exitcode 0

Перегонка приведенных ответов к простейшему из возможных:

unbuffer $COMMAND | ts

В Ubuntu они поступают из пакетов ожидаемых-разработчиков и moreutils.

sudo apt-get install expect-dev moreutils

Как насчет этого?

cat somefile.txt | perl -pne 'print scalar(localtime()), " ";'

Судя по вашему желанию получить живые метки времени, может быть, вы хотите сделать живое обновление файла журнала или чего-то еще? Может быть

tail -f /path/to/log | perl -pne 'print scalar(localtime()), " ";' > /path/to/log-with-timestamps

Будет бросить это там: есть пара утилита в DaemonTools называемых tai64n и tai64nlocal , которые сделаны для предваряя метки времени для регистрации сообщений.

Пример:

cat file | tai64n | tai64nlocal

Ответ Киерона пока самый лучший. Если у вас возникли проблемы из-за того, что первая программа буферизирует ее, вы можете использовать программу unbuffer

unbuffer <command> | awk '{ print strftime("%Y-%m-%d %H:%M:%S"), $0; }'

Он устанавливается по умолчанию в большинстве систем Linux. Если вам нужно собрать его самостоятельно, это часть ожидаемого пакета

http://expect.nist.gov

Используйте команду read (1), чтобы читать по одной строке за раз из стандартного ввода, затем выведите строку с добавленной датой в выбранном вами формате, используя date (1).

$ cat timestamp
#!/bin/sh
while read line
do
  echo `date` $line
done
$ cat somefile.txt | ./timestamp

Я не парень из Unix, но я думаю, что вы можете использовать

gawk '{print strftime("%d/%m/%y",systime()) $0 }' < somefile.txt

#! /bin/sh
unbuffer "$@" | perl -e '
use Time::HiRes (gettimeofday);
while(<>) {
        ($s,$ms) = gettimeofday();
        print $s . "." . $ms . " " . $_;
}'

Вот мое решение awk (из системы Windows / XP с установленными MKS Tools в каталоге C: \ bin). Он предназначен для добавления текущей даты и времени в форме мм / дд чч: мм к началу каждой строки, извлекшей эту временную метку из системы при чтении каждой строки. Конечно, вы можете использовать шаблон BEGIN, чтобы получить временную метку один раз и добавить эту временную метку к каждой записи (все то же самое). Я сделал это, чтобы пометить файл журнала, который был сгенерирован, на стандартный вывод временной меткой во время создания сообщения журнала.

/"pattern"/ "C\:\\\\bin\\\\date '+%m/%d %R'" | getline timestamp;
print timestamp, $0;

где «pattern» - это строка или регулярное выражение (без кавычек) для сопоставления во входной строке, и необязательно, если вы хотите сопоставить все входные строки.

Это должно работать и в системах Linux / UNIX, просто избавьтесь от C \: \\ bin \\, оставив строку

             "date '+%m/%d %R'" | getline timestamp;

Это, конечно, предполагает, что команда date возвращает вас к стандартной команде Linux / UNIX date display / set без конкретной информации о пути (то есть переменная PATH вашей среды правильно настроена).

Смешивая некоторые ответы выше от natevw и Frank Ch. Eigler.

Он имеет миллисекунды, работает лучше, чем вызов внешней dateкоманды каждый раз, и perl можно найти на большинстве серверов.

tail -f log | perl -pne '
  use Time::HiRes (gettimeofday);
  use POSIX qw(strftime);
  ($s,$ms) = gettimeofday();
  print strftime "%Y-%m-%dT%H:%M:%S+$ms ", gmtime($s);
  '

Альтернативная версия с промывкой и чтением в цикле:

tail -f log | perl -pne '
  use Time::HiRes (gettimeofday); use POSIX qw(strftime);
  $|=1;
  while(<>) {
    ($s,$ms) = gettimeofday();
    print strftime "%Y-%m-%dT%H:%M:%S+$ms $_", gmtime($s);
  }'

$ cat somefile.txt | sed "s/^/`date`/"

Вы можете сделать это (с помощью GNU / SED ):

$ some-command | sed "x;s/.*/date +%T/e;G;s/\n/ /g"

пример:

$ { echo 'line1'; sleep 2; echo 'line2'; } | sed "x;s/.*/date +%T/e;G;s/\n/ /g"
20:24:22 line1
20:24:24 line2

Конечно, вы можете использовать другие параметры даты программы . просто замените date +%Tна то, что вам нужно.

Ответ caerwyn может быть запущен как подпрограмма, которая предотвратит появление новых процессов в строке:

timestamp(){
   while read line
      do
         echo `date` $line
      done
}

echo testing 123 |timestamp

Отказ от ответственности : решение, которое я предлагаю, не является встроенной утилитой Unix.

Я столкнулся с подобной проблемой несколько дней назад. Мне не понравился синтаксис и ограничения вышеупомянутых решений, поэтому я быстро собрал программу на Go, чтобы сделать эту работу за меня.

Вы можете проверить инструмент здесь: preftime

В разделе Releases проекта GitHub есть готовые исполняемые файлы для Linux, MacOS и Windows .

Инструмент обрабатывает неполные выходные строки и имеет (с моей точки зрения) более компактный синтаксис.

<command> | preftime

Это не идеально, но я хотел бы поделиться этим, если это кому-то поможет.

делать это с dateи trи xargsна OSX:

alias predate="xargs -I{} sh -c 'date +\"%Y-%m-%d %H:%M:%S\" | tr \"\n\" \" \"; echo \"{}\"'"
<command> | predate

если вы хотите миллисекунды:

alias predate="xargs -I{} sh -c 'date +\"%Y-%m-%d %H:%M:%S.%3N\" | tr \"\n\" \" \"; echo \"{}\"'"

но учтите, что в OSX date не дает опции% N, поэтому вам нужно установить gdate ( brew install coreutils) и, наконец, прийти к следующему:

alias predate="xargs -I{} sh -c 'gdate +\"%Y-%m-%d %H:%M:%S.%3N\" | tr \"\n\" \" \"; echo \"{}\"'"

Если значение, которое вы добавляете, одинаково в каждой строке, запустите emacs вместе с файлом, а затем:

Ctrl + <space>

в начале файла (чтобы отметить это место), затем прокрутите вниз до начала последней строки (Alt +> перейдет в конец файла ... что, вероятно, тоже будет включать клавишу Shift, затем Ctrl + а, чтобы перейти к началу этой строки) и:

Ctrl + x r t

Это команда для вставки в только что указанный прямоугольник (прямоугольник шириной 0).

2008-8-21 18:45 <enter>

Или все, что вы хотите добавить ... тогда вы увидите этот текст перед каждой строкой в ​​прямоугольнике шириной 0.

ОБНОВЛЕНИЕ: Я только что понял, что вы не хотите ЖЕ ЖЕ дату, так что это не будет работать ... хотя вы можете сделать это в Emacs с немного более сложным пользовательским макросом, но все же, этот вид редактирования прямоугольника довольно приятно знать о ...