Linux: Как использовать файл в качестве ввода и вывода одновременно?

Я просто запустил следующее в bash:

uniq .bash_history > .bash_history

и мой файл истории оказался совершенно пустым.

Я думаю, мне нужен способ прочитать весь файл перед записью в него. Как это сделать?

PS: Я, очевидно, думал об использовании временного файла, но я ищу более элегантное решение.

Я рекомендую использовать spongeот moreutils . Из справочной страницы:

DESCRIPTION
  sponge  reads  standard  input  and writes it out to the specified file. Unlike
  a shell redirect, sponge soaks up all its input before opening the output file.
  This allows for constructing pipelines that read from and write to the same 
  file.

Чтобы применить это к вашей проблеме, попробуйте:

uniq .bash_history | sponge .bash_history

Я просто хотел представить другой ответ, который прост и не использует губку (потому что он часто не включается в облегченные среды).

echo "$(uniq .bash_history)" > .bash_history

должен иметь желаемый результат. Подоболочка исполняется до того, как .bash_history открывается для записи. Как объясняется в ответе Фила П, к тому моменту, когда .bash_history прочитан в исходной команде, он уже был обрезан оператором>.

Проблема в том, что ваша оболочка настраивает конвейер команд перед запуском команд. Дело не в «вводе и выводе», а в том, что содержимое файла уже удалено до того, как uniq даже запустится. Это выглядит примерно так:

1. Оболочка открывает >выходной файл для записи, обрезая его
2. Оболочка настроена на использование файлового дескриптора 1 (для stdout) для этого вывода
3. Оболочка выполняет uniq, возможно что-то вроде execlp ("uniq", "uniq", ".bash_history", NULL)
4. uniq запускается, открывает .bash_history и там ничего не находит

Существуют различные решения, в том числе редактирование на месте и использование временного файла, о котором упоминают другие, но главное - понять проблему, что на самом деле идет не так и почему.

Еще один трюк, чтобы сделать это без использования sponge, это следующая команда:

{ rm .bash_history && uniq > .bash_history; } < .bash_history

Это один из читов, описанных в отличной статье «Редактирование файлов на месте» на backreference.org.

Он в основном открывает файл для чтения, затем «удаляет» его. Однако на самом деле он не удален: на него указывает дескриптор открытого файла, и пока он остается открытым, файл все еще существует. Затем он создает новый файл с тем же именем и записывает в него уникальные строки.

Недостаток этого решения: если uniqпо какой-то причине произойдет сбой, ваша история исчезнет.

использовать губку от moreutils

uniq .bash_history | sponge .bash_history

Этот sedскрипт удаляет соседние дубликаты. С -iопцией, он делает модификацию на месте. Это из sed infoфайла:

sed -i 'h;:b;$b;N;/^\(.*\)\n\1$/ {g;bb};$b;P;D' .bash_history

Как интересный трюк, sed также использует временный файл (это только для вас):

$ strace sed -i 's/foo/bar/g' foo    
open("foo", O_RDONLY|O_LARGEFILE)       = 3
...
open("./sedPmPv9z", O_RDWR|O_CREAT|O_EXCL|O_LARGEFILE, 0600) = 4
...
read(3, "foo\n"..., 4096)               = 4
write(4, "bar\n"..., 4)                 = 4
read(3, ""..., 4096)                    = 0
close(3)                                = 0
close(4)                                = 0
rename("./sedPmPv9z", "foo")            = 0
close(1)                                = 0
close(2)                                = 0

Описание:
временный файл ./sedPmPv9zстановится Fd 4, и fooфайлы становятся Fd 3. Операций чтения на дескрипторе 3, и запись на Fd 4 (временный файл). Затем файл foo перезаписывается временным файлом в вызове переименования.

Другое решение:

uniq file 1<> líneas.txt

Временный файл - это почти то же самое, если только рассматриваемая команда не поддерживает редактирование на месте ( uniqнет - некоторые sedделают do ( sed -i)).

Вы можете использовать Vim в режиме Ex:

ex -sc '%!uniq' -cx .bash_history

1. % выбрать все строки

2. ! Команда Run

3. x сохранить и закрыть

Вы также можете использовать tee, используя вывод uniq в качестве входных данных:

uniq .bash_history | tee .bash_history