Уникальная сортировка: перенаправить вывод в тот же файл

Есть ли какой-нибудь короткий способ сохранить вывод канала в тот же файл, который он обрабатывает. Например, это то, что я на самом деле делаю

$ cat filename | sort | uniq > result
$ rm -f filename
$ mv result filename

Мне было интересно, если есть способ сделать это в одну строку (не добавляя эти команды с помощью &&)

Это не способ, но чтобы получить представление

$ cat filename | sort | uniq > filename

Вы можете использовать spongeиз пакета moreutils :

LC_ALL=C sort -u filename | sponge filename

Вы также не нуждаетесь в конвейере uniq, так как, когда sortесть -uопция для уникальных строк при сортировке.

Обратите внимание , что в системе GNU с UTF-8 районов, sort -uили sort | uniqне дают вам уникальные линии, но первый из последовательности линий, своего рода то же самое в текущей локали.

$ printf '%b\n' '\U2460' '\U2461' | LC_ALL=en_US.utf8 sort | LC_ALL=en_US.utf8 uniq
①

дал только тебе ①. Изменение языкового стандарта на C заставляет порядок сортировки на основе значений байтов:

$ export LC_ALL=C
$ printf '%b\n' '\U2460' '\U2461' | LC_ALL=C sort | LC_ALL=C uniq
①
②

Вам не нужны никакие дополнительные команды, такие как, catа uniqтакже без использования rmкоманды и mvкоманды для удаления и переименования имени файла. просто используйте простую команду.

sort -u filename -o filename

 -u, --unique
        with -c, check for strict ordering; without -c, output only  the
        first of an equal run

 -o, --output=FILE
        write result to FILE instead of standard output

Как это работает?

sortКоманда сортирует ваше имя файла и с -uопцией удаляет из него дублирующиеся строки. затем с -oпараметром записывает вывод в тот же файл с методом на месте.

Предлагаемый вами пример (ниже) не работает, потому что вы на самом деле читаете и пишете в один и тот же файл одновременно.

$ cat filename | sort | uniq > filename

Идея с каналом или перенаправлением состоит в том, что команда с левой и правой стороны каждого канала или перенаправления выполняется одновременно, параллельно. Команда справа обрабатывает информацию, передаваемую ей из команды слева, в то время как команда слева все еще выполняется.

Чтобы ваш сценарий работал, команда, которая читает из файла, должна завершиться до того, как начнется команда, которая записывает в файл. Для того, чтобы это работало, вам нужно сначала перенаправить вывод во временное местоположение, а затем, когда все будет готово, отправить его из временного местоположения обратно в файл.

Лучший способ сделать это, в основном, как в предыдущем примере, где вы перенаправляете во временный файл, а затем переименовываете этот файл обратно в исходный (за исключением того, что вам не нужно сначала удалять файл, потому что перемещение удаляет любую существующую цель) ,

$ cat filename | sort | uniq > result
$ mv -f result filename

Вы также можете сохранить его в строковую переменную, за исключением того, что он работает только тогда, когда данные достаточно малы, чтобы все сразу помещалось в память.

Вы можете использовать teeкоманду:

sort -u filename | tee filename > /dev/null

Команда teeчитает из стандартного ввода и записывает в стандартный вывод и файлы.

Вы можете использовать Vim в режиме Ex:

ex -sc 'sort u|x' filename

1. sort u сортировать уникально

2. x написать, если изменения были сделаны (они есть) и выйти