Как искать файлы, содержащие окончания строк (CRLF), с помощью grep в Linux?

Я хочу найти файлы, содержащие окончания строки dos, с помощью grep в Linux. Что-то вроде этого:

grep -IUr --color '\r\n' .

Вышеупомянутое, похоже, соответствует буквальному, rnа это не то, что нужно .

Результат будет передан через xargs в задачи для преобразования crlf в lf, как это

grep -IUrl --color '^M' . | xargs -ifile fromdos 'file'

Используйте Ctrl+ V, Ctrl+, Mчтобы ввести буквальный символ возврата каретки в строку grep. Так:

grep -IUr --color "^M"

будет работать - если ^Mесть буквальный CR, который вы вводите, как я предлагал.

Если вам нужен список файлов, вы также хотите добавить эту -lопцию.

объяснение

• -I игнорировать двоичные файлы
• -Uпредотвращает удаление символов CR с помощью grep. По умолчанию он сделает это, если решит, что это текстовый файл.
• -r рекурсивно читать все файлы в каждом каталоге.

grep, вероятно, не тот инструмент, который вам нужен для этого. Он будет печатать строку для каждой совпадающей строки в каждом файле. Если вы, скажем, не хотите запускать задачи 10 раз в файле из 10 строк, grep - не лучший способ сделать это. Используя команду find для запуска файла для каждого файла в дереве, затем поиск по нему для "CRLF" даст вам одну строку вывода для каждого файла, который имеет окончание строки стиля dos:

find . -not -type d -exec file "{}" ";" | grep CRLF

даст вам что-то вроде:

./1/dos1.txt: ASCII text, with CRLF line terminators
./2/dos2.txt: ASCII text, with CRLF line terminators
./dos.txt: ASCII text, with CRLF line terminators

grep -IUlr $'\r'

объясняетhell.com - grep -IUlr

Если ваша версия grep поддерживает параметр -P (--perl-regexp) , тогда

grep -lUP '\r$'

может быть использован.

# list files containing dos line endings (CRLF)

cr="$(printf "\r")"    # alternative to ctrl-V ctrl-M

grep -Ilsr "${cr}$" . 

grep -Ilsr $'\r$' .   # yet another & even shorter alternative

Запрос был поиском ... У меня аналогичная проблема ... кто-то отправил смешанные окончания строк в систему контроля версий, так что теперь у нас есть куча файлов с 0x0d 0x0d 0x0aокончаниями строк. Обратите внимание, что

grep -P '\x0d\x0a'

находит все строки, тогда как

grep -P '\x0d\x0d\x0a'

и

grep -P '\x0d\x0d'

не находит строк, поэтому может быть что-то "еще" происходит внутри grep, когда дело доходит до шаблонов окончания строк ... к сожалению для меня!

Вы можете использовать команду file в unix. Он дает вам кодировку символов файла вместе с признаками конца строки.

$ file myfile
myfile: ISO-8859 text, with CRLF line terminators
$ file myfile | grep -ow CRLF
CRLF  

Если, как и я, ваш минималистичный unix не содержит таких тонкостей, как команда file , а обратная косая черта в ваших выражениях grep просто не работает, попробуйте следующее:

$ for file in `find . -type f` ; do
> dump $file | cut -c9-50 | egrep -m1 -q ' 0d| 0d'
> if [ $? -eq 0 ] ; then echo $file ; fi
> done

Вы можете захотеть внести следующие изменения:

• настроить команду find, чтобы найти только те файлы, которые вы хотите сканировать
• измените команду дампа на od или другую имеющуюся у вас утилиту дампа файлов
• убедитесь, что команда cut включает в себя как начальный, так и конечный пробелы, а также вывод только шестнадцатеричных символов из утилиты дампа
• ограничьте вывод дампа первыми 1000 символов или около того для эффективности

Например, что-то вроде этого может сработать для вас, используя od вместо dump :

 od -t x2 -N 1000 $file | cut -c8- | egrep -m1 -q ' 0d| 0d|0d$'

dos2unix имеет параметр информации о файле, который можно использовать для отображения файлов, которые будут преобразованы:

dos2unix -ic /path/to/file

Чтобы сделать это рекурсивно вы можете использовать bash«s globstarварианта, который для текущей оболочки включен с shopt -s globstar:

dos2unix -ic **      # all files recursively
dos2unix -ic **/file # files called “file” recursively

В качестве альтернативы вы можете использовать findдля этого:

find -exec dos2unix -ic {} +            # all files recursively
find -name file -exec dos2unix -ic {} + # files called “file” recursively