awk
Манипуляция строк

Извлечение определенных строк из текстового файла

Предположим, что у нас есть файл

cat -n lorem_ipsum.txt
 1    Lorem Ipsum is simply dummy text of the printing and typesetting industry.
 2    Lorem Ipsum has been the industry's standard dummy text ever since the 1500s, when an unknown printer took a galley of type and scrambled it to make a type specimen book.
 3    It has survived not only five centuries, but also the leap into electronic typesetting, remaining essentially unchanged.
 4    It was popularised in the 1960s with the release of Letraset sheets containing Lorem Ipsum passages, and more recently with desktop publishing software like Aldus PageMaker including versions of Lorem Ipsum

Мы хотим извлечь строки 2 и 3 из этого файла

awk 'NR==2,NR==3' lorem_ipsum.txt

Это напечатает строки 2 и 3:

 2    Lorem Ipsum has been the industry's standard dummy text ever since the 1500s, when an unknown printer took a galley of type and scrambled it to make a type specimen book.
 3    It has survived not only five centuries, but also the leap into electronic typesetting, remaining essentially unchanged.

Извлечение определенного столбца / поля из определенной строки

Если у вас есть следующий файл данных

cat data.csv
1 2 3 4 5 6 7 8 9 10
11 12 13 14 15 16 17 18 19 20
21 22 23 24 25 26 27 28 29 30
31 32 33 34 35 36 37 38 39 40
41 42 43 44 45 46 47 48 49 50

возможно, вам нужно прочитать четвертый столбец третьей строки, это будет «24»,

awk 'NR==3 { print $4 }' data.csv

дает

24

Модификация строк «на лету» (например, для исправления строк Windows)

Если файл может содержать окончание строк в Windows или Unix (или даже смесь обоих), то предполагаемая замена текста может не работать должным образом.

Образец:

$ echo -e 'Entry 1\nEntry 2.1\tEntry 2.2\r\nEntry 3\r\n\r\n' \
> | awk -F'\t' '$1 != "" { print $1 }' \
> | hexdump -c
0000000   E   n   t   r   y       1  \n   E   n   t   r   y       2   .
0000010   1  \n   E   n   t   r   y       3  \r  \n  \r  \n            
000001d

Это можно легко устранить с помощью дополнительного правила, которое вставлено в начале awk-скрипта:

/\r$/ { $0 = substr($0, 1, length($0) - 1) }

Поскольку действие не заканчивается next , следующие правила применяются, как и прежде.

Пример (с исправлением строк):

$ echo -e 'Entry 1\nEntry 2.1\tEntry 2.2\r\nEntry 3\r\n\r\n' \
> | awk -F'\t' '/\r$/ { $0 = substr($0, 1, length($0) - 1) } $1 != "" { print $1 }' \
> | hexdump -c
0000000   E   n   t   r   y       1  \n   E   n   t   r   y       2   .
0000010   1  \n   E   n   t   r   y       3  \n                        
000001a