Сценарий: Быстрый анализ текстов

В данном сценарии изучаются команды, которые позволяют провести первичный анализ файла: с чего он начинается, как заканчивается и каков его размер.

Начальные условия: Командная строка.

1. Получить число строк в файле /etc/passwd с помощью команды wc -l /etc/passwd :

2. user@desktop test $ wc -l /etc/passwd

44 /etc/passwd

3. Или другим способом: посчитав число слов в созданном ранее файле users с помощью команды cat users | wc -w:

4. user@desktop test $ cat users | wc -w

44

5. Посмотеть первые несколько строк длинного файла с помощью команды head logs/Xorg.0.log:

6. user@desktop test $ head logs/Xorg.0.log

7. X Window System Version 6.8.2

8. Release Date: 9 February 2005

9. X Protocol Version 11, Revision 0, Release 6.8.2

10. Build Operating System: Linux 2.6.13-gentoo i686 [ELF]

11. Current Operating System: Linux thinkpad 2.6.13-gentoo #1 Wed Sep 7 01:03:14 MSD 2005 i686

12. Build Date: 08 October 2005

13. Before reporting problems, check http://wiki.X.Org

14. to make sure that you have the latest version.

Module Loader present

15. Аналогично, посмотеть последние несколько строк с помощью команды tail logs/Xorg.0.log:

16. user@desktop test $ tail logs/Xorg.0.log

17. (II) RADEON(0): [RESUME] Attempting to re-init Radeon hardware.

18. (II) RADEON(0): [agp] Mode 0x1f000201 [AGP 0x8086/0x3340; Card 0x1002/0x4c66]

19. (II) Mouse1: ps2EnableDataReporting: succeeded

20. SetClientVersion: 0 8

21. SetGrabKeysState - disabled

22. SetGrabKeysState - enabled

23. (II) 3rd Button detected: disabling emulate3Button

24. SetClientVersion: 0 8

25. SetGrabKeysState - disabled

SetGrabKeysState - enabled

Это бывает полезно при просмотре системных журналов — в них самые последние события содержатся в конце файлов.

Сценарий: Поиск строк по регулярным выражениям

В данном сценарии рассматривается практическое использование регулярных выражений для поиска по текстовым файлам.

Начальные условия: Командная строка. Каталог test/log с найденными системными журналами.

1. Среди найденных системных журналов посмотреть файл журнала загрузки графичской системы XFree86.0.log с помощью команды less test/log/XFree86.0.log:

user@desktop ~ $ less test/log/XFree86.0.log

Выйти из просмоторщика можно нажатием клавиши q.

2. Найти все предупреждения в журнале: строка, начинающаяся с «(WW)». Для этого ввести команду grep "^(WW)" test/log/XFree86.0.log:

3. user@desktop ~ $ grep "^(WW)" test/log/XFree86.0.log

4. (WW) The directory "/usr/share/fonts/freefonts/" does not exist.

5. (WW) The directory "/usr/share/fonts/unifont/" does not exist.

6. (WW) The directory "/usr/share/fonts/artwiz/" does not exist.

...

7. Получить все строки, содержащие следующий шаблон: последовательность из 1 или более цифры или буквы, затем символ собаки, затем еще одна последовательность 1 или более цифры или буквы или точки, затем символ точки, затем от двух до четырёх букв (имя домена первого уровня). Также служебный вывод ошибок удаляется (перенаправляется в нулевое устройство). Для этого ввести команду grep "[a-zA-z0-9]\+@[a-zA-z0-9\.]\+\.[a-z]\{2,4\}" /etc/* 2>/dev/null:

8. user@desktop ~ $ grep "[a-zA-z0-9]\+@[a-zA-z0-9\.]\+\.[a-z]\{2,4\}" /etc/* 2>/dev/null

9. /etc/devfsd.conf:# Richard Gooch <rgooch@atnf.csiro.au> 3-JUL-2000

10. /etc/inittab:# Author: Miquel van Smoorenburg, <miquels@cistron.nl>

11. /etc/inittab:# Modified by: Patrick J. Volkerding, <volkerdi@ftp.cdrom.com>

...

При работе с несколькими файлами grep по умолчанию использует вывод имени файла перед найденной стокой.

12. Избавиться от имени файла в начале строки с помощью ключа -h. Ввести команду grep -h "[a-zA-z0-9]\+@[a-zA-z0-9\.]\+\.[a-z]\{2,4\}" /etc/* 2>/dev/null:

13. user@desktop ~ $ grep -h "[a-zA-z0-9]\+@[a-zA-z0-9\.]\+\.[a-z]\{2,4\}" /etc/* 2>/dev/null

14. # Richard Gooch <rgooch@atnf.csiro.au> 3-JUL-2000

15. # Author: Miquel van Smoorenburg, <miquels@cistron.nl>

16. # Modified by: Patrick J. Volkerding, <volkerdi@ftp.cdrom.com>

...

17. Для вывода только найденной подстроки используется ключ -o. Ввести команду grep -ho "[a-zA-Z0-9]\+@[a-zA-Z0-9\.]\+\.[a-z]\{2,4\}" /etc/* 2>/dev/null:

18. user@desktop ~ $ grep -ho "[a-zA-Z0-9]\+@[a-zA-Z0-9\.]\+\.[a-z]\{2,4\}" /etc/* 2>/dev/null

19. rgooch@atnf.csiro.au

20. miquels@cistron.nl

21. volkerdi@ftp.cdrom.com

...

22. Получить все файлы каталога /etc/ с помощью команды find /etc -type f 2>/dev/null, игнорируя ошибки:

23. user@desktop ~ $ find /etc -type f 2>/dev/null

24. /etc/X11/xorg.conf.example

25. /etc/X11/Sessions/kde-3.4

26. /etc/X11/Sessions/Xsession

27. /etc/X11/chooser.sh

...

28. Для каждого из найденных файлов произвести поиск подстроки «nameserver». Для этого ввести команду find /etc -type f -exec grep "nameserver" {} \; 2>/dev/null:

29. user@desktop ~ $ find /etc -type f -exec grep "nameserver" {} \; 2>/dev/null

30. # merge the new nameservers with the other options from the old ...

31. grep --invert-match '^nameserver[[:space:]]' $REALRESOLVCONF

32. nameserver 10.22.10.20

...

33. Для большего удобства добавить вывод имени файла (ключ -H) и номера строки (ключ -n), на которой было найдено совпадение, с помощью команды find /etc -type f -exec grep -Hn "nameserver" {} \; 2>/dev/null:

34. user@desktop ~ $ find /etc -type f -exec grep -Hn "nameserver" {} \; 2>/dev/null

35. /etc/ppp/ip-up:24: # merge the new nameservers with the other optio...

36. /etc/ppp/ip-up:26: grep --invert-match '^nameserver[[:space...

37. /etc/ppp/resolv.conf:1:nameserver 10.22.10.20

...

Таким образом, команда grep может эффективно использоваться вместе с командой find для нахождения информации в файлах.