Команда Sed в Linux, вывод текста, удаление, замена.
Потоковый редактор sed (stream editor) — это текстовый редактор, выполняющий операции редактирования над информацией в стандартном потоке ввода или файле. Редактирование осуществляется по одной строке и неинтерактивно. Это означает, что вы принимаете все решения по редактированию при запуске команды, а утилита автоматически выполняет ваши указания. Это может показаться непонятным и неинтуитивным, но на самом деле sed — очень мощный и быстрый инструмент для преобразования текста.
В данном руководстве мы рассмотрим ряд базовых операций и познакомимся с необходимым синтаксисом. Утилита вряд ли заменит ваш обычный текстовый редактор, но скорее всего станет полезным дополнением к вашим инструментам для работы с текстами.
Синтаксис Sed
Обычно sed работает с потоком текста, считываемым из стандартного ввода или файла. Это значит, что вы можете отправить выходные данные другой команды непосредственно на вход утилиты для редактирования или работать с уже созданным файлом. Вывод всех результатов по умолчанию осуществляется в стандартный поток вывода, то есть выходные данные будут выведены на экран, а не сохранены в файл, если их не перенаправить.
Синтаксис команды следующий:
Скопируем себе в домашнюю директорию несколько файлов, чтобы попрактиковаться в редактировании.
Воспользуемся утилитой для просмотра содержимого скопированной нам лицензии BSD. По умолчанию sed выводит результаты на экран, поэтому им можно пользоваться для просмотра файлов, не задавая команд редактирования:
Это работает из-за того, что одиночные кавычки содержат команды редактирования, передаваемые sed. Мы ничего не передали, поэтому утилита просто вывела каждую полученную строку в стандартный поток вывода. Теперь покажем, как утилита может использовать стандартный ввод. Перенаправим редактору выходные данные команды “cat” и получим тот же результат.
Copyright (c) The Regents of the University of California.
All rights reserved.
Redistribution and use in source and binary forms, with or without
modification, are permitted provided that the following conditions
are met:
1. Redistributions of source code must retain the above copyright
notice, this list of conditions and the following disclaimer.
2. Redistributions in binary form must reproduce the above copyright
notice, this list of conditions and the following disclaimer in the
documentation and/or other materials provided with the distribution.
. . .
. . .
Мы можем работать с файлами или потоками текста (как происходит при перенаправлении вывода символом «|») одинаково легко.
Вывод строк
В предыдущем примере мы показали, что передаваемые без команд входные данные напрямую выводятся в стандартный поток вывода.Теперь рассмотрим явную команду “print”, которая задаётся при помощи символа “p” в одиночных кавычках.
Теперь утилита выводит каждую строку дважды. Это происходит потому, что каждая строка выводится автоматически, а ещё мы в явном виде указали выводить их командой “p”. Если посмотреть на результат, где дважды напечатана первая строка, затем дважды вторая и т.д., можно заметить, что sed работает построчно. Он принимает строку, обрабатывает ее и выводит результат, затем процесс повторяется для следующей строки.
Указав sed опцию «-n», которая отключает автоматический вывод, мы можем очистить результат:
Каждая строка снова выводится один раз.
Диапазоны адресов
Рассмотренные выше примеры вряд ли можно назвать редактированием (если мы не хотели выводить каждую строку два раза). Давайте изменим результат, указав sed напечатать только первую строку.
Число «1» перед командой вывода указывает номер строки для работы. Таким же образом мы можем вывести пять строк (не забываем про «-n»).
Мы только что передали в утилиту адрес. При получении адреса редактор выполняет указанные далее команды только над этими строками. В данном примере мы указали начальный адрес и смещение, чтобы сообщить команде, сколько ещё строк она должна пройти:
Результат будет таким же, потому что мы указали начать с первой строки и обработать следующие 4.
Если нужно исключить какие-то строки, можно указать интервал после символа «
».
Следующая команда напечатает все нечетные строки, начиная с первой:
Удаление текста
Можно легко удалить текст, который мы выводили в предыдущем примере, заменив команду “p” на команду “d”. Команда «-n» нам больше не нужна, потому что при использовании команды удаления утилита выводит все, что не удалено. Это позволяет нам видеть, что происходит. Изменим последнюю команду из предыдущего раздела так, чтобы она удаляла все нечетные строки, начиная с первой. В результате мы должны получить все строки, которые не были выведены в прошлый раз.
При этом исходный файл не меняется. Результаты редактирования просто выводятся на экран. Если результат нужно сохранить, можно перенаправить стандартный вывод в файл:
Открыв этот файл командой cat, мы увидим тот же результат, который был на экране после выполнения предыдущей команды. По умолчанию sed не редактирует исходный файл в целях безопасности. Это можно изменить при помощи опции «-i», которая означает редактирование на месте. Исходный файл будет изменен. Давайте попробуем отредактировать только что созданный нами файл «everyother.txt». Снова удалим все нечетные строки:
При помощи cat можно убедиться, что файл был отредактирован.
Опция “-i” может быть опасной, но утилита предоставляет возможность создания резервной копии перед редактированием. Для этого сразу после опции “-i” укажите расширение резервной копии “.bak”:
Будет создан файл резервной копии с расширением “bak”, а затем выполнено редактирование исходного файла.
Замена текста
Чаще всего sed используется для замены текста. Редактор позволяет осуществлять поиск текста по шаблону при помощи регулярных выражений. А затем заменять найденный текст. В простейшем варианте можно заменить одно слово на другое, используя следующий синтаксис:
Параметр «s» – это команда замены. Три слэша (/) нужны для разделения различных текстовых полей. Если вам удобно, вы можете использовать для этого другие символы. Например, если нам нужно изменить имя веб-сайта, удобнее использовать другой разделитель, так как URL содержат слэши. Воспользуемся командой echo для передачи примера:
Здесь секция «com/index» заменяется на «org/home». В качестве разделителя используется нижнее подчеркивание «_». Не забудьте про последний разделитель, иначе sed выдаст ошибку.
Создадим файл для отработки замен:
Теперь заменим «on» на «forward»
Стоит обратить внимание на ряд моментов. Во-первых, мы заменяем шаблоны, а не слова. “on” в слове “song” было заменено на “forward”. Во-вторых, второе “on” в строке 2 заменено не было. Это произошло потому, что по умолчанию команда “s” обрабатывает первое совпадение в строке. А затем переходит к следующей строке. Для замены каждого “on”, а не только первого в строке, можно указать команде замены флаг “g” после шаблонов:
Теперь были заменены все “on”. Чтобы заменить только вторые “on” в каждой строке, вместо “g” нужно указать “2”:
Если нам нужно вывести только те строки, где выполнялась замена, для отмены автоматического вывода можно снова воспользоваться опцией «-n». Затем мы можем передать флаг “p” для вывода строк, в которых производились замены.
Пример показывает, что флаги в конце команды можно комбинировать. Чтобы игнорировать регистр, нужно указать флаг “i”.
Если нужно заменить текст во всех файлах директории то можно воспользоваться командой
Про утилиту grep можно прочитать здесь
Заключение
Мы рассмотрели основы использования sed. Теперь вы можете быстро редактировать текстовые документы при помощи соответствующих команд sed.
Если вы нашли ошибку, пожалуйста, выделите фрагмент текста и нажмите Ctrl+Enter.
Источник
Изучаем команды Linux: sed
Оригинал: Learning Linux Commands: sed
Автор: Rares Aioanei
Дата публикации: 19 ноября 2011 года
Перевод: А. Кривошей
Дата перевода: июль 2012 г.
Николай Игнатушко проверил на GNU sed version 4.2.1 в дистрибутиве Gentoo все команды, упомянутые в этой статье. Не все скрипты хорошо отрабатывали на версии GNU sed. Но дело касалось мелочей, которые исправлены. Только скрипт по замене hill на mountains пришлось существенно переделать.
1. Введение
Добро пожаловать во вторую часть нашей серии, которая посвящена sed, версии GNU. Существует несколько версий sed, которые доступны на разных платформах, но мы сфокусируемся на GNU sed версии 4.x. Многие из вас слышали о sed, или уже использовали его, скорее всего в качестве инструмента замены. Но это только одно из предназначений sed, и мы постараемся показать вам все аспекты использования этой утилиты. Его название расшифровывается как «Stream EDitor» и слово «stream» (поток) в данном случае может означать файл, канал, или просто stdin. Мы надеемся, что у вас уже есть базовые знания о Linux, а если вы уже работали с регулярными выражениями, или по крайней мере знаете, что это такое, то все для вас будет намного проще. Объем статьи не позволяет включить в нее полное руководство по регулярным выражениям, вместо этого мы озвучим базовые концепции и дадим большое количество примеров использования sed.
2. Установка
Здесь не нужно много рассказывать. Скорее все sed у вас уже установлен, так как он используется различными системными скриптами, а также пользователями Linux, которые хотят повысить эффективность своей работы. Вы можете узнать, какая версия sed у вас установлена, с помощью команды:
В моей системе эта команда показывает, что у меня установлен GNU sed 4.2.1 плюс дает ссылку на домашнюю страницу программы и другие полезные сведения. Пакет называется «sed» независимо от дистрибутива, кроме Gentoo, где он присутствует неявно.
3. Концепции
Перед тем, как идти дальше, мы считаем важным акцентировать внимание на том, что делает «sed», так как словосочетание «потоковый редактор» мало что говорит о его назначении. sed принимает на входе текст, выполняет заданные операции над каждой строкой (если не задано другое) и выводит модифицированный текст. Указанными операциями могут быть добавление, вставка, удаление или замена. Это не так просто, как выглядит: предупреждаю, что имеется большое количество опций и их комбинаций, которые могут сделать команду sed очень трудной для понимания. Поэтому мы рекомендуем вам изучить основы регулярных выражений, чтобы понимать, как это работает. Перед тем, как приступить к руководству, мы хотели бы поблагодарить Eric Pement и других за вдохновление и за то, что он сделал для всех, кто хочет изучать и использовать sed.
4. Регулярные выражения
Так как команды (скрипты) sed для многих остаются загадкой, мы чувствуем, что наши читатели должны понимать базовые концепции, а не слепо копировать и вставлять команды, значения которых они не понимают. Когда человек хочет понять, что представляют собой регулярные выражения, ключевым словом является «соответствие», или, точнее, «шаблон соответствия». Например, в отчете для своего департамента вы написали имя Nick, обращаясь к сетевому архитектору. Но Nick ушел, а на его место пришел John, поэтому теперь вы должны заменить слово Nick на John. Если файл с отчетом называется report.txt, вы должны выполнить следующую команду:
По умолчанию sed использует stdout, вы можете использовать оператор перенаправления вывода, как показано в примере выше. Это очень простой пример, но мы проиллюстрировали несколько моментов: мы ищем все соответствия шаблону «Nick» и заменяем во всех случаях на «John». Отметим, что sed призводит поиск с учетом регистра, поэтому будьте внимательны и проверьте выходной файл, чтобы убедиться, что все замены были выполнены. Приведенный выше пример можно было записать и так:
Хорошо, скажете вы, но где же здесь регулярные выражения? Да, мы хотели сначала показать пример, а теперь начинается самая интересная часть.
Если вы не уверены, написали ли вы «nick» или «Nick», и хотите предусмотреть оба случая, необходимо использовать команду sed ‘s/Nick|nick/John/g’. Вертикальная черта имеет значение, которое вы должны знать, если изучали C, то есть ваше выражение будет соответствовать «nick» или «Nick». Как вы увидите ниже, канал может использоваться и другими способами, но смысл остается тот же самый. Другие операторы, широко использующиеся в регулярных выражениях — это «?», который соответствует повторению предшествующего символа ноль или один раз (то есть flavou?r будет соответствовать flavor и flavour), «*» — ноль или более раз, «+» — один или более раз. «^» соответствует началу строки, а «$» — наоборот. Если вы — пользователь vi или vim, многие вещи покажутся вам знакомыми. В конце концов, эти утилиты, вместе с awk и С уходят корнями в ранние дни UNIX. Мы не будем больше говорить на эту тему, так как проще понять значение этих символов на примерах, но вы должны знать, что существуют различные реализации регулярных выражений: POSIX, POSIX Extended, Perl, а также различные реализации нечетких регулярных выражений, гарантирующие вам головную боль.
Источник
Sed вывести количество строк
версия 5.1
Последняя версия доступна на:
www.student.northpark.edu/pemente/sed/sed1line.txt
www.cornerstonemag.com/sed/sed1line.txt
This file is also available in Portuguese at:
www.lrv.ufsc.br/wmaker/sed_ptBR.html
Теперь и по-русски:
rkorepanov.narod.ru/doc/sed.html
# заменяем ПРОБЕЛ на двойной пробел
sed G
# ставим двойной пробел с уже имеющимися в файле пустыми строками. Выходной файл
# должен содержать не более одной пустой строки между строками текста
sed ‘/^$/d;G’
# Тройной пробел в файле
sed ‘G;G’
# отменить двойные пробелы (предполагается, что пронумерованные строки всегда пустые)
sed ‘n;d’
# ставим номер каждой строки файла (левое выравнивание). Использование табуляции (смотри
# особенности применения ‘t’ в конце этого файла) в отличие от пробела сохранит отступ(ы).
sed = filename | sed ‘N;s/n/t/’
# ставим номер каждой строки файла (число слева, выравненное по правому краю)
sed = filename | sed ‘N; s/^/ /; s/ *(.<6,>)n/1 /’
# ставим номер каждой строки файла,но только если строка не пустая
sed ‘/./=’ filename | sed ‘/./N; s/n/ /’
# считаем количество строк (аналог «wc -l»)
sed -n ‘$=’
ПРЕОБРАЗОВАНИЯ И ЗАМЕНА ТЕКСТА:
# В СРЕДЕ UNIX: переводит DOS стандарт перевода строки (CR/LF) в формат Unix
sed ‘s/.$//’ # полагем , что все строки оканчиваются CR/LF
sed ‘s/^M$//’ # в bash/tcsh, нажимем Ctrl-V затем Ctrl-M
sed ‘s/x0D$//’ # для gsed 3.02.80, но выше попроще
# В СРЕДЕ UNIX: преобразовываем символы новой строки Unix (LF) в DOS формат
sed «s/$/`echo -e \r`/» # командная строка в ksh
sed ‘s/$'»/`echo \r`/» # командная строка в bash
sed «s/$/`echo \r`/» # командная строка в zsh
sed ‘s/$/r/’ # для gsed 3.02.80
# В СРЕДЕ ДОС: преобразуем символы перевода строк Unix (LF) в DOS формат
sed «s/$//» # способ 1
sed -n p # способ 2
# В СРЕДЕ ДОС: преобразуем символы перевода строки ДОС (CR/LF) формат Unix
# этого нельзя сделать DOS версией sed. Используем «tr»
tr -d r outfile # GNU tr версии 1.22 или выше
# удаляем отступы (пробелы,табуляции) с начала каждой строки
# выравниваем текст полностью по левому краю
sed ‘s/^[ t]*//’ # смотри проблемы с ‘t’ в конце файла
# удалить замыкающие пробелы, табуляции с конца каждой строки
sed ‘s/[ t]*$//’ # смотри проблемы с ‘t’ в конце файла
# удаляем отступы, пробелы, табуляции и с конца , и с начала строки
sed ‘s/^[ t]*//;s/[ t]*$//’
# вставляем 5 пробелов в начале каждой строки (отступ для строки)
sed ‘s/^/ /’
# выравниваем весь текст справа по ширине колонки 79 символов
sed -e :a -e ‘s/^.<1,78>$/ &/;ta’ # 78 плюс 1 пробел
# центрируем весь текст посредине при ширине колонки 79 символов.В первом способе
# пробелы в начале строки нужны, а пробелы в конце строки дополняются до конца строки.
# Второй способ, пробелы в начале строки отбрасываются в центр строки, и нет
# завершающих пробелов до конца строки.
sed -e :a -e ‘s/^.<1,77>$/ & /;ta’ # Способ 1
sed -e :a -e ‘s/^.<1,77>$/ &/;ta’ -e ‘s/( *)1/1/’ # Способ 2
# подстановка (найти и заменить) «foo» на «bar» в каждой строке
sed ‘s/foo/bar/’ # заменяет только первое вхождение в строке
sed ‘s/foo/bar/4’ # заменяет только 4 вхождение в строке
sed ‘s/foo/bar/g’ # заменяет ВСЕ вхождения в строке
sed ‘s/(.*)foo(.*foo)/1bar2/’ # заменяет друг за другом
sed ‘s/(.*)foo/1bar/’ # заменяет только завершающее слово
# ЗАМЕНЯЕТ «foo» на «bar» ТОЛЬКО для строк ,содержащих «baz»
sed ‘/baz/s/foo/bar/g’
# подставляет «foo» на «bar» КРОМЕ строк, содержащих «baz»
sed ‘/baz/!s/foo/bar/g’
# меняет «scarlet» или «ruby» или «puce» на «red»
sed ‘s/scarlet/red/g;s/ruby/red/g;s/puce/red/g’ # большинство sedов
gsed ‘s/scarlet|ruby|puce/red/g’ # только GNU sed
# обратный порядок строк (эмулирует «tac»)
# баг/фича в HHsed v1.5 — пустые строки удаляются
sed ‘1!G;h;$!d’ # способ 1
sed -n ‘1!G;h;$p’ # способ 2
# обратный порядок символов в строке (походит на «rev»)
sed ‘/n/!G;s/(.)(.*n)/&21/;//D;s/.//’
# соединяет строки друг с дружкой (как «paste»)
sed ‘$!N;s/n/ /’
# если строка оканчивается обратным слэшем, добавляем последующую строку к ней
sed -e :a -e ‘/\$/N; s/\n//; ta’
# если строка начинается с знака равно , добавляем ее к предыдущей строке
# и заменяем «=» на один пробел
sed -e :a -e ‘$!N;s/n=/ /;ta’ -e ‘P;D’
# добавляем запятые к числовым строкам, меняя «1234567» на «1,234,567»
gsed ‘:a;s/B4<3>>/,&/;ta’ # GNU sed
sed -e :a -e ‘s/(.*6)(2<3>)/1,2/;ta’ # остальные sed
# добавляем запятые к числам с десятичной точкой и знаком минуса (GNU sed)
gsed ‘:a;s/(^|[^0-9.])(6+)(6<3>)/12,3/g;ta’
# добавляем пустую строку каждые пять 5 строк (после строк 5, 10, 15, 20, итд.)
gsed ‘0
5G’ # только GNU sed
sed ‘n;n;n;n;G;’ # другие sedы
ВЫБОРОЧНАЯ ПЕЧАТЬ ОПРЕДЕЛЕННЫХ СТРОК:
# печать первых 10 строк файла ( поведение «head»)
sed 10q
# печать первой строки файла (поведение «head -1»)
sed q
# печать последних 10 строк файла ( «tail»)
sed -e :a -e ‘$q;N;11,$D;ba’
# печать последних 2 строк файла ( «tail -2»)
sed ‘$!N;$!D’
# печать последней строки файла ( «tail -1»)
sed ‘$!d’ # способ 1
sed -n ‘$p’ # способ 2
# печать только строк ,которые совпадают с regexp ( «grep»)
sed -n ‘/regexp/p’ # способ 1
sed ‘/regexp/!d’ # способ 2
# печать только строк , НЕ совпадающих с regexp (как «grep -v»)
sed -n ‘/regexp/!p’ # способ 1, соответствует вышеприведенному
sed ‘/regexp/d’ # спопоб 2, простейший синтаксис
# печать строки непосредственно перед regexp, но не строки
# содержащей regexp
sed -n ‘/regexp/
# печать строки непосредственно после regexp, но не строки
# содержащей regexp
sed -n ‘/regexp/
# печать 1 строки контекста перед и после regexp,с номером строки,
# показывающей , сколько regexp встретилось (как в «grep -A1 -B1»)
sed -n -e ‘/regexp/<=;x;1!p;g;$!N;p;D;>‘ -e h
# grep для AAA и BBB и CCC (в любом порядке)
sed ‘/AAA/!d; /BBB/!d; /CCC/!d’
# grep для AAA и BBB и CCC (в таком же порядке)
sed ‘/AAA.*BBB.*CCC/!d’
# grep для AAA или BBB или CCC (как в «egrep»)
sed -e ‘/AAA/b’ -e ‘/BBB/b’ -e ‘/CCC/b’ -e d # большинство sedов
gsed ‘/AAA|BBB|CCC/!d’ # только для GNU sed
# печать параграфа если тот содержит AAA (пустые строки,разделенные параграфами)
# HHsed v1.5 должен содержать ‘G;’ после ‘x;’ в следующих 3 скриптах
sed -e ‘/./
# печать параграфа если тот содержит AAA и BBB и CCC (в любом порядке)
sed -e ‘/./
# печать параграфа если тот содержит AAA или BBB или CCC
sed -e ‘/./
gsed ‘/./
# печать строк длинее 65 символов
sed -n ‘/^.<65>/p’
# печать строк короче 65 символов
sed -n ‘/^.<65>/!p’ # способ 1, соответствует вышеприведенному
sed ‘/^.<65>/d’ # способ 2, простой синтаксис
# печать секции файла от регулярного выражения до конца файла
sed -n ‘/regexp/,$p’
# печать секции файла , основанная на номерах строк (включающей строки 8-12 )
sed -n ‘8,12p’ # способ 1
sed ‘8,12!d’ # способ 2
# печать строки 52
sed -n ’52p’ # способ 1
sed ’52!d’ # способ 2
sed ’52q;d’ # способ 3, эффективно для больших файлов
# начиная со строки 3, печать каждой 7-ой строки
gsed -n ‘3
7p’ # для GNU sed
sed -n ‘3,$
# печать части файла между двумя регулярными выражениями
sed -n ‘/Iowa/,/Montana/p’ # чувствительно к регистру
ИЗБРАННОЕ УДАЛЕНИЕ ОПРЕДЕЛЕННЫХ СТРОК:
# печать всего файла , КРОМЕ части между двумя регулярными выражениями
sed ‘/Iowa/,/Montana/d’
# удаление двойных,последовательных строк файла (типа «uniq»).
# первая строка из дубирующихся строк сохраняется, остальные убираются
sed ‘$!N; /^(.*)n1$/!P; D’
# удалить дублирующиеся непоследовательные строки файла. Острожнее с
# переполнением размера буфера, занятой памяти, лучше используйте GNU sed!
sed -n ‘G; s/n/&&/; /^([ —
# удаление первых 10 строк файла
sed ‘1,10d’
# удалить последнюю строку файла
sed ‘$d’
# удалить последние 2 строки файла
sed ‘N;$!P;$!D;$d’
# удалить последние 10 строк файла
sed -e :a -e ‘$d;N;2,10ba’ -e ‘P;D’ # способ 1
sed -n -e :a -e ‘1,10!
# удалить каждую 8 строку
gsed ‘0
8d’ # только GNU sed
sed ‘n;n;n;n;n;n;n;d;’ # другие sedы
# удалить все пустые строки файла (также как и «grep ‘.’ «)
sed ‘/^$/d’ # способ 1
sed ‘/./!d’ # способ 2
# удалить все ПОСЛЕДОВАТЕЛЬНЫЕ строки файла , кроме первых; также
# удаляет все пустые строки с начала и до конца файла (походит на «cat -s»)
sed ‘/./,/^$/!d’ # способ 1, разрешает 0 пустых в начале, 1 от EOF
sed ‘/^$/N;/n$/D’ # способ 2, разрешает 1 пустых в начале, 0 от EOF
# удалить все ПОСЛЕДОВАТЕЛЬНЫЕ пустые строки из файла кроме первых двух:
sed ‘/^$/N;/n$/N;//D’
# удалить все пустые строки с начала файла:
sed ‘/./,$!d’
# удалить все завершающие файл пустые строки
sed -e :a -e ‘/^n*$/<$d;N;ba' -e '>‘ # рaботает на всех sed
sed -e :a -e ‘/^n*$/N;/n$/ba’ # также, кроме gsed 3.02*
# удалить последнюю строку каждого параграфа
sed -n ‘/^$/
# удалим спецсимволы (overstrikes) (символ, бэкспейс) из man pages. Команда ‘echo’
# может понадобится для ключа -e если у вас ось Unix System V или bash shell.
sed «s/.`echo \b`//g» # двойные кавычки для среды Unix
sed ‘s/.^H//g’ # в bash/tcsh, жмите Ctrl-V затем Ctrl-H
sed ‘s/.x08//g’ # hex (16-ричное) выражение для sed v1.5
# получаем заголовок сообщения формата Usenet/e-mail
sed ‘/^$/q’ # удаляем все после первой пустой строки
# получить тело сообщения формата Usenet/e-mail
sed ‘1,/^$/d’ # удаляем все до первой пустой строки
# получить заголовок темы письма , но без слова «Subject: »
sed ‘/^Subject: */!d; s///;q’
# получить начальный заголовок письма отправителя
sed ‘/^Reply-To:/q; /^From:/h; /./d;g;q’
# разобрать свойства адреса, выкинуть нафиг e-mail адрес
# с 1-строчного адресного заголовка (смотрите выше)
sed ‘s/ *(.*)//; s/>.*//; s/.*[: /’
# удалить начальный уголок и пробел из каждой строки (антиквотинг сообщения)
sed ‘s/^> //’
# удалить теги HTML (включая многострочные теги)
sed -e :a -e ‘s/ ]*>//g;/ zipup.bat
dir /b *.txt | sed «s/^(.*).TXT/pkzip -mo 1 1.TXT/» >>zipup.bat
ТИПОВОЕ ПОЛЬЗОВАНИЕ: Sed получает одну или больше команд по порядку
и применяет их при каждой операции ввода. После этого все команды применяются
к первой строке ввода,затем первая строка выводится и вторая строка ожидает
ввода для обработки , а затем цикл повторяется. Предыдущие примеры предполагают
что ввод производится со стандартного ,например с консоли
обычно это будет ввод трубы, вернее, канала (или контейнера) 😉 (piped input). Один из
больших имен файлов добавляется в командную строку если нет ввода со
стандартного устройства ввода , посылаемого на устройство вывода (Экран).
Вот примерчики:
cat filename | sed ’10q’ # Используются каналы-контейнера
sed ’10q’ filename # такой же эффект но без кота 😉 («cat»)
sed ’10q’ filename > newfile # перенаправим вывод на диск
Для дополнительных примеров , включая применение команд для ввода
команд с файла на диске , а не только в командной строке, прочитайте «sed &
awk, 2я редакция,» от Даля Дугерти( Dale Dougherty) и Арнольда Руббенса
( Arnold Robbins) (O’Reilly,1997; www.ora.com), «Обработка текста в UNIX ,»
Даля Дугерти( Dale Dougherty) и Тима Орэйли (Tim O’Reilly) (Hayden Books, 1987)
или учебники от Майка Арста (Mike Arst) в файле U-SEDIT2.ZIP (нуно поискать).
Чтоб впитать силу sed, нужно понять что такое «Регулярные выражения.» Для этого,
прочитайте «Регулярные выражения» от Джефри Фриддла (Jeffrey Friedl)
(O’Reilly, 1997).Читайте («man») маны , может помочь в Unix («man
sed», «man regexp», или подсекцию , посвященную регулярным выражениям в «man
ed»), но маны достаточно сложны. Они написаны не для обучения
sed или использованию regexp для чайников, но как как справочник
для использующих программы на практике.
ИСПОЛЬЗОВАНЕ КАВЫЧЕК: Представленные примеры используют одинарные кавычки (‘. ‘)
в отличие от двойных («. «) для ограничения редактируемых команд еще
во времена использования ed на Unix. Одинарные кавычки предохраняют
оболочку Unix от интерпретации знака бакса ($) и обратнокавычек
(`. `),которые использует шелл , если они окружены двойными кавычками.
Пользователям «csh» и аналогам также нужно экранировать
знак восклицания (!) бэкслэшем (например, !) для правильной работы
вышепредставленных примеров,даже внутри одинарных кавычек.
Версии sed для DOS всегда требуют двойные кавычки («. «) а не одинарные
для ограничения редактируемых комманд.
ИСПОЛЬЗОВАНИЕ ‘t’ В СКРИПТАХ SED: Для чистоты документации мы использовали
выражение ‘t’ для вывода символа табуляции (0x09) в скриптах.
Однако, меногие версии sed не распознают ‘t’ , и для этого,когда вы пишете
эти скрипты в командной строке ,жмите вместо этого кнопочку
TAB. ‘t’ поддеривается регулярными выражениями в awk, perl, и HHsed, sedmod,
и GNU sed v3.02.80.
ВЕРСИИ SED: Версии sed различны, поэтому возможны некотрые различия синтаксиса.
В особых случаях, может не быть поддержки меток (:name) или ветвящихся конструкций
(b,t) в пределах редактируемых команд, кроме окончания этих команд.
Мы использовали синтаксис который будет использоваться для большинства
версий sed , тогда как популярные версии сед под лицензией
GNU разрешают более последовательный синтаксис. Когда читатель видит
длиннющую команду как эта:
sed -e ‘/AAA/b’ -e ‘/BBB/b’ -e ‘/CCC/b’ -e d
то хорошо бы знать, что версии GNU sed позволяют переписать это:
sed ‘/AAA/b;/BBB/b;/CCC/b;d’ # или иначе
sed ‘/AAA|BBB|CCC/b;d’
В дополнение, запомните что многие версии sed понимают команды
как «/one/ s/RE1/RE2/», и НЕ разрешают «/one/! s/RE1/RE2/», в которых
содержится пробел перед ‘s’. Остерегайтесь пробелов при вводе команд.
ОПТИМИЗАЦИЯ СКОРОСТИ: Если скорость выполнения хочется увеличить (для
больших входных файлов или слабоватого «железа», замена будет
работатать быстрее с выражением поиска находящимся перед
инструкцией вида «s/. /. /» Например:
sed ‘s/foo/bar/g’ filename # стандартная команда замены
sed ‘/foo/ s/foo/bar/g’ filename # это работает быстрее
sed ‘/foo/ s//bar/g’ filename # укороченый синтаксис sed
В строке выборки или удаления, которая используется вами для вывода строк
выбранной части файла, команда выхода (q) в скрипте намного уменьшает время
обработки для больших файлов. Вот пример:
sed -n ‘45,50p’ filename # печать строки 45-50 позиции файла
sed -n ’51q;45,50p’ filename # по-другому, но работает шустрее
Если у вас есть еще скрипты для распространения или если вы нашли ошибки
в этой листовке, плиз пошлите мыло автору листовки. Напишите какую версию
sed вы юзаете, ось, под которою скомпилен тот самый сед, и описание
проблемы. Данные скрипты в этом файле были написаны и распространяются
господами:
Источник
