더디지만... 꾸준히...

sed는 정말 강력한 명령어입니다.

디버깅을 위해서 source의 define이나 코드들을 변경해야 할 때, 그때마다 source를 열어서 변경하지 않고, shell script를 실행해서 변경하고자 할 때 유용합니다.

이미 많은 post들이 있지만, 이글을 쓰는 이유는 sed를 이용해서 하나의 line 뿐만 아니라, 두개의 line에 대해서도 작업을 할 수 있었고, 이를 정리하기 위해서 입니다.

기본적인 예제는 다음과 같습니다.

1. 이름이 '파일_name'인 파일에서 '찾고자 하는 문자열'을 가진 문자열을 출력하는 예제

sed -n '/찾고자 하는 문자열/p' 파일_name

'찾고자 하는 문자열'에 대해서 다양한 패턴들을 넣어서 실험할 때, 실제로 해당 패턴들이 정상적으로 동작하는지 출력을 통해서 확인할 수 있습니다.

즉, sed를 이용해서 shell script를 작성하기에 앞서, 실제 동작 검증용(디버깅용)으로 사용할 수 있습니다.

2. 이름이 '파일_name'인 파일에서 문장이 '//#define ENABLE_TEST' 문자열로 시작하는 경우, 해당 문자열을 '#define ENABLE_TEST'로 변경하는 예제

sed -i 's/^\/\/#define ENABLE_TEST/#define ENABLE_TEST/' 파일_name

3. 이름이 '파일_name'인 파일에서, 'something'이라는 문자열을 찾고, 'something'이라는 문자열을 포함하여 5줄(+5)을 제거(d)하는 예제 (https://ksr930.tistory.com/14)

$ sed -i '/something/,+5 d' 파일_name

4. 이름이 '파일_name'인 파일에서, 'something'이라는 문자열을 갖는 라인을 찾고, 다음 라인에서 'special'이라는 문자열이 있는 경우 처리하는 예제

(https://stackoverflow.com/questions/18620153/find-matching-text-and-replace-next-line/18622953)

# 1
sed -n '/something/{n;/special/p}' 파일_name
# 2
sed -n '/something/{n;s/special/not special/p}' 파일_name
# 3
sed -i '/something/{n;s/special/not special/}' 파일_name

위의 코드에는 3개의 예제가 있습니다.

'# 1'은 'something'이라는 문자열이 있는 라인을 찾고, 다음 라인에 'special'이 있으면 출력합니다. (초기 디버깅용)

'# 2'은 'something'이라는 문자열이 있는 라인을 찾고, 다음 라인에 'special'이 있으면 'not special'로 변경한 후 출력합니다. (초기 디버깅용)

'# 3'은 'something'이라는 문자열이 있는 라인을 찾고, 다음 라인에 'special'이 있으면 'not special'로 파일을 변경합니다. (최종)

위에 참고한 post들은 적었고, (저도 다 읽지는 않았습니다만) 추가로 유용해 보이는 post들은 다음과 같습니다.

https://jhnyang.tistory.com/287

https://snipcademy.com/shell-scripting-sed#the-hold-buffer-space

- 끝 -

문서에서 중복되는 라인을 삭제하는 방법으로 Notepad++을 사용할 수 있습니다만, 해당 링크에 있는 'uniq' 리눅스 명령어를 사용하는 방법도 인상적입니다.

$ cat yourfile | sort | uniq > file_to_save_results

find 관련해서 가장 자주 사용하는 명령어는 아래와 같습니다.

$ find . -name "*.c" | xargs grep -n --color=auto "KeyWord" 2> /dev/null

명령어의 의미는

1. 현재 디렉토리 이하에서 'c'  확장자를 가지는 모든 파일을 찾아라.

2. 찾은 파일들에 대해서 grep 명령어로 'KeyWord'를 포함하는 행을 찾아라.

    이때 행 번호를 표시하고, color로 나타내라

3. 에러가 발생하는 경우 console에 표시하지 마라.

입니다.

기타 가끔 사용하지만 유용한 find 관련 내용을 정리합니다.

• cscope.files 생성

$ find . -name "*.[cCsShH] -a -type f > cscope.files

1. c(C), s(S), h(H) 확장자를 가지는 파일들을 검색합니다.

2. 그리고 (-a, and) 파일만 검색합니다. (링크 걸린 파일은 사용하지 않기 위해서)

3. cscope.files로 저장한다.

• 찾은 갯수 표시

$ find . -name "File.name" | cat -n

'cat -n' 명령은 출력마다 번호를 붙이는 명령입니다. 이를 pip로 연결하면 find한 파일마다 번호를 붙이게 됩니다.

1 ./3.txt
2 ./2.txt
3 ./1.txt

개요

리눅스를 개발환경으로 해서 프로그래밍을 하다보면 grep을 많이 사용하게 됩니다. 특히나 소스 코드를 직접 개발하기 보다는, 이미 개발되어 있는 소스 코드를 이용하는 경우에는 더욱 많이 사용합니다.
유용한 grep의 옵션들을 정리합니다.

[참고] 리눅스는 하나의 작업을 위한 매우 다양한 방법을 제공합니다. 당연히 본문의 예제들보다 효과적인 방법들이 있을 것입니다.

원하는 라인 전후 출력하기

프로그래밍에서는 grep으로 특정 keyword를 포함하는 파일들을 검색한후, 해당 파일들을  editor로 열어서 검토합니다. 그런데, 프로그래밍 이외에 매우 많은 양의 로그파일들에서 정형화된 포맷의 문제 부분들을 찾아서 검토하는 예의 경우, 일일이 파일들을 열어서 문제점을 검토하기는 번거롭습니다.

또 "git log"로 commit된 내용을 확인할 때, 특정 keyword로 내용을 확인한 후 해당 keyword 앞서에 위치하는 commit ID를 알아서 전체 내용을 검토하고자 할 때 유용합니다.

이때 grep의 -A 혹은 -B 옵션을 사용할 수 있습니다.

[기본]

grep -A 라인수1 -B 라인수2 키워드 파일명

[해석]

파일명의 이름을 갖는 파일에서 키워드를 찾아서, 키워드를 포함하는 라인 이후(-A 옵션) 라인수1 만큼의 라인, 키워드를 포함하는 라인 이전(-B 옵션) 라인수2 만큼의 라인을 출력한다.

[예제]

grep -A 10 -B 5 "Internal error" kernel_panic.txt

참조 sites

https://iknow.tistory.com/entry/grep-사용해서-원하는-라인-전후까지-출력하기