리눅스 텍스트 파일 처리: sed와 awk의 활용

리눅스에서 텍스트 파일 처리하기: sed와 awk

안녕하세요, mj입니다! 오늘은 리눅스 환경에서 텍스트 파일을 효율적으로 처리하기 위해 자주 사용되는 sed와 awk에 대해 알아보겠습니다. 이 두 도구는 텍스트 데이터를 조작하고 분석하는 데 매우 유용합니다. 각 도구의 기본적인 사용법과 다양한 예제를 통해 이해를 돕겠습니다.

1. sed 소개

sed는 스트림 편집기(Streaming Editor)로, 입력된 데이터를 변형하고 출력하는 데 사용됩니다. 주로 텍스트 파일에서 특정 문자열을 찾고 대체하는 데 유용합니다.

1.1 기본 사용법

sed의 기본 구문은 다음과 같습니다:

sed 's/찾을문자열/바꿀문자열/g' 파일명

1.2 예제

다음은 sed를 사용한 몇 가지 예제입니다:

• 예제 1: 파일에서 'apple'을 'orange'로 대체하기

sed 's/apple/orange/g' fruits.txt

출력: 모든 'apple'이 'orange'로 바뀌어 출력됩니다.

• 예제 2: 특정 행 삭제하기 (예: 2번째 행)

sed '2d' fruits.txt

출력: 2번째 행이 삭제된 결과입니다.

• 예제 3: 대소문자 구분 없이 대체하기

sed 's/apple/orange/gi' fruits.txt

출력: 'Apple'이나 'apple' 모두 'orange'로 대체됩니다.

• 예제 4: 행 번호 출력하기

sed '=' fruits.txt

출력: 각 행의 번호와 내용을 함께 출력합니다.

• 예제 5: 정규표현식 사용하기

sed -n '/^a/p' fruits.txt

출력: 'a'로 시작하는 모든 행을 출력합니다.

2. awk 소개

awk는 패턴 스캐닝 및 처리 언어로, 텍스트 파일의 각 행을 필드로 나누고 조작하는 데 강력한 기능을 제공합니다.

2.1 기본 사용법

awk의 기본 구문은 다음과 같습니다:

awk '{print $1}' 파일명

위의 명령어는 각 행의 첫 번째 필드를 출력합니다.

2.2 예제

awk를 사용한 몇 가지 예제는 다음과 같습니다:

• 예제 1: 첫 번째 필드 출력하기

awk '{print $1}' data.txt

출력: 데이터 파일의 첫 번째 필드가 출력됩니다.

• 예제 2: 특정 조건에 맞는 행 출력하기

awk '$2 > 50' data.txt

출력: 두 번째 필드가 50보다 큰 모든 행을 출력합니다.

• 예제 3: 필드 합계 계산하기

awk '{sum += $2} END {print sum}' data.txt

출력: 두 번째 필드의 총 합계를 출력합니다.

• 예제 4: 필드 구분자 변경하기

awk -F ',' '{print $1}' data.csv

출력: CSV 파일의 첫 번째 필드를 출력합니다.

• 예제 5: 특정 필드 정렬하기

awk '{print $1}' data.txt | sort

출력: 첫 번째 필드를 정렬하여 출력합니다.

이처럼 sed와 awk는 리눅스에서 텍스트 파일을 처리하는 데 있어 매우 유용한 도구입니다. 각 도구의 특징을 이해하고 적절히 활용하면 데이터 처리 작업을 훨씬 효율적으로 수행할 수 있습니다.

오늘 포스팅은 여기까지입니다. 리눅스에서 텍스트 파일 처리를 하실 때 sed와 awk를 잘 활용하시길 바랍니다. 감사합니다!