Linux Script 작성 실습(r9 Blame)

		r9
r1 mrkim (새 문서)	1	[목차]
	2	== 개요 ==
	3	시스템 엔지니어링 1차 과제 중 Linux Script 작성 실습과 관련된 문서이다.
	4
	5	== 제 0과제 ==
	6	scp 명령어 이용해 과제 수행에 필요한 파일들을 받아오는 과제이다.
	7	scp 사용법은 아래와 같다.
r9 mrkim	8	[br]
r1 mrkim (새 문서)	9	># scp 원격ID@원격서버IP:파일위치 받는위치
	10	>Ex) scp root@172.16.48.201:"/home/test/{test1[20250109].txt,test2.sh,test[3].log,testfile,}" /home/test_user
	11	위 예시 명령어 확인 시 파일을 한번에 받아오기 위해 중괄호를 추가했고 파일명 중 대괄호가 포함되어 있어 쌍따옴표를 넣어줬다.
	12
	13	== 제 1과제 ==
	14	2개의 파일 리스트를 비교해 같은 내용이 있는 라인을 출력하는 과제이다.
	15	diff 명령어를 사용해 중복된 라인을 출력 후 파일에 넣도록 스크립트 를 작성했다.
r9 mrkim	16	[br]
r1 mrkim (새 문서)	17	> diff "$FILE1" "$FILE2" \| grep '^<' \| sed 's/^< //' >> "$OUTPUT_FILE"
r9 mrkim	18	명령어 확인 시 스크립트 파일에서 특수기호 "^<" 사용을 위해 따옴표를 넣어줬다.
r1 mrkim (새 문서)	19
	20	== 제 2과제 ==
	21	대용량 파일을 비교해 공통으로 존재 하는것과 하지 않는 라인을 각각 다른 파일에 저장하는 과제이다.
r3 mrkim	22	diff 명령어를 사용해 각각 다른 파일에 저장하도록 스크립트를 작성했다.
r9 mrkim	23	[br]
r1 mrkim (새 문서)	24	> diff "$FILE1" "$FILE2" \| grep '^>' \| sed 's/^> //' \| awk '{print $1}' \| grep -v 'filename' >> "$EXIST_FILE"
	25	> diff "$FILE1" "$FILE2" \| grep '^<' \| sed 's/^< //' \| awk -F '[,\t ]+' '{print $1}' >> "$NOT_EXIST_FILE"
	26	위 명령어 확인 시 제 1과제 명령어와[*1 diff "$FILE1" "$FILE2" \| grep '^<' \| sed 's/^< //' >> "$OUTPUT_FILE"] 비슷하지만,
	27	awk를 추가해 필요한 정보만 걸러서 저장하도록 했다.
	28	중복되는 컨텐츠 리스트와 중복되지 않는 리스트를 각각 저장하도록했다.
r5 mrkim	29
r1 mrkim (새 문서)	30	== 제 3과제 ==
r1 mrkim (새 문서)	31	파일에 기록된 시간을 보기 편하게 변환해 별도 파일에 저장하는 과제이다.
r9 mrkim	32	[br]
r3 mrkim	33	> cat "$FILE1" \| grep -v history \| awk -F ',' '{print $1 "," strftime("%Y-%m-%d %H:%M:%S", $2)}' >> $EXIST_FILE
r5 mrkim	34	strftime 함수를 이용해 파일 내 쉼표 2번째의 있는 텍스트(날짜)를 보기편하게(yyyy-mm-dd hh-mm-ss) 변환한다.
r1 mrkim (새 문서)	35
r1 mrkim (새 문서)	36	\|\| AS-IS \|\| TO-BE \|\|
r6 mrkim	37	\|\| 1721693207 \|\| 2024-07-09 09:16:44 \|\|
r1 mrkim (새 문서)	38
r1 mrkim (새 문서)	39	== 제 4과제 ==
r6 mrkim	40	파일내 bitrate 값의 따라 각각 다른 파일의 저장하는 과제이다.
r1 mrkim (새 문서)	41	if문을 통해 6Mbps인 경우 4~6Mbps인 경우 그 외 데이터를 각각 저장 할 수 있도록 작성했다.
r6 mrkim	42
r9 mrkim	43	{{{if (bitrate >= 6000000) {
r1 mrkim (새 문서)	44	print out >> "HD.txt";
r3 mrkim	45	hd_cnt++; hd_sum += bitrate;
r9 mrkim	46	} }}}bitrate 값 마다 분리 해주는 구문이다.
r1 mrkim (새 문서)	47	다른 값들도 구문과 같이 각각 분리해 준다.
	48
	49	{{{if (hd_cnt > 0) {
	50	res = sprintf("total : %d, bitrate avg : %.0f", hd_cnt, hd_sum / hd_cnt);
	51	print res >> "HD.txt";
r9 mrkim	52	} }}}파일 마지막 줄에 나눈 파일 마다의 총 파일의 개수와 평균 bitrate를 계산한 값을 출력하도록했다.
r7 mrkim	53	다른 값들도 구문과 같이 총파일 개수와 평균 bitrate를 출력한다.
r7 mrkim	54
r4 mrkim	55
r4 mrkim	56	== 제 5과제 ==
r1 mrkim (새 문서)	57	입력한 용량 값 만큼의 컨텐츠 크기인 파일만 출력하는 과제이다.
r9 mrkim	58	[br]
r7 mrkim	59	> grep "^H" hitcount.txt
r7 mrkim	60	H로 시작하는 컨텐츠 파일만 조회 하기 위해 grep에 ^를 추가해 준다.
r9 mrkim	61	[br]
r4 mrkim	62	> current_gb = $4/1024/1024/1024;
r1 mrkim (새 문서)	63	리스트 파일에 있는 컨텐츠 별 용량을 구해 GB로 변환 해준다.
r1 mrkim (새 문서)	64
r9 mrkim	65	{{{if (current_gb < limit) {
r8 mrkim	66	printf "%s, %s, %s, %.2f GB, %s\n", $1, $2, $3, current_gb, $5
r9 mrkim	67	} }}}if문을 통해 입력한 GB 값과 파일리스트의 GB변환값을 비교해 미만인 파일들을 출력해준다.
r1 mrkim (새 문서)	68
r8 mrkim	69	== 제 6과제 ==
r1 mrkim (새 문서)	70	파일이 복사된 서버의 IP 리스트의 개수와 파일이 복사된 개수를 비교해 두 값이 다른걸 출력하는 과제이다.
r9 mrkim	71	[br]
r2 mrkim	72	> split($5, ips, " ");
r2 mrkim	73	> ip_cnt = length(ips);
r4 mrkim	74	> copy_cnt = $6;
	75	split 함수를 이용해 IP 리스트 개수를 출력,
	76	복사된 개수는 이미 Count되어 있어 값을 가져 올 수 있다.
r9 mrkim	77	[br]
r9 mrkim	78	{{{if (ip_cnt != copy_cnt) {
r2 mrkim	79	printf "불일치: %s (실제:%d, 기록:%d)\n", $1, ip_cnt, copy_cnt
r9 mrkim	80	} }}}if문을 통해 불일치 값을 출력해 남겨준다.
r2 mrkim	81
	82	== 제 7과제 ==
	83	EventLog에서 SeesionID로 조회해 관련로그를 출력 및 관련 컨텐츠 파일을 다른 파일에서도 조회해 출력하는 과제이다.
r9 mrkim	84	[br]
r1 mrkim (새 문서)	85	> grep "$sid" EventLog\[20241118\].log
r1 mrkim (새 문서)	86	SessionID를 입력받아 관련 로그를 조회한다.
r9 mrkim	87	[br]
r4 mrkim	88	> grep "$sid" EventLog\[20241118\].log \| grep ".mpg" \| sed -E 's/.[[,/ ]([^,/[ ]+\.mpg)./\1/' \| sort -u
	89	mpg 파일을 다른 파일에서도 조회 하기 위해 mpg 목록들을 출력한다.
	90
r1 mrkim (새 문서)	91	== 제 8과제 ==
r1 mrkim (새 문서)	92	EventLog에서 SeesionID로 조회해 관련로그를 출력 및 관련 컨텐츠 파일을 다른 파일에서도 조회해 출력하는 과제이다.
r9 mrkim	93	[br]
r1 mrkim (새 문서)	94	> grep "$sid" EventLog\[20241118\].log
r1 mrkim (새 문서)	95	SessionID를 입력받아 관련 로그를 조회한다.
r9 mrkim	96	[br]
r1 mrkim (새 문서)	97	> grep "$sid" EventLog\[20241118\].log \| grep ".mpg" \| sed -E 's/.[[,/ ]([^,/[ ]+\.mpg)./\1/' \| sort -u
r1 mrkim (새 문서)	98	mpg 파일을 다른 파일에서도 조회 하기 위해 mpg 목록들을 출력한다.
r9 mrkim	99	[br]
r2 mrkim	100	> start_ts=$(date -d "$LOG_DATE $start_input" +%s)
	101	> Ex) inout = 10
	102	> 변환 후 --> 10:30:00
	103	입력받은 시간을 변환을 하기 위한 구문이다.
r9 mrkim	104	[br]
r2 mrkim	105	> awk -F',' -v s="$start_ts" -v e="$end_ts" '$3 >= s && $3 <= e' "$FILE"
	106	입력한 시작 시간보다 큰 값과 입력한 종료 시간보다 작거나 같은 값을 출력한다.
	107
	108
	109
	110
	111