우리 FISA AI엔지니어링 5주차 과정

Monday(02.03)

 

리눅스와 커널의 개념

• 리눅스: 커널을 기반으로 한 운영체제
• 커널: 운영체제의 핵심으로, 하드웨어와 소프트웨어 간의 상호작용을 관리하고, 인터럽트 처리, 프로세스 관리, 메모리 관리, 파일 시스템 관리, 프로그래밍 인터페이스 제공 등 다양한 중요한 기능을 수행
• 리눅스 커널 자체는 오픈소스로 개발되고, 안전성, 최적화, CLI(명령어 인터페이스) 및 GUI 제공

 

가상화 (Virtualization) 복습

가상화는 여러 프로세스가 컴퓨터 자원을 논리적으로 공유하여 물리적으로 독립된 컴퓨터 환경처럼 보이게 만드는 기술

1. 하이퍼바이저 방식: 여러 개의 독립적인 운영체제를 실행
2. 컨테이너 방식: 호스트 OS의 커널을 공유하여, 여러 애플리케이션을 격리하여 실행

하이퍼바이저의 장단점

• 장점: 완전한 독립적인 운영체제 실행
• 단점: 자원 소비가 큼

컨테이너의 장단점

• 장점: 전체 OS를 부팅할 필요가 없어서 빠르며, MSA 구축이 쉬움
• 단점: 호스트 OS의 커널을 공유하므로 호스트 OS와 다른 게스트 OS 불가, 호스트 OS와 완전히 독립적인 커널 기능을 제공할 수 없고 호스트 OS의 안정성에 의존한다.(호스트 OS문제 시 컨테이너도 영향)

 

도커

LXC(Linux Containers)를 기반으로 하는 도구로, 프로그램과 라이브러리만 격리하여 실행하고, 호스트 OS와 하드웨어 자원을 공하여, 필요한 자원만 사용하고, 효율적인 가상화 환경을 제공

#  ubuntu2 도커 컨테이너에 인터랙티브 모드로 접속하여, bash 셸을 실행 ->  쉘 통해 명령어 입력 및 실행
docker exec -it ubuntu2 /bin/bash

# ubuntu 도커 이미지는 최소 기능 버전 -> 추가 기능 필요 시 보충
unminimize

apt-get update 

# 한 번에 여러 패키지 설치
apt-get install net-tools vim openssh-server ssh sudo info man-db less psmisc nano tzdata cron

 

쉘(Shell)과 커널(Kernel)

진짜 핵심 그림

• 리눅스에서 쉘은 사용자가 명령어를 입력하고, 이를 커널에게 전달하는 인터페이스
• 사용자가 date 명령어를 입력하면, 쉘은 이를 커널에게 전달하여 실행하고 결과를 사용자에게 출력
• 쉘은 커널과 분리되어 있기 때문에, 커널을 변경하지 않고도 쉘만 교체할 수 있는 장점

 

쉘의 종류

• sh → bash → zsh: 시간이 지나면서 사용자가 선호하는 쉘 변경됨
• 로그인 쉘: 사용자 로그인 후 시작되는 쉘

 

슈퍼유저와 일반유저

슈퍼유저:시스템을 관리할 수 있는 권한

• su: 다른 사용자(슈퍼유저 포함)로 전환
• sudo: 비밀번호 없이 슈퍼유저 권한을 임시로 부여

 

리눅스 파일 시스템

리눅스는 모든 것이 파일로 처리됨.

문서, 이미지, 프로그램, 시스템 구성 장치도 파일로 다뤄지고, 이런 파일들을 효과적으로 관리하기 위해 디렉터리 구조를 사용

• /bin: 시스템 실행 파일
• /dev: 디바이스 파일
• /etc: 애플리케이션 설정 파일
• /home: 사용자 홈 디렉터리
• /sbin: 시스템 관리 실행 파일
• /usr: 애플리케이션 실행 파일, 라이브러리, 문서 등
• /var: 변하는 데이터

mount: 여러 디스크가 있을 때 루트 디렉터리에 다른 디스크의 디렉터리를 연결하는 작업

 

리눅스 명령어를 모를 때,  <whatis, info, --help, man > 을 활용하자

 

 

Tuesday(02.04)

오늘의 점심

 

별점 ⭐️ ⭐️ ⭐️ ⭐️ ⭐️

닭갈비와 짜장면이 메뉴였는데, 다른 친구 닭갈비랑 섞어 먹어서 두배로 맛있었다.

 

리눅스 명령어와 철학: "한 명령어는 하나의 동작"

한 명령어는 하나의 동작을 하지만, 원래 리눅스의 철학과 다르게 여러 명령어를 한번에 사용하고 싶다면, -p 를 사용

 

1. 파일 권한과 소유자

• 소유자 (Owner): 파일을 만든 사용자
• 소유 그룹 (Group): 파일을 공유하는 그룹
• 기타 사용자 (Others): 소유자와 그룹 외의 사용자

권한 (rwx)

• r (read): 파일을 읽을 수 있는 권한
• w (write): 파일을 수정할 수 있는 권한
• x (execute): 파일을 실행할 수 있는 권한

# 맨 앞에 l: 심볼릭 링크
lrwxrwxrwx 1 root root 7 Sep 11 14:47 bin -> usr/bin

 

 

 

디렉터리에 t가 표시된 경우는 Sticky Bit를 의미

/tmp와 같은 디렉터리에 사용되며, 다른 사용자가 만든 파일을 삭제하거나 수정할 수 없게하는 명령어

drwxrwxrwt 1 root root 4096 Feb 3 07:54 tmp

 

2. 주요 리눅스 명령어

2.1 파일 관리

• cp : 파일을 복사할 때 사용
  
• cp -r: 디렉터리를 포함한 파일을 복사할 때 사용 (recursive)

cp -r dir1 dir2

• touch: 빈 파일을 만들 때 사용.echo는 빈 파일은 만들 수 없다
  
  • touch는 완전히 빈 파일을 만드는 데 사용되며, 내용이 없고 수정 시간만 갱신하지만
  • echo는 텍스트를 파일에 입력하는 명령어로, 빈 파일을 만들기 위해서는 빈 문자열을 출력해야 하며, 내용이 파일에 들어가게 됨 

touch newfile.txt

 

2.2 파일 검색 및 수정

• grep: 파일 내에서 특정 패턴을 찾을 때 사용
  

grep "sys" /etc/passwd

• find: 조건에 맞는 파일을 검색

find /home -name "*.txt"

+ 리눅스에서 정규식을 사용할 수 있다. grep, sed, awk와 같은 명령어에서 자주 사용한다.

파일 내용 검색:  grep sys /etc/passwd = /etc/passwd에서 sys라는 단어 검색

df(disk free): 파일 시스템별 디스크 사용량 확인

du(disk usage): 디렉터리별로 디스크 사용량 확인

 

2.3 링크 만들기

• 하드 링크: 파일의 물리적인 위치를 공유하는 링크
  
  • 하드 링크로 만든 파일에 대해 어느 것이 원본이고 어느 것이 복사본인지 구분하지 않아도 된다. 양쪽 다 원본 파일이기 때문(inode를 공유)

root@9915b92eaf0a:~# ln file2.txt file3.txt
root@9915b92eaf0a:~# ls -i -l
total 8
1058908 -rw-r--r-- 1 root root 0 Feb  4 02:41 file.txt
1058911 -rw-r--r-- 2 root root 6 Feb  4 02:42 file2.txt
1058911 -rw-r--r-- 2 root root 6 Feb  4 02:42 file3.txt

• 소프트 링크: 다른 파일이나 디렉터리를 가리키는 링크, window의 "바로가기"와 같다.
  

ln -s /path/to/file linkname

 

2.4 파일 내용 수정

• echo: 텍스트 출력 및 파일에 텍스트 추가
  

echo "Hello, World!" >> file.txt

 

3. 쉘과 프로세스 관리

 

3.1 쉘 프로세스

• sh와 bash는 모두 쉘의 종류. sh→bash→sh →bash 이렇게 쉘을 여러 번 실행하면 자식 프로세스가 계속 생성됨

3.2 프로세스 관리

• kill: 프로세스를 종료할 때 사용

kill <PID>

• top: 시스템의 실시간 프로세스를 모니터링
  

kill -9는 강제로 프로세스를 종료할 때 사용되며, 프로세스가 종료되지 않으면 좀비 프로세스가 될 수 있다.

 

4. 쉘 환경과 변수

 

리눅스의 쉘은 사용자가 명령어를 입력하고 시스템과 상호작용할 수 있게 해주는 프로그램

변수, 환경 변수, 그리고 설정 파일들이 중요한 역할

 

4.1 환경 변수와 쉘 변수

• 쉘 변수: 현재 쉘에서만 유효한 변수. 서브쉘이나 새로운 터미널에서 해당 변수 사용 불가

SOME="Hello"  # 쉘 변수 정의
echo $SOME    # 출력: Hello

• 환경 변수: 모든 하위 쉘에서 사용할 수 있는 변수
  • 쉘 변수를 정의하고 export 명령을 사용하면 환경 변수로 바꿀 수 있다.

export SOME="Hello"  # 환경 변수로 설정
export PATH="/usr/local/bin:$PATH"  # 환경 변수 설정

• 반대로 환경변수를 다시 쉘 변수로 변경하기 

export -n SOME       # 환경 변수에서 제거하고 쉘 변수로 되돌림

 

5. awk와 텍스트 처리

 

awk는 텍스트 데이터를 처리하고 분석하는 데 유용

파일 내에서 특정 필드를 선택하거나 조건에 맞는 행을 출력

awk '{ print $2 }' sample.txt  # 두 번째 열 출력

awk '$3 == 25 { print $0 }' sample.txt  # 세 번째 열 값이 25인 행 출력

awk '{ sum += $3; count++ } END { print "Average age:", sum/count }' sample.txt

 

6. 도커 이미지 저장 및 배포

 

리눅스에서 작업한 컨테이너의 상태를 저장하고 도커 허브에 배포할 수 있다.

이렇게 하면 도커 이미지를 도커 허브에 업로드하여 다른 시스템에서도 사용할 수 있게 된다.

docker commit ubuntu ubuntu_study

docker tag ubuntu_study username/ubuntu_study:1.0

docker push username/ubuntu_study:1.0

 

 

7. 명령어 별칭과 history

 

리눅스에서는 명령어에 별칭을 붙여서 자주 사용하는 명령어를 간편하게 실행할 수 있다.

alias와 unalias를 사용하여 별칭을 설정하고 삭제할 수 있다.

alias ll='ls -l'

unalias ll

 

history 명령어는 과거에 실행했던 명령어들을 보여준다.

 

리눅스 공부한 걸 테스트 하기에 좋다고 강사님께서 추천해 주셨다. 꽤 어렵네..

https://cmdchallenge.com/

 

Wednesday(02.05)

 

 

 

Thursday(02.06)

 

 

Friday(02.07)