샤인의 IT (막 적는) 메모장

Kafka? Kafka 란? : 실시간으로 기록 스트림을 게시, 구독, 저장 및 처리할 수 있는 분산 데이터 스트리밍 플랫폼 Kafka 주요 특징 처리량 : 묶음 단위 배치 처리로 실시간 로그 데이터 처리 확장성 : 브로커 Scale-in/Out 영속성 : 데이터를 메모리에 저장하지 않고 파일시스템에 저장함, 파일 I/O 성능 향상을 위해 메모리에 페이지 캐시 사용 고가용성 : 서버/브로커 장애 시 데이터 복제를 통한 지속적인 데이터 처리 가능 Kafka 아키텍처 정리 Zookeeper : 분산 처리된 메시지 큐 정보를 관리 Broker : Kafka 서버 Topic : 메시지가 생산되고 소비되는 주제 (각 메시지 별로 분류) Partition : Topic 내 분산되어 저장되는 데이터 단위 Offset..

Export Variable 스크립트를 돌릴 때 export를 사용해야 출력된다. 기본적으로 Command Line에서 지정했을 경우 로그아웃 후 재접속 시 해당 변수는 초기화 되어 있다. 그래서 .bashrc 파일에 해당 변수를 지정한다. Linux 내 모든 계정에 적용하고 싶다면 /etc/profile에 입력한다. .bashrc와 /etc/profile에 같은 변수가 지정되어 있다면? .bashrc 변수를 가져온다. [root@scriptbox scripts]# cat 7.testvar.sh #!/bin/bash echo "The $SEASON season is logner" [root@scriptbox scripts]# chmod +x 7.testvar.sh #명령어로 출력하면 바로 나오지만 스크립..

Quota 작은따옴표와 큰따옴표의 차이 큰따옴표는 변수의 값을 출력하지만 작은따옴표는 그대로 출력한다. 큰따옴표를 사용할 때 변수명을 그대로 출력하고 싶다면 \(백슬래시)를 사용한다. 작은따옴표에 \(백슬래시)를 넣어도 출력은 그대로 된다. [root@scriptbox scripts]# SKILL="DevOps" [root@scriptbox scripts]# echo $SKILL DevOps [root@scriptbox scripts]# SKILL='DevOps' [root@scriptbox scripts]# echo $SKILL DevOps [root@scriptbox scripts]# echo "This is $SKILL" This is DevOps [root@scriptbox scripts]# ec..

Argument Argument 지정 시 로 사용한다. #Argument 설정 스크립트 [root@scriptbox scripts]# cat 4.args.sh #!/bin/bash echo "Value of 0 is " echo $0 echo "Value of 1 is " echo $1 echo "Value of 2 is " echo $2 echo "Value of 3 is " echo $3 [root@scriptbox scripts]# ./4.args.sh S hin e Value of 0 is ./4.args.sh Value of 1 is S Value of 2 is hin Value of 3 is e Argument를 지정하여 WEB 서버 설치 스크립트 #웹서버 설정 아규먼트 스크립트 #URL과 A..

Variable Command Line에서 변수 지정 시 = "" 스크립트 작성 시 같음. 해당 변수를 가져오고 싶을 땐 $(달러) 기호 사용 #변수 지정 [root@scriptbox scripts]# SKILL="DevOps" # $를 사용해야 변수를 출력한다. [root@scriptbox scripts]# echo $SKILL DevOps [root@scriptbox scripts]# echo SKILL SKILL [root@scriptbox scripts]# PACKAGE="httpd wget unzip" [root@scriptbox scripts]# yum -y install $PACKAGE Loaded plugins: fastestmirror Loading mirror speeds from ca..

기본 문법 스크립트 작성 및 Permission 부여한 후 실행 [root@scriptbox scripts]# cat firstscript.sh #!/bin/bash ### This script prints system info ### echo "Welcome to Bash script" echo #Check system time echo "###############################" echo "The uptime of the system is: " uptime #Memory Check echo "###############################" echo "Memory Utilization" free -m #Disk Check echo "########################..

여러 VM을 설정 예를 들어 WEB - WAS - DB 3Tier 구조의 5대의 VM을 생성하고 싶다! 면 config.vm.define을 각 VM에 맞게 정의한다. #Vagrantfile Vagrant.configure("2") do |config| config.hostmanager.enabled = true config.hostmanager.manage_host = true ### Nginx VM ### config.vm.define "web01" do |web01| web01.vm.box = "ubuntu/xenial64" web01.vm.hostname = "web01" web01.vm.network "private_network", ip: "192.168.33.11" end ### tomcat ..

Provisioning VagrantFile 해당 VM에서 실행하는 명령어를 VagrantFile에 정의할 수 있다. #Vagrantfile 내 provisioning 설정 Vagrant.configure("2") do |config| ... #프로비저닝 설정 부분 해당 명령어를 순차적으로 실행함 config.vm.provision "shell", inline: default: Matching MAC address for NAT networking... ==> default: Checking if box 'geerlingguy/centos7' version '1.2.25' is up to date... ==> default: Setting the name of the VM: centos7_default_..

Sync Directory VM 내 Sync 된 디렉토리 확인 (default 경로는 /vagrant) 해당 VM 내 /vagrant에서 파일 생성해도 Windows에서도 확인 가능함 Host에서 디렉토리 생성 후 해당 VM의 /vagrant 접속하여 확인 Shin@DESKTOP-EAFOCLM MINGW64 /d/vagrant/centos7 $ mkdir devopsdir Shin@DESKTOP-EAFOCLM MINGW64 /d/vagrant/centos7 $ touch test.txt [vagrant@localhost ~]$ cd /vagrant/ [vagrant@localhost vagrant]$ ls -al total 4 drwxrwxrwx. 1 vagrant vagrant 0 Jan 15 04:4..

Vagrant OS 설치 없음 이미지를 통해 VM 세팅 Vagrant Cloud에서 이미지를 다운로드 받음. Vagrantfile을 통해 관리 #global status 확인 Shin@DESKTOP-EAFOCLM MINGW64 /d/vagrant/centos7 $ vagrant global-status id name provider state directory ------------------------------------------------------------------------ 1db2c86 default virtualbox running D:/vagrant/centos7 The above shows information about all known Vagrant environments on ..