본문 바로가기

분류 전체보기223

[Puppet] 퍼펫 소개 및 설치 Puppet이란? Puppet은 ruby로 만들어진 시스템 관리 자동화 툴이다. 주로 설정, 관리, 배포, orchestrate와 같은 일을 하기 위해 사용된다. puppet을 사용하는 이유는 반복되는 업무를 자동화하기 위함이다. 예를 들어 패키지를 5개의 서버에 설치해야한다고 가정하면... 오랜 시간이 걸리지 않아 반복되는 작업을 직접 붙어서 할 수 있다. 하지만, 만약 100개, 1000개 이상의 서버에 같은 작업을 해야한다면? 직접 하기에는 소요되는 비용이 너무 큽니다. 이러한 이유로 인프라, 데브옵스 엔지니어가 조직의 업무를 자동화하기 위해 많이 사용한다. puppet 주요 특징 Master Agent Pull 기반 시스템 관리 툴은 Pull기반과 Push기반으로 나뉜다. Puppet은 Pull기.. 2021. 1. 10.

[Vagrant] SSH 공개키 자동 등록 환경 설정, Ansible 사용 이번 글에서는 Vagrant를 이용해서 ansible을 사용할 때 인증 작업을 생략하기 위해 SSH 공개키를 자동으로 등록하는 실습니다. Vagrant를 이용해서 provisioning할 때 Ansible을 많이 사용하게 됩니다. 그런데 ansible은 ssh를 통해 통신하기 때문에 ansible hosts에 직접 계정정보를 등록해주지 않는 이상 -k 옵션을 이용해야하지만... vagrant에서 환경 세팅을 위해 -k 옵션을 사용할 수 없다. 이런 불편함을 해소하기 위해 공개키를 vagrant에서 직접 등록하여 provisioning을 편하게 진행할 수 있습니다. Vagrantfile # -*- mode: ruby -*- # vi: set ft=ruby : Vagrant_API_Version = "2" .. 2020. 12. 20.

[Vagrant] 사용법 및 CentOS Provisioning 기본 구축, Vagrant란? Vagrant? Provisioning? Vagrant는 Provisioning을 위한 툴입니다. 그럼 Provisioning이 뭘까요? 제가 정의하는 Provisioning은 시스템을 미리 코드화하여 언제든지 즉시 시스템을 구성할 수 있도록 하는 것 입니다. 예를 들어 Virtual box를 사용해서 가상머신을 생성하는데 필요한 메모리, cpu, 네트워크를 정의하고 시스템에 필요한 패키지를 설치 혹은 환경설정을 미리 코드화하여 서버를 생성할 준비할 수 있습니다. Vagrant를 사용하면 주기적으로 서버를 배포하고 새롭게 환경은 적용할 필요가 있을 때 유용하게 사용될 수 있습니다. 각각 다른 서비스의 테스트환경을 구축하거나, 학습이나 단기적으로 사용에 필요할 수 있습니다. Vagrant 설치 Vagran.. 2020. 12. 19.

[CentOS] ssh password 입력 없이 로그인 하기, ssh-keygen 공개키 생성 SSH 로그인 OS : CentOS Linux release 7.8 hosts: 222.111.71.200, 222.111.71.201 user: root 목표 : 222.111.71.200 root 계정에서 222.111.71.201 root계정으로 공개키를 이용한 ssh 접속 다른 서버에 접속하기 위해 SSH 프로토콜을 사용한다. 매번 비밀번호를 입력하고 접속하는데 이러한 과정을 ssh-keygen으로 공개키를 이용해서 생략할 수 있다. 아래 실습 내용은 222.111.71.201 root계정에 비밀번호 입력 없이 로그인하는 것을 목표로 합니다. 222.111.71.200 root 계정에서 생성한 공개키를 보내 환경구성합니다. Permission denied (publickey,gssapi-keyex.. 2020. 12. 19.

[Ansible] 설치 및 실습 환경 구축, Ansible이란? 왜 사용하는 것인가? Ansible은 무엇이고 왜 사용하는 것인가? Ansible에 대한 검색을 하셨다는 것은 자동화나 DevOps를 이미 Researching 했을 것이라고 생각됩니다. 주변에서 Ansible, Puppet, Chef 혹은 Salt와 같은 배포 자동화 관리 툴을 들어보셨을텐데 도대체 어떤 기능을 할 수 있고 왜 사용하는지에 대해서 알아보도록 합시다. 시스템을 이루기 위해 여러 서비스가 모여 하나의 시스템으로 운영이 됩니다. 예를 들어 배달앱 시스템을 구성하는데 필요한 서비스들을 나열해보면... 고객 및 배달원들이 앱을 사용하기 위한 로그인 서비스, 고객들의 주문 서비스, 배달원들이 배달하기 위해 사용되는 서비스, 주문 결제 서비스, DB 서비스 등... 여러개의 서비스가 운영됩니다. 그런데 각각 서비스들은 .. 2020. 12. 6.

[Oracle] 조인의 종류 - Nested,Sorted,Hash Join RDBMS에서는 정규화에 의해 연관된 데이터를 여러개의 테이블로 나누게 됩니다. 그래서 원하는 형식의 데이터를 받아오기 위해 여러개의 테이블을 연결하여 사용하는데 이를 Join을 통해서 할 수 있습니다. Join작업을 할때도 옵티마이저는 어떤 방식으로 조인을 할지 실행계획을 세우게 됩니다. 이번 글에서는 데이터베이스 내부적으로 어떻게 조인을 하는지 아래 3가지 방식에 대해서 알아보겠습니다. Nested Loop Join Sorted Merge Join Hash Join 실습환경 OS : Red Hat Enterprise Linux Server release 6.10 DB : Oracle 11.2.0.1 SID : orcl user : jamong 테이블 구조 SYS@orcl> create tab.. 2020. 10. 7.

[Oracle] Index 탐색 방식 - Unique,Range,Full,Fast,Skip Index 인덱스는 테이블에 대한 동작 속도를 높히기 위해 사용되는 오브젝트입니다. 정렬된 상태로 데이터가 저장되어 빠른 속도로 원하는 데이터에 접근할 수 있습니다. 하지만, 인덱스를 사용한다고 해서 무조건 속도가 빠른 것은 아닙니다. 테이블의 전체 데이터를 출력하는 경우에는 인덱스의 탐색보다는 테이블을 전체 탐색하는것이 빠릅니다. 그래서 주로 탐색하는 데이터가 많은데 반환되는 데이터가 적은 경우 인덱스를 사용하게 됩니다. 이런 인덱스를 사용할때 옵티마이저는 가정 최적화된 방법으로 탐색을 합니다. 인덱스에는 아래의 탐색 방식이 있고 하나씩 살펴보도록 하겠습니다. Index Unique Scan Index Range Scan Index Full Scan Index Fast Full Scan Index Sk.. 2020. 10. 5.

[Oracle] 실행계획 확인 방법 XPLAN, AutoTrace, SQL Trace 실행계획 알고리즘 문제 풀때를 떠올려봅시다. 문제를 읽고 어떤 방식으로 풀어야 정확도와 효율성을 잡을 수 있을지 고민합니다. 완전탐색을 해야하는지, 이분탐으로 시간복잡도를 줄일 수 있는지, 혹은 자료구조를 어떤 것을 선택해야하는지 등 여러 고민을 하고 최적이라고 생각하는 방법을 선택합니다. 실행계획도 알고리즘 문제를 푸는 과정과 비슷합니다. 옵티마이저가 어떤 방식으로 쿼리를 실행해야 빠른속도로 결과를 반환할 수 있는지 고려하여 결과를 얻기까지의 과정을 알려줍니다. 우리는 이러한 실행계획을 확인하면서 SQL 쿼리문이 효율적으로 사용되고 있는지 확인할 수 있습니다. 데이터가 대량으로 늘어나면서 특히 속도가 중요한 요소가 되었습니다. 간단한 튜닝을 통해서도 엄청난 효율을 얻을 수 있기 때문에 튜닝의 기본인 실.. 2020. 10. 4.

[백준 11724 연결 요소의 개수] 파이썬 BFS 너비 우선 탐색 풀이 연결 요소의 개수 문제 11724번: 연결 요소의 개수 첫째 줄에 정점의 개수 N과 간선의 개수 M이 주어진다. (1 ≤ N ≤ 1,000, 0 ≤ M ≤ N×(N-1)/2) 둘째 줄부터 M개의 줄에 간선의 양 끝점 u와 v가 주어진다. (1 ≤ u, v ≤ N, u ≠ v) 같은 간선은 한 번만 주�� www.acmicpc.net 뱡향 없은 양방향 그래프가 주어졌을 때 연결 요소를 구하는 문제입니다. 문제 풀이 연결 요소를 구하는 것은 즉 몇개의 구역으로 나누어져 있는지 구하는 문제입니다. 그래프를 위와 같이 표현했을때 2개의 영역으로 이루어져 있습니다. DFS, BFS 모두 사용해서 풀수 있는 문제입니다. 너비 우선 탐색 BFS로 문제를 풀어보겠습니다. 1. 그래프 연결 정보용 행렬 생성 2. BFS.. 2020. 9. 28.

[백준 1012 유기농 배추] 파이썬 BFS 너비 우선 탐색 풀이 유기농 배추 문제 1012번: 유기농 배추 차세대 영농인 한나는 강원도 고랭지에서 유기농 배추를 재배하기로 하였다. 농약을 쓰지 않고 배추를 재배하려면 배추를 해충으로부터 보호하는 것이 중요하기 때문에, 한나는 해충 방지에 � www.acmicpc.net 2차원 배열의 유기농 배추밭이 주어지고 0(땅) 과 1(배추 심어져 있는 땅)로 데이터가 구분됩니다. 배추흰 지렁이를 배추에 서식하게 하면 사방면으로 이동이 가능하여 다른 배추를 해충으로부터 보호가 가능하다. 필요한 배추흰 지렁이의 마리수를 구하는 문제입니다. 입력 받는 정보로 아래와 같이 배추 밭을 2차원 배열 형태로 만들어 주어야 합니다. 문제 풀이 4방면으로 이동이 가능하므로 각 영역당 한마리의 배추흰 지렁이를 배치하면 해결할 수 있습니다. 즉, .. 2020. 9. 28.

[백준 10026 적록색약] 파이썬 BFS 너비 우선 탐색 풀이 적록색약 문제 10026번: 적록색약 적록색약은 빨간색과 초록색의 차이를 거의 느끼지 못한다. 따라서, 적록색약인 사람이 보는 그림은 아닌 사람이 보는 그림과는 좀 다를 수 있다. 크기가 N×N인 그리드의 각 칸에 R(빨강), G(초록) www.acmicpc.net RGB 3가지 문자로 이루어진 N * N 보드판이 주어질때 일반사람과 적록색약인 사람이 보는 구역의 수를 각각 구하는 문제입니다. 적록색약은 R과 G를 하나의 색으로 보입니다. 즉, 아래와 같이 구역이 나뉘게 됩니다. 문제 풀이 2차원 배열의 영역을 구하는 문제로 BFS 너비 우선 탐색 알고리즘을 사용해서 풀면 될것으로 판단했습니다. 단, 2가지 경우가 발생하기 때문에 2가지 버전의 배열을 만들어주고 탐색하는 방식을 선택했습니다. N의 최대 .. 2020. 9. 27.

[Oracle] ON절과 WHERE절 조건 차이, JOIN 대상 차이 ON절과 WHERE절 차이 조인문을 사용할때 ON절을 이용해서 해당 조건으로 테이블 조인을 하게됩니다. 그런데 JOIN을 하기 위해 ON절이 아닌 WHERE절에 사용할때도 있습니다. 같은 내용같지만 확실히 두가지 절의 차이는 있습니다. 이번 글에서는 ON절과 WHERE절의 차이와 어떤 상황에서 각각 사용해야하는지 알아보도록 하겠습니다. SQL문 순서 ON JOIN 절이 추가된 SQL문의 순서는 FROM 절 다음으로 진행합니다. 즉 ON절은 WHERE절 보다 순서상으로 더 빠릅니다. 그럼 이게 실제 쿼리를 실행했을 때 어떤 차이가 있는지 확인해보겠습니다. WHERE절 ON절 실습 OS : Red Hat Enterprise Linux Server release 6.3 DB : Oracle 12.1.0.2 u.. 2020. 8. 9.

[Oracle] List Partition Table 실습 및 정리 List Partition Table Object라는 것은 유저가 생성할 수 있는 것입니다. Segment는 Object들 중에서 데이터를 저장하기 위해서 저장공간이 필요로하는 것입니다. 기본 테이블은 하나의 Segment를 갖는 것을 원칙으로 해서 데이터의 양이 많이질 수록 쿼리작업을하는데 시간이 오래걸리게 됩니다. 만약 하나의 테이블이더라도 특정 기준으로 여러 Segment를 만들어서 필요한 데이터 범위에서만 조회를 한다면 어떨까요? 예를 들어 2015년도의 전체 데이터를 찾고싶은데 Table에는 1990년부터 데이터가 존재합니다. 여러 행을 결과로 반환하기 때문에 Full Table Scan 작업을 하게될텐데 1990년도 부터 모두 탐색하면 시간이 정말 오래 걸릴겁니다. 이럴때 기간을 기준으로 Pa.. 2020. 7. 23.

[Oracle] Flashback 사용법 정리(Versions, Transaction, Table, Drop) Oracle Flashback DML 작업을 하다가 의도치 않게 혹은 실수로 Commit으로 Transaction을 끝냈는데 이전 시점으로 돌아가야하는 상황이 올 수 있습니다. 이 문제를 해결하기 위해 Oracle의 Flashback 기술을 이용해서 특정 시점으로 돌아가거나 보여주는 복구 작업을 할 수 있습니다. 다만, Flashback 기술은 Undo Data를 사용하기 때문에 undo_retention 파라미터값에 의해 보존되는 시간이 정해져 있습니다. Undo Data를 보존하는데 공간과 자원이 필요합니다. 그래서 undo_retention의 기본값은 900초로 되어있는데 좀 더 오랜 기간 돈안 Undo Data를 보존하기 위해 Flashback Data Archive 기능을 사용할 수 있습니다. .. 2020. 7. 22.

[Oracle] Flashback Query AS OF 절 사용하기 Flashback Query AS OF절 Oracle 9i release 2 버전의 New Feature로 "AS OF"절을 이용해서 특정 시점의 테이블 데이터를 확인할 수 있게 되었습니다. 하지만 특정 시점의 제한은 있습니다. Flashback Query는 Undo Data의 정보를 이용해서 결과를 보여줍니다. 그래서 Undo Data가 살아있는 기간동안만 확인할 수 있는 제한이 있습니다. 보통 Transaction이 마친 후 undo_retention 파라미터값 만큼 Undo Data가 보존되지만, Oracle 11g부터 Flashback Data Archive 기능을 이용해서 더 오랜 기간동안 Undo의 정보를 보존할 수 있게 되었습니다. Flashback Data Archive 설정에 대한 내용은.. 2020. 7. 21.

[Oracle] Flashback Data Archive 데이터 복원 작업 Flashback Data Archive(11g) DML 작업을 하면서 실수를 저질러버리고 commit까지 해버리는 경우가 있습니다. 예를 들어 실수로 delete문에 조건절을 포함하지 않아 모든 데이터가 사라지는... 그런 경우가 생길 수 있습니다. Flashback 기능을 사용하면 이런 상황에서 복구가 가능합니다. 하지만 Undo Data를 기본적으로 사용하는 Flashback 기능은 undo_retention 파라미터에 따라 데이터를 복구하지 못하는 상황이 발생할 수 있습니다. undo_retention은 기본으로 900이므로 15분이 지나면 undo에서 데이터를 읽어오지 못하여 Flashback 기능을 사용해서 복구가 안될 수 있습니다. 이럴때는 Flashback Data Archive를 생성하여.. 2020. 7. 21.

[Oracle] SQL Loader 데이터 이동 사용법 SQL Loader 비오라클 데이터베이스에서 오라클 데이터베이스로 데이터를 이동하는 방법으로 SQL Loader를 사용할 수 있습니다. SQL Loader는 csv나 tsv 파일처럼 특정 구분자나 위치로 정의되어 있는 텍스트파일 형식의 데이터를 이용해서 import하는 방식입니다. SQL Loader를 사용하기 위해서는 이러한 데이터가 담겨져 있는 데이터 파일과 import하는 데이터 파일 및 테이블에 대한 정보가 기술되어져 있는 컨트롤 파일 두가지를 이용합니다. SQL Loader 실습 실습환경 OS : Red Hat Enterprise Linux Server release 6.10 DB : Oracle 11.2.0.1 SID : orcl host : 601d2fce71dc 실습목표 - import용 .. 2020. 7. 19.

[Oracle] Transportable Tablespace 가장 빠른 데이터 이동 방법 Transportable Tablespace Transportable Tablespace는 오라클에서 오라클 데이터베이스로 데이터를 이동할때 가장 빠른방법이라고 합니다. 데이터펌프나 Export, Import 유틸리티를 사용할때는 그냥 insert작업을 하는 것과 비슷하다고 한다면 Transport Tablespace는 Datapump를 사용하여 메타데이터 즉 구조만 추출하고 데이터파일 자체를 이동시켜 migration 작업을 합니다. Transport Tablespace를 이용하여 데이터를 이동할때는 운영체제에 대한 제한이 있습니다. 데이터파일 자체를 이동시키다보니 파일을 저장하는 방식이 OS에 따라 상이하여 Platform의 Endian 정보만 같다면 이동이 가능했습니다. 하지만 이제는 Endian의.. 2020. 7. 18.

[Oracle] 데이터 이동 exp, imp 유틸리티 사용 오라클 데이터 이동 오라클 데이터베이스끼리의 데이터 이동을 할때 Export와 Import 유틸리티를 사용할 수 있습니다. Oracle 10g에서 Datapump라는 New Feature가 나오기 이전까지 exp, imp 유틸리티를 사용해서 Export와 Import 작업을 했습니다. 하지만, Datapump가 새롭게 나왔다고해서 이전에 사용하던 유틸리티들이 사라지지는 않았습니다. 기존의 방식과 Datapump는 내부적으로 사용되는 메커니즘이 다를뿐, 데이터를 이동하는 것은 같습니다. Datapump의 경우 export 혹은 import하는 작업을 하기 전에 해당 이동하려는 데이터에 대한 정보를 확인하는 작업을 거쳐 오히려 적은 양의 데이터를 취급할때는 기존의 방식이 더 빠릅니다. 실습환경 OS : Re.. 2020. 7. 17.

[Oracle] Datapump 데이터 이동, expdp impdp 유틸리티 사용 Oracle Datapump 데이터베이스 관리에 있어서 데이터 이동은 필수적으로 꼭 알아야하는 기술입니다. 오라클 데이터베이스에서는 Export(exp)와 Import(imp) 유틸리티를 사용해서 Data Migration 작업을 했었는데요, 10g부터 Datapump를 사용해서 기존 유틸리티보다 20배가량 빠르게 작업을 완료할 수 있다고 하네요. 기존 exp, imp 유틸리티와의 차이점 Datapump가 빠르게 작업을 진행할 수 있는 이유는 내부적으로 사용하는 메커니즘이 다르기 때문입니다. 기존의 방법과는 똑같이 데이터를 이동하지만 처리 방식에 따라 속도가 다르게 측정됩니다. 적은 양의 데이터를 이동시킬때는 Export와 Import 유틸리티가 더 빠릅니다. 아무래도 대량의 데이터를 취급할때 Datap.. 2020. 7. 16.

이전 1 2 3 4 5 6 7 8 ··· 12 다음

티스토리툴바