{ "componentChunkName": "component---src-templates-blog-template-js", "path": "/elastic-intro/", "result": {"data":{"cur":{"id":"f5b461ae-e59d-5ffe-b13b-71f1e54f2e23","html":"

\n \n \n

\n
\n

Elastic 공식 페이지 문서를 참고하여 작성하였습니다.

\n
\n

Elastic Stack ??

\n

모든 유형의 데이터를 실시간으로 검색, 분석 및 시각화할 수 있는 Elastic의 오픈소스 프로젝트들을 하나로 묶어서 Elastic Stack이라고 한다.
\n원래는 검색 및 분석 엔진인 Elasticsearch, 수집 파이프라인인 Logstash, 시각화 도구인 Kibana의 앞글자만 따서 ELK Stack이라고 불렀으나 파일 추적을 위한 Beats를 추가하면서 Elastic Stack으로 이름이 바뀌었다.

\n

https://www.elastic.co/kr/what-is/elk-stack

\n
\n

Elastic Stack 구조

\n

\"elk-stack-elkb-diagram.svg\"

\n\n\n\n\n\n\n\n\n\n\n\n\n\n\n\n\n\n\n\n\n\n\n\n\n\n\n\n\n\n\n
SQLElastic설명
columnfield
rowdocument
tableindex
schemaXSQL의 schema와 비슷한 기능을 따로 제공하지 X
\n

1. Beats

\n

[경량 데이터 수집기]
\nBeats는 단일 목적의 데이터 수집기 무료 오픈 소스 플랫폼으로 수백 수천 개의 장비와 시스템으로부터 Logstash나 Elasticsearch에 데이터를 전송한다.

\n\n

다음과 같이 데이터 유형에 따라 여러 종류의 수집기를 제공하고 있고, 자신의 데이터 수집 환경에 맞게 원하는 수집기를 선택하여 편리하게 데이터를 수집할 수 있다.

\n

2. Logstash

\n

[데이터 처리 파이프라인]
\n무료 오픈 소스 서버의 데이터 처리 파이프라인인 Logstash는 다양한 소스에서 데이터를 수집하여 변환한 후 자주 사용하는 저장소로 전달한다.
\nLogstash는 입력/필터/출력 구조로 구성되어 있고, 모든 형태의 데이터를 수집해서 필터를 이용해 형식이나 복잡성에 관계없이 데이터를 동적으로 변환하고 원하는 곳으로 스태시를 선택하여 전송할 수 있다.
\n특히 필터에서는 grok을 이용해 비구조적 데이터에서 구조를 도출하여 IP 주소에서 위치 정보 좌표를 해독하고, 민감한 필드를 익명화하거나 제외시키며, 전반적인 처리를 손쉽게 할 수 있고, 플러그인을 이용해 원하는대로 파이프라인을 생성하고 구성할 수 있다.

\n

3. Elasticsearch

\n

[검색 및 분석 엔진]
\nElasticsearch는 Apache Lucene을 기반으로 하는 분산형 RESTful 검색 및 분석 엔진이다.
\nElastic Stack의 중심으로, Elasticsearch는 빠른 검색, 정교하게 조정된 정확도, 강력한 분석을 위해 데이터를 중앙에 저장하고 정형 데이터, 비정형 데이터, 위치 정보, 메트릭 등 다양한 유형의 데이터를 사용자가 원하는 방식으로 검색하고 결합할 수 있도록 지원한다.

\n

4. Kibana

\n

[시각화 도구]
\nKibana는 Elasticsearch 데이터를 시각화하고 Elastic Stack을 탐색하게 해주는 무료 오픈 소스 인터페이스다.
\n히스토그램, 선 그래프, 원형 차트, 선버스트 등의 기본적인 요소로 구성되어 있고, 모든 문서에 걸쳐 검색이 가능하다.

\n\n
\n

📎 Reference

\n

https://www.elastic.co/kr/what-is/elk-stack
\nhttps://www.elastic.co/guide/en/elasticsearch/reference/8.1/_mapping_concepts_across_sql_and_elasticsearch.html#
\nhttps://www.elastic.co/static-res/images/elk/elk-stack-elkb-diagram.svg

\n
\n\n
","excerpt":"Elastic 공식 페이지 문서를 참고하여 작성하였습니다. Elastic Stack ?? 모든 유형의 데이터를 실시간으로 검색, 분석 및 시각화할 수 있는 Elastic의 오픈소스 프로젝트들을 하나로 묶어서 Elastic Stack이라고 한다. 원래는 검색 및 분석 엔진인 Elasticsearch, 수집 파이프라인인 Logstash, 시각화 도구인 Kibana의 앞글자만 따서 ELK Stack이라고 불렀으나 파일 추적을 위한 Beats를 추가하면서 Elastic Stack으로 이름이 바뀌었다. https://www.elastic.co/kr/what-is/elk-stack Elastic Stack 구조 elk-stack-elkb-diagram.svg SQL Elastic 설명 column field row document table index schema X SQL의 schema와 비슷한 기능을 따로 제공하지 X 1. Beats [경량 데이터 수집기] Beats는 단일 목적의 …","frontmatter":{"date":"April 06, 2022","title":"[Elastic] Elastic Stack(ELK Stack) 소개","categories":"Database","author":"JFe","emoji":"📚"},"fields":{"slug":"/elastic-intro/"}},"next":{"id":"6680d9d5-8931-5969-a431-fc39c6deb510","html":"

문제

\n

https://programmers.co.kr/learn/courses/30/lessons/42885

\n

무인도에 갇힌 사람들을 구명보트를 이용하여 구출하려고 합니다. 구명보트는 작아서 한 번에 최대 2명씩 밖에 탈 수 없고, 무게 제한도 있습니다.

\n

예를 들어, 사람들의 몸무게가 [70kg, 50kg, 80kg, 50kg]이고 구명보트의 무게 제한이 100kg이라면 2번째 사람과 4번째 사람은 같이 탈 수 있지만 1번째 사람과 3번째 사람의 무게의 합은 150kg이므로 구명보트의 무게 제한을 초과하여 같이 탈 수 없습니다.

\n

구명보트를 최대한 적게 사용하여 모든 사람을 구출하려고 합니다.

\n

사람들의 몸무게를 담은 배열 people과 구명보트의 무게 제한 limit가 매개변수로 주어질 때, 모든 사람을 구출하기 위해 필요한 구명보트 개수의 최솟값을 return 하도록 solution 함수를 작성해주세요.

\n
\n

제한사항

\n\n
\n

입출력 예

\n\n\n\n\n\n\n\n\n\n\n\n\n\n\n\n\n\n\n\n\n
peoplelimitreturn
[70, 50, 80, 50]1003
[70, 80, 50]1003
\n
\n

🔍 Algorithm

\n

Greedy

\n

💻 Logic

\n
def solution(people, limit):\n    answer, left, right = 0, 0, len(people)-1\n    # 오름차순 정렬\n    people.sort()\n    # 전부 태울 때까지 반복\n    while left <= right:\n        answer += 1\n        boat = people[right]\n        right -= 1\n        # 전부 태운 경우\n        if left > right : break\n        # 제일 가벼운 사람(left)도 같이 태울 수 있는 경우\n        if boat + people[left] <= limit:\n            left += 1\n    return answer
\n\n
\n

🧩 Code

\n
전체 코드 확인\n
def solution(people, limit):\n    answer, left, right = 0, 0, len(people)-1\n    # 오름차순 정렬\n    people.sort()\n    # 전부 태울 때까지 반복\n    while left <= right:\n        answer += 1\n        boat = people[right]\n        right -= 1\n        # 전부 태운 경우\n        if left > right : break\n        # 제일 가벼운 사람(left)도 같이 태울 수 있는 경우\n        if boat + people[left] <= limit:\n            left += 1\n    return answer
\n
\n
\n

📝 Review

\n

pop()을 이용해서 해결하는 방식으로 구현했는데 효율성 첫 번째 테스트케이스에서 시간초과가 났다,,
\n그래서 pop()을 사용하지 않고 해결할 수 있는 방법을 생각해서 다시 풀었다.
\n대표적인 그리디 문제인 동전 문제처럼 제일 무게가 많이 나가는 사람을 기준으로 생각해야 함.

\n
\n\n
","frontmatter":{"date":"April 01, 2022","title":"[Programmers] 42885번: 구명보트 (Python)","categories":"Algorithm","author":"JFe","emoji":"💻"},"fields":{"slug":"/pg-42885/"}},"prev":{"id":"5b80011f-3dec-5ecf-ac2e-48a0a7d93009","html":"

1. Homebrew 설치

\n
/bin/bash -c \"$(curl -fsSL https://raw.githubusercontent.com/Homebrew/install/master/install.sh)\"
\n

Homebrew 설치가 되어있지 않으면 터미널에서 위 명령어를 입력하여 설치할 수 있다.

\n
\n

2. elastic tap 저장소 추가

\n
brew tap elastic/tap
\n

터미널에서 위 명령어를 통해 elastic 패키지 저장소를 추가할 수 있다.

\n
\n

3. Elasticsearch 설치 및 실행

\n
brew install elastic/tap/elasticsearch-full
\n

위 명령어로 Elasticsearch를 설치할 수 있고

\n
elasticsearch
\n

설치 완료 후에는 elasticsearch 명령어를 통해 Elasticsearch를 실행할 수 있다.
\n백그라운드에서 실행하고 싶으면 elasticsearch 명령어 대신 다음과 같은 명령어로 실행할 수도 있다.
\n(중단할 경우에는 start 대신에 stop 사용)

\n
brew services start elastic/tap/elasticsearch-full
\n

실행 후에는 http://localhost:9200 에 접속하여 제대로 실행되었는지 확인할 수 있다.
\n다음과 같은 화면이 보이면 제대로 실행중인 경우
\n\n \n \n

\n
\n

4. Kibana 설치 및 실행

\n
brew install elastic/tap/kibana-full
\n

kibana 또한 위 명령어로 kibana를 설치할 수 있고

\n
kibana
\n

설치 완료 후에는 kibana 명령어를 통해 실행할 수 있고,
\n다음과 같은 명령어로 백그라운드에서 실행할 수도 있다.

\n
brew services start elastic/tap/kibana-full
\n

실행 후에는 http://localhost:5601 에 접속하여 제대로 실행되었는지 확인할 수 있다.
\n다음과 같은 화면이 보이면 성공
\n\n \n \n

\n
\n

5. Logstash 설치 및 실행

\n
brew install elastic/tap/logstash-full
\n

Logstash도 위 명령어를 통해 설치할 수 있고,
\n실행하기 전에 인덱싱하기 적절하게 필터링을 위한 설정 파일(logstash-sample.conf)을 수정하여 필터링 설정을 할 수 있다.

\n
cd /opt/homebrew/etc/logstash
\n

Homebrew를 이용하여 설치한 경우에는 다음과 같은 경로에서 설정 파일들을 확인할 수 있고
\n여기서 logstash-sample.conf 설정 파일을 수정하면 된다.

\n
vi logstash-sample.conf
\n
# Sample Logstash configuration for creating a simple\n# Beats -> Logstash -> Elasticsearch pipeline.\ninput {\n  beats {\n    port => 5044\n  }\n}\n\noutput {\n  elasticsearch {\n    hosts => [\"http://localhost:9200\"]\n    index => \"%{[@metadata][beat]}-%{[@metadata][version]}-%{+YYYY.MM.dd}\"\n    #user => \"elastic\"\n    #password => \"changeme\"\n  }\n}
\n

설정 파일을 열어보면 위와 같이 파일이 구성되어 있는데 여기서 filter를 추가하여 필터링 설정을 할 수 있다.
\n(filter 설정에 대한 예시는 이후 포스트에서 다룰 예정)
\n이렇게 설정한 후에는 해당 디렉토리에서 다음 명령어를 통해 Logstash를 실행할 수 있다.

\n
logstash -f logstash-sample.conf
\n
\n

6. Filebeat 설치 및 실행

\n
brew install elastic/tap/filebeat-full
\n

Filebeat도 위 명령어를 통해 설치할 수 있고,
\n실행하기 전에 설정 파일(filebeat.yml)을 수정하여 input과 output에 대한 설정을 할 수 있다.

\n
cd /opt/homebrew/etc/filebeat\nvi filebeat.yml
\n

Filebeat 설정에 대한 설명도 이후 포스트에서 예시를 통해 다룰 예정이다.
\n이렇게 설정한 후에는 해당 디렉토리에서 다음 명령어를 통해 Filebeat를 실행할 수 있다.

\n
filebeat -e                 # 일반적으로 실행 하는 경우\nfilebeat -e -c filebeat.yml # -c 옵션은 configuration 파일을 특정할 때 사용 (-c 사용안하면 default는 filebeat.yml)
\n
\n\n
","frontmatter":{"date":"April 06, 2022","title":"[Elastic] Elastic Stack(ELK Stack) - Mac OS 설치 방법","categories":"Database","author":"JFe","emoji":"🍺"},"fields":{"slug":"/elastic-mac-install/"}},"site":{"siteMetadata":{"siteUrl":"https://jfelog.netlify.app","comments":{"utterances":{"repo":"Go-Jaecheol/Jfe_Blog"}}}}},"pageContext":{"slug":"/elastic-intro/","nextSlug":"/pg-42885/","prevSlug":"/elastic-mac-install/"}}, "staticQueryHashes": ["1073350324","1956554647","2938748437"]}