일상_자기계발

※ 본 내용은 ChatGPT와 함께합니다. ※ OLTP(Online Transaction Processing) vs OLAP(Online Analytical Processing) Online은 실시간, 즉시 처리의 의미를 나타낸다. 주절주절업무를 하다가 OLT?A?P라는 단어를 자주 보았다.도대체 어떤 단어일까 궁금해 하다가 OpenSearch에 대해 조사를 하면서 알게 되어 정리하면 좋겠다는 생각이 들었다. 1. OLTP(Online Transaction Processing)👉 목적: 실시간 트랜잭션 처리, 상태 저장, 정책 관리후보 DB: PostgreSQL, MySQL, MongoDB (Command 사이드 저장소)설명: 온라인(실시간) 트랜잭션 처리 시스템.주요 목적: 빠르고 안정적인 트랜잭..

※ 본 내용은 ChatGPT와 함께합니다. ※ 🔹 OpenSearch는 두 가지의 메모리를 사용한다.JVM Heap(자바 힙 메모리)Indexing buffer, 캐시, 집계 같은 OpenSearch 내부 연산 용도OpenSearch Page Cache (파일 시스템 캐시)Lucene Segment 읽기/쓰기 최적화서버 메모리가 64 GB라고 가정하면:JVM Heap은 32GB 이하나머지는 OpenSearch Page Cache가 자유롭게 사용 🔹왜 JVM Heap을 50% 이상 주면 안될까?GC 오버헤드 증가JVM Heap이 커질수록 Garbage Collection 시간이 길어짐Compressed Oops 제한JVM은 32GB 이하 힙일 때 객체 참조를 32비트(압축된 포인터)로 관리한다..

※ 본 내용은 ChatGPT 5 버전에서 물어보고 정리한 내용입니다. ※ OpenSearch에서 JSON 구조를 그대로 저장하려고 할 때 선택지가 크게 두 가지가 있다. 1️⃣ object기본 타입 (설정 안 하면 디폴트가 object)JSON 구조를 그냥 평평하게(flat) 펼쳐서 인덱싱배열 지원은 되지만, 객체 간의 관계 유지 안 됨성능은 빠르고 단순👉 용도:단순한 JSON 저장배열 안의 요소끼리 관계를 따질 필요가 없는 경우예시 문서:{ "user": [ { "name": "kim", "age": 30 }, { "name": "lee", "age": 40 } ]} 저장 결과:user.nameuser.agekim, lee30, 40 2️⃣ nestedobject와 비슷하게 JSON을..

※ 본 내용은 ChatGPT 5 버전에서 물어보고 정리한 내용입니다. ※ 🔹 문서 저장 전체 과정 (색인 → 디스크)문서(JSON) ↓JVM Heap (Indexing Buffer, 검색 불가) ↓ [Analyzer + Tokenizer]역색인 구조 생성 ↓ [Refresh]File System Cache (Lucene Segment, 검색 가능) ↓ [Flush]Disk (영구 저장, 장애 시에도 보존) 1️⃣ 문서 수신사용자가 API로 문서를 보냅니다. (예: POST /index/_doc)문서는 JSON 형식으로 들어옵니다.{ "user": "mj", "message": "opensearch indexing flow", "timestamp": "2025-09-13T..

※ 본 내용은 ChatGPT와 함께합니다. ※ OpenSearch 소개OpenSearch는 분산 검색 및 분석 엔진으로, 웹사이트에 검색창을 구현하는 것부터 보안 데이터를 분석해 위협을 탐지하는 것까지 다양한 용도로 활용할 수 있습니다.여기서 **분산(distributed)**이라는 말은 OpenSearch를 여러 대의 컴퓨터에 걸쳐 실행할 수 있다는 의미입니다.**검색 및 분석(search and analytics)**이란, 데이터를 OpenSearch에 저장한 후 이를 검색하고 분석할 수 있다는 뜻입니다.데이터의 종류와 상관없이, OpenSearch를 통해 저장하고 분석할 수 있습니다.문서(Document)문서는 정보(텍스트 또는 구조화된 데이터)를 저장하는 단위입니다.OpenSearch에서는 문서..

Homebrew 사용해서 설치 1. 설치 명령어 다른 버전 설치하고 싶으면 12를 13, 14 등으로 변경하면 됨. @12 를 빼서 명려어를 실행하는 경우, 최신 버전이 설치 될 것으로 생각. brew install postgresql@12 2. 버전 확인 psql --version psql -V 3. postgresql 서비스 실행 brew services start postgresql@12 4. postgresql 접속 psql postgres 5. psql 명령어가 없다는 에러 발생 예) zsh: command not found: psql export PATH="/opt/homebrew/opt/postgresql@12/bin:$PATH" >> ~/.zshrc 참고 사이트 https://formula..