푸른하늘

Text 데이터 타입을 사용하면 색인 시 지정된 analyzer가 컬럼의 데이터를 문자열로 인식하고 이를 분석한다. Analyzer를 지정하지 않으면, 기본적으로 standard analyzer가 사용된다. 어떤 설명문같이 문장 형태의 데이터에 사용하기에 적합 Text 데이터 타입은 "전문 검색"이 가능하다는 것이 가장 큰 장점 Text 데이터 타입으로 데이터를 색인하면, 전체 텍스트가 토큰화되어 생성되며, 특정 단어를 검색하는 것이 가능 검색 뿐 아니라, 정렬이나 집계 연산을 사용해야 할 경우에는 text 타입과 keyword 타입을 동시에 갖도록 설정 Text 타입의 주요 파라메터는 아래 표와 같음 analyzer 인덱스 검색에 사용할 형태소 분석기를 선택. 기본값은 standard analyzer...

Keyword 형태로 사용할 데이터에 적합 별도의 분석기를 거치지 않고, 원문 그래도 색인을 하기 때문에 특정 코드나 키워드 등 정형화된 컨텐츠에 사용 형태소 분석을 사용하지 않아야 할 경우에도 사용 주로 아래와 같은 경우에는 반드시 keyword 타입을 사용해야 함 검색 시 필터링 되는 항목 정렬이 필요한 항목 집계(aggregation)해야 하는 항목 예를들어, keyword 타입으로 지정된 항목에 "Seoul Korea"라는 문자열이 있을 경우 "Seoul" 이나 "Korea"라는 질의어로는 검색이 되지 않는다. 정확하게 "Seoul Korea"라고 질의해야 검색이 된다. keyword 데이터 타입의 파라메터는 아래 표 참고 boost 필드의 가중치로 검색 결과 정렬에 영향을 줌. 기본값은 1.0으..

데이터베이스에서 테이블의 컬럼 정보를 정의하는 것이 중요하듯, 엘라시틱서치도 데이터의 타입을 정의하는 것이 중요하다. 엘라스틱서치는 기본적으로 schemaless이기 때문에 명시적인 정의를 하지 않아도, 각 데이터 유형에 따라 필드 데이터 타입에 대한 매핑 정보가 자동으로 생성된다. 이러한 동적 매핑을 하면, 문서에 새로운 필드를 추가할 때마다 인덱스가 자동으로 업데이트 됨으로 매우 쉽고 편리하지만, 한 번 정의된 필드에 서로 다른 타입의 데이터가 입력되면 뒤에 입력된 데이터의 색인 생성에 실패하게 됨. 한 번 생성된 매핑의 타입은 변경할 수 없다. 타입을 변경하려고 한다면, 인덱스를 삭제 후 다시 생성하거나 매핑을 다시 정의해야 함. 매핑 정보 설정시 고려사항 문자열을 분석해야 하는가? _source ..

문서관리용 API: 문서(document)를 색인하고 조회, 수정, 삭제 색인된 문서의 ID를 기준으로 "한 건"의 문서를 취급(Single document API) 한 건의 문서 색인: Index api 한 건의 문서 조회: Get api 한 건의 문서 삭제: Delete api 한 건의 문서 갱신: Update api 다수의 문서 처리(Multi document API) 다수의 문서 조회: Multi Get api 대량의 문서 색인: Bulk api 다수의 문서 삭제: Delete by Query api 다수의 문서 갱신: Update by Query api 기존 문서 재색인: Reindex api

Mappig 정보를 완벽(?)하게 입력을 했는데, 원인모를 오류가 발생했다. "The mapping definition cannot be nested under a type [_doc] unless include_type_name is set to true." 도대체, 아무리 소스를 뒤져봐도 잘못한게 없는뎅?? 그래서, 다시 메뉴얼을 읽어보니 버전이 업그레이드 되면서 바뀌 부분에 대한 내용이 식별되었다. Mapping types are no longer supported in versions 7.x. Elasticsearch 7.x Specifying types in requests is deprecated. For instance, indexing a document no longer requires ..

클러스터는 물리적인 노드 인스턴스들의 집합체 분산 처리를 위해서는 다양한(?) 노드들로 구성해야 함 기본개념: 마스터-노드(전체 클러스터 관리용), 데이터-노드(실제 데이터 관리용) 노드 기본 유형 4가지 Master node Cluster 관리 Node 추가와 제거 등 cluster에 대한 전반적인 관리 네트워크 속도가 빠른 노드를 마스터 노트로 선정 다수의 노드를 마스터 노드로 설정할 수 있으나, 단 하나의 노드만이 마스터로 선발되어 동작하게 됨 Data node 데이터 저장 검색, 통계처리 같은 데이터 관리작업 수행 컴퓨팅 자원 (CPU, MEM, Storage)을 많이 필요로 함 노드의 리소스 운영상태를 지속적으로 모니터링해야 함 Master node와는 가급적 분리해서 구성하는 것이 바람직함 C..