엘라스틱서치 실무 가이드 3

Intro::

엘라스틱서치 실무 가이드 6장에 대한 정리본입니다.

한글 형태소 분석기 사용하기

Nori 형대소 분석기

설치방법

bin/elasticsearch-plugin install analysis-nori

애널라이저 등록 및 테스트

PUT nori_analyzer
{
  "settings": {
    "analysis": {
      "tokenizer": {
        "nori_user_dict_tokenizer": {
          "type": "nori_tokenizer",
          "decompound_mode": "mixed",
          "user_dictionary": "userdict_ko.txt"# /config/userdict_ko.txt
        }
      },
      "analyzer": {
        "nori_token_analyzer": {
          "type": "custom",
          "tokenizer": "nori_user_dict_tokenizer"
        }
      }
    }
  }
}

POST nori_analyzer/_analyze
{
  "analyzer": "nori_token_analyzer",
  "text": "잠실역"
}

nori_part_of_speech 토큰 필터

POST nori_analyzer/_close

PUT nori_analyzer/_settings
{
  "analysis": {
    "analyzer": {
      "nori_stoptags_analyzer": {
        "tokenizer": "nori_tokenizer",
        "filter": [
          "nori_posfilter"
        ]
      }
    },
    "filter": {
      "nori_posfilter": {
        "type": "nori_part_of_speech",
        "stoptags": [
          "E",
          "IC",
          "J",
          "MAG",
          "MAJ",
          "MM",
          "NA",
          "NR",
          "SC",
          "SE",
          "SF",
          "SH",
          "SL",
          "SN",
          "SP",
          "SSC",
          "SSO",
          "SY",
          "UNA",
          "UNKNOWN",
          "VA",
          "VCN",
          "VCP",
          "VSV",
          "VV",
          "VX",
          "XPN",
          "XR",
          "XSA",
          "XSN",
          "XSV"
        ]
      }
    }
  }
}

POST nori_analyzer/_open

nori_readingform 토큰 필터

검색결과 하이라이트하기

POST movie_highlighting/_search
{
  "query": {
    "match": {
      "title": "harry"
    }
  },
  "highlight": {
    "pre_tags": [// 원하는 태그로 바꿔줄 수 있다.
      "<strong>"
    ],
    "post_tags": [
      "</strong>"
    ], 
    "fields": {// 하이라이트
      "title": {}
    }
  }
}

스크립트를 이용해 동적으로 필드 추가

참고

1. config 폴더에 스크립팅을 저장하는 방식: 스크립트 파일을 config 폴더에 저장한 다음, 이름을 지정해 코드에서 호출한다.

2. in-requests 방식: 동적 스크립팅이라고 하며 API를 호출할 때 코드 내에서 스크립트를 직접 정의해서 사용한다.

POST movie_script/_doc/1
{
  "movieList": {
    "Death_Wish": 5.5,
    "About_Time": 7,
    "Suits": 3.5
  }
}

// 필드 추가
POST movie_script/_doc/1/_update
{
  "script": "ctx._source.movieList.Black_Panther = 3.7"
}

// 필드 삭제
POST movie_script/_doc/1/_update
{
  "script": "ctx._source.movieList.remove(\"Suits\")"
}

검색 템플릿을 이용한 동적 쿼리 제공

// _script API를 이용해 템플릿 생성
POST _scripts/movie_search_example_template
{
  "script": {
    "lang": "mustache",
    "source": {
      "query": {
        "match": {
          "movieNm": "{{movie_name}}"
        }
      }
    }
  }
}

// _script API를 이용해 검색
POST movie_template_test/_doc/_search/template
{
  "id": "movie_search_example_template",
  "params": {
    "movie_name": "titanic"
  }
}

별칭을 이용해 항상 최신 인덱스 유지하기

//_reindex API를 사용해 인덱스 생성
POST _reindex
{
  "source": {
    "index": "movie_search"
  },
  "dest": {
    "index": "movie_info"
  }
}

// _aliases를 통해 별칭 만들기 
POST _aliases
{
  "actions": [
    {
      "add": {
        "index": "movie_search",
        "alias": "movie"
      }
    },
    {
      "add": {
        "index": "movie_info",
        "alias": "movie"
      }
    }
  ]
}

스냅샷을 이용한 백업과 복구

// 스냅샷을 저장할 디렉토리 생성
mkdir /home/snapshot/elastic/backup

// config/elasticsearch.yml 수정
path.repo: ["/home/snapshot/elastic/backup"]// 추가

// 레포지토리 생성
PUT _snapshot/movie_data_backup
{
  "type": "fs",
  "settings": {
    "location": "home/snapsht/elastic/backup",
    "compress": true
  }
}

레포지토리는 스냅숏들을 저장하는 논리적인 공간이라고 생각하면 되는데, 레포지토리는 물리적으로 설정된 디렉토리 내부에만 생성될 수 있다.

스냅샷 옵션

// 스냅샷 생성
PUT _snapshot/movie_data_backup/movie_snapshot_part1?wait_for_completion=true
{
  "indices": "movie_search",
  "ignore_unavailable": true,
  "include_global_state": false
}

// 생성된 모든 스냅샷 정보 확인
GET _snapshot/movie_data_backup/_all

// 스냅샷을 이용해 복구하는 방법
POST _snapshot/movie_data_backup/movie_snapshot_part1/_restore

// 스냅샷 삭제
DELETE _snapshot/movie_data_backup/movie_snapshot_part1

References::