본문 바로가기

Dani's Stack141

eager, eager global ordinals http://www.elastic.co/guide/en/elasticsearch/guide/current/preload-fielddata.html ES는 기본적으로 fielddata를 lazily load 한다.ES는 particular field에 fielddata가 필요한 query가 생기면, 전체 field를 각 index의 segement에 대해 메모리로 load한다. 작은 segments에서는 이 시간이 별로 안 걸리지만, 5GB segments는 10GB fielddata를 메모리로 올려야 한다. 이 과정은 수십초가 걸린다. 지연에 대비할 수 있는 3가지 방법이 있다.1) Eagerly load fielddata2) Eagerly load global ordinals3) Prepopulate .. 2015. 5. 6.
Field data Field data: http://www.elastic.co/guide/en/elasticsearch/reference/1.4/index-modules-fielddata.html field data cache는 주로 field에 대해 sorting 또는 faceting에 사용된다.그것은 value에 문서기반으로 빨리 접근할 수 있도록 field values은 메모리로 읽는다.field data cache는 비용이 많이 들 수 있다. 그래서 충분한 메모리를 사용할 수 있을 때 있을 때 추천되고, 그것은 load를 유지한다. field data cache에서 사용할 메모리 크기는 indices.fielddata.cache.size에서 설정할 수 있다.참고로, cache가 적절하지 않다면 field data를.. 2015. 5. 6.
english pos tagger english pos tagger 찾기 NLP 역사가 오래된 만큼, 여러 tagger 들이 존재한다. http://aclweb.org/aclwiki/index.php?title=POS_Tagging_(State_of_the_art) 여기에 잘 정리되어 있다.몇멏 tagger에 대해 테스트 해 볼 예정이다. 2015. 4. 21.
git tag 내가 기록하고 싶은 내용은 git에서 tag 리스트 확인, tag 삭제, tag 원격 삭제이다. 일단... - tag 리스트 확인$ git tag -l - tag 삭제$ git tag -d tag명 - tag 원격 삭제$ git push origin :refs/tags/tag명 끝. 2015. 3. 31.

티스토리툴바