티스토리

개돌프로그래밍

검색하기

블로그 홈

개돌프로그래밍

dogrushdev.tistory.com/m

개돌맨 님의 블로그입니다.

구독자: 10

방명록 방문하기

주요 글 목록

(솔라) 7 - 검색(Retrieve) ## 목차 ## 1. 검색 방법 2. 검색 옵션 ## 1. 검색 방법 ## 아래의 데이터를 색인했다 가정하고 Java solrj(Solr Client API)를 사용해서 검색을 해보자. id,phone_no,location,first_name,last_name 001,9848022337,Hyderabad,Rajiv,Reddy 002,9848022338,Kolkata,Siddarth,Battacharya 003,9848022339,Delhi,Rajesh,Khanna 프로젝트에 Java solrj를 import했다고 가정한다. import java.io.IOException; import org.apache.Solr.client.Solrj.SolrClient; import org.apache.Solr.cli.. 공감수 0 댓글수 0 2020. 5. 16.
(솔라) 6 - 데이터 색인(Indexing) ## 목차 ## 1. 인덱싱(색인)이란? 2. 인덱싱 방법 3. post를 통한 색인 4. 솔라 웹 인터페이스를 통한 색인 5. 문서 내용 수정 6. 문서 삭제 ## 1. 인덱싱(색인)이란? ## 검색을 할 수 있도록 솔라에 문서를 등록하는 것 문서를 불러와 파싱(parsing)하고 저장한다. 인덱싱은 문서 검색 속도를 매우 높일 수 있는 방법이다. 검색 키워드를 key값으로 받아들여 인덱싱 된 문서를 돌려준다. 인덱싱은 문서를 추가, 삭제, 생성하는 것이다. ## 2. 인덱싱 방법 ## 솔라는 csv, xml, json 형식의 문서를 인덱싱 할 수 있다. 인덱싱 방법 솔라 웹 인터페이스(solr web interface) 클라이언트 API(Java, Ruby, Python 등) post 툴(명령어) #.. 공감수 0 댓글수 0 2020. 5. 16.
(솔라) 5 - 코어(core) ## 목차 ## 1.코어란? 2.코어 생성 3.코어 삭제 ## 1. 코어란? ## 코어는 실행중인 솔라에서 하나의 인덱스를 가리킨다. 서버가 stand-alone 환경이라면 코어와 인덱스는 1:1로 매칭된다. 솔라가 클라우드 환경에서 실행중이면 하나의 인덱스(컬렉션)이 여러 서버로 나누어진다(샤딩- sharding). 다른말로 표현하면 하나의 컬렉션이 여러 분산서버에 걸쳐 여러개의 코어로 인덱스 되었다고 할 수 있다. 또한 데이터 유실을 방지하기 위해 하나의 코어를 여러개의 복제본(레플리카 - replica)으로 여러번 저장한다. 위 그림은 하나의 인덱스 컬렉션이 두 대의 분산서버에 나누어 저장된 모습을 나타낸다. 하나의 컬렉션을 반으로 쪼개어 shard1과 shard2로 나누었다. 각각의 샤드는 한 대.. 공감수 0 댓글수 0 2020. 5. 16.
(솔라) 4 - 솔라 아키텍처 및 용어정리(Architecture) ## 목차 ## 1. 솔라 아키텍처 2. 용어(Terminology) 3. 솔라 클라우드 용어 4. 솔라 설정파일 ## 1. 솔라 아키텍처(Architecture) ## 1. Request Handler 사용자가 보내는 요청은 모두 Request Handler에 의해 처리된다. '검색(query)', '인덱스 수정(update)' 각각을 위한 RequestHandler가 존재한다. REST API를 통해 solr에 요청을 보낼 때 URL 뒷부분이 s?query 혹은 s?update 인지에 따라 요청이 구분되고 각각의 핸들러에 요청이 전달된다. 2. Search Component 검색엔진이 제공하는 전체 기능을 조금 세부적으로 나누면 검색, 오타교정, 분류 등과 같이 나눌 수 있다. 각각의 일을 하는 모듈.. 공감수 0 댓글수 0 2020. 5. 16.
(솔라) 3 - 검색엔진(Search Engine) 개요 ## 목차 ## 1. 검색엔진이란? 2. 검색엔진의 3대 기본 구성요소 3. 검색엔진 동작 방식 ## 1. 검색엔진이란? ## 검색엔진은 매우 방대한 웹페이지, 뉴스그룹, 이미지등의 자료들을 검색할 수 있도록 해준다. 사용자가 질의어 혹은 질의문을 검색엔진에 던지면 검색엔진이 그와 연관된 자료 및 링크들을 되돌려준다. ## 2. 검색엔진의 3대 기본 구성요소 ## 1. 웹 크롤러(Web Crawler) web spider, bot 등으로도 부른다. 웹을 돌아다니며 정보를 모은다. 2. 데이터베이스(Database) 웹 크롤러가 모은 데이터를 저장하는 장소 3. 검색 인터페이스(Search Interfaces) 유저와 데이터베이스 사이에서 동작하며 사용자의 검색어와 연관된 자료를 되돌려주는 로직을 처리하는.. 공감수 0 댓글수 0 2020. 5. 16.
(솔라) 2 - 솔라 설치 및 실행 ## 목차 ## 1. 우분투 리눅스에 솔라 설치 2. 솔라 실행 ## 우분투 리눅스에 솔라 설치 ## 솔라는 Java로 작성된 오픈소스이므로 Java가 설치되어 있어야한다. sudo apt-get install openjdk-8-jdk 자바 설치 후 아래 명령어 입력 후 버전정보가 출력되면 OK java -version 설치할 디렉토리로 이동하여 아래 명령어를 통해 솔라 압축파일 다운로드 및 압축풀기 wget https://archive.apache.org/dist/lucene/solr/6.5.1/solr-6.5.1.tgz tar -zxvf solr-6.5.1.tgz ## 솔라 실행 ## 압축을 푼 후 solr-6.5.1 폴더로 이동하면 하위폴더에 bin이 있다. 아래 명령어 입력하여 solr 버전 확인.. 공감수 0 댓글수 0 2020. 5. 16.
(솔라) 1 - 솔라(Solr) 개요 ## 목차 ## 1. 솔라(solr)란? 2. 솔라 특징 ## 솔라(solr)란? ## 솔라는 텍스트 검색 기능을 제공하는 오픈소스 라이브러리이다. 아파치(apache) 재단에서 만든 오픈소스 프로젝트 검색 애플리케이션을 만드는데 사용 빠르고(fast) 확장가능(scalable) 데이터 분산처리 플랫폼인 하둡(Hadoop) 위에서도 동작 가능 검색기능에 더해 NoSQL 데이터베이스처럼 저장 목적으로 사용 가능 ## 솔라 특징 ## Restful APIs HTTP 호출을 사용한 검색을 지원 결과값은 JSON, XML, CSV 포맷을 지원 Full Text Search 단어, 문장 등의 텍스트 검색 오타교정, 검색어 자동완성, 와일드카드 질의 기능을 제공 Flexible and Extensible Java .. 공감수 0 댓글수 0 2020. 5. 16.

문의안내

티스토리
로그인
고객센터

티스토리는 카카오에서 사랑을 담아 만듭니다.