프로그래밍/검색
-
리눅스에서 elasticsearch 1.2.1 설치하기프로그래밍/검색 2014. 6. 29. 01:19
리눅스에서 elasticsearch 1.2.1 설치하기 1. elasticsearch 다운로드 http://www.elasticsearch.org/overview/elkdownloads/ 링크주소를 복사해서 wget으로 받는다 wget https://download.elasticsearch.org/elasticsearch/elasticsearch/elasticsearch-1.2.1.tar.gz 다운로드 받은 파일 압축 푼다 tar -xvf elasticsearch-1.2.1.tar.gz 현재 다운로드되는 버전은 1.2.1이다. 설치 매뉴얼을 확인한다. http://www.elasticsearch.org/guide/en/elasticsearch/guide/current/_installing_elastics..
-
리눅스(CentOS) 에서 nutch & solr 사용 예시프로그래밍/검색 2014. 5. 6. 23:01
이번 포스팅에서는 nutch 위키에 있는 예시를 따라가면서 간단하게 웹 크롤링을 해 보겠다. 참조: http://wiki.apache.org/nutch/NutchTutorial#A3.3._Using_the_crawl_script 1. apache-nutch-1.8/runtime/local/conf/nutch-site.xml을 아래와 같이 수정하여 crawling agent에 My Nutch Spider라는 이름을 설정했다. http.agent.name My Nutch Spider 2. apache-nutch-1.8/runtime/local 디렉토리에서 mkdir -p urls 로 urls 하위 디렉토리를 만든다. 3. urls 폴더 아래에 seed.txt 파일을 생성하고 http://nutch.apach..