jaso extends j2ee :: 결국은 검색엔진까지...

어쩌다 보니 이제는 검색엔진까지 분석하게 되었다. 불과 몇 개월 전까지만해도 Srping, OR Mapping, 개발방법론 등을 보고 있었는데... 역시 사람의 미래는 예측불가...

어쨋든 어제부터 드뎌 lucene에 대한 스터디를 개인적으로 시작하게 되었다. lucene에 대해 얼마 보지 않았지만 너무 매력적인 구성이다. 이거 잘만 활용하면 여러군데에서 사용가능할 것 같은 생각이 든다. 지금 고민하는 분야는 RDBMS를 대체할 만한 데이터관리시스템이다.
다음은 간단하게 lucene로 자바 소스코드를 검색하는 간단한 프로그램을 만든 후 내가 가지고 있는 모든 eclipse 프로젝트의 자바 코드에 대해 index를 만든 후 Luke를 이용해서 검색한 결과이다. Input 으로 시작하는 interface를 implements한 모든 클래스를 조회하는 질의에 대한 결과이다.

언뜻보면 RDBMS의 조회 결과와 비슷하다.
지금 우리가 만드는 많은 애플리케이션은 굳이 RDBMS가 필요 없는 경우도 많다. 자료를 저장한 다음 조회하는 솔루션 중 가장 익숙한 것이 RDBMS이기 때문에 RDBMS를 사용하는 것이다.
lucene를 이용하여 적절한 논리적 데이터모델을 구성하면 RDBMS에서 처리할 수 없는 많은 부분을 처리할 수 있지 않을까 생각해본다. 특히 블로그나, 게시판과 같은 텍스트 위주에 데이터를 주로 사용한 경우에는 잘 사용할 수 있지 않을까 생각한다. 이런 방식으로 Google은 BigTable을 만들지 않았을까 상상해본다.
lucene 분석이 끝나면 한번 도전해볼까... lucene를 이용한 DBMS...

* 자바소스 검색관련 소스는 여기 참고 :
http://www.onjava.com/pub/a/onjava/2006/01/18/using-lucene-to-search-java-source.html?page=1
(lucene 구 버전으로 작성되어 있어 일부 소스 변경 필요, 그리고 내부적으로 자바소스 분석을 위해 eclipse의 Parser를 사용하고 있기 때문에 eclipse의 plugin root에 있는 *.jar 파일을 클래스패스에 등록하여 사용)
* 약 4000개 자바코드 index하는데 소요되는 시간은 4분 정도...

크리에이티브 커먼즈 라이센스