Java/MySQL/Hibernate 검색/Lucene 환경에서 태그 제안하기

Question

나는 사용자가 전형적인 블로그/마이크로 블로그/포럼 유형의 게시물을 게시 할 수있는 웹 기반 응용 프로그램을 개발 중이고 우리가 가진 한 가지 문제점은 사용자가 자주 콘텐츠에 태그를 지정하지 않습니다. 태그는 여러 가지 이유로 앱에서 매우 중요하므로 사용자를 태깅 동작으로 유도하려고합니다.

우리는 해시 태그를 구현했는데 이것은 약간의 효과가있는 것으로 보이며이를 장려하기 위해 어떤 형태의 게임을 구현할 생각입니다.

위와 더불어 태그 제안 (기본적으로 StackOverflow의 기능)을 구현하려고합니다. 데이터베이스의 기존 태그를 기반으로 태그를 제안하고 일치하는 태그가없는 경우 "푸른 색"태그에 tf-idf 라이브러리 또는 기타 태그를 사용하는 것이 좋습니다.

1. 는 사용자 유형으로 제시 태그의 종류 (즉, 키에를) 할 수있는 성능 관점에서 실현 가능성이 : 제 질문은 두 가지이다? 이것이 StackOverflow가 질문을 게시 할 때 수행하는 방법이며 우리는 이와 비슷한 것을 찾고 있다고 생각합니다. 아니면 사후 처리 (사용자가 이미 콘텐츠를 추가 한 후 태그를 제안한 후)를해야합니다.

2. 줄임표 등을 제공하는 이러한 제안을 제공 할 수있는 도구/라이브러리가 있습니까? 아마도 동의어 일 수도 있습니다. 우리의 데이터는 현재 MySQL에 저장되어 있으며 Hibernate Search를 사용하기 때문에 Lucene 인덱스에도 저장됩니다 (현재 Hibernate 검색을 통해서만 이들과 직접 상호 작용하지는 않지만). 이 데이터를 다른 유형의 데이터 소스에 저장하면 상황에 도움이됩니다. (그들은 모두 한 번에 검색하지 않은하지만) 각 키 스트로크에 대한 검색을 수행

   는

Answer 1

1. 우리의 응용 프로그램은 현재 몇 백만의 클라이언트 설치 기본으로이 작업을 수행, 실제로 가능하다. 아마도 태그 목록을 너무 자주 업데이트하는 것을 방지 할뿐만 아니라 서버의 부하를 줄이기 위해 태그를 찾기 전에 작은 지연 (몇 초 정도)을 제안하는 것이 좋습니다.
2. Hibernate Search (Lucene을 통해)가 필요한 기능을 제공 할 수 있어야합니다. 검색의 핵심은 동의어와 형태소 분석을 적절하게 처리하기 위해 필드에 적절한 분석기를 설정하는 것입니다 (예 : Lucene의 EnglishAnalyzer : "the"및 "and"와 같은 중지 단어를 제거하고 Porter 스 트리머를 사용하여 형태소 분석 기능을 제공합니다 (예 : SynonymFilter과 동의어로 초기화 됨).