2017-11-11 5 views
0

Apache Solr을 사용하는 Open Semantic을 사용하여 5 백만 개가 넘는 파일에 대한 색인을 생성했습니다.Open Semantic/Apache Solr 색인 생성 제한

아직 색인 생성 중입니다. 색인 생성 중에 오류 메시지가 표시되지 않지만 색인 된 파일 수에 따라 파일 수가 증가하지 않으며 새로 색인 된 문서를 검색 할 수 없습니다.

색인을 생성 할 수있는 문서 수에는 제한이 있습니까? 오류 메시지를 찾을 수있는 로그가 있습니까?

도움 주셔서 감사합니다. 요안

답변

1

독립형 모드를 사용하는 경우 각 솔라 샤드 (또는 코어)는 2B 워드 프로세서를 보유 할 수 있으므로 문서 수에 관해서는 꽤 확신합니다.

로그는 $ SOLR_HOME/server/logs/solr.log에서 볼 수 있습니다. 롤링 로그 파일이 추가로 표시되어야합니다.

도구가 끝날 때까지 커밋하지 않을 수도 있고, 커밋이 수행되지 않은 경우 (명시 적 또는 자동 커밋 설정) 문서가 아직 보이지 않습니다.

+0

답장을 보내 주셔서 감사합니다. Persimmonium! 그것은 자주 커밋하는 데 사용되었습니다 (인덱스 된 문서의 수가 증가하는 것을 볼 수 있습니다). 로그를 확인했는데 오류가있는 것은 "2017-11-11T14 : 15 : 23.109 + 0000 : 844039.439 : [GC (할당 실패)] 2017-11-11T14 : 15 : 23.109 + 0000 : 844039.439 : [Par $ "에덴 공간 599232K, 100 % 사용"에 대한 언급도 있습니다. 이것이 무슨 뜻인지 아는가? 나는 임시 파일이 꽉 찼는 지 궁금 하네. 디스크에 많은 공간이 있습니다 (바이트 및 inode 모두) – yoann

+0

그냥 오류가 아닌 jvm gc입니다. – Persimmonium

+0

답장을 보내 주셔서 감사합니다 .E2 인스턴스에 설치했습니다 .EBS의 스냅 샷을 만들었습니다. 그 중 하나를 마운트 해제했습니다. 다시 마운트 한 후 인덱스에 새 파일을 추가 할 수있었습니다. 무슨 일이 일어 났는지는 모르지만 지금은 해결되었습니다. 도움을 위해 고맙습니다. – yoann