나는 express와 socket.io로 애플 리케이션에서 일하고있다. 이 앱에서 개발하기 시작했을 때 클러스터에 대한 정보는 많지 않습니다. 클러스터 구현을 시도하고 있지만이 문제가 있습니다. 나는 모든 클러스터에서 액세스 할 수있는 전역 개체로 해결할 수있는 가장 큰 문제라고 생각합니다. 그래서, 질문은 두 가지가 있습니다 : 방법 내가 어떤 클러스터에
, 각각의 메모리 2G 및 16 개 코어를 얼마나 메모리 예외 스파크 중 조정에, 나는 추가하지 않은 정보 파일이 ./bin/spark-submit --class myapp.Main --master spark://Name:7077 --conf spark.shuffle.memoryFraction=0 --executor-memory 2G --deploy-mod
내 작업이 모두 완료되었지만 내 응용 프로그램이 완료되지 않았 음을 알리는 스파크 응용 프로그램 (90Mo 입력)을 실행합니다. 마지막 메시지입니다 (이유는 무엇입니까?) SC가 성공적으로 중지했다고 16/09/13 2시 17분 31초 정보 DAGScheduler를 얻을 : 작업 (15) 완료 : slowlyChangingDimension.java:244에
저는 Akk 클러스터링을 사용하여 특수 분산 스토리지 시스템을 작성 중이며 액터간에 큰 페이로드 (> 1MB 바이트 배열)를 보내려합니다. 이 기능을 사용하려면 akka.remote.netty.tcp.maximum-frame-size을 편집해야한다는 것을 알게되었습니다. 내 질문은 :이 점을 고려해야 할 다른 성능 관련 사항이 있습니까? 예를 들어, net
동일한 클러스터의 다른 인스턴스에서 실행되는 JCR 노드에 콘텐츠를 추가 할 때 나는 실용적인 해결책을 찾기 위해 애를 먹고 있습니다. here "여러 클러스터 노드가 동일한 노드에 쓸 때 해당 노드를 먼저 잠 가야합니다"라고 설명했습니다. 내가했던 ,하지만 난 여전히 아래와 같은 오래된 항목 예외를 얻을 : javax.jcr.InvalidItemState
우리는 생산에 까다로운 문제를 발견했습니다. cometd.unsubscribe(subscription);
하지만 실제로 탈퇴가 발생하지 않습니다 : 우리가 다음 코드를 실행 우리의 프론트 엔드에 . nginx, zookepper, 2 jetty 노드 : 우리는 다음과 같은 구성을 가지고있다. 이해하신대로 cometd를 웹 소켓 라이브러리로 사용합니다.
https://github.com/awslabs/emr-bootstrap-actions/tree/master/hama 스크립트를 사용하여 Amazon Elastic MapReduce에서 Apache Hama를 실행하려고합니다. 그러나 하나의 마스터 노드와 두 개의 슬레이브 노드로 시도 할 때 BSP 코드의 peer.getNumPeers()은 오직 하나의 피