NodeJs API의 성능 향상

Question

NodeJS와 express를 사용하여 API를 빌드했는데 모두 정상적으로 작동했지만 최근에는 호출 수가 증가하여 성능/병목 현상이 발생하기 시작했습니다. 서버는 때때로 메모리/CPU 사용으로 인해 중단 될 수 있습니다.

시나리오 :

1. 내 API를 엔드 포인트에 cronjob에 발사가 매 시간마다.
2. 모든 항목 (약 800-900)을 가져 오는 DB 호출 (MongoDB)
3. 모든 항목을 반복하고 세부 정보 또는 자체 DB가 포함 된 타사 API를 호출하고 결과를 반환합니다.
4. 그때 내 DB에 저장된 이전 결과에 결과를 일치
5. 조건문은 내가에 시간 제한을 추가하려고했습니다

DB를 다음으로 이메일을 보내 업데이트됩니다 후 일치하면 루프마다 각 호출에 몇 초가 걸리므로이 문제는 사이트가 수천 개의 항목으로 확장되는 것입니다. 마지막 항목이 실행될 때까지 cronjob이 다시 실행됩니다.

위의 시나리오를 최적화하고 향후 병목 현상을 방지하고 서버에서 메모리/CPU 사용을 극대화 할 수있는 방법에 대한 조언을 찾고 있습니다.

Answer 1

현재 개별 항목에 대한 프로세스를 수행하고 있으며 일괄 처리해야하거나 매시간 모든 항목을 처리하는 대신 외부 변경 사항을 기반으로 업데이트를 트리거해야합니다.