Mongodb DB - Json과 호환되지 않는 데이터로 문서 찾기

Question

나는 MongodDB 컬렉션을 가지고있다. 3M 문서. 그러나 하나 이상의 문서에 JSON 호환 필드가 없으므로이를 JSON으로 내보낼 수 없습니다. docs는 BSON으로 저장되기 때문에 MongodDB에서는 괜찮습니다. 그러나 유스 케이스에서는 작동하지 않습니다.

내 문서에 JSON과 호환되지 않는 데이터가 포함될 것으로 예상되지 않았습니다. JSON 정보가없는 문서는 어떻게 찾을 수 있습니까?

Answer 1

당신과 함께 스크립트를 실행할 수 있습니다 : 당신은 mongoexport 도구를 찾고 될 수

Collection.forEach(function(item) { 
 
    try { 
 
    JSON.parse(item); 
 
    } 
 
    catch(err) { 
 
    db.NoJsonObject.save(item);} 
 
    } 
 
});

Answer 2

.

데이터를 "수정"하시겠습니까? 아니면 이전 JSON 판독기로 읽을 수있는 방식으로 데이터를 나타내시겠습니까?

큰 JSON 파일을 --jsonArray 스위치를 사용하여 출력으로 만들 수는 있지만 매우주의해야합니다. 당신의 독자는 내부 표현으로 당신에게 그것을주기 전에 모든 300 만 개의 문서를 읽으려고 할 것입니다.

스위치가 없으면 한 줄에 하나의 json 문서 만 생기므로이 작업을 수행하여 필요한 메모리를 줄일 수 있습니다. JSON을 가져올 수있는 일에 의해 출력 엄격한 JSON 표현 소모품에 파일을 것이다

while (read_line){ 
    load_json(line) 
    //do something with memory 
    free(json) 
} 

https://docs.mongodb.com/manual/reference/program/mongoexport/

mongoexport --db test --collection traffic --out traffic.json 

적절한 플래그.