C#에서 gzipped 바이트 배열 연결

Question

DB에 저장된 데이터를 gzipped했습니다. 50 개의 개별 gzip 데이터를 압축 해제 할 수있는 하나의 gzip 출력으로 연결하는 방법이 있습니까? 결과는 50 개 항목의 압축을 풀고 연결 한 다음 gzipping하는 것과 동일해야합니다.

나는 압축 해제 단계를 피하고 싶습니다. 전체 바이트 배열을 gzip하는 대신 gzipped 데이터를 병합하는 것이 성능상의 이점이 있습니까?

Answer 1

네, gzip 스트림을 연결할 수 있습니다. 압축 해제시 압축되지 않은 데이터를 연결 한 다음 gzip을 한꺼번에 gzip으로 압축 한 것과 같은 결과를 얻을 수 있습니다. 특히 :

gzip a 
gzip b 
cat a.gz b.gz > c.gz 
gunzip c.gz 

같은 c로 당신에게 줄 것이다 :

cat a b > c 

압축하여 50 개 각, 예를 들어, 작은 특히, 한 번에 모든 일을 Gzip으로 압축에 비해 떨어집니다 그러나

K 바이트의 몇 가지 10 미만. 압축 된 결과는 항상 달라지며 조각의 크기에 따라 조금씩 더 커집니다.

GZIPStream에 대한 다른 답변의 댓글에주의해야합니다. 대신 DotNetZip을 사용하는 것이 좋습니다.

Answer 2

zip 형식의 파일을 연결하는 것만으로 파일 당 특정 내용에 대해 압축 알고리즘이 실행되기 때문에 비참한 것으로 판단됩니다. 수동으로 압축을 풀고 연결 한 다음 다시 압축해야한다고 생각합니다.

Answer 3

Gzip으로 버그는 또한 각 GZIP이 생성 된 것을 기계 고려도 .NET 4.5

에서 다림질 된 GZip으로 압축 모두가 ...있는 moreso 자체가 여러 GZIP의 회원을 보유 gzip으로 파일을 압축 해제, 버그 버그가 없습니다 on, 즉 BGZF "Blocked GNU Zip Format"입니까? 당면 문제를 복잡하게 만든다.

결과 gzip 파일은 압축되지 않은 개별 파일을 모두 연결 한 경우 (gzip은 매우 좋은 압축 알고리즘 집합이 아님)보다 클 수 있습니다.

너무 늦지 않은 경우 DotNetZip을 대신 사용하는 것이 좋습니다.

GZipStream은 실제로 여러 파일을 처리 할 수있는 기능이 없지만 System.IO.BinaryWriter 및 System.IO.BinaryReader를 사용하면 완전히 제어 할 수 있습니다. DotNetZip이 작동합니다! 그것은 여러 파일을 처리하도록 설계되었습니다.

P. GZipStream은 .Net 4를 사용하여 최대 8GB의 파일 크기에서 작동하지만 이전 버전에는 한도가 있습니다 (예 : GZipStream은 .Net 3.5에서 최대 4GB의 파일 크기를 지원합니다.