bzip2

1열

2답변

매우 큰 bzip2 압축 파일에 들어있는 데이터의 압축을 풀고 구문 분석 할 스크립트가 있습니다. 시간이 걸릴 수 있으므로 진행 상황을 모니터링 할 수있는 방법이 필요합니다. os.path.getsize()으로 파일 크기를 얻을 수 있지만 bz2.BZ2File.tell()은 압축되지 않은 데이터 내의 위치를 반환합니다. 진행 상황을 모니터링 할 수 있도

9열

1답변

Java 암호 해독 코드를 Golang으로 마이그레이션

지난 며칠간 Java 코드를 Golang으로 마이그레이션하는 데 어려움을 겪고 있습니다. Golang에서 final Key k = new SecretKeySpec(keyString.getBytes(), "AES"); Cipher c = Cipher.getInstance("AES"); c.init(Cipher.DECRYPT_MODE, k); final

1열

1답변

두 concatentated bz2 파일과 두 개의 연결된 파일로 만든 하나의 bz2 파일의 차이점은 무엇입니까? 나는 두 개의 텍스트 파일, <em>하나</em> 및 <em>이</em>이있는 경우

는 차이 내용은 다음과 같습니다 BZ2 한 두 -c> out.bz2 ... 그리고 ... cat one two | bzip2 -c> out.bz2 ? 특히 pbzip2을 사용하여 bz2 파일을 생성하고이를 HDFS에 저장 한 다음 돼지에서 읽는 중입니다. MAPREDUCE-477을 치고 있습니다. hadoop 클러스터를 버전 0.20에서 업그레이드 할 수

2열

2답변

BZip2 파일을 하둡으로 읽음

여러 매퍼를 사용하여 하나의 bzip2 파일의 여러 부분을 하둡 병렬로 읽고 성능을 향상시킬 수 있다고 들었습니다. 하지만 검색 후 관련 샘플을 찾을 수 없습니다. 누구나 나를 관련 코드 스 니펫으로 안내 할 수 있으면 고맙겠습니다. 감사. BTW : gzip은 동일한 기능을 가지고 있습니다 (여러 개의 매퍼 프로세스가 하나의 gzip 파일의 다른 부분을

3열

3답변

병렬의 bzip2 압축

내가는 하나의tar.bz2 아카이브에 다수에게 로그 파일을 압축하는 자바 Apache Commons Compress을 사용하고 있습니다. 그러나 압축하는 데 실제로 오래 걸립니다 (12 시간 이상). 왜냐하면 하루에 약 20GB의 파일을 압축하기 때문입니다. 이 라이브러리는 파일을 모노 스레드로 압축하므로이 작업을 수행 할 수있는 방법이 있는지 알고 싶습니

3열

1답변

Python 설치를 위해 bzip2 설치 원본을 수동으로 전달하는 방법은 무엇입니까?

나는 파이썬 & bzip2에 관한 여러 가지 StackOverflow 질문을 해왔다. 이것들은 내가 지금 분명히하는 상태로 나를 데려 오는 데 매우 도움이되었습니다. 여기에 지금까지 한 일이고 문제는 나는 데 : 내가 루트 액세스 권한 및 libbz2-DEV (엘)를 설치할 수 없습니다 는/usr/빈 /의 bzip2 버전하지 않습니다 1.0.3 는/usr/

3열

1답변

bz2 압축 이진 파일을 numpy 배열로 가져 오기

데이터 배열이 포함 된 bz2 압축 바이너리 (빅 엔디안) 파일이 있습니다. 외부 도구로 압축을 해제 한 후 NumPy와에있는 파일을 읽는 것은 작동 : 그러나 import numpy as np dim = 3 rows = 1000 cols = 2000 mydata = np.fromfile('myfile.bin').reshape(dim,rows,col

2열

1답변

열 수 없습니다 BZ2 압축 나는 BZ2 압축기 개체의 파일 BZ2-압축하는 일부 코드를 작성했습니다 정상 아카이브 매니저

로 파일 (파이썬) : def compressFile(file_name, new_name): comp = bz2.BZ2Compressor() comFile = open(new_name, "wb") oldFile = open(file_name, "rb") while True: data = oldFile.read

1열

1답변

파이썬 bz2 - 텍스트 대 대화 형 콘솔 (데이터 스트림)

이전에 bz2를 사용하여 입력을 압축 해제하려고했습니다. 내가 디코드 싶었 입력은 압축 된 형식으로 이미, 그래서 대화 형 파이썬 콘솔에 입력 형식을 결정 : >>> import bz2 >>> bz2.decompress(input) 이이 오류없이 잘 작동했다. 나는 HTML 파일에서 텍스트를 추출하려고 할 때 그러나, 나는 다른 결과를 가지고 다음 압

0열

1답변

유닉스에서의 bz2 파일 비교

나는 유닉스 서버에서 많은 데이터베이스를 관리하고 mysqldump을 사용하여 이들 데이터베이스의 매일 백업을 수행한다. 이 데이터베이스 중 일부 (20 + GB)가 매우 큽니다. 압축 된 bz2 파일을 얻으려면 보통 bzip2을 사용하여 백업 .sql 파일을 압축합니다. 백업 프로세스의 일부로 새 백업 파일의 크기가 이전 백업 파일의 크기보다 크거나 같은