팬더 데이터 프레임을 HDF5 데이터 세트에 쓰는 방법

Question

나는 각 그룹 내에 여러 그룹과 데이터 세트가있는 중첩 된 hdf5 파일로 팬더 데이터 프레임의 데이터를 쓰려고합니다. 앞으로도 계속 성장할 단일 파일로 유지하고 싶습니다. 나는 중첩 된 구조가 생성

import h5py 
import numpy as np 
import pandas as pd 

file = h5py.File('database.h5','w') 

d = {'one' : pd.Series([1., 2., 3.], index=['a', 'b', 'c']), 
    'two' : pd.Series([1., 2., 3., 4.], index=['a', 'b', 'c', 'd'])} 

df = pd.DataFrame(d) 

groups = ['A','B','C']   

for m in groups: 

    group = file.create_group(m) 
    dataset = ['1','2','3'] 

    for n in dataset: 

     data = df 
     ds = group.create_dataset(m + n, data.shape) 
     print ("Dataset dataspace is", ds.shape) 
     print ("Dataset Numpy datatype is", ds.dtype) 
     print ("Dataset name is", ds.name) 
     print ("Dataset is a member of the group", ds.parent) 
     print ("Dataset was created in the file", ds.file) 

     print ("Writing data...") 
     ds[...] = data   

     print ("Reading data back...") 
     data_read = ds[...] 

     print ("Printing data...") 
     print (data_read) 

file.close(

)

이 방법을 달성하고 싶은 무엇의 구조를 보여줍니다 다음 코드를 사용하여 이동을 했어하지만 인덱스와 열을 잃는다. 나는이 사람이 어떤 빛을하시기 바랍니다 있나이 오류

AttributeError: 'Dataset' object has no attribute 'split'

를 얻을 수는

df.to_hdf('database.h5', ds, table=True, mode='a') 

을 시도했지만 작동하지 않았다.

key : string

identifier for the group in the store

그래서이 시도 : 많은 감사

Answer 1

df.to_hdf()가 key 매개 변수 (두 번째 매개 변수)와 같은 문자열이 예상

df.to_hdf('database.h5', ds.name, table=True, mode='a') 

ds.name 당신에게 문자열 (키 이름)을 반환해야하는 위치 :

In [26]: ds.name 
Out[26]: '/A1' 

Answer 2

나는 pandas \ pytables 및 h5py 대신 HDFStore 클래스가 있습니다. 그래서 (h5py 대신에 FO pyatbles 그룹 대신 셋?)하기

import numpy as np 
import pandas as pd 

db = pd.HDFStore('Database.h5') 

index = pd.date_range('1/1/2000', periods=8) 

df = pd.DataFrame(np.random.randn(8, 3), index=index, columns=['Col1', 'Col2', 'Col3']) 

groups = ['A','B','C']  

i = 1  

for m in groups: 

    subgroups = ['d','e','f'] 

    for n in subgroups: 

     db.put(m + '/' + n, df, format = 'table', data_columns = True) 

그것은 작동 9기를 시도 C/F까지 A/D로부터 생성. 열과 인덱스가 보존되며 필요한 데이터 프레임 작업을 수행 할 수 있습니다. 아직이

db['A/d'].Col1[4:]