Datastore, для объединения данных, считанных из нескольких базовых хранилищ данных
Использование CombinedDatastore
объект для объединения данных, считанных из нескольких других хранилищ данных.
A CombinedDatastore
поддерживает четность между базовыми хранилищами данных, так что данные считываются из соответствующих частей базовых хранилищ данных. Сброс CombinedDatastore
сбрасывает все базовые хранилища данных.
Можно создать CombinedDatastore
использование объекта combine
функция. Для примера, dsnew = combine(ds1,ds2)
создает хранилище datastore, которое объединяет считанные данные из хранилищ данных ds1
и ds2
.
combine | Объедините данные из нескольких хранилищ данных |
hasdata | Определите, доступны ли данные для чтения |
preview | Предварительный просмотр подмножества данных в datastore |
read | Чтение данных в datastore |
readall | Чтение всех данных в datastore |
writeall | Запись datastore в файлы |
reset | Сбросьте datastore в начальное состояние |
transform | Преобразуйте datastore |
numpartitions | Количество разделов datastore |
partition | Раздел datastore |
shuffle | Перетащите все данные в datastore |
isPartitionable | Определите, является ли datastore разделяемым |
isShuffleable | Определите, является ли datastore shuffleable |