Datastore, для объединения данных, считанных из нескольких базовых хранилищ данных
Использование CombinedDatastore объект для объединения данных, считанных из нескольких других хранилищ данных.
A CombinedDatastore поддерживает четность между базовыми хранилищами данных, так что данные считываются из соответствующих частей базовых хранилищ данных. Сброс CombinedDatastore сбрасывает все базовые хранилища данных.
Можно создать CombinedDatastore использование объекта combine функция. Для примера, dsnew = combine(ds1,ds2) создает хранилище datastore, которое объединяет считанные данные из хранилищ данных ds1 и ds2.
combine | Объедините данные из нескольких хранилищ данных |
hasdata | Определите, доступны ли данные для чтения |
preview | Предварительный просмотр подмножества данных в datastore |
read | Чтение данных в datastore |
readall | Чтение всех данных в datastore |
writeall | Запись datastore в файлы |
reset | Сбросьте datastore в начальное состояние |
transform | Преобразуйте datastore |
numpartitions | Количество разделов datastore |
partition | Раздел datastore |
shuffle | Перетащите все данные в datastore |
isPartitionable | Определите, является ли datastore разделяемым |
isShuffleable | Определите, является ли datastore shuffleable |