Datasets documentation
Interface de Linha de Comando (CLI)
Comece agora
Tutoriais
Visão geralCarregue um conjunto de dados do HubConheça seu conjunto de dadosPré-processarCriar um conjunto de dadosCompartilhar um conjunto de dados no Hub
Guias de como fazer
Visão geral
Uso geral
CarregarProcessoStreamUse com PyTorchUsar com TensorFlowUse com NumPyUsar com JAXUse com PandasUse com PolarsUse com PyArrowUsar com SparkGerenciamento de cacheArmazenamento em nuvemÍndice de pesquisaCLISolução de problemas
Áudio
Visão
Carregar dados de imagemProcessar dados de imagemCrie um conjunto de dados de imagensEstimativa de profundidadeClassificação de imagensSegmentação semânticaDetecção de objetosCarregar dados de vídeoCriar um conjunto de dados de vídeoCarregar dados do documentoCriar um conjunto de dados de documentosCriar um conjunto de dados de imagens médicas
3D
Texto
Tabular
Séries temporais
Avaliação de agentes
Repositório de dataset
Guias conceituais
Datasets 🤝 ArrowO cacheDataset ou IterableDatasetRecursos do conjunto de dadosConstruir e carregarMapeamento em lote
Referência
Interface de Linha de Comando (CLI)
🤗 O Datasets oferece uma interface de linha de comando (CLI) com comandos de shell úteis para interagir com seu conjunto de dados.
Você pode verificar os comandos disponíveis:
>>> datasets-cli --help
usage: datasets-cli <command> [<args>]
positional arguments:
{env,test,delete_from_hub}
datasets-cli command helpers
env Print relevant system environment info.
test Test dataset loading.
delete_from_hub Delete dataset config from the Hub
optional arguments:
-h, --help show this help message and exitExcluir do Hub
Excluir uma configuração de dataset de um dataset compatível no Hub.
>>> datasets-cli delete_from_hub --help
usage: datasets-cli <command> [<args>] delete_from_hub [-h] [--token TOKEN] [--revision REVISION] dataset_id config_name
positional arguments:
dataset_id source dataset ID, e.g. USERNAME/DATASET_NAME or ORGANIZATION/DATASET_NAME
config_name config name to delete
optional arguments:
-h, --help show this help message and exit
--token TOKEN access token to the Hugging Face Hub
--revision REVISION source revisionPor exemplo:
>>> datasets-cli delete_from_hub USERNAME/DATASET_NAME CONFIG_NAMEUpdate on GitHubNão se esqueça de que você precisa fazer login na sua conta do Hugging Face primeiro:
>>> hf auth login