Datasets documentation
Наборы данных
Наборы данных
🤗 Datasets — это библиотека для удобного доступа к наборам данных ИИ и их обмена для задач обработки аудио, компьютерного зрения и обработки естественного языка (NLP).
Загрузите набор данных одной строкой кода и используйте мощные методы обработки и потоковой передачи данных, чтобы быстро подготовить набор для обучения модели глубокого обучения. Благодаря формату Apache Arrow вы можете обрабатывать большие наборы данных с чтением без копирования (zero-copy) без ограничений по памяти, что обеспечивает оптимальную скорость и эффективность. Мы также предлагаем глубокую интеграцию с Hugging Face Hub, что позволяет легко загружать и делиться наборами данных с более широким сообществом машинного обучения.
Найдите свой датасет сегодня на Hugging Face Hub и изучите его содержимое в подробностях с помощью живого просмотрщика.
Освойте основы и познакомьтесь с загрузкой, доступом и обработкой набора данных. Начните с этого раздела, если вы впервые используете 🤗 Datasets!
Практические руководства, которые помогут вам достичь конкретной цели. Ознакомьтесь с этими руководствами, чтобы узнать, как использовать 🤗 Datasets для решения реальных задач.
Высокоуровневые объяснения для формирования более глубокого понимания важных тем, таких как базовый формат данных, кэш и способы генерации наборов данных.
Технические описания того, как работают классы и методы 🤗 Datasets.