Datasets documentation
개요
시작하기
튜토리얼
사용 가이드
개요
일반적인 사용법
로드프로세스스트림PyTorch와 함께 사용TensorFlow와 함께 사용NumPy와 함께 사용JAX와 함께 사용Pandas와 함께 사용Polars와 함께 사용PyArrow와 함께 사용Spark와 함께 사용캐시 관리클라우드 스토리지검색 인덱스CLI문제 해결
오디오
비전
이미지 데이터 로드이미지 데이터 처리이미지 데이터셋 만들기깊이 추정이미지 분류의미 분할객체 감지비디오 데이터 로드비디오 데이터셋 만들기문서 데이터 로드문서 데이터셋 만들기의료 영상 데이터셋 만들기
3D
텍스트
테이블 데이터
시계열
에이전트 평가
데이터셋 저장소
개념 가이드
참고
개요
how-to 가이드는 🤗 Datasets가 제공하는 모든 도구와 사용법에 대해 보다 포괄적인 개요를 제공합니다. 이를 통해 학습을 위해 데이터셋의 구조나 내용을 조작해야 할 수 있는 더 복잡한 실세계 데이터셋을 다루는 데 도움이 됩니다.
가이드는 🤗 Datasets의 기본 사항을 잘 알고 익숙하다고 가정합니다. 신규 사용자는 먼저 튜토리얼을 확인해 보시기 바랍니다.
더 자세히 알고 싶으신가요? Hugging Face 코스의 5장을 확인해 보세요!
가이드는 여섯 개의 섹션으로 구성됩니다:
- 일반 사용: 일반적인 데이터셋 로딩 및 처리를 위한 함수입니다. 이 섹션에 표시된 함수는 모든 데이터셋 모달리티에 적용됩니다.
- 오디오: 오디오 데이터셋을 로드, 처리 및 공유하는 방법.
- Vision: 이미지 및 비디오 데이터셋을 로드, 처리 및 공유하는 방법.
- 텍스트: 텍스트 데이터셋을 로드, 처리 및 공유하는 방법.
- Tabular: 표 형식 데이터셋을 로드, 처리 및 공유하는 방법.
- 데이터셋 저장소: Hub에 데이터셋을 공유하고 업로드하는 방법.
🤗 Datasets에 대한 질문이 있으시면 포럼에 참여하여 커뮤니티에 질문해 주세요.
Update on GitHub