쉬엄쉬엄블로그

이 색깔은 주석이라 무시하셔도 됩니다. PyToch의 DataLoader DataLoader의 기본 구성 요소 dataset (★★★) DataLoader에는 앞서 생성한 dataset 인스턴스가 들어감 batch_size (★★★) 인자가 나타내고 있는 뜻 그대로 배치 사이즈를 의미 shuffle (★★★) 데이터를 DataLoader에서 섞어서 사용하겠는지를 설정할 수 있음 sample / batch_sample (★) sampler는 index를 컨트롤하는 방법 데이터의 index를 원하는 방식대로 조정 index를 컨트롤하기 때문에 설정하고 싶다면 shuffle 파라미터는 False(기본값)이어야 함 불균형 데이터셋의 경우, 클래스의 비율에 맞게끔 데이터를 제공해야할 필요가 있음 이 때 사용하는 ..

모델에 데이터를 먹이는 방법 _getitem_ 하나의 데이터를 불러올 때 어떻게 반환을 해주는지에 대해서 정의해줌 transforms 데이터 전처리를 정의 Dataset 클래스 데이터 입력 형태를 정의하는 클래스 데이터를 입력하는 방식의 표준화 Image, Text, Audio 등에 따라 다른 입력 정의 Dataset 클래스의 스타일 2가지 Map-style index가 존재하여 data[index]로 데이터를 참조할 수 있음 _getitem__과 _len 선언 필요 import torch from torch.utils.data import Dataset, DataLoader class CustomDataset(Dataset): # 초기 데이터 생성 방법 지정 def __init__(self, text,..