max_length=8과 stride=2인 두 번째 데이터 로더를 만드는 코드는 다음과 같습니다.
dataloader = create_dataloader(
raw_text, batch_size=4, max_length=8, stride=2
)
만들어진 배치는 다음과 같습니다.
tensor([[ 40, 367, 2885, 1464, 1807, 3619, 402, 271], [ 2885, 1464, 1807, 3619, 402, 271, 10899, 2138], [ 1807, 3619, 402, 271, 10899, 2138, 257, 7026], [ 402, 271, 10899, 2138, 257, 7026, 15632, 438]])