1 В избранное 0 Ответвления 0

OSCHINA-MIRROR/gapyanpeng-GPT2-chitchat

В этом репозитории не указан файл с открытой лицензией (LICENSE). При использовании обратитесь к конкретному описанию проекта и его зависимостям в коде.
Клонировать/Скачать
dataset.py 405
Копировать Редактировать Web IDE Исходные данные Просмотреть построчно История
yangjianxin Отправлено 09.12.2019 10:11 f2f21ab
from torch.utils.data import Dataset
import torch
class MyDataset(Dataset):
"""
"""
def __init__(self, data_list):
self.data_list = data_list
def __getitem__(self, index):
input_ids = self.data_list[index].strip()
input_ids = [int(token_id) for token_id in input_ids.split()]
return input_ids
def __len__(self):
return len(self.data_list)

Опубликовать ( 0 )

Вы можете оставить комментарий после Вход в систему

1
https://api.gitlife.ru/oschina-mirror/gapyanpeng-GPT2-chitchat.git
git@api.gitlife.ru:oschina-mirror/gapyanpeng-GPT2-chitchat.git
oschina-mirror
gapyanpeng-GPT2-chitchat
gapyanpeng-GPT2-chitchat
master