Update app.py
Browse files
app.py
CHANGED
@@ -281,7 +281,8 @@ for epoch in range(num_epochs):
|
|
281 |
# 保存模型(可选)
|
282 |
torch.save(model.state_dict(), 'model.pth')
|
283 |
'''
|
284 |
-
|
|
|
285 |
from datasets import load_dataset
|
286 |
|
287 |
# 加载数据集
|
@@ -289,3 +290,16 @@ dataset = load_dataset('glue', 'sst2') # 这里的'sst2'是GLUE数据集下的
|
|
289 |
|
290 |
# 查看数据集内容
|
291 |
print(dataset['train'][:2]) # 查看训练集的前两个样本
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
281 |
# 保存模型(可选)
|
282 |
torch.save(model.state_dict(), 'model.pth')
|
283 |
'''
|
284 |
+
####################################
|
285 |
+
'''
|
286 |
from datasets import load_dataset
|
287 |
|
288 |
# 加载数据集
|
|
|
290 |
|
291 |
# 查看数据集内容
|
292 |
print(dataset['train'][:2]) # 查看训练集的前两个样本
|
293 |
+
'''
|
294 |
+
|
295 |
+
from datasets import load_dataset
|
296 |
+
# 加载数据集
|
297 |
+
dataset = load_dataset('fka/awesome-chatgpt-prompts')
|
298 |
+
# 查看数据集的子集
|
299 |
+
print(dataset.keys()) # 这将输出数据集中所有可用的子集名称,例如:dict_keys(['train', 'validation', 'test'])
|
300 |
+
# 访问特定子集的数据
|
301 |
+
train_dataset = dataset['train']
|
302 |
+
print(train_dataset[:2]) # 查看训练集的前两个样本
|
303 |
+
# 如果你知道确切的子集名称,也可以直接加载它
|
304 |
+
# train_dataset = load_dataset('fka/awesome-chatgpt-prompts', split='train')
|
305 |
+
|