Transformer课程 第7课Gavin BERT文本分类

Transformer课程 第7课Gavin BERT文本分类

Retrieve & Inspect Dataset

我们将使用pandas来帮助我们tab分隔的.tsv文件。

import pandas as pd

print('Parsing the dataset .tsv file...')
comments = pd.read_csv('./data/attack_annotated_comments.tsv', sep = '\t', index_col = 0