自然语言处理NLP星空智能对话机器人系列：深入理解Transformer自然语言处理 SRL
目录
The architecture of the BERT-based model
- The architecture of the BERT-based model
- SRL experiments with the BERT-based model
- Basic samples
- 星空智能对话机器人系列博客
AllenNLP的基于BERT的模型是一个仅限12层编码器的BERT模型，AllenNLP团队实施了Shi和Lin（2019）中所述的BERT模型，BERT模型的参数：
• BertForMaskedLM
• attention_probs_dropout_prob: 0.1
• hidden_act: "gelu"
• hidden_dropout_prob:
