首页 › 答案 › 题库 › 博览群书

以下哪些是BERT模型的主要特点?()

以下哪些是BERT模型的主要特点?()
A.基于双向Transformer
B.使用自注意力机制
C.通过遮蔽语言模型进行预训练
D.依赖于长序列的循环神经网络
答案解析:BERT模型基于双向Transformer,利用自注意力机制,通过遮蔽语言模型进行预训练,不依赖于循环神经网络。
正确答案:ABC