🏠 首页
基准测试
📊 所有基准测试 🦖 恐龙 v1 🦖 恐龙 v2 ✅ 待办事项应用 🎨 创意自由页面 🎯 FSACB - 终极展示 🌍 翻译基准测试
模型
🏆 前 10 名模型 🆓 免费模型 📋 所有模型 ⚙️ 🛠️ 千行代码模式
资源
💬 💬 提示库 📖 📖 AI 词汇表 🔗 🔗 有用链接
📖
BERT Architecture

Pre-training

在大型语料库上进行无监督训练的阶段,BERT通过MLM和NSP学习通用的语言表征。此步骤在针对特定任务的微调之前,为模型奠定了知识基础。

← 返回