阿尔伯特 ***************新2020年3月28日*************** 添加一个colab 以对GLUE数据集进行微调。 ***************新2020年1月7日*************** v2 TF-Hub模型现在应该可以在TF 1.15上使用,因为我们从图中删除了本地Einsum op。 请参阅下面的更新的TF-Hub链接。 ***************新2019年12月30日*************** 中国模型发布。 我们要感谢提供的培训数据。 ALBERT模型的版本2已发布。 基础:[ ] [ ] 大:[ ] [ ] Xlarge:[ ] [ ] Xxlarge:[ ] [ ] 在此版本中,我们对所有模型应用“无辍学”,“其他培训数据”和“长时间培训”策略。 我们训练基于ALBERT的步伐为1千万步,而其他模型