使用google-bert tensorflow版本跑bert预训练-简记

Posted 亓官劼

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了使用google-bert tensorflow版本跑bert预训练-简记相关的知识,希望对你有一定的参考价值。

使用google-bert tensorflow版本跑bert预训练-简记

  大家好,我是亓官劼(qí guān jié ),在【亓官劼】公众号、CSDN、GitHub、B站、华为开发者论坛等平台分享一些技术博文,主要包括前端开发、python后端开发、小程序开发、数据结构与算法、docker、Linux常用运维、NLP等相关技术博文,时光荏苒,未来可期,加油~

  如果喜欢博主的文章可以关注博主的个人公众号【亓官劼】(qí guān jié),里面的文章更全更新更快。如果有需要找博主的话可以在公众号后台留言,我会尽快回复消息,其他平台私信回复较慢。

注:本专栏仅为个人解决问题过程中简单记录,除非标题中带有详细过程的文章,其他均没有详细过程以及解释
注:本专栏仅为个人解决问题过程中简单记录,除非标题中带有详细过程的文章,其他均没有详细过程以及解释
注:本专栏仅为个人解决问题过程中简单记录,除非标题中带有详细过程的文章,其他均没有详细过程以及解释


安装需要的环境,这里一定要注意TensorFlow的版本,高版本不兼容!!!

pip install -U tokenizers

pip install -U tensorflow-gpu==1.15

然后对数据进行预处理,(预处理太慢的话,可以将语料库进行切分,另一篇博文写了)<

以上是关于使用google-bert tensorflow版本跑bert预训练-简记的主要内容,如果未能解决你的问题,请参考以下文章

吴恩达课程使用keras cpu版安装接- anaconda (python 3.7) win10安装 tensorflow 1.8 cpu版

为啥 TensorFlow Lite 比桌面版 TensorFlow 慢?

Ubuntu上安装TensorFlow(python2.7版)

如何自制Python3.7版 TensorFlow?

在Docker中使用TensorFlow(GPU版+Ubuntu 20.04)

Tensorflow 官方版教程中文版