Skip to content

想调用未内置的模型的请进 #72

@Tongjilibo

Description

@Tongjilibo

首先感谢并且欢迎给出宝贵建议的大佬们~,有的issue是关于想用的预训练模型没有内置,解释如下

  • 原因:有的模型的影响力没有那么大,个人开发精力有限,只能先维护好常用模型
  • 建议方案:bert4torch是支持加载transformers的模型的,此时bert4torch只是相当于一个trainer,具体的网络结构还是在transformers中,但是训练过程和callback的调用和原来一致,使用教程如下tutorials_load_transformers_model.py
  • 完美方案:可以尝试自己用bert4torch实现,然后提pull request成为contributor,一起为社区做贡献

Metadata

Metadata

Assignees

No one assigned

    Labels

    documentationImprovements or additions to documentation

    Projects

    No projects

    Milestone

    No milestone

    Relationships

    None yet

    Development

    No branches or pull requests

    Issue actions