使用pycharm,远程调试服务骑上的代码时,transformer的代码跳转不进去,会失败,为了详细研究transformer的代码,可以把transformer源码下下来,在进行调试即可。
对hugging face的transformer框架进行详细调试。
1. 安装transformers
pip install transformers
2. 卸载transformers,装了在卸,为了留下除transformers的依赖
pip uninstall transformers
3. 下载transformers源码:/huggingface/transformers/huggingface/transformers
其中,src文件夹下是源码,把这部分拿出来,example下是官方demo示例,比如机器翻译的示例
这两部分拿出来,新建一个项目,放进去,通过调试,就可以详细查看transformers的内部所有细节了。当然也可以把src下的源码放到你原来使用transformers的项目中去。