发现语义角色标注过程可能存在内存泄漏，请确认，谢谢！

[zhangyudong0215]

问题类型

疑似内存泄漏

出错场景

我们对经过预处理（去重、去除特殊符号、分句）之后的一系列句子调用pyltp的接口进行分析。分词、词性标注、依存句法分析和命名实体识别这四部分运行未见异常，但是调用语义角色标注功能会导致python程序占用内存大幅度且持续增加，我们判断这里可能存在python内存泄漏。更换语料或是python版本，问题均存在。

如何复现这一问题

连续对数百个句子进行语义角色标注即会遇到上述内存占用大幅度增加的问题。

运行环境

ubuntu 16.04 LTS
python3.6.3
pyltp版本 0.2.1 模型版本 3.4.0

期望结果

请开发者确认这个问题（语义角色标注时占用内存剧增）是否是内存泄漏。非常感谢！

[yongyuan923]

语义标注出现错误：

[dynet] random seed: 2633395616
[dynet] allocating memory: 2000MB
[dynet] memory allocation done.
Traceback (most recent call last):
File "C:\Users\Administrator\Desktop\222.py", line 74, in
roles = role_label(words,tags,netags,arcs)
File "C:\Users\Administrator\Desktop\222.py", line 52, in role_label
roles = labeller.label(words, postags, netags, arcs) # 语义角色标注
Boost.Python.ArgumentError: Python argument types in
SementicRoleLabeller.label(SementicRoleLabeller, list, VectorOfString, VectorOfString, VectorOfParseResult)
did not match C++ signature:
label(struct SementicRoleLabeller {lvalue}, class boost::python::list, class boost::python::list, class std::vector<struct std::pair<int,class std::basic_string<char,struct std::char_traits,class std::allocator > >,class std::allocator<struct std::pair<int,class std::basic_string<char,struct std::char_traits,class std::allocator > > > >)
label(struct SementicRoleLabeller {lvalue}, class boost::python::list, class std::vector<class std::basic_string<char,struct std::char_traits,class std::allocator >,class std::allocator<class std::basic_string<char,struct std::char_traits,class std::allocator > > >, class std::vector<struct std::pair<int,class std::basic_string<char,struct std::char_traits,class std::allocator > >,class std::allocator<struct std::pair<int,class std::basic_string<char,struct std::char_traits,class std::allocator > > > >)
label(struct SementicRoleLabeller {lvalue}, class std::vector<class std::basic_string<char,struct std::char_traits,class std::allocator >,class std::allocator<class std::basic_string<char,struct std::char_traits,class std::allocator > > >, class boost::python::list, class std::vector<struct std::pair<int,class std::basic_string<char,struct std::char_traits,class std::allocator > >,class std::allocator<struct std::pair<int,class std::basic_string<char,struct std::char_traits,class std::allocator > > > >)
label(struct SementicRoleLabeller {lvalue}, class std::vector<class std::basic_string<char,struct std::char_traits,class std::allocator >,class std::allocator<class std::basic_string<char,struct std::char_traits,class std::allocator > > >, class std::vector<class std::basic_string<char,struct std::char_traits,class std::allocator >,class std::allocator<class std::basic_string<char,struct std::char_traits,class std::allocator > > >, class std::vector<struct std::pair<int,class std::basic_string<char,struct std::char_traits,class std::allocator > >,class std::allocator<struct std::pair<int,class std::basic_string<char,struct std::char_traits,class std::allocator > > > >)
请问你的问题解决了吗？

[zhangyudong0215]

如果你仔细看我的ID的话, 你会有种特别熟悉的感觉...
我在ltp提过这个issue, 但是仍然没有解决, 可能需要下一个版本这个问题才会得到修复.

[yongyuan923]

我现在解决了这个问题：
我是把语义角色标注中的这句roles = labeller.label(words, postags, netags, arcs) # 语义角色标注
改为：roles = labeller.label(words, postags,arcs)。
然后程序就能输出正确的运行结果。

[yongyuan923]

但是我在这里面加入外部词典，就陷入了死循环。上面的回复是在没有加入外部词典的情况下运行的。

[liu946]

@yongyuan923 srl不支持外部词典的。而且你在这个issue下回复的问题跟发起issue的问题并不相关啊。

[yongyuan923]

非常感谢您的回复。
下次会注意了。

[zhangyudong0215]

建议看看0.20的文档，srl不需要输入netags，此issue的问题是疑似内存泄漏。

[luyunliang]

循环语义角色标注的时候，确实存在内存泄漏的问题。
即使每次使用完都release一次，还是会不停的泄漏。

[ws0zzg4569]

是的 的确有这个问题 更新过后。。。话说有没有同学遇到在linux下model not loaded的问题，我在win下面跑得好好的 移植去ubuntu就model not loaded

[zhuyuuyuhz]

windows环境下，pyltp 3.4.0 循环标注出现内存溢出情况，每次release之后还是会有溢出，希望能够得到解决，谢谢

[Single430]

pyltp==0.2.1 依然遇到 语义角色标注 出现内存泄露问题，希望可以解决

[xiaobaidong369]

pyltp==0.2.1 依然遇到 语义角色标注 出现内存泄露问题，希望可以解决

请问pyltp0.2.1下载3.40模型包提示Segment:model not loaded

[FlowerRoad1996]

pyltp==0.2.1仍然出现语义角色标注的内存泄漏问题，希望可以解决。

[wenfeixiang1991]

@zhangyudong0215 这个项目不再维护了，内存泄漏的问题我们能想办法解决一下吗？ #198