在使用Spacy或NLTK的文章中搜索职位名称

  • Z时代
  • 2024-01-10
  • 分类：问答

我是NLP的新手，最近一直在玩NTLK和Spacy。但是，我找不到在某篇文章中搜索职位的方法（例如：产品经理，首席营销官等）。在使用Spacy或NLTK的文章中搜索职位名称

例如，我有1000篇，我想一切有我感兴趣的工作头衔的文章。

此外，什么实体类型并不职称下跌？我检查https://spacy.io/docs/usage/entity-recognition，并没有看到它在那里。我有计划添加它吗？

感谢。

回答：

Spacy NER不支持“职位”实体，如Nathan所述。但是您可以为您的用例创建一个自定义命名实体。这里是官方文档link。你可以找到一步一步的指导，在那里训练Spacy NER。

您需要标记数据来训练您的NER。一般来说，您需要至少4000-5000个火车实例和2000个实例进行测试。您拥有的训练数据越多，NER的表现就越好。

以下是一些示例培训数据。

TRAIN_DATA = [ 
    ('Who is Shaka Khan?', { 
     'entities': [(7, 17, 'PERSON')] 
    }), 
    ('I like London and Berlin.', { 
     'entities': [(7, 13, 'LOC'), (18, 24, 'LOC')] 
    }), 
    ('I work as software engineer.', { 
     'entities': [(9, 18, 'JOBTITLE')] 
    }), 
]

以上是 在使用Spacy或NLTK的文章中搜索职位名称 的全部内容， 来源链接： utcz.com/qa/266236.html

回到顶部