有没有一种算法可以自动计算一个词的抽象程度的数值等级。例如,该算法将 purvey 评分为 1,将 donut 评分为 0,将 immodeSTLy 评分为 0.5 ..(这些是示例值)
意义词中的抽象词,指代远离直接感知的思想和概念,如economic、calculating、disputable等。 Other side 具体词是指我们可以直接用感官感知的事物、事件和属性,例如树、行走和红色。
请您参考如下方法:
据我所知,abstractness 没有定义,也没有任何算法可以计算它。
但是,有几个方向我会用作代理
频率 - 抽象概念在普通演讲中可能很少见,因此简单的
idf应该有助于识别罕见词。词源 - 英语中的常用词通常源自日耳曼语,而更专业的词通常借自法语/拉丁语。
监督学习 - 如果您发现维基百科文章
抽象,那么常用的短语或单词可能也会描述类似的抽象概念。训练分类器可以是一种得分方式。
关于什么是抽象的,什么是具体的,没有基本事实,尤其是当您尝试对其进行量化时。 我建议将这些代理聚合到您认为对您的需求有用的指标。
