节点文献

适于Internet新闻文本实时分类的动态向量空间模型DVSM

A Dynamic Vector Space Model for Internet News Textual Categorization

  • 推荐 CAJ下载
  • PDF下载
  • 不支持迅雷等下载工具,请取消加速工具后下载。

【作者】 张晓辉李莹常桂然赵宏

【Author】 ZHANG Xiao-Hui LI Ying CHANG Gui-Ran ZHAO Hong (Software Center, Northeastern University, Shenyang 110004)

【机构】 东北大学软件中心东北大学软件中心 沈阳 110004沈阳 110004

【摘要】 传统向量空问模型(VSM)特征间无关联,且不能动态增量训练,不适合主题和焦点实时变化的Internet新闻信息,为此提出了一种改进的文本实时分类模型——动态向量空间模型(DVSM)。通过对VSM的特征提取策略进行改进,提出了特征聚合和增量训练算法。通过将对分类有相同贡献的文本特征词聚合,使用它们共同的分类贡献向量特征模式作为文本特征向量的基本维;采用增量动态训练改变对分类贡献已改变的特征词在文本向量的特征模式中的位置,适应Internet新闻信息的实时特性。使用静态训练集和动态训练集进行的DVSM与传统VSM的对比实验表明,采用特征聚合和动态训练的DVSM在Internet新闻实时分类中优势效果明显优越。

【Abstract】 Traditional Vector Space Model does not consider the relationship between features, and is not suitable for dynamic training. Focus on the Internet news with dynamically changing topics and focus, a Dynamic VSM (DVSM) is proposed. Multiple discriminating features with similar contribution to classification are combined into one pattern, which is used as the basic feature dimension. When new samples need to be learned, the changed discriminating features are moved between patterns with dynamic incremental training method for the real-time characteristics of Internet. Comparison experiments using static and dynamic training sets respectively show that DVSM outperforms the traditional model significantly in Internet News Real Time Categorization.

【基金】 国家“八六三”高技术计划资助项目(863-306-ZD02-02-6)
  • 【文献出处】 计算机科学 ,Computer Science , 编辑部邮箱 ,2004年06期
  • 【分类号】TP393.092
  • 【被引频次】3
  • 【下载频次】98
节点文献中: 

本文链接的文献网络图示:

本文的引文网络