基于潜在语义分析的bbs文档bayes鉴别器.pdf

维普资讯
第 卷 第 期 计 算 机 学 报 ．
年 月 ．
基 于 潜 在 语 义 分 析 的 文 档 鉴 别 器
刘 昌钰” 唐常杰” 于 中华 杜永萍。 郭 颖”
”
． 大学计 算机 科学 系 成 都
山西 大学计 算机科 学 系 太原
摘 要 电子 公告 栏 的滥 用是 一 种 以信息 污 染为 特 色的 社会 问题 ，对 文 档 进行 鉴 别 已成 为信 息 安 全 重
要 内容 之 一．该 文融 合 了数据 挖 掘技 术 、数 理统 计技 术 和 自然语 言 理解 技 术 ，提 出 了基 于 潜在 语 义 分 析 与 分
类 的 文 档鉴 别方 法 ：利 用 自然语 言 处理 技 术从 训练 文 档 中抽 取 典 型短 语 集 ；通 过 潜 在语 义分 析 进 行 典 型 短 语
同义 归约 ，应 用 关联 规 则采掘 技 术提 高 典型 短语 间 的独 立性 ；用 分类 器对 文档 进行 鉴 别 ．该 文 还 对 影 响
系 统 的关键参 数 进 行 了大量