p*********w 发帖数: 23432 | 1 招聘:舆情系统开发zz
【 以下文字转载自 ITExpress 讨论区 】
发信人: fid (fid), 信区: ITExpress
标 题: 招聘:舆情系统开发
发信站: 水木社区 (Mon Apr 12 15:10:00 2010), 站内
发信人: hnsyljiajia (jia), 信区: ITjob
标 题: 招聘:舆情系统开发
发信站: 水木社区 (Mon Apr 12 15:05:00 2010), 站内
在C++架构下开发高并发的舆情监控系统,包括:
1、spider
针对主流的网络媒体定时抓取网站,包括:
1)门户网站、论坛、博客等,
2)Web2.0网站
3)搜索引擎结果集成
2、query
解析抓下来的页面(标题、来源、作者、发布时间、正文等),根据用户设置的关
键词
对正文进行抽取,根据相关性返回自动摘要。包括:
1)编码识别
2)内容去重
3)锚文本处理
4)垃圾信息过滤
5)关键字抽取
6)关键信息提取
7)论坛帖子主题、回帖、点击量
8)正文抽取
9)自动摘要
3、 |
|