E*****9 发帖数: 32 | 1 转系到CS,好多东西都不懂.
导师让简单实现一下抓自己blog上的data,例如post, profile, friends list之类的东
西.之后可能要大范围的抓数据.大家懂的可以指点一下大致方向吗,例如用那种语言比
较容易实现,如果不是只单纯抓一个网页上的,还要历史posts呢?
google, baidu都用了,但搜到的都在杂了,有人可以指点一下.
万分感谢!!! | r***u 发帖数: 241 | 2 虽然没用过Python,但感觉python应该会不错,上手比较容易,库也很多
【在 E*****9 的大作中提到】 : 转系到CS,好多东西都不懂. : 导师让简单实现一下抓自己blog上的data,例如post, profile, friends list之类的东 : 西.之后可能要大范围的抓数据.大家懂的可以指点一下大致方向吗,例如用那种语言比 : 较容易实现,如果不是只单纯抓一个网页上的,还要历史posts呢? : google, baidu都用了,但搜到的都在杂了,有人可以指点一下. : 万分感谢!!!
| l********0 发帖数: 283 | 3 这种程序的主要功能点是:httpclient,String parse
在正则表达式方面强的语言适合做这个,比如Java,Perl,等
【在 E*****9 的大作中提到】 : 转系到CS,好多东西都不懂. : 导师让简单实现一下抓自己blog上的data,例如post, profile, friends list之类的东 : 西.之后可能要大范围的抓数据.大家懂的可以指点一下大致方向吗,例如用那种语言比 : 较容易实现,如果不是只单纯抓一个网页上的,还要历史posts呢? : google, baidu都用了,但搜到的都在杂了,有人可以指点一下. : 万分感谢!!!
| j****a 发帖数: 1277 | 4 从一些大的blog网站入手应该会容易一些把 站点结构都类似
【在 E*****9 的大作中提到】 : 转系到CS,好多东西都不懂. : 导师让简单实现一下抓自己blog上的data,例如post, profile, friends list之类的东 : 西.之后可能要大范围的抓数据.大家懂的可以指点一下大致方向吗,例如用那种语言比 : 较容易实现,如果不是只单纯抓一个网页上的,还要历史posts呢? : google, baidu都用了,但搜到的都在杂了,有人可以指点一下. : 万分感谢!!!
| E*****9 发帖数: 32 | 5 谢谢大家啊,可以再具体点么?
【在 E*****9 的大作中提到】 : 转系到CS,好多东西都不懂. : 导师让简单实现一下抓自己blog上的data,例如post, profile, friends list之类的东 : 西.之后可能要大范围的抓数据.大家懂的可以指点一下大致方向吗,例如用那种语言比 : 较容易实现,如果不是只单纯抓一个网页上的,还要历史posts呢? : google, baidu都用了,但搜到的都在杂了,有人可以指点一下. : 万分感谢!!!
| l********0 发帖数: 283 | 6 还要怎么具体?
【在 E*****9 的大作中提到】 : 谢谢大家啊,可以再具体点么?
| r*******n 发帖数: 3020 | 7 我用过Python抓过google排名前50的连接,每一个小时抓一次,
比较结果有什么变化。
用到urllib, 正则表达式
【在 E*****9 的大作中提到】 : 谢谢大家啊,可以再具体点么?
| E*****9 发帖数: 32 | 8 嗯,谢谢~我去努力研究~~
【在 E*****9 的大作中提到】 : 转系到CS,好多东西都不懂. : 导师让简单实现一下抓自己blog上的data,例如post, profile, friends list之类的东 : 西.之后可能要大范围的抓数据.大家懂的可以指点一下大致方向吗,例如用那种语言比 : 较容易实现,如果不是只单纯抓一个网页上的,还要历史posts呢? : google, baidu都用了,但搜到的都在杂了,有人可以指点一下. : 万分感谢!!!
|
|
|