由买买提看人间百态

boards

本页内容为未名空间相应帖子的节选和存档,一周内的贴子最多显示50字,超过一周显示500字 访问原贴
BuildingWeb版 - 怎么让访问我网站的浏览器自动从其他网站抓数据传给服务器
相关主题
为啥有人注册了域名指向我的网站?貌似还在用爬虫抓取网站卖东西收信用卡问题
有什么比较好的视频会议的服务器端软件没?有人用hostgator吗?你的网站现在能连上吗?
也show一下我的网站很多网站提供注册域名,网站本质是怎么注册的?
我的新闻聚合网站,请拍转!国内的公司有必要把网站放在美国吗?
邮件服务器的问题我公司的网站为什么国内不能进入呢?
如何让自己的网站抓取网页信息?(嵌套浏览器?)找人做个公司网站
数据库的实时数据在前端显示分页的问题如何在美国建立商业网站?
网站全球问题想做个网站主要面向国内,请问怎么选服务器
相关话题的讨论汇总
话题: 网站话题: 服务器话题: 数据话题: 用户话题: 浏览器
进入BuildingWeb版参与讨论
1 (共1页)
m*********x
发帖数: 32
1
我想开发一个给用户提供实时数据分析的网站,目前的模式是:
1,用户访问我的网站
2,服务器程序去某第三方网站抓取实时数据
3,服务器分析数据并把分析好的结果显示在用户浏览器上
用户太多的话有点担心第三方网站封我服务器IP,所以能不能让客户端自己去抓数据然
后把数据传到服务器,服务器只负责分析?
g****z
发帖数: 1135
2
从客户端抓不是个好设计,也太烦。封IP一般不会,他那数据本来就是给人看的不是?
响应时间倒是个大问题,自己在服务器上下些功夫吧,比如caching/staging之类的。

【在 m*********x 的大作中提到】
: 我想开发一个给用户提供实时数据分析的网站,目前的模式是:
: 1,用户访问我的网站
: 2,服务器程序去某第三方网站抓取实时数据
: 3,服务器分析数据并把分析好的结果显示在用户浏览器上
: 用户太多的话有点担心第三方网站封我服务器IP,所以能不能让客户端自己去抓数据然
: 后把数据传到服务器,服务器只负责分析?

m*********x
发帖数: 32
3
为什么不好呢?这样可以把抓网页的负担让客户端分摊啊?我没什么写网站经验,还请
多指点。如果我想往这个思路走走看,能不能告诉我几个关键字我放狗试试。我在服务
器上已经实现这个功能了。cache不行,因为数据是实时的。staging是什么?

【在 g****z 的大作中提到】
: 从客户端抓不是个好设计,也太烦。封IP一般不会,他那数据本来就是给人看的不是?
: 响应时间倒是个大问题,自己在服务器上下些功夫吧,比如caching/staging之类的。

g****z
发帖数: 1135
4
嗯你可以走走看。可以用ajax来获取,后传至你server做分析。
记得告诉我你的体会。

【在 m*********x 的大作中提到】
: 为什么不好呢?这样可以把抓网页的负担让客户端分摊啊?我没什么写网站经验,还请
: 多指点。如果我想往这个思路走走看,能不能告诉我几个关键字我放狗试试。我在服务
: 器上已经实现这个功能了。cache不行,因为数据是实时的。staging是什么?

1 (共1页)
进入BuildingWeb版参与讨论
相关主题
想做个网站主要面向国内,请问怎么选服务器邮件服务器的问题
在美国建一个sex导航网站违法吗?如何让自己的网站抓取网页信息?(嵌套浏览器?)
IBM web content "Expire" light is not on数据库的实时数据在前端显示分页的问题
为啥"no-cache"对某些版本的IE不起作用?网站全球问题
为啥有人注册了域名指向我的网站?貌似还在用爬虫抓取网站卖东西收信用卡问题
有什么比较好的视频会议的服务器端软件没?有人用hostgator吗?你的网站现在能连上吗?
也show一下我的网站很多网站提供注册域名,网站本质是怎么注册的?
我的新闻聚合网站,请拍转!国内的公司有必要把网站放在美国吗?
相关话题的讨论汇总
话题: 网站话题: 服务器话题: 数据话题: 用户话题: 浏览器