m*********x 发帖数: 32 | 1 我想开发一个给用户提供实时数据分析的网站,目前的模式是:
1,用户访问我的网站
2,服务器程序去某第三方网站抓取实时数据
3,服务器分析数据并把分析好的结果显示在用户浏览器上
用户太多的话有点担心第三方网站封我服务器IP,所以能不能让客户端自己去抓数据然
后把数据传到服务器,服务器只负责分析? |
g****z 发帖数: 1135 | 2 从客户端抓不是个好设计,也太烦。封IP一般不会,他那数据本来就是给人看的不是?
响应时间倒是个大问题,自己在服务器上下些功夫吧,比如caching/staging之类的。
【在 m*********x 的大作中提到】 : 我想开发一个给用户提供实时数据分析的网站,目前的模式是: : 1,用户访问我的网站 : 2,服务器程序去某第三方网站抓取实时数据 : 3,服务器分析数据并把分析好的结果显示在用户浏览器上 : 用户太多的话有点担心第三方网站封我服务器IP,所以能不能让客户端自己去抓数据然 : 后把数据传到服务器,服务器只负责分析?
|
m*********x 发帖数: 32 | 3 为什么不好呢?这样可以把抓网页的负担让客户端分摊啊?我没什么写网站经验,还请
多指点。如果我想往这个思路走走看,能不能告诉我几个关键字我放狗试试。我在服务
器上已经实现这个功能了。cache不行,因为数据是实时的。staging是什么?
【在 g****z 的大作中提到】 : 从客户端抓不是个好设计,也太烦。封IP一般不会,他那数据本来就是给人看的不是? : 响应时间倒是个大问题,自己在服务器上下些功夫吧,比如caching/staging之类的。
|
g****z 发帖数: 1135 | 4 嗯你可以走走看。可以用ajax来获取,后传至你server做分析。
记得告诉我你的体会。
【在 m*********x 的大作中提到】 : 为什么不好呢?这样可以把抓网页的负担让客户端分摊啊?我没什么写网站经验,还请 : 多指点。如果我想往这个思路走走看,能不能告诉我几个关键字我放狗试试。我在服务 : 器上已经实现这个功能了。cache不行,因为数据是实时的。staging是什么?
|