s**********i
发帖数: 711 | 1
maybe lwp-request... I'm getting old. anyway. or you can just
use lynx or wget. |
|
j****a
发帖数: 42 | 2 【 以下文字转载自 Programming 讨论区 】
发信人: jeffva (jeff), 信区: Programming
标 题: 如何从程序里自动访问网站？
发信站: BBS 未名空间站 (Wed Aug 19 03:39:24 2009, 美东)
想写个小程序自动查询一个网站，比如查两地之间的机票价格，
大家一般是怎么做呢？就用wget或者curl吗？
另外如果一些网站隐藏了参数，那么怎么figure out应该发送
什么样的query string呢？
这方面一点经验都没有，还请大牛指点一下。谢谢 |
|
l****g
发帖数: 1922 | 3 python
php也可以
要是简单的
bash里的 wget就可以 |
|
L**********1
发帖数: 797 | 4 ssh进去
先安装mysql
后安装httpd
最后装php
wget或者git代码到本地
安装
完成 |
|
c********1
发帖数: 421 | 5 version of PHP 5.5 on Debian Wheezy 7.0/7.1/7.2 (and how to fix the GPG key
error)
BY CHRIS · SEPTEMBER 1, 2013
Please note: This works fine. But this package will also upgrade your apache
to version 2.4 which has different config files than apache 2.2 and even
deletes stuff, like /etc/apache2/sites-available/default when upgrading.
This may result in a loss of your apache settings (vhost, mod_rewrite stuff
etc.). Be aware of that ! This shit cost me a full weekend. :(
This affects only upgrades... 阅读全帖 |
|
c********1
发帖数: 421 | 6 http://www.dev-metal.com/setup-latest-version-php-5-5-debian-wh
How to install/setup latest version of PHP 5.5 on Debian Wheezy 7.0/7.1/7.2
(and how to fix the GPG key error)
BY CHRIS · SEPTEMBER 1, 2013
Please note: This works fine. But this package will also upgrade your apache
to version 2.4 which has different config files than apache 2.2 and even
deletes stuff, like /etc/apache2/sites-available/default when upgrading.
This may result in a loss of your apache settings (vhost, mod_rewrite stu... 阅读全帖 |
|
T**********n
发帖数: 480 | 7 google那个SOAP的API就是不太好用
好像还有每天不能超过多少次访问的限制，不知道现在还有没有
干脆直接发一个http请求过去自己解析结果比较直接
或者createprocess一个wget/curl也行，呵呵
对。 |
|
|
y*******g
发帖数: 6599 | 9 shell+wget就够了。
复杂点python或者java吧。 |
|
d*****g
发帖数: 4364 | 10 使用 wget 在unix 下，好像不好用。有汉字问题。
用webzip，可以下目录，但是具体文件不能下，因为
没有后缀。
望大牛指教，大包子酬谢。 |
|
w***g
发帖数: 5958 | 11 不好意思. 没看到要的是VB的代码. 下面给的是Linux下的实现
下面是代码:
#!/bin/sh
while read N
do
wget http://usps.trackingnumber.org/usps-tracking.php?number=$N -q -O -
| grep showAddress | head -n 1 | cut -f 2 -d '"' 2> /dev/null
done
把这个存成文件usps.sh, 并且执行 chmod +x usps.sh
然后用 usps.sh < INPUT > OUTPUT 就可以完成你要的功能了
的是 |
|
c******v
发帖数: 6 | 12
the thing you have mentioned is called web spider or
something similar. It is not hard to implement. You can use
the free gnu tool wget as your engine and write the front
end yourself. |
|
s****n
发帖数: 150 | 13 在 linux 下，
wget URL maybe works. |
|
c**t
发帖数: 2744 | 14 Don't need much time, if you use curl, wget ...
transfer
transfer |
|
d******8
发帖数: 2191 | 15 WebClient client = new WebClient();
client.Headers.Add("user-agent", "Mozilla/4.0 (compatible; MSIE 6.0; Windows
NT 5.2; .NET CLR 1.0.3705;)");
Stream strm=client.OpenRead("http://finance.yahoo.com/q?s=goog");
读取的网页是yahoo的error页面
To get a quote, enter a company name or stock symbol in the quote box above.
而控制台下直接运行 wget -O - http://finance.yahoo.com/q?s=goog没有问题，请问如何避开被yahoo发现是程序运行的webclient呢？ |
|
d******8
发帖数: 2191 | 16 没有特殊处理。应该不是s=goog没有传过去，因为我local传递没问题。
btw, 昨天试了下wget -O - www.nasdaq.com，直接给了403拒绝。我觉得，yahoo的服
务器也能够检测client。就是不知道.net能不能欺骗yahoo/nasdaq。 |
|
c**t
发帖数: 2744 | 17 用fiddler对比一下吧，可能是缺其他的header |
|
n**********l
发帖数: 271 | 18
Is there a linux alternative for fiddler? |
|
g*****1
发帖数: 93 | 19 用chrome的开发者工具也可以的，对比下post的完整请求文本 |
|
|
I********x
发帖数: 858 | 21 要是我就用python requests建一个session来处理。 curl太高层了估计有些默认的开
关不对头。 |
|
t****t
发帖数: 6806 | 22 router的/是readonly的吧
域名
怪啊 |
|
a********e
发帖数: 508 | 23 520gu
怀疑是不是dd-wrt设置的问题
用几个其他的firmware都没问题 |
|
g****y
发帖数: 436 | 24 【 以下文字转载自 Linux 讨论区 】
发信人: ggplay (dfdsf), 信区: Linux
标 题: 如何往LAN上面的server高速上传文件？
发信站: BBS 未名空间站 (Mon Mar 22 11:03:58 2010, 美东)
我自己用router搭了个LAN，run了一个ssh server， 一个 ncftp server。 然后发现
wget可以有2M的速度， scp的话，一开始也是2m，但是会迅速下降到200k。 请问有更快
的办法吗？ 是不是要装server版本的ubuntu？ |
|
p**i
发帖数: 688 | 25 HDPfans现在增加了天威高清, 都是rtmp格式, 可以参照下面帖子给PBO增加rtmp功能
http://www.hdpfans.com/thread-7767-1-1.html (下载附件rtmp_etc.rar注意不是rtmp.rar)
我把rtmpdump和rtmp放到web server上, 在PBO上用wget存到/usr/local/etc, 然后
chmod +x /usr/local/etc/rtmp /usr/local/etc/rtmpdump
cp -p /usr/local/etc/rtmp /usr/local/etc/linked/unicgi/cgi-bin/rtmp
mount -o rw,remount /
cp -p /usr/local/etc/rtmp /tmp_orig/www/cgi-bin/rtmp
然后再遥控关机, 硬关机, 再开机
如果rtmp还不work, 查看cat /tmp/www/cgi-bin/rtmp
确定rtmpdump的路径是/usr/local/etc/rtmpdump而不是其他
）筒子们的讨论。特别感谢HD... 阅读全帖 |
|
p**i
发帖数: 688 | 26 HDPfans现在增加了天威高清, 都是rtmp格式, 可以参照下面帖子给PBO增加rtmp功能
http://www.hdpfans.com/thread-7767-1-1.html (下载附件rtmp_etc.rar注意不是rtmp.rar)
我把rtmpdump和rtmp放到web server上, 在PBO上用wget存到/usr/local/etc, 然后
chmod +x /usr/local/etc/rtmp /usr/local/etc/rtmpdump
cp -p /usr/local/etc/rtmp /usr/local/etc/linked/unicgi/cgi-bin/rtmp
mount -o rw,remount /
cp -p /usr/local/etc/rtmp /tmp_orig/www/cgi-bin/rtmp
然后再遥控关机, 硬关机, 再开机
如果rtmp还不work, 查看cat /tmp/www/cgi-bin/rtmp
确定rtmpdump的路径是/usr/local/etc/rtmpdump而不是其他
）筒子们的讨论。特别感谢HD... 阅读全帖 |
|
|
e**o
发帖数: 5509 | 28 神由内置，是指tomato页面里那个“BT脱机下载”?
还是用下面命令安装的transmission?
wget http://bbs.dualwan.cn/downloads/optware-install.sh -O - | tr -d '\r' > /tmp/optware-install.sh
sh /tmp/optware-install.sh
/opt/bin/ipkg update
/opt/bin/ipkg install transmission
还是这两个是一回事。 |
|
|
s*****a
发帖数: 1269 | 30
+ Router, model # F7D7301 which is a rebadged F7D3301）.的deal就进了一个。基
本上有线拷贝东西
请教老大：
我到这一步
wget http://tomatousb.org/local--files/tut:optware-installation/optware-install.sh -O - | tr -d '\r' > /tmp/optware-install.sh
chmod +x /tmp/optware-install.sh
sh /tmp/optware-install.sh
然后报错说: line 99: [: not found
Eo: no default gateway!
这是怎么回事？
我是在wireless client bridge上安装，地址是192.168.1.2。刚开始第一步也报错，
bad address，后来在bridge上设置Static DNS为192.168.1.1就好了。难道这一步错误
是因为没有在主router装，而bridge上她就找不到default gateway? |
|
y***j
发帖数: 11235 | 31 原来用e3000加上神座dockstar，神座上挂一个网络硬盘，和一个打印机，另外
asterisk+gv做家里的电话，phone adapter用的pap2。最近有了老二准备吧神座折腾成
babymonitor，就要放到楼上。e3000又没法同时挂硬盘和打印机。正好有这个22刀（
btw：大家shopper的cb通知了么？）的地沟由（Belkin Share Max N300 Wireless N+ Router, model # F7D7301 which is a rebadged F7D3301）.的deal就进了一个。基本上有线拷贝东西
7M左右还凑合跟e3000一样，好像覆盖范围比e3000差点儿？但是能覆盖我的乳房了。无
线拷贝的速度还没测试。
现在我的垃圾由装了西红柿，带一块硬盘，一个打印机，另外开asterisk。
——————ddwrt——————
1.下载ddwrt：http://www.dd-wrt.com/dd-wrtv2/downloads/others/eko/V24-K26/svn15396/dd-wrt.v24-15396_NEWD-2_K2.6_mi... 阅读全帖 |
|
s*****a
发帖数: 1269 | 32
+ Router, model # F7D7301 which is a rebadged F7D3301）.的deal就进了一个。基
本上有线拷贝东西
请教老大：
我到这一步
wget http://tomatousb.org/local--files/tut:optware-installation/optware-install.sh -O - | tr -d '\r' > /tmp/optware-install.sh
chmod +x /tmp/optware-install.sh
sh /tmp/optware-install.sh
然后报错说: line 99: [: not found
Eo: no default gateway!
这是怎么回事？
我是在wireless client bridge上安装，地址是192.168.1.2。刚开始第一步也报错，
bad address，后来在bridge上设置Static DNS为192.168.1.1就好了。难道这一步错误
是因为没有在主router装，而bridge上她就找不到default gateway? |
|
d****n
发帖数: 12461 | 33 ☆─────────────────────────────────────☆
yddmj (yddmj) 于 (Fri Apr 20 16:13:54 2012, 美东) 提到:
原来用e3000加上神座dockstar，神座上挂一个网络硬盘，和一个打印机，另外
asterisk+gv做家里的电话，phone adapter用的pap2。最近有了老二准备吧神座折腾成
babymonitor，就要放到楼上。e3000又没法同时挂硬盘和打印机。正好有这个22刀（
btw：大家shopper的cb通知了么？）的地沟由（Belkin Share Max N300 Wireless N+ Router, model # F7D7301 which is a rebadged F7D3301）.的deal就进了一个。基本上有线拷贝东西
7M左右还凑合跟e3000一样，好像覆盖范围比e3000差点儿？但是能覆盖我的乳房了。无
线拷贝的速度还没测试。
现在我的垃圾由装了西红柿，带一块硬盘，一个打印机，另外开asterisk。
——————ddwrt——————
1.下载ddwrt：http... 阅读全帖 |
|
l********l
发帖数: 9452 | 34 【 以下文字转载自 USENET 俱乐部 】
发信人: dragonben (DaBen), 信区: USENET
标 题: 把sabnzbd 装到tomato上去, 很爽
发信站: BBS 未名空间站 (Sun Jul 22 02:11:52 2012, 美东)
把sabnzbd 装到我tomato神油上去了，很爽。让它像驴一样下去吧！
假定你的tomato的/opt 下mount的了一个drive，并且ipkg也装在这个drive上了就直接
Follow this link:
http://tomatousb.org/forum/t-384431
如果/opt下没有drive， follow this link http://tomatousb.org/tut:optware-installation， 但是只需要做完这一步：
echo "LABEL=optware /opt ext3 defaults 1 1" >> /etc/fstab
比忘了重启。后面的可以不做，除非你想把整个optware都装上...
上一步做完后，可以装ipkg了, do this:
cd /opt
... 阅读全帖 |
|
|
s****c
发帖数: 11300 | 36 1.我该准备什么样存储设备？
个人认为最简单的就是最好的 找一个空闲的足够大的usb移动硬盘就行。硬盘要被重新
格式化所以把文件做好备份。我以前试过用一个usb flash drive专门装系统，然后外
接移动硬盘做存储，效果很不好，因为大部分usb2.0的移动硬盘速度都很慢，而且
flash drive最好不要放swp文件避免寿命下降，所以造成性能下降。注意安装完成后
你的硬盘将被格式化为ext3系统，如果想在windows下读写的话需要安装相关软件
具体方案请自行放狗搜
2.安装：
注意事项：如果你在2012年7月前安装过pogoplug，请按照步骤3先将其恢复出厂状态，
去掉破解。如果是全新的pogoplug可以直接安装。不要尝试论坛上给出的升级方案，因
为你根本就无法运行（archlinuxarm安装树的依赖文件错误），先恢复，在重新破解。
所有的安装过程都在参考链接1里面，大家参照step by step做就行了。需要注意的是
你需要网线连到路由器上以下载安装文件。
3.反安装：
在arch linux root账号下，下载这个文件：
wget http://archlinu... 阅读全帖 |
|
s****c
发帖数: 11300 | 37 1.我该准备什么样存储设备？
个人认为最简单的就是最好的 找一个空闲的足够大的usb移动硬盘就行。硬盘要被重新
格式化所以把文件做好备份。我以前试过用一个usb flash drive专门装系统，然后外
接移动硬盘做存储，效果很不好，因为大部分usb2.0的移动硬盘速度都很慢，而且
flash drive最好不要放swp文件避免寿命下降，所以造成性能下降。注意安装完成后
你的硬盘将被格式化为ext3系统，如果想在windows下读写的话需要安装相关软件
具体方案请自行放狗搜
2.安装：
注意事项：如果你在2012年7月前安装过pogoplug，请按照步骤3先将其恢复出厂状态，
去掉破解。如果是全新的pogoplug可以直接安装。不要尝试论坛上给出的升级方案，因
为你根本就无法运行（archlinuxarm安装树的依赖文件错误），先恢复，在重新破解。
所有的安装过程都在参考链接1里面，大家参照step by step做就行了。需要注意的是
你需要网线连到路由器上以下载安装文件。
3.反安装：
在arch linux root账号下，下载这个文件：
wget http://archlinu... 阅读全帖 |
|
|
c*******y
发帖数: 3529 | 39 首先感谢一下rock888的帮忙，和他的攻略。
最近刚把openVPN架设好，主要为了玩tmo。
我也是个新手，所以一下内容写的比较详细。
请高手指点一二。
一、重装ArchLinux_arm，
从今年10月起，archlinux有比较大的改变，比如使用systemd,
不再使用rc.d。pacman从7月的新版本有了新的内核，如果直接更
新会有glibc的错误，而且比较难于解决。
基于以上两点，重装Archlinux反而比较省事。
我是在PC的ubuntu上直接往U盘里装系统，插上dockstar即可
(注：dockstar已经有uboot了）：
在ubuntu 下分区并格式化u盘。4GB的U盘一个主分区（ext3)、
一个swap分区。然后mount 主分区, 到分区根目录下运行：
wget http://archlinuxarm.org/os/ArchLinuxARM-armv5te-latest.tar.gz
tar -xzvf ArchLinuxARM-armv5te-*.tar.gz
rm ArchLinuxARM-armv5te-*.tar.gz
sync # Tak... 阅读全帖 |
|
|
p***c
发帖数: 2403 | 41 有时候是这样的
我用wget离线下载，大多数时候满带宽，但有时候只有20k |
|
|
|
|
|
|
|
|
v****n
发帖数: 7841 | 49 upgrade到DM 4.2了，过程如下。
1，下载 DS3612xs_3202-Repack.pat ， microserver-dsm-4.2.img ， modules-4.2.
tar.gz
https://drive.google.com/folderview?id=0B5tpWhEINjUONzhFaEgzazU4aEU&usp=
sharing#list
2，卸下所有HDD（多于1块并且用了RAID的话，记录下顺序），连上一块儿没用的HDD在
Disk 1
3，重复lz的说明安装DM 4.2
4，安装完成后，remove刚才的Disk 1，装上原来HDD的第一块儿，注意顺序。
5，启动N40L，打开synology assitant，显示是migratable，右键点击安装，选择新的
DM4.2 pat文见（程序会自动跳过format过程）
6，安装完成开机，看看是否安装成功。
7，成功显示DM4.2以后，关机，装上剩余的HDD
8，再次开机以后，打开Storage Manager，会要求修复剩余盘的System partition，点
击修复。
9，安装完成。
其他的一... 阅读全帖 |
|
v****n
发帖数: 7841 | 50 upgrade到DM 4.2了，过程如下。
1，下载 DS3612xs_3202-Repack.pat ， microserver-dsm-4.2.img ， modules-4.2.
tar.gz
https://drive.google.com/folderview?id=0B5tpWhEINjUONzhFaEgzazU4aEU&usp=
sharing#list
2，卸下所有HDD（多于1块并且用了RAID的话，记录下顺序），连上一块儿没用的HDD在
Disk 1
3，重复lz的说明安装DM 4.2
4，安装完成后，remove刚才的Disk 1，装上原来HDD的第一块儿，注意顺序。
5，启动N40L，打开synology assitant，显示是migratable，右键点击安装，选择新的
DM4.2 pat文见（程序会自动跳过format过程）
6，安装完成开机，看看是否安装成功。
7，成功显示DM4.2以后，关机，装上剩余的HDD
8，再次开机以后，打开Storage Manager，会要求修复剩余盘的System partition，点
击修复。
9，安装完成。
其他的一... 阅读全帖 |
|
