@est 源代码不知放哪了，python的多线程是基于这个的https://github.com/pycurl/pycurl/blob/master/examples/retriever.py，gevent的不知道放哪了

@alexwang 我大概知道怎么做了，开wireshark和selenium，然后提取数据就可以了，理论上是这样的，正在写脚本~

@thinkxen 是的，北京双线10M

@cute 谢谢~可以用~

@VYSE 谢谢，我通过nginx写了一些rewrite规则基本可以禁用一些简单的木马了~

@sarices 公司的网站，用的dedecms

自己搞定了，代码如下，希望大家指正
#coding=utf-8
import requests
url = 'http://www.baidu.com'
f=open(r'cookies.txt','r')
cookies={}
for line in f.read().split(';'):
#其设置为1就会把字符串拆分成2份
name,value=line.strip().split('=',1)
cookies[name]=value
r = requests.get(url, cookies=cookies)

@lsj5031 代码是取自官方的demo
https://github.com/axiak/pyre2/blob/master/tests/search.txt
我这都无法运行成功

@xdeng 我研究了一下大众点评的anroid客户端，是基于HTTP协议的，但采用了某种特殊的流量压缩技术，用普通的抓包软件查看都是乱码~

@phyng "point":{"x":13514570.1,"y":3636377.2}请问这个坐标到底是国际的墨卡托坐标还是我朝加密后的火星坐标？

@9hills 谢谢你的提醒，我先输出到变量output='%s--OK' %url 然后再print output
基本就不会出现换行丢失的问题了

@dizzy 具体代码就不分享的，基本上就是依照这个代码的思路
https://github.com/pycurl/pycurl/blob/master/examples/retriever.py

@letitbesqzr 我没有用锁，就是用了一个队列

@varrily 有了url，可以用维棠软件批量下载

@Ever 谢谢提醒，我对json还不太熟悉，后来用正则表达式提取出来了~

@Jowei 也不行

@justfly

#coding=utf-8
import json
import requests


r=requests.get('http://vip.stock.finance.sina.com.cn/quotes_service/api/json_v2.php/Market_Center.getHQNodeData?page=1&num=10&sort=changepercent&asc=0&node=sz_a&symbol=')
print r.text
data_list=json.loads(r.text)
for data_item_dict in data_list:
print data_item_dict

不行啊，代码报错
Traceback (most recent call last):
File "D:/python_project/myself/���˹�Ʊ/test.py", line 8, in <module>
data_list=json.loads(r.text)
File "D:\Python27\lib\json\__init__.py", line 338, in loads
return _default_decoder.decode(s)
File "D:\Python27\lib\json\decoder.py", line 365, in decode
obj, end = self.raw_decode(s, idx=_w(s, 0).end())
File "D:\Python27\lib\json\decoder.py", line 381, in raw_decode
obj, end = self.scan_once(s, idx)
ValueError: Expecting property name enclosed in double quotes: line 1 column 3 (char 2)

我在程序目录中新建一个static目录，放入cs.txt文件
from bottle import static_file, route, run

@route('/')
def hello():
return 'test'

@route('/static/<filename>')
def server_static(filename):
return static_file(filename, root='./static')

run(host='localhost', port='8089')

已经弄好了，代码如上