from lxml import etree

或者

beautifulsoup

我的 mbp 连公司的 wifi 就经常断，其他人没问题。
连家里的 wifi 不断，就是网速经常变得特别特别慢。
公司和家里用的都是小米路由器。
我也是奇了怪了。

能一起做点东西，顺便还能学习学习就最好了

楼主加油

@iyaozhen 已用,准确率确实大幅提升了.


@Kisesy 不好意思,没注意到给略过去了,多谢!

@est get_encodings_from_content 这个函数的实现方式现在还能看到吗?

@est orz,但是 html 里的 meta 头的出现方式真是太多变了,特别是很多小网站.有的甚至没有.这话时候怎么准确获取网页编码?

@msg7086 就是觉得比我解析的准确率高多了

@est orz.有什么好的方法可以获取网页编码吗?为什么浏览器能准确的解析不同编码的网页呢?

@justjavac 其他的搜索引擎也是一样的吗?

@shuax 多谢

@krizex 更新了,最新没问题

@Sylv 我看了一下搜索结果,这个域名确实只出现了一次.如果是伪装不成功的话应该我单独爬这个站点也被拒绝才对,但并没有.其实现在尝试着报 AttributeError: 'module' object has no attribute 'ConnectTimeout' 这个错的次数比较多

@Sylv 但我并不是在反复访问一个站点,而是依次访问搜索结果,理论上每个站点只会访问一次啊

@fei051466 应该不是,像这样直接调用是可以得到正确结果的
bing = Bing_Search()
a = bing.dataRequest('http://www.sbacn.org/')
print a.title

http://www.sbacn.org/
<title>
上海市银行同业公会
</title>
[Finished in 1.2s]

@dawncold 直接访问没有问题.我也是北京

@kslr 但是我这样单独调用 page = requests.get( ''http://www.sbacn.org/'', headers = self.header, timeout = 10 , verify = flag ),就没有问题

用 python 以来从来没有写过界面

虽然有高级程序员,但都不好意思说是考过的,从不示人

我不是很懂 js,是对 v2 做了 ddos 攻击实现打不开的吗