Opensea 的数据如何爬？感觉他们反爬的机制做的也比较好，不知道自己怎么样才能爬取这个数据比较方便，api 感觉也乱七八糟的看不懂，想要一些实时的价格和图片，来做一些 research 。
求大佬指点，也不怎么会爬虫。
求大佬指点，也不怎么会爬虫。
推荐学习书目
› Learn Python the Hard Way
Python Sites
› PyPI - Python Package Index
› http://diveintopython.org/toc/index.html
› Pocoo
值得关注的项目
› PyPy
› Celery
› Jinja2
› Read the Docs
› gevent
› pyenv
› virtualenv
› Stackless Python
› Beautiful Soup
› 结巴中文分词
› Green Unicorn
› Sentry
› Shovel
› Pyflakes
› pytest
Python 编程
› pep8 Checker
Styles
› PEP 8
› Google Python Style Guide
› Code Style from The Hitchhiker's Guide
This topic created in 1047 days ago, the information mentioned may be changed or developed.
 |
1
LYerma Nov 17, 2023 via Android
研究一下 okx 的平台
|
 |
2
dayeye2006199 Nov 18, 2023
有 API 为什么需要爬虫
|
 |
3
dogechai OP @dayeye2006199 #2 1.api 不会用，感觉乱七八糟的 2.api 感觉有很多东西不是我想要的数据，他没有详细的说明
|
|
5
dogechai OP @dayeye2006199 #2 看了一下，api 貌似挺全的，他貌似分为 stream api 和 api 。是不是普通的 api 爬的很慢呀？或者有数据量计的限制？
|
|
6
dogechai OP @dayeye2006199 #2 老哥，我 api 可以了，但是总是出现爬取速率太快，或者达到他的最大爬取限制，就 Max retries exceeded with url 了。请问是否有解决方案呢？
|
|
7
dayeye2006199 Nov 22, 2023 via Android
@dogechai 你自己套个 rate limiter 啊，或者 time.sleep
|
Select Language