1818 位用户此时在线
24小时点击排行 Top 10：
- 本站自动实时分享网络热点
- 24小时实时更新
- 所有言论不代表本站态度
- 欢迎对信息踊跃评论评分
- 评分越高，信息越新，排列越靠前
2
1
0
通过这个工具，让我找到了它底层使用的宝藏爬虫工具 - Crawlee
它的技术栈非常新，功能很强大，如果你想在 2023年做一个爬虫或者浏览器行为模拟工具，这个应该是最棒的，有这些特性：
* 两种模式，HTTP 和 Headless 模式，Headless 模式是基于真实的浏览器模拟（基于…
IT技术
(
crawlee.dev
)
由
Viking
提交
通过这个工具，让我找到了它底层使用的宝藏爬虫工具 - Crawlee
https://t.co/3DQWuHZSO7
它的技术栈非常新，功能很强大，如果你想在 2023年做一个爬虫或者浏览器行为模拟工具，这个应该是最棒的，有这些特性：
* 两种模式，HTTP 和 Headless 模式，Headless 模式是基于真实的浏览器模拟（基于 Puppeteer and Playwright），爬取 JS 渲染的内容也不在话下。并且添加了特殊的 anti-blocking 以及 human-like fingerprints 机制，让你的爬虫被封的概率大大降低了。
* 根据你的电脑资源自动切换并发的数量。
* 内置 Cheerio 和 JSDOM ，分析 DOM 结构也很方便。
我简单用了一下，非常方便，强烈推荐给大家。
Stars：9.6K
点击图片查看原图
1
2
1
1
2
3
2
2
3
2
1
1
4
2
1
1
5
2
1
1
6
2
1
1
7
2
1
1
8
6
5
5
9
2
1
1
11
2
1
1
12
2
1
1
13
2
1
1
14
2
1
1
15
2
1
1
16
2
1
1
17
2
1
1
18
2
1
1
19
2
1
1
21
2
1
1
22
5
4
4
23
3
2
2