找回密码
 立即注册
搜索
热搜: 活动 交友 discuz
查看: 144|回复: 0

有大哥用 nodejs 写过爬虫嘛

[复制链接]

1091

主题

0

回帖

3307

积分

管理员

积分
3307
发表于 2023-12-3 13:56:04 | 显示全部楼层 |阅读模式

puppeteerhttps://github.com/puppeteer/puppeteer
puppeteer
import fs from 'node:fs/promises';import got from 'got';import needle from 'needle';const res = await got('https://opensea.io/', { responseType: 'text'});await fs.writeFile('1.html', res.body);needle.get('https://opensea.io/', function(error, res) { if (!error && res.statusCode === 200) fs.writeFile('2.html', res.body);});测了下没问题,应该没有反爬。有可能是网络问题,毕竟服务器在境外。
@duan602728596 手动给你点个赞
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

Archiver|手机版|小黑屋|张迁碑

GMT+8, 2024-10-31 19:25 , Processed in 0.142818 second(s), 23 queries .

Powered by Discuz! X3.5

© 2001-2023 Discuz! Team.

快速回复 返回顶部 返回列表