小红书笔记内容爬取方案

[PeaceJoy]

想了解下，小红书笔记在分享时有个链接，是否可以根据这个链接或者其他方式获取出笔记的文字或者图片？

[ZhuWenJian]

链接能打开就可以。
进行网络请求，获取页面数据，自己写筛选规则获取目标数据即可。

[ospider]

需要破解 x-s 参数，爬小红书还是有点难度的。而且风控很严，即使能爬到数据，也很容易被封号。

[lueluev]

可以的，比如网上有些现成的快捷方式可以提取出无水印的笔记里的图片，应该是一个原理。

[duan602728596]

1. 无头浏览器的方案不可行，因为它现在有验证码，而且会检测是不是正常的浏览器环境，不正常的浏览器环境会有请求错误。
2. x-s 参数方案不可行，因为 x-s 计算时会检测各种参数，比如当前的浏览器是否正常、当前的 url 是否正常、cookie 是否正常等等。在 nodejs 或者无头浏览器环境内算出的 x-s 都是不对的。