V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
V2EX  ›  sead  ›  全部回复第 3 页 / 共 5 页
回复总数  84
1  2  3  4  5  
@LastStarDust vercel 一会就撸,netlify 好像撸不到账户
@hullhutt 手工重新建一个 work ,把 index.js 编辑进去,老的那个配置删掉看看,我用你的域名试了可以,不过用多了就不清楚了,频率高估计也不行
@linhongjun https://github.com/gaboolic/cloudflare-reverse-proxy
参考这个,直接复制 index.js 界面安装也是可以的
@hullhutt 设置域名就可以了,bt4gprx.com.yourdomain.com
@jhytxy 我只是简单的撸了一下,没有深入使用;大佬 不要对 V2 下手啊,前段时间 V2 都崩了一次
黑客最喜欢 php ,asp 没有之三
106 天前
回复了 ModiKa2022 创建的主题 数据库 大数据量联表操作
@ModiKa2022 PG 不应该这么菜啊,SQL 层面优化是否下足功夫?我测试过单 SQL 10 多张表一起处理( 70 万单表有多张),整体比分开查快。。。后端减少了请求次数,处理数据所用的内存对象也大量减少;以前经常用 ORM ,怎么写都提升不了性能,后面手撸 SQL 差异肉眼可见
114 天前
回复了 sead 创建的主题 分享创造 基于 cheerio, 写了个低代码,高效解析轮子
@InsideSeed 有一个 SVG 结构图,后续我会发布文档和一些常见场景的用法
只要是境内的站点,就要远离爬虫;走正规渠道的 api
118 天前
回复了 sead 创建的主题 分享创造 基于 cheerio, 写了个低代码,高效解析轮子
@kiroli https://github.com/serping/express-scraper 可以参考下这种方式怎样?里面有很直观的例子。
118 天前
回复了 sead 创建的主题 分享创造 基于 cheerio, 写了个低代码,高效解析轮子
@Amose2024 https://github.com/serping/express-scraper 基于轮子的 API 应用版本,线上部署了。

其中 SERP 的较为复杂,不过按树结构方法解析,应该还是比较容易看懂的。
118 天前
回复了 sead 创建的主题 分享创造 基于 cheerio, 写了个低代码,高效解析轮子
@good1uck https://github.com/serping/express-scraper DEMO 发布了,目前有三个 API 例子。

这个是 expressjs api , 扩展非常方便
119 天前
回复了 sead 创建的主题 分享创造 基于 cheerio, 写了个低代码,高效解析轮子
@good1uck 文档和 demo 后续会更新,近几天基于这个会发布一个 express api 辅助开发,同时可以用于生产环境的 api ,会有更新详细的 demo 。
119 天前
回复了 sead 创建的主题 分享创造 基于 cheerio, 写了个低代码,高效解析轮子
@kiroli 写原生? 可能是不会设计代码结构,数据复杂时维护起来很痛苦。。之前用 python 撸了一个 amazon asin 铲子,数据过于复杂,维护起来头大。 基于痛点才撸了这个。
@lzblalala 有点好奇,这种造飞机的简历,一般市场什么标准薪资
121 天前
回复了 sead 创建的主题 分享创造 基于 cheerio, 写了个低代码,高效解析轮子
@Amose2024 cheerio 和 beautifulSoup 解决的需求都差不多,但是多数场景都是一些重复的数据处理逻辑,维护起来也是比较头大;目前用这个撸 serp 暂时还没碰到解决不了的.

https://serpchecking.com/ 完全基于 Cheerio-Tree 撸
1  2  3  4  5  
关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   2908 人在线   最高记录 6679   ·     Select Language
创意工作者们的社区
World is powered by solitude
VERSION: 3.9.8.5 · 23ms · UTC 06:21 · PVG 14:21 · LAX 22:21 · JFK 01:21
Developed with CodeLauncher
♥ Do have faith in what you're doing.