V2EX › qtoq126 的所有回复 › 第 2 页 / 共 4 页

V2EX = way to explore

V2EX 是一个关于分享和探索的地方

现在注册

已注册用户请登录

1 2 3 4

❮

❯

2022-11-15 10:05:06 +08:00

回复了 qtoq126 创建的主题 › 问与答 › 我这种需求是租海外服务器还是自建 NAS 服务器合适？

@mrweiwei 如果是搭在自家的话，是不是还需要申请公网 IP

2022-11-15 10:04:37 +08:00

回复了 qtoq126 创建的主题 › 问与答 › 我这种需求是租海外服务器还是自建 NAS 服务器合适？

@shawnbluce 刚问了下 S3 的客服，说人如果在国内，无法使用海外的 S3 。只能用国内的 S3 ，然后如果数据不合法，账号直接会被封掉……

2022-11-15 09:51:35 +08:00

回复了 qtoq126 创建的主题 › 问与答 › 我这种需求是租海外服务器还是自建 NAS 服务器合适？

@shawnbluce S3 是不是就是属于外网服务器？能保证敏感数据的保密性吗？或者有没有别的限制，什么数据都可以往里面丢？

2022-11-15 09:43:27 +08:00

回复了 qtoq126 创建的主题 › 问与答 › 我这种需求是租海外服务器还是自建 NAS 服务器合适？

@BugCry 这个好像跟我需求有点区别，云盘只能存储数据。我是希望能通过我自己写的 App 去获取我爬下来的数据。应该是在 app 里通过写接口的形式调用服务器里数据库的数据。如果 iOS 的开发里能有办法动态获取某个地方的数据，其实也可以满足我的需求

2022-07-21 10:25:33 +08:00

回复了 qtoq126 创建的主题 › 问与答 › 针对多层级的目录树展开，应该如何做设计？

https://s3.bmp.ovh/imgs/2022/07/21/d98d3c233f728a08.png

图为什么总是贴不出来？？

2022-05-20 12:00:42 +08:00

回复了 qtoq126 创建的主题 › 程序员 › 这个异步操作应该怎么写？

@llwuuzz 我试试你说的这种方案

2022-05-17 06:53:27 +08:00

回复了 qtoq126 创建的主题 › 程序员 › 这个异步操作应该怎么写？

@Buges 谢谢大佬点拨，你说的这个思路我能理解，就是具体到 api 的编写和异步函数的编写上面的话，就不知道怎么去做了

2022-05-17 06:52:38 +08:00

回复了 qtoq126 创建的主题 › 程序员 › 这个异步操作应该怎么写？

@ration 重开一个线程的话，当我使用 return 返回第一段 json 后，主线程会不会就已经结束了啊？如果主线程已经结束了的话，Task.Run()运行的耗时函数可能还没拿到结果

2022-05-16 23:56:41 +08:00

回复了 qtoq126 创建的主题 › 程序员 › 这个异步操作应该怎么写？

@wunonglin ts 代码看不懂哇

2022-05-16 23:56:28 +08:00

回复了 qtoq126 创建的主题 › 程序员 › 这个异步操作应该怎么写？

@DOLLOR 相当于用户可以任意操作，前端只是在后台默默请求？

2022-05-16 23:10:56 +08:00

回复了 qtoq126 创建的主题 › 程序员 › 这个异步操作应该怎么写？

@DOLLOR 拆接口确实是个好方法，只是当拿到第一段 json 然后又马上进行二次请求的时候，前端页面是不是就会暂时卡死？我是希望前端拿到一段 json 后就可以开始展示页面了，用户该干嘛干嘛，然后我后台还在继续算，算完的结果也没必要马上通知给前端，而是当他再度调用到需要这个结果的功能的时候再返回给他

2022-05-16 23:08:39 +08:00

回复了 qtoq126 创建的主题 › 程序员 › 这个异步操作应该怎么写？

@Buges 耗时的计算方法的返回结果不需要马上返回给前端，当他再去自己调用结果的时候，再给他

2022-03-21 08:57:33 +08:00

回复了 qtoq126 创建的主题 › 程序员 › 系统常驻梯子，程序中设置代理 ip 后无法成功爬取墙外资源，不设置却可以爬取成功，这是为什么？

@linuxyz 这样的话如果我爬 https 的网站也是可以走代理的么

2022-03-19 10:08:36 +08:00

回复了 qtoq126 创建的主题 › 程序员 › 系统常驻梯子，程序中设置代理 ip 后无法成功爬取墙外资源，不设置却可以爬取成功，这是为什么？

@ysc3839 我的代理服务器里默认有三个端口，一个 Socks5 端口（ 1081 ），一个 HTTP 端口（ 8001 ），一个 PAC 服务器端口（ 7777 ）

2022-03-18 23:16:17 +08:00

回复了 qtoq126 创建的主题 › 程序员 › 系统常驻梯子，程序中设置代理 ip 后无法成功爬取墙外资源，不设置却可以爬取成功，这是为什么？

还发现一个问题就是如果程序中代理用 socks5 协议是可以返回数据的
```
proxies = {'socks5': 'https://127.0.0.1:8001', 'socks5': 'http://127.0.0.1:8001'}
```
但是用 http 的不行

2022-02-26 16:09:36 +08:00

回复了 qtoq126 创建的主题 › 程序员 › 关于挂梯子爬数据的疑问

@webshe11 @gen900
谢谢回复，这样说我就理解了。就是说如果想实现一个自动爬虫程序，满足我上面的需求的话，可能需要租一台服务器（永不关机），然后在服务器上写一个定时程序才行吧

2022-02-26 14:06:55 +08:00

回复了 qtoq126 创建的主题 › 程序员 › 关于挂梯子爬数据的疑问

“反正你跑脚本的机器肯定得同时开着代理程序，才能监听 127.0.0.1:8001 ，才能让你的脚本连接 127.0.0.1:8001 间接获取数据”

@webshe11 那我应该如何实现一个自动爬虫程序，比如每天固定时间爬一次某个网站，然后把数据存到数据库中？这个自动爬虫程序中的代理应该如何写呢，或者说是我必须保证跑脚本的机器是开机状态而且连着代理才行吗？

2022-02-26 10:20:19 +08:00

回复了 qtoq126 创建的主题 › 程序员 › 关于挂梯子爬数据的疑问

@opengps 我就用家里的电脑试的……

2022-02-26 10:10:43 +08:00

回复了 qtoq126 创建的主题 › 程序员 › 关于挂梯子爬数据的疑问

@celeron533 我就是随便试了几个被墙的网站，都不行，google 、Wikipedia 之类的。

另外我只知道 socks5 端口号，是还是按照 IP+端口号的形式写代理参数吗

2021-05-17 14:18:02 +08:00

回复了 qtoq126 创建的主题 › 问与答 › 到底还有好用的 Markdown 云笔记软件吗

@mekingname bear 的同步需要付费吧？

1 2 3 4

❮

❯