目的:想让 chatGPT 帮助我学习理解 github 上的一个项目。
问题:我用 gpt4 的 web requests 插件只能读取 github 网址中的部分文件( gpt 说 github 有反爬虫机制所以不能读取完整的项目代码)
github 目标项目整体不到 2M ,整个项目.zip 文件不到 1M 。
v 友们有什么方式可以把项目喂给 chatGPT?谢谢
1
yinmin 2023-08-18 14:04:44 +08:00 1
ChatGPT 的 GPT4 是 8K ,也就是 8000 个 token ,大概最多读 60 多 K 字节的文字。通过 API GPT4-32K 也只有最多 3.2 万个 token ,大概最多读取 200 多 K 字节文本。目前无法完整读取整个项目。
|
2
JNian 2023-08-18 14:12:44 +08:00
我也有个类似的问题,使用 chatGPT 的能力但是只需要他根据指定的资源做出响应,有点类似给了背景那个意思但又不完全对,还有就是相同的数据量方面问题
|
5
aiqinxuancai 2023-08-21 16:00:13 +08:00
token 不足的,就算用 16k token 的 model 也不够,可以考虑用 Claude-instant-100k ,但是大项目也不够
|
6
yanghanlin 2023-08-21 19:30:30 +08:00 via Android
换个思路,用 Sourcegraph https://sourcegraph.com/
|