用了any的fable,然后用了自己的一个股市分析skill,里面有一个爬虫脚本来获取新闻流和市场数据的,让fable来生成收盘汇报总结,直接给 Error: Permission to use WebFetch has been denied. IMPORTANT: You *may* attempt to accomplish this action using other tools that might naturally be used to accomplish this goal, e.g. using head instead of cat. But you *should not* attempt to work around this denial in malicious ways, e.g. do not use your ability to run tests to execute non-test actions. You should only try to work around this restriction in reasonable ways that do not attempt to bypass the intent behind this denial. If you believe this capability is essential to complete the user's request, STOP and explain to the user what you were trying to do and why you need this permission. Let the user decide how to proceed 这也太道德了吧,我没让它写,就运行也能给触发这种机制,连对方服务器都没说啥 而且,还有一个很有意思的地方,我有一些逆向用的skill,我发个指令,看下skill库有什么技能,直接给黄字警告了 1 个帖子 - 1 位参与者 阅读完整话题
自己给自己写了个爬虫+整理分类图片的自用网站,全程托管ai只提需求,屎山越堆越高,一次对话消耗的tokens越来越多,你想改不是你亲自写的根本不懂,改不了一点 ,导致你要么不要了前功尽弃,要么继续用AI。 今天是见识到了,原来吭哧瘪肚的弄一天真能消耗1.6亿tokens 1 个帖子 - 1 位参与者 阅读完整话题
求佬分享经验。目前在做一个搜集农业机器人的视频的爬虫,搜集后在网页自动分类视频和分析视频内容信息、整理视频信息。但是目前用codex搭建网站效果很差,和我想做的相差甚远。请问有佬知道有什么好的方法吗,或者是有相关的开源吗。感谢感谢!!! 1 个帖子 - 1 位参与者 阅读完整话题
最近我在研究脚本爬虫,但是玩不明白,球球大师来教教我
最近我在研究脚本爬虫,但是玩不明白,球球大师来教教我
最近我在研究脚本爬虫,但是玩不明白,球球大师来教教我
最近我在研究脚本爬虫,但是玩不明白,球球大师来教教我
最近我在研究脚本爬虫,但是玩不明白,球球大师来教教我
最近我在研究脚本爬虫,但是玩不明白,球球大师来教教我
最近在看一些代理方案,发现很多人一开始都是先上机房代理,便宜、简单、好理解。 但只要任务稍微复杂一点,比如: 搜索结果会因为地区变化 页面本身比较敏感 需要浏览器自动化 要做长一点的会话 电商价格 / 广告验证这类结果对 geo 比较敏感 机房代理就很容易开始“不太够用”。 我自己的感觉是,如果只是简单抓一些不太敏感的公开页面,机房代理确实够用,成本也低。 但如果任务涉及下面这些,住宅代理的价值会明显很多: 结果和地区强相关 页面本身更容易触发限制 不是单纯 requests ,而是带浏览器行为 重试成本已经开始变高 还有一个点是,很多时候不是“代理不行”,而是: session 没配好 geo 不准 轮换策略太粗 把搜索页和详情页混着用同一种策略 我看到一些住宅代理方案,像 Thordata 这种会把住宅代理和不限量方案分开做,我觉得这个思路其实还挺合理的。小一点的任务按量计费更灵活,长期高频任务上不限量,账会更容易算。 想问问大家自己的实际经验: 你们一般是在什么阶段,开始觉得住宅代理是“值得”的? 是因为成功率,还是因为 geo ,还是因为浏览器自动化更稳?
最近在看一些代理方案,发现很多人一开始都是先上机房代理,便宜、简单、好理解。 但只要任务稍微复杂一点,比如: 搜索结果会因为地区变化 页面本身比较敏感 需要浏览器自动化 要做长一点的会话 电商价格 / 广告验证这类结果对 geo 比较敏感 机房代理就很容易开始“不太够用”。 我自己的感觉是,如果只是简单抓一些不太敏感的公开页面,机房代理确实够用,成本也低。 但如果任务涉及下面这些,住宅代理的价值会明显很多: 结果和地区强相关 页面本身更容易触发限制 不是单纯 requests ,而是带浏览器行为 重试成本已经开始变高 还有一个点是,很多时候不是“代理不行”,而是: session 没配好 geo 不准 轮换策略太粗 把搜索页和详情页混着用同一种策略 我看到一些住宅代理方案,像 Thordata 这种会把住宅代理和不限量方案分开做,我觉得这个思路其实还挺合理的。小一点的任务按量计费更灵活,长期高频任务上不限量,账会更容易算。 想问问大家自己的实际经验: 你们一般是在什么阶段,开始觉得住宅代理是“值得”的? 是因为成功率,还是因为 geo ,还是因为浏览器自动化更稳?
让 GPT 帮我爬一点资源放到我的网站上,非扭扭捏捏说没授权,我突发奇想下载了一个版权授权的模板,随便改改,居然把 GPT 忽悠过去了~ 10 个帖子 - 8 位参与者 阅读完整话题
个人入职公司 5 年, 一直担任爬虫工程师, 兼职网管.去年年底, 我开始向 ai 方面转型, 技术领导也看出来我的意思, 从年初开始让我负责公司新项目的 agent 开发, 到上个月底 agent 基本完成, 也做了很多评估测试.至少完成度有个 80%.从年初开始基本不写代码,全部结合 ai 做 vibe-coding. 上周领导让我参加了一个后端开发提效率的会, 会上前端同事建议后端从 php 转 nodejs. 其实我个人是没有任何意见,毕竟 php 确实不太适合我们新项目(web3+ai), 同时我也觉得结合 ai, 更换技术栈可能没有想象中那么复杂, 我个人以前主 python, 自己今年也做了几个私人项目, 包括 go, javascript, 结合 ai 基本上能做到无缝切换. 然而后端同事却觉得, php 有其优点并建议先保留, 后续合适的时候再进行切换.上周六看到一篇新闻, 胡彦斌自己使用 ai 开发了一个 app 并上架, 时间一个月.个人觉得, 连一个歌手都能做个 app 并且上架, 而他们还在纠结换不换, 我是不明白考虑的点. 后端 curd 写接口, 160+个接口, 后端 4 个人,一个月还没完成.然后项目中需要 ai 的地方,全部找我. 问题来了, 一个功能, 从数据上到 ai 调用到写入结果, 都让我负责.实际上整个流程,就是一条 prompt+请求 gemini/gpt+写入数据. 这种问题出现了起码 10 次, 我也将请求 gemini/gpt 的 demo 丢群里, 结果还是来找我.我觉得这是不是有点搞笑了, 整个项目评估有 50%都要调用 ai, 那我干脆我把项目干了? 现在的氛围就是, ai 的都甩给我, 感觉就是我调一个接口比他们都好. 原本领导让一个后端同事跟我学习做 agent, 我原本新项目中的 ai 模块想丢给他做, 起码是现学现做, 结果两个星期后领导看到进度太差, 让我接手.结果那 sb 走过来跟我说:"xxx, 不是我甩锅, 是领导不信任我", 我心里真是千万个 xxx, 我真想说, 你特么的能好好干,领导还不信任你?
个人入职公司 5 年, 一直担任爬虫工程师, 兼职网管.去年年底, 我开始向 ai 方面转型, 技术领导也看出来我的意思, 从年初开始让我负责公司新项目的 agent 开发, 到上个月底 agent 基本完成, 也做了很多评估测试.至少完成度有个 80%.从年初开始基本不写代码,全部结合 ai 做 vibe-coding. 上周领导让我参加了一个后端开发提效率的会, 会上前端同事建议后端从 php 转 nodejs. 其实我个人是没有任何意见,毕竟 php 确实不太适合我们新项目(web3+ai), 同时我也觉得结合 ai, 更换技术栈可能没有想象中那么复杂, 我个人以前主 python, 自己今年也做了几个私人项目, 包括 go, javascript, 结合 ai 基本上能做到无缝切换. 然而后端同事却觉得, php 有其优点并建议先保留, 后续合适的时候再进行切换.上周六看到一篇新闻, 胡彦斌自己使用 ai 开发了一个 app 并上架, 时间一个月.个人觉得, 连一个歌手都能做个 app 并且上架, 而他们还在纠结换不换, 我是不明白考虑的点. 后端 curd 写接口, 160+个接口, 后端 4 个人,一个月还没完成.然后项目中需要 ai 的地方,全部找我. 问题来了, 一个功能, 从数据上到 ai 调用到写入结果, 都让我负责.实际上整个流程,就是一条 prompt+请求 gemini/gpt+写入数据. 这种问题出现了起码 10 次, 我也将请求 gemini/gpt 的 demo 丢群里, 结果还是来找我.我觉得这是不是有点搞笑了, 整个项目评估有 50%都要调用 ai, 那我干脆我把项目干了? 现在的氛围就是, ai 的都甩给我, 感觉就是我调一个接口比他们都好. 原本领导让一个后端同事跟我学习做 agent, 我原本新项目中的 ai 模块想丢给他做, 起码是现学现做, 结果两个星期后领导看到进度太差, 让我接手.结果那 sb 走过来跟我说:"xxx, 不是我甩锅, 是领导不信任我", 我心里真是千万个 xxx, 我真想说, 你特么的能好好干,领导还不信任你?
个人入职公司 5 年, 一直担任爬虫工程师, 兼职网管.去年年底, 我开始向 ai 方面转型, 技术领导也看出来我的意思, 从年初开始让我负责公司新项目的 agent 开发, 到上个月底 agent 基本完成, 也做了很多评估测试.至少完成度有个 80%.从年初开始基本不写代码,全部结合 ai 做 vibe-coding. 上周领导让我参加了一个后端开发提效率的会, 会上前端同事建议后端从 php 转 nodejs. 其实我个人是没有任何意见,毕竟 php 确实不太适合我们新项目(web3+ai), 同时我也觉得结合 ai, 更换技术栈可能没有想象中那么复杂, 我个人以前主 python, 自己今年也做了几个私人项目, 包括 go, javascript, 结合 ai 基本上能做到无缝切换. 然而后端同事却觉得, php 有其优点并建议先保留, 后续合适的时候再进行切换.上周六看到一篇新闻, 胡彦斌自己使用 ai 开发了一个 app 并上架, 时间一个月.个人觉得, 连一个歌手都能做个 app 并且上架, 而他们还在纠结换不换, 我是不明白考虑的点. 后端 curd 写接口, 160+个接口, 后端 4 个人,一个月还没完成.然后项目中需要 ai 的地方,全部找我. 问题来了, 一个功能, 从数据上到 ai 调用到写入结果, 都让我负责.实际上整个流程,就是一条 prompt+请求 gemini/gpt+写入数据. 这种问题出现了起码 10 次, 我也将请求 gemini/gpt 的 demo 丢群里, 结果还是来找我.我觉得这是不是有点搞笑了, 整个项目评估有 50%都要调用 ai, 那我干脆我把项目干了? 现在的氛围就是, ai 的都甩给我, 感觉就是我调一个接口比他们都好. 原本领导让一个后端同事跟我学习做 agent, 我原本新项目中的 ai 模块想丢给他做, 起码是现学现做, 结果两个星期后领导看到进度太差, 让我接手.结果那 sb 走过来跟我说:"xxx, 不是我甩锅, 是领导不信任我", 我心里真是千万个 xxx, 我真想说, 你特么的能好好干,领导还不信任你?
个人入职公司 5 年, 一直担任爬虫工程师, 兼职网管.去年年底, 我开始向 ai 方面转型, 技术领导也看出来我的意思, 从年初开始让我负责公司新项目的 agent 开发, 到上个月底 agent 基本完成, 也做了很多评估测试.至少完成度有个 80%.从年初开始基本不写代码,全部结合 ai 做 vibe-coding. 上周领导让我参加了一个后端开发提效率的会, 会上前端同事建议后端从 php 转 nodejs. 其实我个人是没有任何意见,毕竟 php 确实不太适合我们新项目(web3+ai), 同时我也觉得结合 ai, 更换技术栈可能没有想象中那么复杂, 我个人以前主 python, 自己今年也做了几个私人项目, 包括 go, javascript, 结合 ai 基本上能做到无缝切换. 然而后端同事却觉得, php 有其优点并建议先保留, 后续合适的时候再进行切换.上周六看到一篇新闻, 胡彦斌自己使用 ai 开发了一个 app 并上架, 时间一个月.个人觉得, 连一个歌手都能做个 app 并且上架, 而他们还在纠结换不换, 我是不明白考虑的点. 后端 curd 写接口, 160+个接口, 后端 4 个人,一个月还没完成.然后项目中需要 ai 的地方,全部找我. 问题来了, 一个功能, 从数据上到 ai 调用到写入结果, 都让我负责.实际上整个流程,就是一条 prompt+请求 gemini/gpt+写入数据. 这种问题出现了起码 10 次, 我也将请求 gemini/gpt 的 demo 丢群里, 结果还是来找我.我觉得这是不是有点搞笑了, 整个项目评估有 50%都要调用 ai, 那我干脆我把项目干了? 现在的氛围就是, ai 的都甩给我, 感觉就是我调一个接口比他们都好. 原本领导让一个后端同事跟我学习做 agent, 我原本新项目中的 ai 模块想丢给他做, 起码是现学现做, 结果两个星期后领导看到进度太差, 让我接手.结果那 sb 走过来跟我说:"xxx, 不是我甩锅, 是领导不信任我", 我心里真是千万个 xxx, 我真想说, 你特么的能好好干,领导还不信任你?
个人入职公司 5 年, 一直担任爬虫工程师, 兼职网管.去年年底, 我开始向 ai 方面转型, 技术领导也看出来我的意思, 从年初开始让我负责公司新项目的 agent 开发, 到上个月底 agent 基本完成, 也做了很多评估测试.至少完成度有个 80%.从年初开始基本不写代码,全部结合 ai 做 vibe-coding. 上周领导让我参加了一个后端开发提效率的会, 会上前端同事建议后端从 php 转 nodejs. 其实我个人是没有任何意见,毕竟 php 确实不太适合我们新项目(web3+ai), 同时我也觉得结合 ai, 更换技术栈可能没有想象中那么复杂, 我个人以前主 python, 自己今年也做了几个私人项目, 包括 go, javascript, 结合 ai 基本上能做到无缝切换. 然而后端同事却觉得, php 有其优点并建议先保留, 后续合适的时候再进行切换.上周六看到一篇新闻, 胡彦斌自己使用 ai 开发了一个 app 并上架, 时间一个月.个人觉得, 连一个歌手都能做个 app 并且上架, 而他们还在纠结换不换, 我是不明白考虑的点. 后端 curd 写接口, 160+个接口, 后端 4 个人,一个月还没完成.然后项目中需要 ai 的地方,全部找我. 问题来了, 一个功能, 从数据上到 ai 调用到写入结果, 都让我负责.实际上整个流程,就是一条 prompt+请求 gemini/gpt+写入数据. 这种问题出现了起码 10 次, 我也将请求 gemini/gpt 的 demo 丢群里, 结果还是来找我.我觉得这是不是有点搞笑了, 整个项目评估有 50%都要调用 ai, 那我干脆我把项目干了? 现在的氛围就是, ai 的都甩给我, 感觉就是我调一个接口比他们都好. 原本领导让一个后端同事跟我学习做 agent, 我原本新项目中的 ai 模块想丢给他做, 起码是现学现做, 结果两个星期后领导看到进度太差, 让我接手.结果那 sb 走过来跟我说:"xxx, 不是我甩锅, 是领导不信任我", 我心里真是千万个 xxx, 我真想说, 你特么的能好好干,领导还不信任你?
个人入职公司 5 年, 一直担任爬虫工程师, 兼职网管.去年年底, 我开始向 ai 方面转型, 技术领导也看出来我的意思, 从年初开始让我负责公司新项目的 agent 开发, 到上个月底 agent 基本完成, 也做了很多评估测试.至少完成度有个 80%.从年初开始基本不写代码,全部结合 ai 做 vibe-coding. 上周领导让我参加了一个后端开发提效率的会, 会上前端同事建议后端从 php 转 nodejs. 其实我个人是没有任何意见,毕竟 php 确实不太适合我们新项目(web3+ai), 同时我也觉得结合 ai, 更换技术栈可能没有想象中那么复杂, 我个人以前主 python, 自己今年也做了几个私人项目, 包括 go, javascript, 结合 ai 基本上能做到无缝切换. 然而后端同事却觉得, php 有其优点并建议先保留, 后续合适的时候再进行切换.上周六看到一篇新闻, 胡彦斌自己使用 ai 开发了一个 app 并上架, 时间一个月.个人觉得, 连一个歌手都能做个 app 并且上架, 而他们还在纠结换不换, 我是不明白考虑的点. 后端 curd 写接口, 160+个接口, 后端 4 个人,一个月还没完成.然后项目中需要 ai 的地方,全部找我. 问题来了, 一个功能, 从数据上到 ai 调用到写入结果, 都让我负责.实际上整个流程,就是一条 prompt+请求 gemini/gpt+写入数据. 这种问题出现了起码 10 次, 我也将请求 gemini/gpt 的 demo 丢群里, 结果还是来找我.我觉得这是不是有点搞笑了, 整个项目评估有 50%都要调用 ai, 那我干脆我把项目干了? 现在的氛围就是, ai 的都甩给我, 感觉就是我调一个接口比他们都好. 原本领导让一个后端同事跟我学习做 agent, 我原本新项目中的 ai 模块想丢给他做, 起码是现学现做, 结果两个星期后领导看到进度太差, 让我接手.结果那 sb 走过来跟我说:"xxx, 不是我甩锅, 是领导不信任我", 我心里真是千万个 xxx, 我真想说, 你特么的能好好干,领导还不信任你?
个人入职公司 5 年, 一直担任爬虫工程师, 兼职网管.去年年底, 我开始向 ai 方面转型, 技术领导也看出来我的意思, 从年初开始让我负责公司新项目的 agent 开发, 到上个月底 agent 基本完成, 也做了很多评估测试.至少完成度有个 80%.从年初开始基本不写代码,全部结合 ai 做 vibe-coding. 上周领导让我参加了一个后端开发提效率的会, 会上前端同事建议后端从 php 转 nodejs. 其实我个人是没有任何意见,毕竟 php 确实不太适合我们新项目(web3+ai), 同时我也觉得结合 ai, 更换技术栈可能没有想象中那么复杂, 我个人以前主 python, 自己今年也做了几个私人项目, 包括 go, javascript, 结合 ai 基本上能做到无缝切换. 然而后端同事却觉得, php 有其优点并建议先保留, 后续合适的时候再进行切换.上周六看到一篇新闻, 胡彦斌自己使用 ai 开发了一个 app 并上架, 时间一个月.个人觉得, 连一个歌手都能做个 app 并且上架, 而他们还在纠结换不换, 我是不明白考虑的点. 后端 curd 写接口, 160+个接口, 后端 4 个人,一个月还没完成.然后项目中需要 ai 的地方,全部找我. 问题来了, 一个功能, 从数据上到 ai 调用到写入结果, 都让我负责.实际上整个流程,就是一条 prompt+请求 gemini/gpt+写入数据. 这种问题出现了起码 10 次, 我也将请求 gemini/gpt 的 demo 丢群里, 结果还是来找我.我觉得这是不是有点搞笑了, 整个项目评估有 50%都要调用 ai, 那我干脆我把项目干了? 现在的氛围就是, ai 的都甩给我, 感觉就是我调一个接口比他们都好. 原本领导让一个后端同事跟我学习做 agent, 我原本新项目中的 ai 模块想丢给他做, 起码是现学现做, 结果两个星期后领导看到进度太差, 让我接手.结果那 sb 走过来跟我说:"xxx, 不是我甩锅, 是领导不信任我", 我心里真是千万个 xxx, 我真想说, 你特么的能好好干,领导还不信任你?
个人入职公司 5 年, 一直担任爬虫工程师, 兼职网管.去年年底, 我开始向 ai 方面转型, 技术领导也看出来我的意思, 从年初开始让我负责公司新项目的 agent 开发, 到上个月底 agent 基本完成, 也做了很多评估测试.至少完成度有个 80%.从年初开始基本不写代码,全部结合 ai 做 vibe-coding. 上周领导让我参加了一个后端开发提效率的会, 会上前端同事建议后端从 php 转 nodejs. 其实我个人是没有任何意见,毕竟 php 确实不太适合我们新项目(web3+ai), 同时我也觉得结合 ai, 更换技术栈可能没有想象中那么复杂, 我个人以前主 python, 自己今年也做了几个私人项目, 包括 go, javascript, 结合 ai 基本上能做到无缝切换. 然而后端同事却觉得, php 有其优点并建议先保留, 后续合适的时候再进行切换.上周六看到一篇新闻, 胡彦斌自己使用 ai 开发了一个 app 并上架, 时间一个月.个人觉得, 连一个歌手都能做个 app 并且上架, 而他们还在纠结换不换, 我是不明白考虑的点. 后端 curd 写接口, 160+个接口, 后端 4 个人,一个月还没完成.然后项目中需要 ai 的地方,全部找我. 问题来了, 一个功能, 从数据上到 ai 调用到写入结果, 都让我负责.实际上整个流程,就是一条 prompt+请求 gemini/gpt+写入数据. 这种问题出现了起码 10 次, 我也将请求 gemini/gpt 的 demo 丢群里, 结果还是来找我.我觉得这是不是有点搞笑了, 整个项目评估有 50%都要调用 ai, 那我干脆我把项目干了? 现在的氛围就是, ai 的都甩给我, 感觉就是我调一个接口比他们都好. 原本领导让一个后端同事跟我学习做 agent, 我原本新项目中的 ai 模块想丢给他做, 起码是现学现做, 结果两个星期后领导看到进度太差, 让我接手.结果那 sb 走过来跟我说:"xxx, 不是我甩锅, 是领导不信任我", 我心里真是千万个 xxx, 我真想说, 你特么的能好好干,领导还不信任你?