大佬们。谁知道现在百度收录怎么搞。站长普通收录每天都提交，但是百度就是不抓取。sitemap的提交额度也是0，无法提交。已经备案并且认证。为什么不让提交。搜索引擎各种搜，没有能解决问题的。大佬们有知道怎么搞的吗。万分感谢 1 个帖子 - 1 位参与者 阅读完整话题
刷抖音看到了这么一个产品： YoooClaw 宣传的是一个手机硬件录音卡，但是优点是可以读取wx，飞书，钉钉这类IM的数据，然后接入openclaw。能够自动了解信息并且作为备忘录感觉很有意义啊。 搜了一下好像没看到替代品，比较好奇技术上是怎么实现抓取IOS的im软件消息的，有什么开源替代吗？ 截图来自知乎 https://zhuanlan.zhihu.com/p/2025377102233356166 抖音讲解视频 https://v.douyin.com/FRAVFRxfYmI/ 6 个帖子 - 6 位参与者 阅读完整话题
IT之家 6 月 8 日消息，欧菲光今日宣布，推出 RoboVision 系列的首发产品 Dex400R RGBD（D 指深度 Depth）相机，支持 D2C+IMU 同步、数采、外部触发等模式， 可实现手眼协同、无序抓取、近远场避障等功能 ，为通用机器人场景量身定制。 IT之家获悉，Dex400R 专为机器人机械臂抓取识别、数据采集、补盲避障场景深度定制，通过硬件级同步、全局快门、IMU 融合等设计，保障机器人高速动态作业的稳定性与精准度。 官方表示，Dex400R 尺寸为 45mm*28mm*28mm，近距离 10-20cm 识别精度＜1.5mm，可实现毫米级超高感知精度，远距离误差小于 1%；测距盲区 5cm，近场精密抓取、细缝检测，远场感知全覆盖。 该产品采用 USB+GMSL 双接口设计 ，为同品类业内唯一，兼顾本地直连与长距抗干扰传输，适配工业、机器人多场景部署，拓展更多应用场景。
最近打算去小红书发点内容，想看看有什么热点，或者是找一下用户有什么痛点，小红书自带的 AI 点点有点难用，然后要自己一个一个贴子看的话脑容量不够。所以说想看看，就是有没有什么让 AI 去小红书去看帖子的。程序或者是 MCP skill 什么东西的，我想知道这种像爬虫吗？会犯法吗佬们？或者是有什么现在都在用的程序/mcp/skill/方案 20 个帖子 - 15 位参与者 阅读完整话题
想做知识库，但有很多信息分散在微信、企业微信、钉钉的私聊与群聊里。 我希望能： 1.导出这些 IM 软件的历史聊天记录出来，喂给知识库。 2.实时抓取这些 IM 软件的私聊与群聊，喂给知识库。 请问有什么方案吗？谢谢
想做知识库，但有很多信息分散在微信、企业微信、钉钉的私聊与群聊里。 我希望能： 1.导出这些 IM 软件的历史聊天记录出来，喂给知识库。 2.实时抓取这些 IM 软件的私聊与群聊，喂给知识库。 请问有什么方案吗？谢谢
想做知识库，但有很多信息分散在微信、企业微信、钉钉的私聊与群聊里。 我希望能： 1.导出这些 IM 软件的历史聊天记录出来，喂给知识库。 2.实时抓取这些 IM 软件的私聊与群聊，喂给知识库。 请问有什么方案吗？谢谢
最近做了个网站，提交 Google Search Console ，站点地图始终无法抓取，诸位大神有什么建议吗？ 之前提交 Google Search Console ，没有遇到过站点地图无法抓取的问题，这次遇到了，而且前后反复修改了一个多月了，还是不行。目前的现状是，Cloudflare 安全性下清晰显示，Bing 、baidu 等均能正常请求 sitemap, googlebot 请求了网站的其他资源，唯独没有请求 sitemap! 这不是推广帖，求助帖！别又给我划到推广了！ 已经尝试过的修改： 检查 sitemap / robots 基础可访问性，robots.txt 正常； sitemap.xml 返回 200 application/xml 校验 sitemap 内容格式，sitemap.xml 通过 XML 校验； sitemap-static.xml 通过 XML 校验 （新建的一个静态文件）；静态 sitemap 也失败，排除 Next metadata route 单点问题 模拟不同抓取请求方式，Googlebot UA 返回 200 ； HTTP/1.1 返回 200 ； gzip/compressed response 正常 检查 Cloudflare 安全/爬虫拦截，AI Crawl Control 正常； Security Events 里 Googlebot / Google-InspectionTool 未被 Block 或 Challenge ；已配置 Allow Verified Bots 规则 检查 Cloudflare DNS / 自定义域名 / SSL ，SSL enabled ； DNS CNAME 指向 Pages ； DNSSEC 无异常 修复并验证 Cloudflare Pages 构建链路，移除 next/font/google ；改用 system font stack ； npm run build 和 build:cf 通过；构建产物确认包含 sitemap / robots 迁移测试到 Cloudflare Workers + OpenNext ，部署 Worker ；配置 OpenNext / Wrangler / R2 binding ；测试 worker ； Worker 正常返回，确认 x-opennext: 1 把正式域名从 Pages 切到 Workers 后重试，页面、robots 、sitemap 均返回正常； GSC 重新提交 sitemap.xml 仍失败 尝试提交带 query 参数的 sitemap,https://xxx/sitemap.xml?google=please; 本地访问正常; GSC 仍显示无法抓取（ reddit 上看到有人这么干成功的） 迁移到 Vercel 部署, 页面、robots 、sitemap 均返回正常; GSC 重新提交 sitemap.xml 仍失败 还测试过其他的方法，感觉都没有解决问题，实在没辙了！ 网站地址： videosnap.cc 请诸位大神指点
最近做了个网站，提交 Google Search Console ，站点地图始终无法抓取，诸位大神有什么建议吗？ 之前提交 Google Search Console ，没有遇到过站点地图无法抓取的问题，这次遇到了，而且前后反复修改了一个多月了，还是不行。目前的现状是，Cloudflare 安全性下清晰显示，Bing 、baidu 等均能正常请求 sitemap, googlebot 请求了网站的其他资源，唯独没有请求 sitemap! 这不是推广帖，求助帖！别又给我划到推广了！ 已经尝试过的修改： 检查 sitemap / robots 基础可访问性，robots.txt 正常； sitemap.xml 返回 200 application/xml 校验 sitemap 内容格式，sitemap.xml 通过 XML 校验； sitemap-static.xml 通过 XML 校验 （新建的一个静态文件）；静态 sitemap 也失败，排除 Next metadata route 单点问题 模拟不同抓取请求方式，Googlebot UA 返回 200 ； HTTP/1.1 返回 200 ； gzip/compressed response 正常 检查 Cloudflare 安全/爬虫拦截，AI Crawl Control 正常； Security Events 里 Googlebot / Google-InspectionTool 未被 Block 或 Challenge ；已配置 Allow Verified Bots 规则 检查 Cloudflare DNS / 自定义域名 / SSL ，SSL enabled ； DNS CNAME 指向 Pages ； DNSSEC 无异常 修复并验证 Cloudflare Pages 构建链路，移除 next/font/google ；改用 system font stack ； npm run build 和 build:cf 通过；构建产物确认包含 sitemap / robots 迁移测试到 Cloudflare Workers + OpenNext ，部署 Worker ；配置 OpenNext / Wrangler / R2 binding ；测试 worker ； Worker 正常返回，确认 x-opennext: 1 把正式域名从 Pages 切到 Workers 后重试，页面、robots 、sitemap 均返回正常； GSC 重新提交 sitemap.xml 仍失败 尝试提交带 query 参数的 sitemap,https://xxx/sitemap.xml?google=please; 本地访问正常; GSC 仍显示无法抓取（ reddit 上看到有人这么干成功的） 迁移到 Vercel 部署, 页面、robots 、sitemap 均返回正常; GSC 重新提交 sitemap.xml 仍失败 还测试过其他的方法，感觉都没有解决问题，实在没辙了！ 网站地址： videosnap.cc 请诸位大神指点
最近做了个网站，提交 Google Search Console ，站点地图始终无法抓取，诸位大神有什么建议吗？ 之前提交 Google Search Console ，没有遇到过站点地图无法抓取的问题，这次遇到了，而且前后反复修改了一个多月了，还是不行。目前的现状是，Cloudflare 安全性下清晰显示，Bing 、baidu 等均能正常请求 sitemap, googlebot 请求了网站的其他资源，唯独没有请求 sitemap! 这不是推广帖，求助帖！别又给我划到推广了！ 已经尝试过的修改： 检查 sitemap / robots 基础可访问性，robots.txt 正常； sitemap.xml 返回 200 application/xml 校验 sitemap 内容格式，sitemap.xml 通过 XML 校验； sitemap-static.xml 通过 XML 校验 （新建的一个静态文件）；静态 sitemap 也失败，排除 Next metadata route 单点问题 模拟不同抓取请求方式，Googlebot UA 返回 200 ； HTTP/1.1 返回 200 ； gzip/compressed response 正常 检查 Cloudflare 安全/爬虫拦截，AI Crawl Control 正常； Security Events 里 Googlebot / Google-InspectionTool 未被 Block 或 Challenge ；已配置 Allow Verified Bots 规则 检查 Cloudflare DNS / 自定义域名 / SSL ，SSL enabled ； DNS CNAME 指向 Pages ； DNSSEC 无异常 修复并验证 Cloudflare Pages 构建链路，移除 next/font/google ；改用 system font stack ； npm run build 和 build:cf 通过；构建产物确认包含 sitemap / robots 迁移测试到 Cloudflare Workers + OpenNext ，部署 Worker ；配置 OpenNext / Wrangler / R2 binding ；测试 worker ； Worker 正常返回，确认 x-opennext: 1 把正式域名从 Pages 切到 Workers 后重试，页面、robots 、sitemap 均返回正常； GSC 重新提交 sitemap.xml 仍失败 尝试提交带 query 参数的 sitemap,https://xxx/sitemap.xml?google=please; 本地访问正常; GSC 仍显示无法抓取（ reddit 上看到有人这么干成功的） 迁移到 Vercel 部署, 页面、robots 、sitemap 均返回正常; GSC 重新提交 sitemap.xml 仍失败 还测试过其他的方法，感觉都没有解决问题，实在没辙了！ 网站地址： videosnap.cc 请诸位大神指点
最近做了个网站，提交 Google Search Console ，站点地图始终无法抓取，诸位大神有什么建议吗？ 之前提交 Google Search Console ，没有遇到过站点地图无法抓取的问题，这次遇到了，而且前后反复修改了一个多月了，还是不行。目前的现状是，Cloudflare 安全性下清晰显示，Bing 、baidu 等均能正常请求 sitemap, googlebot 请求了网站的其他资源，唯独没有请求 sitemap! 这不是推广帖，求助帖！别又给我划到推广了！ 已经尝试过的修改： 检查 sitemap / robots 基础可访问性，robots.txt 正常； sitemap.xml 返回 200 application/xml 校验 sitemap 内容格式，sitemap.xml 通过 XML 校验； sitemap-static.xml 通过 XML 校验 （新建的一个静态文件）；静态 sitemap 也失败，排除 Next metadata route 单点问题 模拟不同抓取请求方式，Googlebot UA 返回 200 ； HTTP/1.1 返回 200 ； gzip/compressed response 正常 检查 Cloudflare 安全/爬虫拦截，AI Crawl Control 正常； Security Events 里 Googlebot / Google-InspectionTool 未被 Block 或 Challenge ；已配置 Allow Verified Bots 规则 检查 Cloudflare DNS / 自定义域名 / SSL ，SSL enabled ； DNS CNAME 指向 Pages ； DNSSEC 无异常 修复并验证 Cloudflare Pages 构建链路，移除 next/font/google ；改用 system font stack ； npm run build 和 build:cf 通过；构建产物确认包含 sitemap / robots 迁移测试到 Cloudflare Workers + OpenNext ，部署 Worker ；配置 OpenNext / Wrangler / R2 binding ；测试 worker ； Worker 正常返回，确认 x-opennext: 1 把正式域名从 Pages 切到 Workers 后重试，页面、robots 、sitemap 均返回正常； GSC 重新提交 sitemap.xml 仍失败 尝试提交带 query 参数的 sitemap,https://xxx/sitemap.xml?google=please; 本地访问正常; GSC 仍显示无法抓取（ reddit 上看到有人这么干成功的） 迁移到 Vercel 部署, 页面、robots 、sitemap 均返回正常; GSC 重新提交 sitemap.xml 仍失败 还测试过其他的方法，感觉都没有解决问题，实在没辙了！ 网站地址： videosnap.cc 请诸位大神指点
最近做了个网站，提交 Google Search Console ，站点地图始终无法抓取，诸位大神有什么建议吗？ 之前提交 Google Search Console ，没有遇到过站点地图无法抓取的问题，这次遇到了，而且前后反复修改了一个多月了，还是不行。目前的现状是，Cloudflare 安全性下清晰显示，Bing 、baidu 等均能正常请求 sitemap, googlebot 请求了网站的其他资源，唯独没有请求 sitemap! 这不是推广帖，求助帖！别又给我划到推广了！ 已经尝试过的修改： 检查 sitemap / robots 基础可访问性，robots.txt 正常； sitemap.xml 返回 200 application/xml 校验 sitemap 内容格式，sitemap.xml 通过 XML 校验； sitemap-static.xml 通过 XML 校验 （新建的一个静态文件）；静态 sitemap 也失败，排除 Next metadata route 单点问题 模拟不同抓取请求方式，Googlebot UA 返回 200 ； HTTP/1.1 返回 200 ； gzip/compressed response 正常 检查 Cloudflare 安全/爬虫拦截，AI Crawl Control 正常； Security Events 里 Googlebot / Google-InspectionTool 未被 Block 或 Challenge ；已配置 Allow Verified Bots 规则 检查 Cloudflare DNS / 自定义域名 / SSL ，SSL enabled ； DNS CNAME 指向 Pages ； DNSSEC 无异常 修复并验证 Cloudflare Pages 构建链路，移除 next/font/google ；改用 system font stack ； npm run build 和 build:cf 通过；构建产物确认包含 sitemap / robots 迁移测试到 Cloudflare Workers + OpenNext ，部署 Worker ；配置 OpenNext / Wrangler / R2 binding ；测试 worker ； Worker 正常返回，确认 x-opennext: 1 把正式域名从 Pages 切到 Workers 后重试，页面、robots 、sitemap 均返回正常； GSC 重新提交 sitemap.xml 仍失败 尝试提交带 query 参数的 sitemap,https://xxx/sitemap.xml?google=please; 本地访问正常; GSC 仍显示无法抓取（ reddit 上看到有人这么干成功的） 迁移到 Vercel 部署, 页面、robots 、sitemap 均返回正常; GSC 重新提交 sitemap.xml 仍失败 还测试过其他的方法，感觉都没有解决问题，实在没辙了！ 网站地址： videosnap.cc 请诸位大神指点
最近做了个网站，提交 Google Search Console ，站点地图始终无法抓取，诸位大神有什么建议吗？ 之前提交 Google Search Console ，没有遇到过站点地图无法抓取的问题，这次遇到了，而且前后反复修改了一个多月了，还是不行。目前的现状是，Cloudflare 安全性下清晰显示，Bing 、baidu 等均能正常请求 sitemap, googlebot 请求了网站的其他资源，唯独没有请求 sitemap! 这不是推广帖，求助帖！别又给我划到推广了！ 已经尝试过的修改： 检查 sitemap / robots 基础可访问性，robots.txt 正常； sitemap.xml 返回 200 application/xml 校验 sitemap 内容格式，sitemap.xml 通过 XML 校验； sitemap-static.xml 通过 XML 校验 （新建的一个静态文件）；静态 sitemap 也失败，排除 Next metadata route 单点问题 模拟不同抓取请求方式，Googlebot UA 返回 200 ； HTTP/1.1 返回 200 ； gzip/compressed response 正常 检查 Cloudflare 安全/爬虫拦截，AI Crawl Control 正常； Security Events 里 Googlebot / Google-InspectionTool 未被 Block 或 Challenge ；已配置 Allow Verified Bots 规则 检查 Cloudflare DNS / 自定义域名 / SSL ，SSL enabled ； DNS CNAME 指向 Pages ； DNSSEC 无异常 修复并验证 Cloudflare Pages 构建链路，移除 next/font/google ；改用 system font stack ； npm run build 和 build:cf 通过；构建产物确认包含 sitemap / robots 迁移测试到 Cloudflare Workers + OpenNext ，部署 Worker ；配置 OpenNext / Wrangler / R2 binding ；测试 worker ； Worker 正常返回，确认 x-opennext: 1 把正式域名从 Pages 切到 Workers 后重试，页面、robots 、sitemap 均返回正常； GSC 重新提交 sitemap.xml 仍失败 尝试提交带 query 参数的 sitemap,https://xxx/sitemap.xml?google=please; 本地访问正常; GSC 仍显示无法抓取（ reddit 上看到有人这么干成功的） 迁移到 Vercel 部署, 页面、robots 、sitemap 均返回正常; GSC 重新提交 sitemap.xml 仍失败 还测试过其他的方法，感觉都没有解决问题，实在没辙了！ 网站地址： videosnap.cc 请诸位大神指点
最近做了个网站，提交 Google Search Console ，站点地图始终无法抓取，诸位大神有什么建议吗？ 之前提交 Google Search Console ，没有遇到过站点地图无法抓取的问题，这次遇到了，而且前后反复修改了一个多月了，还是不行。目前的现状是，Cloudflare 安全性下清晰显示，Bing 、baidu 等均能正常请求 sitemap, googlebot 请求了网站的其他资源，唯独没有请求 sitemap! 这不是推广帖，求助帖！别又给我划到推广了！ 已经尝试过的修改： 检查 sitemap / robots 基础可访问性，robots.txt 正常； sitemap.xml 返回 200 application/xml 校验 sitemap 内容格式，sitemap.xml 通过 XML 校验； sitemap-static.xml 通过 XML 校验 （新建的一个静态文件）；静态 sitemap 也失败，排除 Next metadata route 单点问题 模拟不同抓取请求方式，Googlebot UA 返回 200 ； HTTP/1.1 返回 200 ； gzip/compressed response 正常 检查 Cloudflare 安全/爬虫拦截，AI Crawl Control 正常； Security Events 里 Googlebot / Google-InspectionTool 未被 Block 或 Challenge ；已配置 Allow Verified Bots 规则 检查 Cloudflare DNS / 自定义域名 / SSL ，SSL enabled ； DNS CNAME 指向 Pages ； DNSSEC 无异常 修复并验证 Cloudflare Pages 构建链路，移除 next/font/google ；改用 system font stack ； npm run build 和 build:cf 通过；构建产物确认包含 sitemap / robots 迁移测试到 Cloudflare Workers + OpenNext ，部署 Worker ；配置 OpenNext / Wrangler / R2 binding ；测试 worker ； Worker 正常返回，确认 x-opennext: 1 把正式域名从 Pages 切到 Workers 后重试，页面、robots 、sitemap 均返回正常； GSC 重新提交 sitemap.xml 仍失败 尝试提交带 query 参数的 sitemap,https://xxx/sitemap.xml?google=please; 本地访问正常; GSC 仍显示无法抓取（ reddit 上看到有人这么干成功的） 迁移到 Vercel 部署, 页面、robots 、sitemap 均返回正常; GSC 重新提交 sitemap.xml 仍失败 还测试过其他的方法，感觉都没有解决问题，实在没辙了！ 网站地址： videosnap.cc 请诸位大神指点
最近做了个网站，提交 Google Search Console ，站点地图始终无法抓取，诸位大神有什么建议吗？ 之前提交 Google Search Console ，没有遇到过站点地图无法抓取的问题，这次遇到了，而且前后反复修改了一个多月了，还是不行。目前的现状是，Cloudflare 安全性下清晰显示，Bing 、baidu 等均能正常请求 sitemap, googlebot 请求了网站的其他资源，唯独没有请求 sitemap! 这不是推广帖，求助帖！别又给我划到推广了！ 已经尝试过的修改： 检查 sitemap / robots 基础可访问性，robots.txt 正常； sitemap.xml 返回 200 application/xml 校验 sitemap 内容格式，sitemap.xml 通过 XML 校验； sitemap-static.xml 通过 XML 校验 （新建的一个静态文件）；静态 sitemap 也失败，排除 Next metadata route 单点问题 模拟不同抓取请求方式，Googlebot UA 返回 200 ； HTTP/1.1 返回 200 ； gzip/compressed response 正常 检查 Cloudflare 安全/爬虫拦截，AI Crawl Control 正常； Security Events 里 Googlebot / Google-InspectionTool 未被 Block 或 Challenge ；已配置 Allow Verified Bots 规则 检查 Cloudflare DNS / 自定义域名 / SSL ，SSL enabled ； DNS CNAME 指向 Pages ； DNSSEC 无异常 修复并验证 Cloudflare Pages 构建链路，移除 next/font/google ；改用 system font stack ； npm run build 和 build:cf 通过；构建产物确认包含 sitemap / robots 迁移测试到 Cloudflare Workers + OpenNext ，部署 Worker ；配置 OpenNext / Wrangler / R2 binding ；测试 worker ； Worker 正常返回，确认 x-opennext: 1 把正式域名从 Pages 切到 Workers 后重试，页面、robots 、sitemap 均返回正常； GSC 重新提交 sitemap.xml 仍失败 尝试提交带 query 参数的 sitemap,https://xxx/sitemap.xml?google=please; 本地访问正常; GSC 仍显示无法抓取（ reddit 上看到有人这么干成功的） 迁移到 Vercel 部署, 页面、robots 、sitemap 均返回正常; GSC 重新提交 sitemap.xml 仍失败 还测试过其他的方法，感觉都没有解决问题，实在没辙了！ 网站地址： videosnap.cc 请诸位大神指点
最近做了个网站，提交 Google Search Console ，站点地图始终无法抓取，诸位大神有什么建议吗？ 之前提交 Google Search Console ，没有遇到过站点地图无法抓取的问题，这次遇到了，而且前后反复修改了一个多月了，还是不行。目前的现状是，Cloudflare 安全性下清晰显示，Bing 、baidu 等均能正常请求 sitemap, googlebot 请求了网站的其他资源，唯独没有请求 sitemap! 这不是推广帖，求助帖！别又给我划到推广了！ 已经尝试过的修改： 检查 sitemap / robots 基础可访问性，robots.txt 正常； sitemap.xml 返回 200 application/xml 校验 sitemap 内容格式，sitemap.xml 通过 XML 校验； sitemap-static.xml 通过 XML 校验 （新建的一个静态文件）；静态 sitemap 也失败，排除 Next metadata route 单点问题 模拟不同抓取请求方式，Googlebot UA 返回 200 ； HTTP/1.1 返回 200 ； gzip/compressed response 正常 检查 Cloudflare 安全/爬虫拦截，AI Crawl Control 正常； Security Events 里 Googlebot / Google-InspectionTool 未被 Block 或 Challenge ；已配置 Allow Verified Bots 规则 检查 Cloudflare DNS / 自定义域名 / SSL ，SSL enabled ； DNS CNAME 指向 Pages ； DNSSEC 无异常 修复并验证 Cloudflare Pages 构建链路，移除 next/font/google ；改用 system font stack ； npm run build 和 build:cf 通过；构建产物确认包含 sitemap / robots 迁移测试到 Cloudflare Workers + OpenNext ，部署 Worker ；配置 OpenNext / Wrangler / R2 binding ；测试 worker ； Worker 正常返回，确认 x-opennext: 1 把正式域名从 Pages 切到 Workers 后重试，页面、robots 、sitemap 均返回正常； GSC 重新提交 sitemap.xml 仍失败 尝试提交带 query 参数的 sitemap,https://xxx/sitemap.xml?google=please; 本地访问正常; GSC 仍显示无法抓取（ reddit 上看到有人这么干成功的） 迁移到 Vercel 部署, 页面、robots 、sitemap 均返回正常; GSC 重新提交 sitemap.xml 仍失败 还测试过其他的方法，感觉都没有解决问题，实在没辙了！ 网站地址： videosnap.cc 请诸位大神指点
最近做了个网站，提交 Google Search Console ，站点地图始终无法抓取，诸位大神有什么建议吗？ 之前提交 Google Search Console ，没有遇到过站点地图无法抓取的问题，这次遇到了，而且前后反复修改了一个多月了，还是不行。目前的现状是，Cloudflare 安全性下清晰显示，Bing 、baidu 等均能正常请求 sitemap, googlebot 请求了网站的其他资源，唯独没有请求 sitemap! 这不是推广帖，求助帖！别又给我划到推广了！ 已经尝试过的修改： 检查 sitemap / robots 基础可访问性，robots.txt 正常； sitemap.xml 返回 200 application/xml 校验 sitemap 内容格式，sitemap.xml 通过 XML 校验； sitemap-static.xml 通过 XML 校验 （新建的一个静态文件）；静态 sitemap 也失败，排除 Next metadata route 单点问题 模拟不同抓取请求方式，Googlebot UA 返回 200 ； HTTP/1.1 返回 200 ； gzip/compressed response 正常 检查 Cloudflare 安全/爬虫拦截，AI Crawl Control 正常； Security Events 里 Googlebot / Google-InspectionTool 未被 Block 或 Challenge ；已配置 Allow Verified Bots 规则 检查 Cloudflare DNS / 自定义域名 / SSL ，SSL enabled ； DNS CNAME 指向 Pages ； DNSSEC 无异常 修复并验证 Cloudflare Pages 构建链路，移除 next/font/google ；改用 system font stack ； npm run build 和 build:cf 通过；构建产物确认包含 sitemap / robots 迁移测试到 Cloudflare Workers + OpenNext ，部署 Worker ；配置 OpenNext / Wrangler / R2 binding ；测试 worker ； Worker 正常返回，确认 x-opennext: 1 把正式域名从 Pages 切到 Workers 后重试，页面、robots 、sitemap 均返回正常； GSC 重新提交 sitemap.xml 仍失败 尝试提交带 query 参数的 sitemap,https://xxx/sitemap.xml?google=please; 本地访问正常; GSC 仍显示无法抓取（ reddit 上看到有人这么干成功的） 迁移到 Vercel 部署, 页面、robots 、sitemap 均返回正常; GSC 重新提交 sitemap.xml 仍失败 还测试过其他的方法，感觉都没有解决问题，实在没辙了！ 网站地址： videosnap.cc 请诸位大神指点
关于配置文件中“通用配置”功能，我的理解是： 当我们点击“编辑通用配置”时，CC Switch 会从配置文件中抓取一些通用配置。之后，CC Switch 会将这些通用配置与不同供应商的特定配置相结合，重新写入配置文件。 那么，这是否意味着：只要配置文件发生了更新，在每次切换供应商之前，我们都需要先进入“通用配置”页面，点击“从编辑内容提取”？ 这样做的逻辑是为了避免配置更新被覆盖。因为如果在使用某个供应商时，配置文件发生了变化，但你没有点击“从编辑内容提取”，那么当你切换到另一个供应商时，程序会用另一个供应商的旧配置去覆盖当前的配置文件。这时你再提取，拿到的就已经是被覆盖后的旧配置了。 所以，这个功能的正确用法，是不是应该尽量在每次切换供应商之前，都先提取一次通用配置？ 3 个帖子 - 2 位参与者 阅读完整话题
像乙方宝和剑鱼标讯这种有关注次数限制，其他的网站会员费又比较贵，就想着自己从政府官网抓取，问下佬们有没有做过类似的项目 3 个帖子 - 2 位参与者 阅读完整话题
新接了一个需求, 需要抓取航班信息, 比如轨迹、时间、动态等. 已善用搜索功能,没有在站内找到相关的经验, 希望有经验的佬友可以指点一下.比如哪个网站好爬,有没有现成的项目? 4 个帖子 - 3 位参与者 阅读完整话题