- 待评估的架构
- 直接 HTTP / 浏览器自动化
- 已准备起点
- 5 个方案
- 职责
- 应用程序、权限和恢复
合适的候选名单,而非已安装的软件或实时库存。
将这些保持在视野中。
- 直接 HTTP / 浏览器自动化。
- 权限与约束是分开的控制。
- 保留可复现的收集记录。
直接 HTTP / 浏览器自动化
当允许的公共数据无需 JavaScript 即可获得时,直接请求可能比浏览器更轻。Playwright 和 Puppeteer 启动浏览器进程,需要并发和内存预算。使用有界队列、缓存和退避;无限制的工作进程数可能使你的服务器和目标都过载。
权限与约束是分开的控制
查看 robots.txt、目标方的条款、访问权限和个人数据义务。这些不可互换,任何服务器管辖区都不能使所有收集行为合法。不要绕过身份验证,也不要把 CAPTCHA 视为升级收集的授权。
保留可复现的收集记录
记录允许的来源、时间表、重试策略、模式和删除要求。数据中心地址可能会受到速率限制;此处不包含任何住宅地址或 CAPTCHA 解决服务。任何未来的 IP 替换规则必须经过同意,且不能用于规避声誉或访问限制。
规模化前先获得权限
审查来源访问条款、数据权利、robots 指令及适用规则。在可用时使用已发布的 APIs,并避免收集超出您合法目的的个人信息。
为克制而设计
控制并发、遵守速率限制并使用退避重试。将获取与解析和存储分离,以免目标故障导致重复请求突发。
保留有用的记录
记录作业结果、错误类别和源时间戳,同时限制敏感负载。存储足够的来源信息以重现数据集,并删除不再需要的信息。
值得考虑的容量。
将这些起点与代表性应用相匹配。软件安装和实时清单未连接;确切规格和周期总价来自目录。
Umbra 4
用 120 GB 的 NVMe 存储平衡四个 AMD EPYC 虚拟 CPUs 和 8 GB 的 ECC 内存,以支持多个服务或不断增长的应用。此 KVM 配置包含每周快照、1 Gbps 端口上每月 6 TB 流量,以及 20 Gbps 网络缓解层级。
- 计算
- 4 vCPU (AMD EPYC)
- 内存
- 8 GB DDR4 ECC
- 存储
- 120 GB NVMe SSD
- 传输
- 6 TB / 月
按月计费
Umbra 8
为更繁忙的应用、工作进程和数据库分配八个 AMD EPYC 虚拟 CPUs、16 GB 的 ECC 内存和 240 GB 的 NVMe 存储。每日快照补充 KVM 上的 root 访问权限,1 Gbps 端口上每月 10 TB 流量,以及 40 Gbps 网络缓解层级。
- 计算
- 8 vCPU (AMD EPYC)
- 内存
- 16 GB DDR4 ECC
- 存储
- 240 GB NVMe SSD
- 传输
- 10 TB / 月
按月计费
Dusk 4
将远程办公和 Windows 应用迁移到四个虚拟 CPU、8 GB 的 DDR4 内存和 120 GB 的 SSD 存储上。该配置包含 Windows 许可、管理员访问权限和多用户 RDP 选项,以及每月 6 TB 的传输量和 20 Gbps 的网络缓解层级。
- 计算
- 4 vCPU (Xeon)
- 内存
- 8 GB DDR4
- 存储
- 120 GB SSD
- 传输
- 6 TB / 月
按月计费
Dusk 8
为较重的 Windows 应用提供八个虚拟 CPUs、16 GB 的 DDR4 内存和 240 GB 的 SSD 存储。管理员 RDP 和支持最多 20 个用户的配置,与 1 Gbps 端口、每月 10 TB 流量以及 40 Gbps 网络缓解层级并存。
- 计算
- 8 vCPU (Xeon)
- 内存
- 16 GB DDR4
- 存储
- 240 GB SSD
- 传输
- 10 TB / 月
按月计费
Eclipse Ryzen
使用专用 Ryzen 9 5950X,配备 16 个物理核心、32 个线程和 64 GB 的 ECC 内存,用于计算密集型服务。两个 1 TB NVMe 硬盘采用 RAID-1 提供镜像存储,具有 IPMI 访问、一个 1 Gbps 端口和 50 TB 的每月流量。
- 计算
- AMD Ryzen 9 5950X (16c / 32t @ 3.4 GHz)
- 内存
- 64 GB DDR4 ECC
- 存储
- 2× 1 TB NVMe (RAID-1)
- 传输
- 50 TB / 月
按月计费
在此工作负载上线之前。
- 检查确切方案的 CPU、内存、磁盘、流量和端口。
- 选择列出的区域并核实工作负载的允许用途。
- 测试代表性应用程序和独立恢复。
问题,已解答。
浏览器自动化镜像是否已可用?
本地镜像列表即目录列表;配置器未预装Playwright或Puppeteer。仅在兼容的生产镜像上构建维护的浏览器栈。
IP 更改是否能解决上游速率限制?
不。请尊重目标的权限和限制,降低并发并使用退避。不得利用地址变更来规避访问或信誉控制。
是否包含住宅 IPs 或 CAPTCHA 解决方案?
此处未连接或承诺此类集成。数据中心服务器不是住宅代理服务。
在每个提供的国家收集是否合法?
不作普遍合法性声明。请审查收集及其预期用途的权限、条款和个人数据义务。
我的账户工作区中保留了什么?
您的配置、所选方案、镜像、位置和计费周期会与订单和付款请求参考一起保留。报价、付款状态读取和支持对话仍与您的账户关联。请将履约详情与付款状态分开阅读。