BrowserSkill 企业级智能网页交互与数据采集器

@tencent/browserskill-agent · v2.0.8

深度结合计算机视觉与语义树的大规模企业级网页自动化驱动。具备复杂的验证码识别、拟人化鼠标贝塞尔曲线移动、全页动态瀑布流加载与合规反封禁策略。

拟人交互防封禁滑块识别数据采集
GitHub Stars
70 K+
+12.4% this month
月度调用量
310 K+
Monthly registry pulls
Reach 影响力
99.4/ 100
Top Tier Ecosystem
运行环境
Cordis v3+
Node 18+ / Bun / Deno

安装与配置

支持 CLI 一键执行、包管理器以及 Cordis 总线编排

bash
manager:
$ pnpm add @tencent/browserskill-agent

架构解析

「BrowserSkill」针对最复杂的对抗性商业网站提供高可靠的交互与采集能力。在处理高度混淆的前端页面或反爬严密的商业平台时,常规的无头抓取极易被风控系统识别并封禁 IP。 本插件深度整合了计算机视觉定位模型与拟人化交互算法。智能体能够像资深网民一样识别滑块验证码、模拟带有抖动与加减速的贝塞尔轨迹移动鼠标,并自动处理长页面的懒加载与虚拟滚动列表,为自动化竞品调研、舆情监测与业务协同提供企业级可靠支撑。

架构设计原则与约束

01
强类型契约隔离

基于 TypeScript 编译期深度推断,跨插件总线调用享受严格类型校验与零偏差提示。

02
毫秒级热插拔调度

支持微内核动态注册与安全平滑卸载,无需重启主宿主进程即可完成逻辑热替换。

03
确定性有限状态机

内置严谨的多阶段任务生命周期控制,防止复杂长时迭代推理场景中会话状态丢失。

04
零动态构建底层依赖

采用纯原生跨平台运行时环境设计,在 Node.js、Bun 及 Deno 容器中极速冷启动。

核心特性

01
拟人化贝塞尔轨迹生成:模拟人类操作习惯,有效绕过主流行为特征风控
02
视觉与 DOM 双模态定位:即使前端代码高度混淆,依然可通过屏幕像素精准定位
03
智能滑块与复杂图形验证:内建多种常见人机验证挑战自动识别与破解算法
04
高并发多租户代理池轮换:无缝对接企业动态住宅 IP 代理池,保障长期采集稳定

核心机制

01

视觉分块与特征定位

结合视觉模型对页面进行截图语义分块,精确定位按钮与输入区域。

02

拟人化操作规划

生成包含轻微抖动、加减速曲线的自然贝塞尔鼠标滑动与点击序列。

03

交互阻碍动态攻坚

识别滑块缺口并自动完成拼图对齐,平滑通过动态安全质询。

04

结构化数据抽取交付

将目标区域的数据按指定 Schema 抽取为结构化 JSON 交付模型。

配置参数参考 (YAML / JSON)

参数名类型默认值说明
stealthModebooleantrue是否开启高级拟人防封禁隐身模式
proxyServerstring-配置的上游住宅代理服务器地址与鉴权信息
actionDelayMsnumber800连续模拟操作之间的拟人化随机等待基础延迟

应用场景

企业级生产智能体运行时

依托微内核生命周期与容错状态机,保障企业复杂 Agent 全天候稳定执行不崩溃。

基准测试标准化评测运行

深度原生集成 SWE-bench 标准流程,自动化抓取代码变更并产出规范复现指标。

全自主代码工程重构演进

精准拆解模型思考流与具体操作,跨多文件自主排查并高质量完成大型模块重构。

跨系统多工具流协同自动化

在多进程沙箱间安全并发调度事件,打通研发上下游系统实现端到端自动化流转。

最佳实践

01
权限沙箱隔离机制

严格限定子进程系统调用与外部网络范围,在生产环境中建议结合 Docker 独立容器执行。

02
配置指数退避重试

针对上游模型接口限流与偶发网络抖动,建议开启自适应退避重试并设定最大执行上限。

03
长时任务状态快照

利用内核事件总线快照功能实时固化会话节点,发生不可抗意外时支持秒级断点恢复。

04
全量结构化链路追踪

开启全量 Trace 日志输出,将大模型思考过程与具体工具入参返回值集中汇聚至监控。

常见问题

Q1:长时间执行任务超时如何正确配置?

可在配置文件中调大 timeout 阈值,并通过生命周期钩子定期向总线派发心跳信号。针对长耗时推理与工具调用,建议配合持久化会话快照机制,在任务暂停或重启后无缝恢复执行上下文,避免会话被内核提前回收。

Q2:如何捕获并流式解析模型思考过程?

框架原生提供流式回调机制,会话状态机自动拦截并剥离大模型的 <think> 思考标签。开发者只需监听 onThink 事件即可实时获取推理增量,结合前端流式渲染呈现动效,并支持将完整推导链沉淀至审计日志。

Q3:多个插件依赖冲突时如何按需加载?

Cordis 微内核基于有向无环图进行拓扑排序并解析依赖树。当插件间存在同名服务或版本冲突时,可通过命名空间隔离机制按需挂载;结合上下文注入与惰性初始化技术,仅在工具唤起时动态加载资源,保障系统稳定。

Q4:生产环境中如何实施权限与沙箱隔离?

推荐结合容器沙箱与细粒度权限管控,严密禁止插件越权访问敏感文件与未授权外部网络。可通过微内核提供的权限白名单机制严格限制系统调用,并将工具执行环境置于隔离容器内,彻底阻断潜在的代码注入与提权安全风险。

相关生态插件推荐

为你推荐同分类及高度协同的 Cordis 扩展