https://docs.anthropic.com/zh-CN/docs/build-with-claude/computer-use
Anthropic 关于 Computer Use 功能的官方文档的主要内容:
核心功能介绍
Computer Use 是 Claude 3.5 Sonnet 的测试版新功能
允许 Claude 与计算机桌面环境进行交互操作
通过专门的 API 和工具集实现
三个主要工具组件:
computer_20241022:基础计算机交互工具
text_editor_20241022:文本编辑工具
bash_20241022:命令行工具
工作流程(4步):
提供工具和用户提示给 Claude
Claude 评估并决定使用哪个工具
在计算机上执行工具操作并返回结果
Claude 持续调用工具直到任务完成
安全建议:
使用最小权限的虚拟机或容器
避免访问敏感数据
限制互联网访问范围
重要决策需人工确认
当前限制:
操作延迟较高
计算机视觉准确性有限
工具选择可能出现错误
滚动操作不够可靠
电子表格交互存在问题
社交媒体功能受限
定价信息:
按照工具使用 API 请求计费
不同工具有额外的令牌消耗:
- computer_20241022: 683 令牌
- text_editor_20241022: 700 令牌
- bash_20241022: 245 令牌
系统提示额外消耗 466-499 令牌
这个文档比新闻报道提供了更多技术细节和实施指南,特别是在 API 调用、安全建议和具体限制方面。它也更清晰地说明了这项功能目前还处于测试阶段,存在多种限制和潜在风险。