rea-lab:测量 REA 对 Windows 逆向任务的实际帮助
Controlled Windows reverse-engineering studies
分析目标:Windows 小型挑战、更大含诱饵二进制及真实开源程序
作者 / 归属:pablodiazjorge
核对日期:2026-10-16
收录状态:已阅读公开来源,未独立复跑作者测试
想解决什么问题
加上 REA 后,代理解决任务的成功率、耗时和成本怎样变化?
REA 具体做了什么
搭建 Windows + Ghidra 环境,做预注册对照研究,核验引用 Evidence,公开 writeups、环境与上游修复。
原作者报告的成果
Study 1 报告两组均解出 28/30;Study 2 为无 REA 11/24、用 REA 4/24;Study 3 为 71/72 与 68/72。作者报告 REA 组耗时与成本更高。
局限与未验证项
后两组差异未达来源所用统计检验的显著水平;样本、任务、模型、版本都受限,不能推广成 REA 对所有任务无效。数值按公开 README 转述,未复跑。
可以借鉴什么
评估工具时同时看对照组、任务分布、成本与证据质量。
原文中的 REA 使用证据
Study 1, preregistered: on ten small Windows crackmes, rea did not change how many Claude Code solved短摘录简化了排版,完整上下文以原文为准。
原始来源
本页为独立中文整理,成果归原作者。目标软件、安装包和完整反编译输出不在此分发。