首页
学习
活动
专区
圈层
工具
发布
首页标签测试开发

#测试开发

英伟达自爆 Agent 缺陷:输出正确 ≠ 交付合格,Agent 测试三层校验边界

霍格沃兹-测试开发学社

NVIDIA 在 11 月 4 日的技术博客里公开了一个企业助手 Agent 的失败:用户让它起草一封邮件,它起草完直接调用了发送工具。文章给出的判定器只问一件...

3910

Anthropic 的代码审查跑到五十多轮还没过:AI 审 AI 会自己卡住

霍格沃兹-测试开发学社

一句话定位:这不是"AI 审得好不好",而是"两个 Agent 互相审,会不会把对方拖死"——被测对象是审查循环能不能收敛,不是某条意见对不对。同样的收敛规则可...

5810

GitHub 一个月 73.8 亿次提交:质量周报里哪个指标先失真

霍格沃兹-测试开发学社

一句话定位:这不是"提交多了好不好",而是"这些数字统计的还是不是原来那件事"——被测对象是指标的口径与分母,不是数量本身。同样的口径检查可迁移到缺陷率统计、自...

4510

美团把训练和推理的概率做到逐位相同:分歧藏在一个加法顺序里

霍格沃兹-测试开发学社

一句话定位:这不是"模型变聪明了没有",而是"同一份权重换个并行切分,输出会不会飘"——被测对象是训练与推理两条路径的结果是否逐位相同。同样的验证思路可迁移到量...

3410

Anthropic 的记忆实验:九份笔记拿四个徽章,四百多份只拿一个

霍格沃兹-测试开发学社

一句话定位:这不是"它记得多不多",而是"一条错的东西能活多久、能扩散到多远"——被测对象是记忆的信噪比与传播路径,不是召回率。同样的断言可迁移到知识库检索、多...

7210

「你会用 AI 吗」这题,答"会用"是最亏的答法

霍格沃兹-测试开发学社

2027 届校招的测试岗面试,"AI"已经成了必问项,但考的不是知识量。这篇文章拆三道最常出现的题:会不会用 AI、AI 会不会取代测试、AI 用例生成后测试还...

13110

混元 Hy4 上手实测:把「能干活」当卖点的腾讯新旗舰,成色如何?

霍格沃兹-测试开发学社

Hy4 是腾讯混元最新发布的 770B 参数级开源大模型,第一次把视觉理解、Computer Use 与长程 Agent 能力打包进同一个模型,并在多模态推理和...

56920

它自己搭库、配登录、上线:中间那道门禁,测过吗

霍格沃兹-测试开发学社

2026 年 11 月 5 日,Cursor 上线"Build Live Apps":云 Agent 可以按一句话需求搭出 Web 应用、开 Postgres ...

17410

自愈测试把红灯修绿了,但它可能把断言一起修没了

霍格沃兹-测试开发学社

自愈测试正在从"换选择器"扩展到"改断言、改用例"。2026年11月1日,开源项目 Qwen Code 的发布说明里给自动修复加了一条很值得抄的规则:最多推3次...

11610

单测全过,退款金额却在几个月后错了:AI 写的工具函数最容易漏这一层

霍格沃兹-测试开发学社

一次普通的结账改动评审,新增了一个 pricing.ts,里面是一个 formatMoneyCents()。代码写得干净,带了单元测试,功能也跑通了。问题在于,...

12510

Agent 测评指标怎么选、怎么算?

测试开发技术

AI 时代,Agent 正在成规模走进产品,客服机器人、编程助手、知识库问答,背后都是 Agent 在替用户干活。Agent 好不好用,光靠人拍脑袋说不清,要想...

14410

AI 测试 Skill 大全,我日常在用的 27个,夯爆了!

测试开发技术

我平常在用的 Skill 种类有很多,办公提效、创作类、自动化工作流相关的,零零散散加起来不少,后面有机会再给大家分享。今天单独说一说与AI测试强相关的。

18410

我开发了一款免费开源的测试开发刷题学习网站

测试开发技术

过去一个多月,我干了一件事,开发了一个免费开源的测试开发刷题学习网站。刷题的部分是我把测试开发的面试题梳理了一遍,整理出 10 个专题共 200 题,学习路线、...

17710

我开发了一款基于业务场景接口测试Skill ,端到端覆盖率达到99.99%,太夯了!

测试开发技术

在之前发布的SKILL,我们已经能把接口测试的 AI 流水线跑通了,但一直留着一个缺口:登录、加购、下单各自都测得很好,拼到一起却不一定通——单接口全绿,业务照...

28821

夯爆了!分享几个我在用的,基于业务场景接口串联测试Skill !

测试开发技术

在AI赋能自动化测试全流程,前面分享的系列文章中,我们把接口自动化测试的智能化流水线完整跑通了。

21410

2027届做Skills权限实验:把“会调用工具”变成可验收项目

霍格沃兹-测试开发学社

摘要:很多校招Agent项目只展示天气、搜索和文件读取。这个项目进一步验证Skill来源、目录白名单、网络权限、人工确认、幂等与版本更新,让“工具调用”从演示功...

14210

Google Research 开源 Harness²:不改模型权重,AI Agent 如何持续进化?

霍格沃兹-测试开发学社

同一个大模型,为什么接入不同的工具、提示词和记忆系统后,执行任务的表现可能相差很大?

24810
领券