首页
学习
活动
专区
圈层
工具
发布
首页标签测试开发

#测试开发

聊着聊着就报错了——上下文溢出与 Token 边界测试

霍格沃兹-测试开发学社

AI 测试开发面试高频题:"大模型接口常见的边界问题有哪些?" 边界值分析是测试的老手艺,但大模型的边界换了形态:输入有上下文窗口,输出有 max_tokens...

2300

模型一本正经地胡说八道——幻觉检测与线上监控

霍格沃兹-测试开发学社

AI 测试开发面试高频题:"怎么检测和防控大模型幻觉?" 幻觉不是偶发 bug,而是生成模型的概率行为。测试的职责不是"消灭幻觉",而是把它压进阈值、让它可观测...

2600

Agent 半夜陷入死循环,一夜烧掉上万 token——轨迹测试与熔断

霍格沃兹-测试开发学社

AI 测试开发面试高频题:"测 Agent 和测普通接口有什么本质区别?" 普通接口测的是"一次调用对不对",Agent 测的是"一条决策链会不会失控"。这篇用...

5000

模型编造 API 参数,工具调用连环 500——Function Calling 契约测试

霍格沃兹-测试开发学社

AI 测试开发面试高频题:"Function Calling / Tool Use 怎么测?" 工具调用是 Agent 的手脚,也是事故重灾区:模型会编造不存在...

13510

改了一行 Prompt,用例全红了——Prompt 回归测试与 CI 门禁

霍格沃兹-测试开发学社

AI 测试开发面试高频题:"Prompt 变更怎么防回归?" Prompt 是代码,但它比代码危险:改一个错别字不会有编译错误,却可能让模型行为整体漂移。这篇讲...

14810

RAG 上线后为什么总"答非所问"?黄金数据集与检索质量评测

霍格沃兹-测试开发学社

AI 测试开发面试高频题:"你们怎么评测 RAG 系统的质量?" 答"看回答得对不对"只能算及格。这篇讲一次真实的"答非所问"故障是怎么定位到检索层的,以及黄金...

12910

同一个接口每次返回都不一样?大模型输出的可靠断言怎么写

霍格沃兹-测试开发学社

AI 测试开发面试高频题:"大模型的输出是不确定的,你怎么做自动化测试?" 这篇用一个真实线上故障,完整还原 AI 测试开发工程师的处理过程:怎么定位、怎么写代...

11200

AI Agent测试实战:如何测试一个会自主决策的软件系统?

霍格沃兹-测试开发学社

16710

RAG系统测试实战:如何验证企业知识库AI助手是否可靠?

霍格沃兹-测试开发学社

20210

LLM测试体系设计:从Prompt测试到模型质量评估的完整实践

霍格沃兹-测试开发学社

但是,大语言模型(Large Language Model,LLM)的出现改变了这一切。

14810

5年测试开发面试为什么开始考算法?从测试平台到AI质量工程看技术能力变化

霍格沃兹-测试开发学社

霍格沃兹测试开发学社,隶属于测吧(北京)科技有限公司,是一个专注软件测试、自动化测试、人工智能测试与测试开发的技术交流社区,并参与高校测试实训、火焰杯赛事及工程...

13910

大模型测试为什么离不开哈希表?从Token统计、数据去重到LLM评测

霍格沃兹-测试开发学社

随着ChatGPT、Claude、通义千问、豆包等大模型应用快速落地,软件测试领域正在出现一个新的方向:

12510

测试工程师最容易忽略的数据结构:数组到底有什么用?

霍格沃兹-测试开发学社

霍格沃兹测试开发学社,隶属于测吧(北京)科技有限公司,是一个专注软件测试、自动化测试、人工智能测试与测试开发的技术交流社区,并参与高校测试实训、火焰杯赛事及工程...

10800

接口自动化框架为什么需要链表思想?从测试任务调度看链表应用

霍格沃兹-测试开发学社

霍格沃兹测试开发学社,隶属于测吧(北京)科技有限公司,是一个专注软件测试、自动化测试、人工智能测试与测试开发的技术交流社区,并参与高校测试实训、火焰杯赛事及工程...

12900

用AI写测试用例,效率飙升300%:手把手实操指南(建议收藏)

霍格沃兹-测试开发学社

最近半年,我所在的技术群里,关于“AI写测试用例”的讨论翻了十倍不止。不是因为这东西新鲜,而是因为越来越多人发现——自己花一整天写的用例,工具30秒就吐出来了,...

13700

独家揭秘:拼多多测试团队如何用AI把回归时间从3天压到2小时

霍格沃兹-测试开发学社

去年双十一大促封网前夜,一位在拼多多做测试的朋友发了条朋友圈:“终于不用再通宵等回归结果了。”

8102

AI 测试提效 | 告别手工写脚本,分享我的 Playwright + Skill 批量生成 UI 自动化脚本方案

测试开发技术

上一篇我们聊了 ui-page-parser,解决了 UI 自动化「抓元素」的痛点,拿到了一份标准化的 pages.yaml。

37720
领券