
上回谈到模型从基础模型发展而来,变成行业模型。它在传统的开发测试路线之外,另外重新订立了一条新路线。 它对我们的开发测试是一种新事物,对于开发来说,代码量变少了,但是增加了Prompt工程和其他RAG知识对接;对测试来说,语料开发和AW开发是新增工作,但也能减少测试用例和测试代码量。
合规模型最初开发平台选择了云AI平台,在腾讯云开发平台上,进行模型算法函数的代码开发。这是个开发流水线,之前的合规模型只有算法,用JAVA编写,有的用C语言编写,有的用Python语言编写,编程语言不统一,如果传统开发模式,需要引入三套编程架构;但在腾讯云开发平台上用了统一编程框架,接入三种语言库函数和架构,平台用Python语言开发合规模型业务流程模块,融合算法库。
开发后也有一个测试辅助平台,在云上调用,首先要编写语料。在云测试平台上添加语料,这是基础。
在云上语料新增入口,添加银行合规规范、合同模板、外部合规文件等。
添加了语料外,还有需要语料清洗。这些语料不一定都适合合规模型,同时有些文件数据是反例,会把模型训练带偏的。
语料清洗后,基本就有了语料库,形成一个个语料库,进行语料治理发布。这些语料分为固定格式和非固定格式两种,经过发布后,相当于允许模型引用了。
AW开发是基于传统测试流程来做,在云平台上有特定的开发模式。
新的开发测试路线,引入AI技术来辅助开发测试。
欢迎点赞和关注公众号“科技江河”,如果喜欢,打赏下呗,感谢。
原创声明:本文系作者授权腾讯云开发者社区发表,未经许可,不得转载。
如有侵权,请联系 cloudcommunity@tencent.com 删除。
原创声明:本文系作者授权腾讯云开发者社区发表,未经许可,不得转载。
如有侵权,请联系 cloudcommunity@tencent.com 删除。