和利时
岗位信息
招聘岗位
大模型评测工程师
是否笔试
未明确
招聘批次
校招
发布日期
2026-08-19
📋 岗位职责 / 任职要求
岗位职责:1、建设场景级评测集、Golden Case 与自动化回归,定义发版质量门禁;
2、设计证据包与停止条件(数据版本、模型版本、约束/规则结果、人工确认记录等);
3、实现或配置决策门控:超适用域降级、证据缺失拦截、风险分级转人工;
4、与算法、认知运行时协作,将评测与门控接入 CI/发布流程;
5、输出可审计的决策轨迹与验收报告材料;
6、组织测试用例设计与回归执行、缺陷管理与版本质量报告;支持现场验收测试与问题复现;
7、对合同约定的效果类指标建立在线测量口径并按门限判定,形成可向客户出示的举证材料;
8、建设记忆与经验治理机制:Agent 结论回流的入库门控、经验条目的定期回标、技能条目的分级晋级判定。
任职要求:1、具备评测集建设、自动化回归或质量门禁落地经验;
2、具备规则引擎/策略引擎或业务审核、风控流水线经验之一;
3、理解 LLM/Agent 常见失效模式(幻觉、越权工具调用、证据不足仍下结论)并能设计拦截点;
4、熟练使用 Python,能开发校验器或评测脚本;
5、具备审计留痕或操作可追溯方案设计/实现经验;
6、具备把主观效果指标转化为可测量口径的能力:能定义「建议被采纳」「根因判断正确」的判定规则、采样方式与统计口径,并说明其局限;
7、具备回归测试体系与缺陷管理经验,能设计数据类用例(对齐、缺失、时钟异常等)。
🏢 企业简介
成立1993 年总部北京
和利时(Hollysys)成立于1993年,总部位于北京,是一家专注于工业自动化与交通智能化领域的国家级高新技术企业。公司业务覆盖工业智能化、交通智能化、食药智能化三大板块,提供DCS分布式控制系统、PLC可编程控制器、核电站数字化仪控系统及城市轨道交通信号与智能控制解决方案。2008年于美国纳斯达克上市(股票代码HOLI),2024年完成私有化退市。截至2026年,公司在北京、杭州、西安、深圳及新加坡等地设有研发与生产基地,全球员工约5500人,产品应用于核电、高铁等超万个工程,业务遍及40多个国家。
投递方式
投递入口需登录后查看,登录 / 注册 即可使用ℹ️ 信息来源
本条招聘信息由校招宝转载自 Moka 招聘系统(企业校招官网),版权归原发布方所有,校招宝仅作信息聚合与导航。
该来源未提供原文链接
招聘信息以官方原文为准,投递前请核实截止日期与要求。如涉侵权或信息有误,请邮件联系 kknee@qq.com,我们将在 24 小时内处理。