蚂蚁集团发布大模型评估:DevOps-Eval 基准 蚂蚁集团在近日发布了针对DevOps领域的基准评估大模型——DevOps-Eval。该模型旨在评估企业在DevOps方面的实践水平和成果,帮助企业更好地优化和提升其DevOps实践的质量和效率。 DevOps-Eval基准采用了蚂蚁集团自家的评估指标体系,包括基础设施可维护性、应用程序部署速度、变更管理效率、持续集成和持续部署效率、容器化部署效率、运维自动化效率、安全管理效率等多个方面。 据蚂蚁集团介绍,DevOps-Eval基准适用于各种规模的组织,无论是在传统IT环境中还是在数字化转型的道路上,都能够帮助企业更好地实现DevOps转型,提升企业的代码质量、业务交付能力和运营效率。 此外,蚂蚁集团还提供了DevOps培训和咨询服务,帮助企业更好地理解和应用DevOps理念,提高企业的技术水平和创新能力。

2023-11-02 20:06:15 蚂蚁科技集团股份有限公司

• 据站长之家11月2日报道,蚂蚁集团与北京大学合作发布了一种面向DevOps领域的大语言模型评测基准——“DevOps-Eval”。该评测基准涵盖了计划、编码、构建、测试、发布、部署、运维和监控等8个类别,共计4850道题目,以及针对AIOps任务的细分和日志解析、时序异常检测、时序分类和根因分析等任务。目前,DevOps-Eval已发布了第一期的评测榜单,涉及OpsGpt、Qwen、Baichuan和Internlm等开源大语言模型。DevOps-Eval的评测方式包括Zero-shot和Few-shot,评测结果显示各模型得分相差不大。

  

• 蚂蚁集团创办于2004年，是移动支付平台「支付宝」的母公司，也是领先的金融科技开放平台，致力于携手合作伙伴，为消费者和小微经营者提供普惠、绿色、可持续的服务，为世界带来微小而美好的改变。 旗下产品包括支付宝、蚂蚁森林、余额宝、蚂蚁链、OceanBase等。 重庆蚂蚁消费金融有限公司（简称“蚂蚁消金”）是经中国银保监会批准、持有消费金融牌照的金融机构。 蚂蚁消金于2021年6月4日成立并开业，注册资本185亿元，股东包括蚂蚁科技集团股份有限公司、杭州金投数字科技集团有限公司、南洋商业银行有限公司、浙江舜宇光学有限公司、传化智联股份有限公司、江苏鱼跃医疗设备股份有限公司、国泰世华银行（中国）有限公司、宁德时代新能源科技股份有限公司、广州博冠信息科技有限公司、北京千方科技股份有限公司、中国华融资产管理股份有限公司、重庆市农信投资集团有限公司。

• 招聘范围主要集中在杭州、上海、成都，主要招聘经验要求为3-5年，学历要求为本科的岗位。

• 公司参与中标3次，最近项目为：792项行业标准拟立项 涉及智能制造、集成电路等领、2022年浙江省标准创新贡献奖拟授奖名单公示、天津市金融工作局机关 天津市金融工作局非法集资监测报告服务项目 (项目编号:TJYY-ZC-2018-010)成交公告。