基于视联算法仓的自动准入检测方法和系统与流程

    专利查询2025-04-30  10


    本申请属于it与软件开发领域,更具体而言,涉及ai算法仓的部署领域。


    背景技术:

    1、近年来,随着大数据和人工智能技术的逐步成熟与广泛应用,针对更多场景的ai算法需求不断增加,算法迭代速度持续加快,新的算法框架层出不穷,场景化的算法应用也日趋丰富。

    2、面对日益复杂的海量算法应用场景,如何建设一个更加高效并可持续演进的算法资源管理平台,来帮助企业实现算法全生命周期管理,已成为各大企业在开展ai应用过程中面临的一大挑战。

    3、因此,为了帮助企业实现算法的统一管理和算法在企业应用中的全生命期支撑,提升企业资源的利用率和开放性,构建算法管理生态体系,已经提出了“算法仓(或算法仓库)”的概念。

    4、所谓的“算法仓”,是指管理算法(或算法模型)的仓库,仓库集中管理所有的ai算法,并提供ai分析服务能力,实现多厂家、多版本算法的快速集成,并提供算法的生命周期管理能力。算法仓体系架构提供了统一的算法管理服务和生命周期管理能力,使得算法分析能力不再固化在应用产品中,具有系统高可用、资源高利用率、算法灵活开放等优势。

    5、但是,如前所述,当今众多的厂家或个人不断开发出海量的ai算法,这其中必然有某些算法效率不高、性能低下,甚至存在许多bug。而一些ai算法可能是针对其他领域优化,也不适合算法仓平台的受众用户。更有一些ai算法可能存在潜在的风险。因此,ai算法的好坏、是否符合企业的要求、能否上架(即收录到算法库中)都必须要经过严谨复杂的准入检测,例如接口检测和功能性检测。然而,传统的准入检测方式至少存在下述这些问题:

    6、(1)每部署一个算法,就需要重新准备检测数据,进行接口和功能检测,而这将导致代码量巨大且不方便维护,检测数据无法统一管理;

    7、(2)检测生成的报告无法进行人工二次研判。

    8、因此,亟需一种能够提高执行效率的算法自动准入检测方案以解决上述问题,从而在符合企业的算法运营体系规范下,实现第三方算法与自研算法的自动化准入检测,以满足日益增长的海量智能应用需求。


    技术实现思路

    1、为了解决现有技术的不足,本申请提供一种基于视联算法仓的自动准入检测方法,以解决目前技术、管理上存在的问题。

    2、根据本申请的第一方面,提供了一种算法自动准入检测方法,包括:

    3、在准备阶段:

    4、建立一个样本库以供在检测中使用;

    5、对于一个新的待检测的算法,预设所述算法的镜像并将其添加到算法自动准入检测系统中;

    6、在接口测试阶段,对所述镜像的接口规范进行检测;

    7、在功能测试阶段,对所述算法的运行效率、算法准确率进行检测;

    8、基于接口检测的过程数据及结果、功能验证的检测结果生成检测报告并提供所述检测报告的下载;

    9、其中,所述方法还提供了自动检测管理功能,用于在整个准入检测的过程中,以可视化图形界面的形式呈现检测过程中涉及的每个阶段步骤的状态,并允许测试人员在各阶段的手动操作,以实现在所述准入检测的过程中的人工二次研判。

    10、根据本申请的第二方面,提供了一种算法自动准入检测系统,包括:

    11、自动检测管理模块,被配置用于在整个准入检测的过程中,以可视化图形界面的形式呈现检测过程中涉及的每个阶段步骤的状态,并允许测试人员在各阶段的手动操作,以实现在所述准入检测的过程中的人工二次研判;

    12、样本库,被配置用于管理算法的准入检测中用于功能检测的样本信息;

    13、预设镜像模块,被配置用于为一个新的待检测的算法预设所述算法的镜像并将其添加到所述算法自动准入检测系统中;

    14、接口检测模块,被配置用于对所述镜像的接口规范进行检测;

    15、功能检测模块,被配置用于对所述算法的运行效率、算法准确率进行检测;

    16、报告模块,被配置用于基于接口检测的过程数据及结果、功能验证的检测结果生成检测报告并提供所述检测报告的下载。

    17、提供本概述以便以简化的形式介绍以下在详细描述中进一步描述的一些概念。本概述并不旨在标识所要求保护主题的关键特征或必要特征,也不旨在用于限制所要求保护主题的范围。



    技术特征:

    1.一种算法自动准入检测方法,包括:

    2.如权利要求1所述的算法自动准入检测方法,其特征在于,所述接口测试阶段包括下述步骤:

    3.如权利要求2所述的算法自动准入检测方法,其特征在于,所述接口测试阶段还包括:日志规范、断流重试机制。

    4.如权利要求1所述的算法自动准入检测方法,其特征在于,所述功能测试阶段包括:

    5.如权利要求1所述的算法自动准入检测方法,其特征在于,所述预设所述算法的镜像包括:根据算法仓的运行环境、接口、功能、准确率要求将经过训练的算法模型与程序封装接口打包成所述镜像。

    6.如权利要求1所述的算法自动准入检测方法,其特征在于,所呈现的状态包括:进行到的阶段、开始执行的时间、耗时、日志、执行结果。

    7.如权利要求4所述的算法自动准入检测方法,其特征在于,其中所述功能验证的结果包括:算法告警率、误报率、漏报率以及其他指标的评估数据。

    8.一种算法自动准入检测系统,包括:

    9.如权利要求8所述的算法自动准入检测系统,其特征在于,还包括:样本库管理模块,被配置用于允许以分类形式组织和呈现样本,并允许对样本进行编辑操作。


    技术总结
    本申请涉及一种算法自动准入检测方案,包括:在准备阶段:建立一个样本库以供在检测中使用;对于一个新的待检测的算法,预设所述算法的镜像并将其添加到算法自动准入检测系统中;在接口测试阶段,对所述镜像的接口规范进行检测;在功能测试阶段,对所述算法的运行效率、算法准确率进行检测;基于接口检测的过程数据及结果、功能验证的检测结果生成检测报告并提供所述检测报告的下载;其中,所述方法还提供了自动检测管理功能,用于在整个准入检测的过程中,以可视化图形界面的形式呈现检测过程中涉及的每个阶段步骤的状态,并允许测试人员在各阶段的手动操作,以实现在所述准入检测的过程中的人工二次研判。

    技术研发人员:王艺,黄开发,潘浩,高帆,高明尧
    受保护的技术使用者:天翼视联科技有限公司
    技术研发日:
    技术公布日:2024/11/26
    转载请注明原文地址:https://tc.8miu.com/read-28078.html

    最新回复(0)