网络模型输出结果管控方法、装置、服务器及存储介质与流程

专利检索2026-07-04  12


本发明涉及人工智能,尤其涉及一种网络模型输出结果管控方法、装置、服务器及存储介质。


背景技术:

1、随着人工智能技术的不断升级和应用场景的不断拓展,自然语言处理网络模型能够基于在预训练阶段所见的模式和统计规律,来生成回答,并能完成简单撰写论文、邮件、脚本、文案等任务。越来越多的企业通过使用自然语言处理网络模型,为用户提供更加便捷、高效的服务。

2、在企业使用自然语言处理网络模型时,需要针对自身的业务特点对自然语言处理网络模型进行个性化训练,特别是采用企业内部的一些文件进行训练,能够得到更有针对性和个性化的反馈结果。然而,由于其采用内部文件进行训练,其不可避免在输出结果中涉及企业内部信息,极大地影响了企业内部信息安全。


技术实现思路

1、本发明实施例提供了一种网络模型输出结果管控方法、装置、服务器及存储介质,以解决现有技术中自然语言处理网络模型在返回结果时泄露敏感信息的技术问题。

2、第一方面,本发明实施例提供了一种网络模型输出结果管控方法,包括:

3、响应用户访问人工智能网络模型请求,根据所述请求确定所述用户的角色模型,根据所述角色模型判断是否对所述人工智能网络模型具有访问权限;

4、在具有访问权限时,接收所述人工智能网络模型的输出结果,判断所述输出结果中是否包括超出所述角色模型的敏感信息,在包括敏感信息时,对所述输出结果进行管控处理。

5、第二方面,本发明实施例还提供了一种网络模型输出结果管控装置,包括:

6、相应模块,用于响应用户访问人工智能网络模型请求,根据所述请求确定所述用户的角色模型,根据所述角色模型判断是否对所述人工智能网络模型具有访问权限;

7、管控模块,用于在具有访问权限时,接收所述人工智能网络模型的输出结果,判断所述输出结果中是否包括超出所述角色模型的敏感信息,在包括敏感信息时,对所述输出结果进行管控处理。

8、第三方面,本发明实施例还提供了一种服务器,包括:

9、一个或多个处理器;

10、存储装置,用于存储一个或多个程序,

11、当所述一个或多个程序被所述一个或多个处理器执行,使得所述一个或多个处理器实现如上述实施例提供的网络模型输出结果管控方法。

12、第四方面,本发明实施例还提供了包含计算机可执行指令的存储介质,所述计算机可执行指令在由计算机处理器执行时用于执行如上述实施例提供的网络模型输出结果管控方法。

13、本发明实施例提供的网络模型输出结果管控方法、装置、服务器及存储介质,通过响应用户访问人工智能网络模型请求,根据所述请求确定所述用户的角色模型,根据所述角色模型判断是否对所述人工智能网络模型具有访问权限;在具有访问权限时,接收所述人工智能网络模型的输出结果,判断所述输出结果中是否包括超出所述角色模型的敏感信息,在包括敏感信息时,对所述输出结果进行管控处理。通过对网络模型输出结果的来源进行查询,确定输出结果中是否含有当前用户不具有权限查看的敏感信息,并基于敏感信息对输出结果进行管控处理,防止用户查看到敏感信息,提升了企业内部信息安全。



技术特征:

1.一种网络模型输出结果管控方法,其特征在于,包括:

2.根据权利要求1所述的方法,其特征在于,所述对所述输出结果进行管控处理,包括:

3.根据权利要求1所述的方法,其特征在于,所述判断所述输出结果中是否包括超出所述角色模型的敏感信息,包括:

4.根据权利要求3所述的方法,其特征在于,所述获取所述角色模型对应的权限集合,根据所述权限集合确定具有预览权限的文件集合,还包括:

5.根据权利要求3所述的方法,其特征在于,所述利用具有预览权限的文件判断所述输出结果中是否包括超出所述角色模型的敏感信息,包括:

6.根据权利要求3所述的方法,特征在于,所述利用具有预览权限的文件判断所述输出结果中是否包括超出所述角色模型的敏感信息,还包括:

7.根据权利要求2所述的方法,其特征在于,所述利用具有预览权限的文件判断所述输出结果中是否包括超出所述角色模型的敏感信息,包括:

8.一种网络模型输出结果管控装置,其特征在于,所述装置包括:

9.一种服务器,其特征在于,所述服务器包括:

10.一种包含计算机可执行指令的存储介质,所述计算机可执行指令在由计算机处理器执行时用于执行如权利要求1-7任一所述的网络模型输出结果管控方法。


技术总结
本发明实施例公开了一种网络模型输出结果管控方法、装置、服务器及存储介质,其中,所述方法包括:响应用户访问人工智能网络模型请求,根据所述请求确定所述用户的角色模型,根据所述角色模型判断是否对所述人工智能网络模型具有访问权限;在具有访问权限时,接收所述人工智能网络模型的输出结果,判断所述输出结果中是否包括超出所述角色模型的敏感信息,在包括敏感信息时,对所述输出结果进行管控处理。通过对网络模型输出结果的来源进行查询,确定输出结果中是否含有当前用户不具有权限查看的敏感信息,并基于敏感信息对输出结果进行管控处理,防止用户查看到敏感信息,提升了企业内部信息安全。

技术研发人员:尉伟东,袁磊
受保护的技术使用者:天津联想协同科技有限公司
技术研发日:
技术公布日:2024/5/29
转载请注明原文地址:https://win.8miu.com/read-1164724.html

最新回复(0)