本文介绍: 研究者在一组五种不同安全基准评估了预训练的法学硕士有效性,这些基准涵盖两种语言,Java和C/ c++,并包括来自合成和现实世界项目代码样本。此外,LLM还经常提供可靠解释精确识别代码中的易受攻击数据流简介:虽然多模态语言模型(MLLM)的最新进展构成了该领域的重大飞跃,但这些模型主要局限于输入端多模态理解领域,缺乏多模态内容生成能力。为了填补这一空白我们提出了GPT4Video,这是一个统一的多模型框架,使大型语言模型 (LLM) 具有视频理解生成能力

GPTSecurity一个涵盖了前沿学术研究实践经验分享社区集成生成训练Transformer(GPT)、人工智能生成内容(AIGC)以及大型语言模型(LLM)等安全领域应用知识。在这里,您可以找到关于GPT/AIGC/LLM最新研究论文博客文章、实用的工具和预设指令(Prompts)。现为了更好地知悉近一周的贡献内容,现总结如下

                                      Security Papers

1. PrivateLoRA 用于高效隐私保护LLM

简介:在这项工作中,研究者提出了一种新的LLM服务范式,该范式隐私敏感计算分布在边缘设备上,并在云中共享计算。只有激活中心云和边缘设备之间传输,以确保数据局部性。该研究的核心创新是PrivateLoRA,通过利用等级的剩余激活解决具有挑战性的通信开销,实现95%以上的通信减少。

链接

https://arxiv.org/pdf/2311.14030.pdf   

2. 不要忘记私有检索:大型语言模型分布式私有相似搜索

简介本文中,研究者提出了私有检索增强生成(PRAG),这是一种使用多方计算(MPC)将查询安全传输包含私有构建数据库分布式服务器集以返回topk和近似topk文档方法。这是密集信息检索的第一种方法,可确保没有服务器观察到客户机的查询或可以看到数据库内容。该方法引入了一种新的MPC友好协议,用于反向文件近似搜索(IVF),该协议允许在亚线性通信复杂性下对分布式和私有数据进行快速文档搜索。

链接:

https://arxiv.org/pdf/2311.12955.pdf

3. 了解大型语言模型检测安全漏洞方面的有效

简介本文中,研究者探讨了预先训练的LLM是否可以检测安全漏洞并解决现有工具的局限性。研究者在一组五种不同安全基准评估了预训练的法学硕士有效性,这些基准涵盖两种语言,Java和C/ c++,并包括来自合成和现实世界项目代码样本。研究表明LLM通常比现有的静态分析基于深度学习漏洞检测工具表现更好,特别是对于某些类别的漏洞。此外,LLM还经常提供可靠解释精确地识别代码中的易受攻击数据流

链接:

https://arxiv.org/pdf/2311.16169.pdf

4. 利用动态注意力提高基于 Transformer 的大型语言模型鲁棒

简介:基于Transformer模型例如BERT和GPT,由于其卓越的性能而在自然语言处理(NLP)中得到了广泛采用。然而,最近的研究表明,它们容易受到文本对抗性攻击,其中模型输出可能会因故意操纵文本输入而被误导。尽管已经提出了各种方法来增强模型的鲁棒性并减轻此漏洞,但许多方法需要大量消耗资源例如对抗训练)或仅提供有限保护(例如,防御退出)。在本文中,研究者提出了一种称为动态注意力的新颖方法,专为Transformer架构量身定制,以增强模型本身针对各种对抗攻击的固有鲁棒性。实验表明,动态注意力显着减轻了对抗攻击影响,与之前针对广泛使用的对抗性攻击的方法相比,性能提高了33%。

链接:

https://arxiv.org/pdf/2311.17400.pdf

5. GPT4Video:用于指令跟随理解安全意识生成的统一多模态大语言模型

简介:虽然多模态大语言模型(MLLM)的最新进展构成了该领域的重大飞跃,但这些模型主要局限于输入端多模态理解领域,缺乏多模态内容生成的能力。为了填补这一空白,我们提出了GPT4Video,这是一个统一的多模型框架,使大型语言模型 (LLM) 具有视频理解和生成的能力。定性和定性实验表明,GPT4Video 有潜力成为有效、安全且类人的视频助手,可以处理视频理解和生成场景

链接:

https://arxiv.org/pdf/2311.16511.pdf

原文地址:https://blog.csdn.net/m0_73736695/article/details/134800327

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任

如若转载,请注明出处:http://www.7code.cn/show_49294.html

如若内容造成侵权/违法违规/事实不符,请联系代码007邮箱suwngjj01@126.com进行投诉反馈,一经查实,立即删除

发表回复

您的电子邮箱地址不会被公开。 必填项已用 * 标注