小红花·文摘
  • 首页
  • 广场
  • 排行榜🏆
  • 直播
  • FAQ
Dify.AI
代理人工智能安全:防御提示注入和工具滥用

本文讨论了代理人工智能系统中的安全问题,特别是提示注入和工具滥用。随着AI代理从实验环境转向实际应用,安全隐患增加。专家建议的防御策略包括严格的最小权限、开源安全框架、沙箱执行环境、人机协作检查点以及监控代理活动,以确保AI系统的安全性和有效性。

代理人工智能安全:防御提示注入和工具滥用

MachineLearningMastery.com
MachineLearningMastery.com · 2026-07-17T12:00:32Z

小型语言模型(SLMs)在代理人工智能中逐渐取代大型模型,因其在处理重复性任务时更高效、经济。SLMs可直接在设备上运行,减少延迟,适用于特定工具调用,并能与大型模型协作,确保敏感数据不离开本地,适合医疗和金融等受限行业。因此,SLMs在代理设计中正成为重要选择。

小型语言模型推动下一代代理的五种方式

KDnuggets
KDnuggets · 2026-07-06T12:00:53Z
代理人工智能测试指南:方法与最佳实践

本文讨论了代理人工智能(AI)测试的复杂性,强调其与传统模型测试的不同。代理测试需要评估决策、工具调用和记忆检索等多个步骤,而不仅仅是模型输出。文章介绍了多种测试方法,包括工具选择、路径评估和端到端测试,强调在生产环境中确保代理可靠性的重要性。同时提到Redis Iris作为支持代理的实时数据层,提升代理性能。

代理人工智能测试指南:方法与最佳实践

Redis Blog
Redis Blog · 2026-07-04T00:00:00Z
问答:今天的代理人工智能是什么,我们希望它成为什么?

计算机科学家菲利普·伊索拉解释了代理人工智能(agentic AI)的工作原理及其未来潜力。代理AI能够在现实世界中采取行动,尽管在编码等领域取得成功,但其发展面临数据不足和人类过度依赖的风险。未来,代理AI可能需要更复杂的模型来处理多种数据类型,以实现更强大的功能。

问答:今天的代理人工智能是什么,我们希望它成为什么?

MIT News - Computer Science and Artificial Intelligence Laboratory (CSAIL)
MIT News - Computer Science and Artificial Intelligence Laboratory (CSAIL) · 2026-06-30T15:30:00Z
代理如何改变工作方式

代理人工智能Codex正在改变知识工作的方式,推动从短期互动向长期任务的转变。OpenAI的法律和招聘等部门已将Codex作为主要工具,使用率显著上升。用户开始进行更复杂的任务,非开发者的使用增长迅速,提升了工作效率。Codex使非技术部门能够加速工作流程,拓宽员工能力,预示着未来工作的变革。

代理如何改变工作方式

OpenAI
OpenAI · 2026-06-25T02:00:00Z
代理系统与人工智能代理指南

代理人工智能是一种自主规划和执行多步骤工作流程的系统,旨在实现特定目标并减少人类干预。与传统AI不同,代理AI能够持续感知环境、推理目标并根据结果调整行为。它在企业中自动化复杂任务,如客户服务、软件开发和供应链管理,从而提升效率和决策质量。代理系统通过协调多个代理,确保任务顺利完成,适用于重复性高、数据可用性强的工作流程。

代理系统与人工智能代理指南

Databricks
Databricks · 2026-06-23T09:53:35Z
为什么云原生是代理人工智能的核心:在Kubernetes上构建多代理安全平台的经验教训

文章讨论了在云原生基础上构建代理人工智能的必要性,介绍了实时安全操作平台的开发过程,重点包括代理的部署、安全通信、政策编码、可观察性和人机协作。通过使用Kubernetes、Falco和Cilium等技术,团队实现了高效的检测和响应机制,减轻了人工分析师的负担,提高了安全运营效率。

为什么云原生是代理人工智能的核心:在Kubernetes上构建多代理安全平台的经验教训

Cloud Native Computing Foundation
Cloud Native Computing Foundation · 2026-06-17T11:00:00Z
当代理成为分布式状态机:代理人工智能基础设施的可靠性

本文对论文《代理人工智能的AI基础设施可靠性特征与架构》进行了分析,指出代理不仅仅是单一的推理请求,而是一个长期运行的分布式状态机,因此其可靠性至关重要。

当代理成为分布式状态机:代理人工智能基础设施的可靠性

云原生
云原生 · 2026-06-16T12:45:16Z
人工智能代理需要基础设施:为什么欧洲的区域云战略至关重要

生成性人工智能正在迅速改变企业运营模式,代理人工智能被视为下一个技术变革的关键,预计到2034年市场将达到1391.9亿美元。欧洲企业需建立符合数据主权要求的云基础设施,以应对监管合规和成本挑战。Vultr提供高性能计算基础设施,帮助企业降低成本,避免对传统云服务商的依赖。

人工智能代理需要基础设施:为什么欧洲的区域云战略至关重要

The New Stack
The New Stack · 2026-06-11T14:00:00Z
代理人工智能治理:为问责制和控制而设计

文章讨论了代理人工智能(Agentic AI)的治理设计,强调在系统中融入问责制和控制。企业在部署AI时需建立信任和操作控制,治理应包括明确的责任、权限管理和审计追踪,以确保AI代理行为可控。建议逐步授予AI自主权,并在关键决策中保留人类审核,以降低风险并明确责任。治理应成为产品设计的核心,以便在出现问题时迅速定位责任和解决方案。

代理人工智能治理:为问责制和控制而设计

The JetBrains Blog
The JetBrains Blog · 2026-06-10T03:31:57Z
生产系统的代理人工智能架构模式

本文讨论了代理人工智能架构的关键要素,强调代理系统在生产环境中需具备计划、执行和反馈能力。介绍了五种主要架构模式,包括单一代理、计划与执行、分层代理等,并强调数据层的重要性。推荐使用Redis作为支持代理工作负载的实时数据平台,以提升系统性能和降低成本。

生产系统的代理人工智能架构模式

Redis Blog
Redis Blog · 2026-05-03T00:00:00Z

本文介绍了五本关于代理人工智能(agentic AI)的书籍,适合希望构建高效系统的工程师。这些书籍涵盖生产堆栈、评估框架和多代理架构等方面,强调实用性和快速原型开发。推荐书籍包括《AI工程》、《LLM工程师手册》、《动手实践大型语言模型》、《构建LLM驱动的应用》和《生成AI的提示工程》,帮助读者理解代理行为、系统可观察性及优化策略。

2026年构建代理人工智能系统的五本最佳书籍

KDnuggets
KDnuggets · 2026-04-13T12:00:52Z
掌握代理人工智能设计模式的路线图

本文介绍了如何选择和应用代理人工智能设计模式,以构建可靠、可扩展的代理系统。重点讨论了设计模式的重要性及核心模式(如ReAct、反思、规划和工具使用)的评估与部署。设计模式规范代理行为,提升可预测性和可调试性。文章强调从简单模式入手,逐步增加复杂性,以确保系统的可靠性和可扩展性。

掌握代理人工智能设计模式的路线图

MachineLearningMastery.com
MachineLearningMastery.com · 2026-04-09T12:00:35Z
在代理人工智能系统中掌握记忆的七个步骤

本文介绍了在代理人工智能系统中设计和实现有效记忆的七个步骤。记忆是系统设计的核心,能够帮助代理积累上下文、个性化响应并避免重复工作。文章分类了记忆类型,包括短期、情节、语义和程序性记忆,并提供了存储、检索和遗忘的设计原则。有效的记忆管理可以提升代理的性能和用户体验。

在代理人工智能系统中掌握记忆的七个步骤

MachineLearningMastery.com
MachineLearningMastery.com · 2026-03-23T11:00:16Z
代理人工智能在生产中为何停滞不前——控制层如何解决这一问题

代理人工智能为SRE、平台工程师和AI/ML团队提供了机遇,但仅依赖生成模型无法满足生产系统需求。实现可靠的自主决策需依赖实时系统数据和控制层,以确保可扩展性和稳定性。

代理人工智能在生产中为何停滞不前——控制层如何解决这一问题

The New Stack
The New Stack · 2026-03-17T13:00:16Z
在让人工智能代理自由行动之前,您最好了解它们的能力

文章讨论了代理人工智能系统在企业中的应用及其风险,包括过度依赖判断、数据隐私风险和供应链问题。Kin Lane指出,通过测试和模拟,企业可以安全地准备代理系统,确保其行为与设计一致。Microcks等开源工具促进了API的模拟和合同测试,提高了开发效率和团队协作,帮助企业在不直接接触核心服务的情况下进行开发和测试。

在让人工智能代理自由行动之前,您最好了解它们的能力

The New Stack
The New Stack · 2026-03-12T20:22:11Z

代理人工智能(Agentic AI)是指能够自主决策和行动的AI系统,具备记忆和控制循环。其快速发展得益于大语言模型(LLM)能力提升、企业广泛采用及开源框架支持。代理系统通过推理、工具调用和记忆实现复杂任务的自动化,能够有效规划和执行多步骤目标。

10个代理人工智能概念在10分钟内解释

KDnuggets
KDnuggets · 2026-03-03T13:00:30Z
负责任的转型:公共部门的代理人工智能

文章讨论了在公共部门中负责任地部署代理人工智能(AI)的重要性。代理AI可以提升工作效率和改善公民服务,但数据安全和合规性是主要障碍。通过建立安全基础设施和明确的治理框架,公共机构能够有效利用AI,增强透明度和信任。成功实施需要整合现有系统、逐步部署,并确保人类参与决策。

负责任的转型:公共部门的代理人工智能

Elastic Blog - Elasticsearch, Kibana, and ELK Stack
Elastic Blog - Elasticsearch, Kibana, and ELK Stack · 2026-03-03T00:00:00Z
代理评估:如何测试和衡量代理人工智能的性能

本文探讨了评估代理人工智能系统性能的方法,强调与传统语言模型评估的区别。评估框架包括任务成功、工具使用质量、推理一致性和成本效益四个维度。有效评估需建立黄金数据集,并结合自动化、人工和混合评估方法,以确保代理在实际应用中的可靠性。

代理评估:如何测试和衡量代理人工智能的性能

MachineLearningMastery.com
MachineLearningMastery.com · 2026-02-05T14:16:39Z
超越生成性:代理人工智能与用户中心设计的崛起

代理人工智能的崛起要求新的研究方法,设计需关注信任、同意和责任。代理AI能够主动执行任务,提升用户体验和效率。设计者需理解用户期望,确保系统透明、可控,避免误导和过度自动化。

超越生成性:代理人工智能与用户中心设计的崛起

Articles on Smashing Magazine — For Web Designers And Developers
Articles on Smashing Magazine — For Web Designers And Developers · 2026-01-22T13:00:00Z
  • <<
  • <
  • 1 (current)
  • 2
  • 3
  • >
  • >>
👤 个人中心
在公众号发送验证码完成验证
登录验证
在本设备完成一次验证即可继续使用

完成下面两步后,将自动完成登录并继续当前操作。

1 关注公众号
小红花技术领袖公众号二维码
小红花技术领袖
如果当前 App 无法识别二维码,请在微信搜索并关注该公众号
2 发送验证码
在公众号对话中发送下面 4 位验证码
小红花技术领袖俱乐部
小红花·文摘:汇聚分发优质内容
小红花技术领袖俱乐部
Copyright © 2021-
粤ICP备2022094092号-1
公众号 小红花技术领袖俱乐部公众号二维码
视频号 小红花技术领袖俱乐部视频号二维码