当前位置:首页 > 元宇宙 > AI

月之暗面 Kimi 开放平台将启动 Context Caching 内测:提供预设内容 QA Bot、固定文档集合查询

来源: 责编: 时间:2024-06-21 17:16:46 97观看
导读 6 月 19 日消息,月之暗面官宣 Kimi 开放平台 Context Caching 功能将启动内测,届时将支持长文本大模型,可实现上下文缓存功能。▲ 图源 Kimi 开放平台官方公众号,下同据介绍,Context Caching(上下文缓存)是由 Kimi

6 月 19 日消息,月之暗面官宣 Kimi 开放平台 Context Caching 功能将启动内测,届时将支持长文本大模型,可实现上下文缓存功能。HB928资讯网——每日最新资讯28at.com

HB928资讯网——每日最新资讯28at.com

▲ 图源 Kimi 开放平台官方公众号,下同

据介绍,Context Caching(上下文缓存)是由 Kimi 开放平台提供的一项高级功能,可通过缓存重复的 Tokens 内容,降低用户在请求相同内容时的成本,原理如下:HB928资讯网——每日最新资讯28at.com

HB928资讯网——每日最新资讯28at.com

官方表示,Context Caching 可提升 API 的接口响应速度(或首字返回速度)。在规模化、重复度高的 prompt 场景,Context Caching 功能带来的收益越大。HB928资讯网——每日最新资讯28at.com

Context Caching 适合于用频繁请求,重复引用大量初始上下文的情况,通过重用已缓存的内容,可提高效率降低费用,适用业务场景如下:HB928资讯网——每日最新资讯28at.com

提供大量预设内容的 QA Bot,例如 Kimi API 小助手。HB928资讯网——每日最新资讯28at.com

针对固定的文档集合的频繁查询,例如上市公司信息披露问答工具。HB928资讯网——每日最新资讯28at.com

对静态代码库或知识库的周期性分析,例如各类 Copilot Agent。HB928资讯网——每日最新资讯28at.com

瞬时流量巨大的爆款 AI 应用,例如哄哄模拟器,LLM Riddles。HB928资讯网——每日最新资讯28at.com

交互规则复杂的 Agent 类应用,例如什么值得买 Kimi+ 等。HB928资讯网——每日最新资讯28at.com

官方后续将发布 Context Caching 功能的场景最佳实践 / 计费方案 / 技术文档,将保持关注,并在第一时间带来相关报道。HB928资讯网——每日最新资讯28at.com

本文链接://www.dmpip.com//www.dmpip.com/showinfo-45-4703-0.html月之暗面 Kimi 开放平台将启动 Context Caching 内测:提供预设内容 QA Bot、固定文档集合查询

声明:本网页内容旨在传播知识,若有侵权等问题请及时与本网联系,我们将在第一时间删除处理。邮件:2376512515@qq.com

上一篇: 金山办公 WPS AI 海外版发布,海外月活设备数已超两亿

下一篇: OpenAI“宫斗”核心人物 Ilya Sutskever 出走后单飞:建立“全球首个”安全超级智能实验室

标签:
  • 热门焦点
  • 拯救XR,苹果力不从心

    拯救XR,苹果力不从心

    来源 | 光子星球撰文 | 文烨豪 编辑 | 吴先之 苹果终于呈上了它的“答卷”。 北京时间6月6日凌晨,苹果2023年全球开发者大会(WWDC)如期举行。作为苹果CEO库克口中&ld
  • 茅台的元宇宙App火了,也被骂惨了

    茅台的元宇宙App火了,也被骂惨了

    元宇宙从概念走向大众生活,并不是一件简单的事情。技术、世界观、填充内容、载体形式,每一个环节都需要层层叠叠的逻辑。但正如赛博朋克奠基人威廉·吉布
  • 这场虚拟人争夺战,互联网巨头下场先赢一半?

    这场虚拟人争夺战,互联网巨头下场先赢一半?

    撰文/ 孟会缘 近两年间,要论引得无数互联网巨头竞折腰的一大热门产业,莫过于元宇宙领域中的数字人了。 作为继数字藏品之后,开发元宇宙的又一重点落地项目,互联网
  • 元宇宙步入暗夜

    元宇宙步入暗夜

    撰文 | 文烨豪元宇宙的故事,似乎讲不通了。 当下,刮起元宇宙热潮的Roblox股价已跌去大半,带头大哥Meta也正因元宇宙亏损深陷泥潭。 再看国内,从字节“派对岛&
  • 元宇宙将会如何塑造未来的工作方式?

    元宇宙将会如何塑造未来的工作方式?

    科幻小说家尼尔·斯蒂芬森 (Neal Stephenson) 在1992年就创造了“元宇宙”一词,但事实上,在Facebook将其更名为Meta以反映其将这一科幻愿景变为现实的战略重点之
  • 游戏玩家才是最“元宇宙”的

    游戏玩家才是最“元宇宙”的

    01元宇宙的概念,最早由科幻作家尼尔·斯蒂芬森于1992年在其著作《雪崩》中提出。它指的是一个脱胎于现实世界,又与现实世界平行、相互影响,并且始终在线的虚拟世
  • Kitten Coup社区反转Cool Kittens NFT骗局

    Kitten Coup社区反转Cool Kittens NFT骗局

    当狂热的加密爱好者将金钱投入到NFT图片时,浑水摸鱼的骗局随之而来,Cool Kittens NFT便是其中一个作恶者,该项目于去年11月在Sonala链上启动小猫形象的NFT铸造及
  • NFT也有黄牛?这家公司专门对付外挂作弊机器人

    NFT也有黄牛?这家公司专门对付外挂作弊机器人

    澳大利亚前总理马尔科姆·特恩布尔 (Malcolm Turnbull) 是支持萨姆·Crowther (Sam Crowther) 的人之一,Sam是一名出生于纽卡斯尔的黑客,他的职业生涯始于为国防
  • 以太坊面临来自Fantom的巨大挑战

    以太坊面临来自Fantom的巨大挑战

    众所周知,区块链和加密货币项目经常因其对环境的影响而受到批评。但是有一个非营利性的加密货币和区块链项目说它比其他的更环保。今天老雅痞就给大家聊一聊加
Top
Baidu
map