目录
多模态 AI 应用的语义缓存
在大多数情况下，实现多模态 AI 应用需要使用大模型。但是处理和调用模型耗时耗钱，这时候我们就可以使用 GPTCache：在请求大模型之前，先尝试在缓存中寻找答案。GPTCache 能够加速整个问答过程，并有助于降低运行大模型时的成本。
1. 探索 GPTCache 语义缓存
语义缓存以结构化的方式存储和检索特定语义信息、概念和知识，使用语义缓存可以帮助 AI 系统更好理解和响应查询或请求。语义缓存的使用原理就是在缓存中预先获取常见或历史问题的答案。这样一来，信息访问会更快速，也有助于提高 AI 应用的性能和效率。