Answer.AI 开源 cachy,让 notebook 中 LLM 调用快 60 倍
Cachy: How we made our notebooks 60x faster.
AI 导读Answer.AI 发布开源 Python 包 cachy(pip install pycachy),通过补丁 httpx 的 send 方法,把 Anthropic 和 OpenAI SDK 的 LLM 调用响应自动缓存到本地并在相同请求时复用,无需编写 mock。
来源:Answer.AI 官方研发博客 · answer.ai
事件后续1
查看事件全部- Answer.AI 开源 cachy,让 notebook 中 LLM 调用快 60 倍Answer.AI 官方研发博客 · 10 月 1 日