基于 Java 的 LLM 应用开发及编排框架,Agents-Flex beta.8 发布插图

Agents-Flex: 一个基于 Java 的 LLM(大语言模型)应用开发及编排框架。


基本能力

  • LLM 的访问能力
  • Prompt、Prompt Template 定义加载的能力
  • Function Calling 定义、调用和执行等能力
  • 记忆的能力(Memory)
  • Embedding
  • Vector Store
  • 文档处理
    • 加载器(Loader)
      • Http
      • FileSystem
    • 分割器(Splitter)
    • 解析器(Parser)
      • PoiParser
      • PdfBoxParser
  • Agent
    • LLM Agent
    • IOAgent
  • Chain 执行链
    • SequentialChain 顺序执行链
    • ParallelChain 并发(并行)执行链
    • LoopChain 循环执行连
    • ChainNode
      • AgentNode Agent 执行节点
      • EndNode 终点节点
      • RouterNode 路由节点
        • GroovyRouterNode Groovy 规则路由
        • QLExpressRouterNode QLExpress 规则路由
        • LLMRouterNode LLM 路由(由 AI 自行判断路由规则)

Agents-Flex beta.8 更新细节:

  • 新增:为 ChainNode 添加 “async” 属性标识的设置
  • 新增:添加基于 Ollama 大语言模型的对接,非 openai 适配模式
  • 新增:新增 DnjsonClient 用于和 Ollama 的 stream 模型对接
  • 优化:重构 ChainCondition
  • 优化:chat 时当大语言模型发生错误时抛出异常,之前返回 null
  • 优化:重构 DocumentParser
  • 优化:Parameter 支持子参数的配置能力
  • 修复:Milvus 向量数据库当传入 number 类型是出错的问题
  • 测试:添加对 LoopChain 的测试
  • 测试:添加文使用 openai 兼容 api 对 Ollama 对接的测试

 

简单对话

使用 OpenAi 大语言模型:

免责声明:本文系转载,版权归原作者所有;旨在传递信息,不代表一休教程网的观点和立场。