Commit Graph

126 Commits

Author SHA1 Message Date
ouyangyouzhang 3df54cab54 调整提示词,处理提问为政策文件的问题 2025-09-04 20:19:08 +08:00
ouyangyouzhang e0941937da 修改错误的逻辑 2025-09-01 17:34:47 +08:00
ouyangyouzhang c54cdb4284 修改woker数量 2025-09-01 17:34:19 +08:00
ouyangyouzhang fc1c5feb86 修改运行错误问题 2025-09-01 10:36:36 +08:00
ouyangyouzhang d69fe2b8d1 调整PGSQL相关代码逻辑 2025-08-29 11:49:07 +08:00
ouyangyouzhang 78dc1673aa 添加一个统一的脚本管理服务 2025-08-29 09:18:24 +08:00
ouyangyouzhang 5ec18811d9 删除重试策略 2025-08-28 17:36:28 +08:00
ouyangyouzhang 1be1b062b5 上传遗漏文件 2025-08-28 14:30:07 +08:00
ouyangyouzhang abc868225a LLM输出的内容先通过正则清理多余内容 2025-08-28 14:29:19 +08:00
ouyangyouzhang 660b5f6561 Qwen3-32B JSON格式化输出不稳定,微调输出格式 2025-08-28 09:04:29 +08:00
ouyangyouzhang cdaf6870d2 撤回之前使用langchain_openai调用模型的逻辑。因为暂时无法解决调用Qwen3禁用思考模式的问题 2025-08-27 18:14:33 +08:00
ouyangyouzhang c9c7f13060 1、修改api文件位置
2、意图识别继承langfuse
2025-08-27 11:22:54 +08:00
ouyangyouzhang 53ac47f4a5 1、调整规费相关问题的分类
2、意图识别增加清单、定额字段
2025-08-21 17:51:55 +08:00
ouyangyouzhang 1a3fa44522 feat: 添加清单定额查询API并优化意图识别模块
新增清单定额查询API服务,支持通过名称和编码查询定额及清单信息
在意图识别模块中添加定额清单信息提取功能,并记录各步骤耗时
将SiliconFlowEmbeddings替换为XinferenceEmbeddings并添加sqlite-vss依赖
优化shell脚本的screen会话检测逻辑
2025-08-20 19:08:29 +08:00
ouyangyouzhang db84105abf refactor(tool): 移除html_to_md模块并清理相关依赖
- 删除html_to_md模块及其相关文件
- 更新ModelTool.py中的导入语句
- 移除IntentRecognition.py中未使用的导入
2025-08-18 14:06:19 +08:00
ouyangyouzhang 8b9ea73b3b refactor(embedding/reranker): 重构模型工具类使用环境变量配置
更新.gitignore文件,添加新的数据库文件
在.env中添加EMBEDDING_MODEL_NAME和XINFERENCE_URL配置
重构SiliconFlowEmbeddings和XinferenceReRankerModel使用环境变量
优化DifyCompareTest异常处理和输入验证
修改测试文件路径和并发工作数
2025-08-15 10:34:30 +08:00
ouyangyouzhang 1cde82cc86 工单提问相同时合并工单内容 2025-08-05 11:14:25 +08:00
ouyangyouzhang 142ae00844 先改回使用硅基流动api 2025-08-05 09:29:56 +08:00
ouyangyouzhang c02fe2624a 同步合理数据库字段 2025-08-04 08:43:35 +08:00
ouyangyouzhang 948827d553 在heli_db_to_excel.py中添加SEQUENCE_ID字段到数据处理结果,并新增根据会话ID查询SEQUENCE_ID的方法;在DifyCompareTest.py中优化回答判断逻辑,增加对空回答的处理,调整文件处理的最大并发数。 2025-08-01 13:45:58 +08:00
ouyangyouzhang 9b957665b5 更新.env文件中的API地址和模型名称,修改api_key.txt文件以替换API密钥。 2025-08-01 10:21:02 +08:00
ouyangyouzhang 9185d75e10 更新DifyCompareTest类中的字段名称 2025-07-31 10:25:24 +08:00
ouyangyouzhang 11acc809c8 优化DifyCompareTest类中的回答判断逻辑,恢复旧答案的判断并简化代码;更新PromptTemplates以规范同义词处理规则,调整重构流程和优先级,增强语义保真性。 2025-07-31 09:43:58 +08:00
ouyangyouzhang 6a72233a97 新增同义词词典支持,优化IntentRecognition类以加载jieba自定义词典和同义词字典,调整关键词提取流程,简化日志记录,更新PromptTemplates以规范同义词处理规则。 2025-07-31 09:23:27 +08:00
ouyangyouzhang 728262cc65 优化DifyCompareTest类,添加DifyExporter实例以支持词条检索,更新DifyQueryRetrieval_api.py中的topk参数,增强DifyExporter类以从HTTP服务获取查询类型和点踩原因,简化构造函数,移除不必要的查询日志加载逻辑。 2025-07-30 17:30:24 +08:00
ouyangyouzhang 57369059eb 引入工单后,匹配软件词条辅助性不大且该环节上下文较长,Token消耗较大 2025-07-29 09:22:05 +08:00
ouyangyouzhang ba42107999 优化DifyCompareTest和WorkorderToDify模块,调整日志记录格式,修复API密钥获取方式,增强工单处理流程,添加元数据管理功能,改进并发上传逻辑,更新文档处理方式。 2025-07-28 08:34:17 +08:00
ouyangyouzhang 780f423200 新增数据库支持,初始化数据库并创建查询类型和点踩原因表,优化日志记录,添加多个API以支持点踩原因和查询统计功能。 2025-07-26 12:36:01 +08:00
ouyangyouzhang 3f6f5d038c 调整启动脚本的权限,优化screen会话检查逻辑,修复DifyQueryRetrieval_api.py中的top_k参数,删除IntentRecognition.py中的冗余代码,优化异步处理流程,移除不必要的注释和日志记录。 2025-07-25 13:55:06 +08:00
ouyangyouzhang 2cbdc23fc0 更新.gitignore以忽略临时文件,修改api_key文件,重构合并名词的逻辑,删除不再使用的脚本,优化对话到工单的处理流程,添加会话结果保存为JSON的功能,调整API调用参数,修复部分代码中的错误。 2025-07-25 09:53:47 +08:00
ouyangyouzhang 4d7ef54ae7 更新.gitignore文件以忽略新的数据文件和测试文件,修改对话到工单处理逻辑,添加产品信息解析功能,优化API调用,移除不必要的参数,调整并发处理逻辑。 2025-07-24 13:39:04 +08:00
ouyangyouzhang 6707e5904f 更新APIkey 2025-07-24 09:46:43 +08:00
ouyangyouzhang d0788ac32a 调整接口 2025-07-23 10:28:26 +08:00
ouyangyouzhang 0a2d6c2020 微调意图改写接口 2025-07-22 11:35:05 +08:00
ouyangyouzhang 75c7c19f53 删除多余代码 2025-07-22 08:47:17 +08:00
ouyangyouzhang 1bd0dc3f81 新增多个API密钥。 2025-07-21 10:24:25 +08:00
ouyangyouzhang 17ff99bad1 更新对话到工单的处理逻辑,添加API密钥参数,优化响应内容清理,修复多个解析函数中的API调用,调整并发处理的最大线程数。 2025-07-21 10:11:34 +08:00
ouyangyouzhang 0dda581c8e 优化DifyCompareTest和ModelTool中的API调用逻辑,增加重试机制以提高稳定性,更新模型名称获取方式为使用环境变量。 2025-07-21 09:44:42 +08:00
ouyangyouzhang 6243fedc4e 更换api_key 2025-07-21 08:48:56 +08:00
ouyangyouzhang 6ba3141885 优化代码 2025-07-18 16:50:24 +08:00
ouyangyouzhang 5d5c3c0257 新增多个启动脚本以支持不同服务的后台运行,优化对话到工单的处理逻辑,增加人力信息映射,调整日志记录机制以支持异步处理。 2025-07-18 13:39:57 +08:00
ouyangyouzhang 75c0992526 优化数据处理逻辑,更新工单数据文件路径,增加多个工单数据集的创建与上传功能,同时调整查询参数以提高检索效果。 2025-07-17 14:13:41 +08:00
ouyangyouzhang bd0f86ff61 更新DifyQueryRetrieval类的初始化参数,改为使用环境变量获取API密钥和基础URL;优化意图识别示例中的参数传递;调整问题和回答的格式描述;增加请求超时设置。 2025-07-17 09:05:05 +08:00
ouyangyouzhang 8a58fef1a7 优化DifyQueryRetrieval和ModelTool中的请求超时设置,调整DifyExporter类中的分类逻辑,移除无用字段,更新词条处理逻辑, 2025-07-16 16:26:46 +08:00
ouyangyouzhang a934f2c398 更新环境变量配置,调整模型名称获取方式,新增Dify API相关配置,删除无用的脚本文件,优化意图识别逻辑,添加LLM提取词条逻辑 2025-07-16 14:24:50 +08:00
ouyangyouzhang 5e164882a1 更新对话到工单的默认文件路径,修正日期范围为“2025年1月到6月”,并在DifyExporter类中新增“当前软件”字段 2025-07-15 13:50:58 +08:00
ouyangyouzhang 35acf6de71 调整问题改写提示词,同义词替换遵循严格匹配 2025-07-15 11:30:31 +08:00
ouyangyouzhang 82724d206b 更新日志目录创建逻辑,调整对话到工单的日期参数默认值,新增对话记录分析功能,优化API密钥管理器中的购买余额计算,并添加多个API密钥。同时,新增数据处理和分析模块以支持工单问答数据的上传和处理。 2025-07-15 09:27:44 +08:00
ouyangyouzhang 5b5a2f2b16 重构会话处理逻辑,移除批量处理,改为直接并发处理每个会话,优化临时保存机制。同时,更新DifyExporter类,新增获取节点信息和词条列表的方法,调整导出列以包含备注信息 2025-07-14 18:51:03 +08:00
ouyangyouzhang af1e1a9d9b 优化对话到工单的处理逻辑,新增进度条显示,调整日期参数的默认值,并修复日志目录创建的冗余代码。同时,更新DifyExporter类以支持按日期范围过滤消息,重构查询日志加载逻辑,新增备注提取功能,提升代码可读性和可维护性。 2025-07-14 17:21:21 +08:00