news 2026/1/24 11:44:55

记一次线上debug

作者头像

张小明

前端开发工程师

1.2k 24
文章封面图
记一次线上debug
故事发生在今天下午,企业微信告警群里发现有供应商在疯狂上传回执单,并且回执单都没有通过,而是卡在了异常状态。通常这种状态是供应商上传的回执单不符合格式,或者上传的是一个损坏的文件。
我留心了一下,找到对应账单去审查流转记录,发现供应商上传的文件符合格式,但是异常中断,于是去核查脚本的日志,发现大模型部署的机器ip访问不通了,并且会重试3次(埋下伏笔)
golang服务会调用python脚本进行回执单校验,这个脚本调用了我们本地部署的一个大模型,大模型所在的服务器是放在河南的某个机房里。
于是我立刻找运维确认,该服务器被误下机了,恢复需要至少明天。
为了解决供应商的燃眉之急,我必须修改脚本放开校验流程,捕捉异常情况后模拟返回正常响应。让用户再次尝试上传,结果用户侧反馈网络错误。
except Exception as e: # 异常情况输出 # error_result={ # "code":500, # "success":False, # "message":str(e), # "data":None # } # 返回成功响应(自动通过) success_result = { "code": 0, "success": True, "data": { "receipt_id": receipt_info.get('id', 0) if receipt_info else 0, "bill_id": args_bill_id, "verify_status": 1, # 1=校验通过 "verify_msg": [], "receipt_info": { "receipt_bill_num": "AUTO_PASS", "total_amount": 0, "has_stamp": True, "category": "clear_stamp", "clarity_score": "1000" } }, "message": "自动通过(大模型服务暂时不可用)" } print(json.dumps(success_result, ensure_ascii=False)) logging.info(f"自动通过结果:{json.dumps(success_result, ensure_ascii=False)} \n")
我查看服务端日志,发现并没有异常返回,程序正常执行。于是本地安装抓包工具,登录测试账号进行验证,发现真的会转圈圈,抓包反馈超时。于是才想起来调用大模型api的时候,是会尝试3次的,这三次的时间加起来超过了服务端的超时时间。
于是再次修改代码,直接在调用大模型之前raise,问题得以顺利解决,不过在新服务器上架之前,我必须人工核验这些回执单
def _call_llm_api_with_image(self,prompt: str,image_data: bytes) -> str: """调用大模型API处理图片""" # 临时关闭大模型调用,直接抛出异常 raise Exception("大模型服务暂时关闭")
版权声明: 本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若内容造成侵权/违法违规/事实不符,请联系邮箱:809451989@qq.com进行投诉反馈,一经查实,立即删除!
网站建设 2026/1/11 4:02:25

从TIOBE 2025年度语言到2026智能体生态:C#的二次崛起与范式革新

2026年初,TIOBE指数正式将C#授予2025年度编程语言称号,这是其三年内第二次获此殊荣,标志着这门曾被定义为"企业级传统语言"的编程语言,已完成向AI时代核心开发工具的华丽转型[__LINK_ICON]。从TIOBE榜单上的逆势增长到2…

作者头像 李华
网站建设 2026/1/20 7:28:36

Python纪念币预约终极方案:告别手速焦虑的智能助手

Python纪念币预约终极方案:告别手速焦虑的智能助手 【免费下载链接】auto_commemorative_coin_booking 项目地址: https://gitcode.com/gh_mirrors/au/auto_commemorative_coin_booking 还在为每次纪念币预约时网络卡顿、验证码难辨而烦恼吗?这款…

作者头像 李华
网站建设 2026/1/10 12:59:17

gerbv Gerber文件查看器终极指南:从入门到精通完整教程

gerbv Gerber文件查看器终极指南:从入门到精通完整教程 【免费下载链接】gerbv Maintained fork of gerbv, carrying mostly bugfixes 项目地址: https://gitcode.com/gh_mirrors/ge/gerbv gerbv作为一款专业的开源Gerber文件查看器,为电子工程师…

作者头像 李华
网站建设 2026/1/11 15:57:53

精准突击2026金三银四Java面试题及学习储备计划,稳拿大厂offer

精准突击2026年金三银四Java面试,学习储备计划助你稳拿大厂Offer在竞争激烈的职场环境中,每年的金三银四都是求职者们大展身手、寻求职业突破的黄金时期。对于众多Java开发者而言,2026年的金三银四更是蕴含着无限机遇与挑战。在这个时间段&am…

作者头像 李华
网站建设 2026/1/23 5:39:21

软件工程领域:GitHub 贡献者指南解读

GitHub贡献者指南深度解读:从协作规范到工程实践的第一性原理 元数据框架 标题:GitHub贡献者指南深度解读:从协作规范到工程实践的第一性原理 关键词:GitHub协作、贡献者指南、软件工程规范、版本控制流程、开源社区管理、PR评审机制、持续集成 摘要:本文以GitHub贡献者指…

作者头像 李华
网站建设 2026/1/20 19:41:39

基于STM32F103的PID温度控制带自整定实现

pid温度控制带自整定,stm32f103源代码,原理图,调试工具,支持modbus温度控制精度正负0.2度,一、前言 在工业控制以及许多对温度精度要求较高的场景中,实现精确的温度控制至关重要。今天咱就来讲讲基于STM32F…

作者头像 李华