Bỏ qua để đến nội dung

Bảo vệ khi lỗi

Dịch vụ mô hình AI đôi khi có thể trả lỗi, timeout hoặc tạm thời không khả dụng. RouteAPI sẽ cố gắng tiếp tục xử lý yêu cầu khi an toàn, và trả về thông tin lỗi rõ ràng khi không thể hoàn tất an toàn.

Kịch bảnHành vi kỳ vọng
Lỗi tạm thời của dịch vụ mô hìnhRouteAPI sẽ cố gắng tiếp tục xử lý khi an toàn.
Timeout trước khi bắt đầu phản hồiRouteAPI có thể thử dùng đường dịch vụ khả dụng khác.
Dịch vụ mô hình bị giới hạnNếu có lựa chọn phù hợp, RouteAPI sẽ tiếp tục xử lý.
Tham số yêu cầu không hợp lệRouteAPI trả lỗi và nhắc client sửa.
Vấn đề số dư hoặc quyền tài khoảnRouteAPI trả lỗi cấp tài khoản.
  • Yêu cầu văn bản không streaming phù hợp nhất để retry.
  • Yêu cầu streaming chỉ nên retry trước khi đầu ra bắt đầu.
  • Yêu cầu kích hoạt hành động bên ngoài nên được thiết kế idempotent.
  • Client vẫn cần xử lý lỗi HTTP và hiển thị thông báo rõ ràng cho người dùng.
  1. Đặt thời gian timeout yêu cầu hợp lý.
  2. Ghi RouteAPI request ID khi xử lý sự cố.
  3. Chỉ retry ở phía client với thao tác mà nghiệp vụ xác nhận là idempotent.
  4. Nếu lỗi dịch vụ lặp lại, hãy liên hệ hỗ trợ kèm request ID.