i/Aether
1
0
Fork 0
mirror of https://github.com/fawney19/Aether.git synced 2026-09-02 01:10:23 +08:00
Code Issues Packages Projects Releases Wiki Activity
1,004 Commits 5 Branches 174 Tags
b9b0a75fe4ab131e6463590d367b094001b6e149
Commit Graph

1004 Commits

This Branch
This Branch
All Branches
Author SHA1 Message Date
fawney19
f978888759 feat(heartbeat): 心跳可靠性增强，原子计数与去重优化 
- Rust proxy: 引入 snapshot+ACK 确认机制，心跳未确认时保留快照重发，
  避免指标丢失；添加 heartbeat_session_id 防跨进程去重误判
- Hub transport: Redis SETNX 心跳去重，避免多 worker 重复写库；
  ACK 回显 heartbeat_id 供 Rust 端匹配
- ProxyNodeService.heartbeat: 改用 SQLAlchemy atomic update 原子累加
  指标，避免 ORM read-modify-write 的并发覆盖问题
- 启动顺序修正: tunnel 状态重置移到 Hub 连接建立之前，避免竞态
- OAuth 批量导入: 动态超时(默认30s，走代理60s)，Kiro 适配器透传
- 提取 normalize_heartbeat_id 到 tunnel_protocol 共享模块，消除重复
 2026-03-02 12:27:51 +08:00
fawney19
f3b9f42202 refactor(tunnel): 移除直连tunnel模式，统一使用Hub转发 
- 删除 TunnelTransport 及 TunnelManager 相关引用，所有 tunnel 请求统一走 Hub
- 简化 health_scheduler，不再依赖进程内 TunnelManager 状态判断节点在线
- 简化 resolver，移除本地 tunnel miss 判断与多 worker 告警逻辑
- 简化 service 中 tunnel 连通性检测，统一以 DB 状态为准
- 启动/关闭流程移除 hub_enabled 分支，始终初始化 Hub 连接
- Rust 端 RequestMeta.timeout 增加浮点数反序列化支持，Python 端确保发送整数
 2026-03-02 11:45:30 +08:00
fawney19
0564893c4f refactor: Hub二进制改为Docker构建时下载，优化部署流程与worker初始化 
- Dockerfile: 移除COPY预编译二进制，改为构建时通过HUB_TAG从GitHub Release下载
- CI: 移除artifact上传/下载步骤，通过build-args传递Hub tag
- deploy.sh: 重构参数解析，支持--hub-tag指定版本，跟踪tag变化触发重建
- build.sh: 新增--image模式支持构建并推送Hub Docker镜像
- hub.rs: worker连接时同步所有节点在线状态，避免状态不一致
- proxy_nodes: 启动时主动建立Hub worker连接，消除懒连接窗口期
- docker-compose.yml: app镜像支持APP_IMAGE环境变量配置
- README: 更新部署文档，推荐本地构建方式
 2026-03-02 11:24:14 +08:00
fawney19
c9dbe7936b fix: 补充tunnel端点nginx代理的路径前缀 hub-v0.1.1 2026-03-02 04:18:28 +08:00
fawney19
3f7a3d7600 fix: 修复tunnel端点nginx代理端口未替换的占位符问题 2026-03-02 04:14:48 +08:00
fawney19
5b9d9452c9 fix: 修改hub构建方式 2026-03-02 04:05:40 +08:00
fawney19
b7ef900181 fix(deploy): 恢复部署时自动拉取最新代码 hub-v0.1.0 2026-03-02 03:09:15 +08:00
fawney19
3eef673885 fix: 添加cargo清华镜像源，加速Hub本地构建 2026-03-02 03:04:56 +08:00
fawney19
039a18c243 feat(tunnel): 引入 aether-hub 帧路由器，支持多 worker 共享 tunnel 连接 
新增 Rust 实现的 aether-hub 服务，作为 Docker 容器内部 WebSocket 帧路由器，
解决多 Gunicorn worker 进程间 tunnel 连接隔离问题。

主要改动：
- 新增 aether-hub Rust 项目，实现 proxy/worker 双向帧路由与 stream_id 重映射
- 新增 HubConnectionManager/HubTunnelTransport，worker 通过 Hub 转发 tunnel 帧
- 新增 create_tunnel_transport 工厂函数，按运行环境自动选择 Hub 或直连模式
- 新增 NODE_STATUS 广播机制，Hub 实时通知所有 worker 节点连接状态变化
- CI/CD 新增 build-hub job，Dockerfile 集成 Hub 二进制，deploy.sh 适配 Hub 构建
- 默认 GUNICORN_WORKERS 从 4 降为 2
 2026-03-02 02:43:14 +08:00
fawney19
97d42703da feat(codex): 拆分openai:compact为独立端点，简化Codex请求为透传模式 
- 新增openai:compact端点类型(EndpointKind.COMPACT)，独立于openai:cli
- OpenAICompactAdapter继承OpenAICliAdapter，自动标记compact模式
- Codex请求补丁改为纯透传：仅清理内部标记，不再修改客户端payload
- stream_policy支持openai:compact独立策略，compact端点移除stream字段
- candidate_builder支持compact回退到cli端点
- auth_type: vertex_ai重命名为service_account，保持向后兼容
- Vertex Provider新增api_formats与auth_type组合校验
- KeyAllowedModels对话框改为从Provider获取模型，展示provider_model_name
- Dialog内Select组件自动禁用Portal，修复层级遮挡问题
- 新增Codex compact端点回填迁移脚本
 2026-03-01 23:55:26 +08:00
fawney19
4bf3a453e7 feat(vertex-ai): 重构 Vertex AI 为插件化 adapter，支持 service_account 认证与动态路由 
将 Vertex AI 从 transport.py 的硬编码逻辑重构为独立的 plugin adapter，
支持 service_account/oauth 认证类型、模型格式自动识别、区域路由和 URL 构建。
前端新增 Key 认证类型选择和 Service Account 配置表单。

Co-authored-by: NyaDoo <65238336+NyaDoo@users.noreply.github.com>
Closes #194
 2026-03-01 23:32:48 +08:00
fawney19
a137601728 feat(codex): 支持compact端点非流式请求，更新请求头与字段清理 
- Codex适配器支持compact端点：非流式请求使用application/json Accept头，
  stream_policy根据compact上下文返回FORCE_NON_STREAM
- 更新Codex请求头格式：添加Version/Connection头，header key首字母大写
- 简化include列表处理：normalizer和request_patching统一强制为固定列表
- 清理Codex不支持的字段：truncation、context_management、user
- 默认instructions改为空字符串
- 前端用量页面：用户页面使用前端筛选后总数，避免不必要的后端分页请求
 2026-03-01 18:20:42 +08:00
fawney19
d4840df447 feat(tunnel): 重连指数退避、多worker兼容与手动节点请求计数 
- Proxy tunnel 重连策略从固定1s改为指数退避+jitter，首次重试立即执行，
  稳定连接30s后重置退避计数，上限3s保证快速恢复
- 多连接启动时增加错峰延迟，避免同时发起连接风暴
- 服务端 tunnel ping间隔和空闲超时支持环境变量配置
- 修复多worker启动时tunnel状态重置逻辑，仅leader执行重置避免覆盖其他worker连接
- Resolver增加本地tunnel缺失的限频告警和更短缓存TTL，加速多worker场景恢复
- 用量记录中统计手动代理节点的请求数和失败数
 2026-03-01 17:37:11 +08:00
fawney19
2c1e51a490 refactor(compression): 请求压缩策略改为跟随客户端行为，响应支持gzip压缩 
- 移除全局 ENABLE_REQUEST_COMPRESSION 配置，改为根据客户端 Content-Encoding
  决定是否对上游请求体进行 gzip 压缩
- 非流式响应根据客户端 Accept-Encoding 返回 gzip 压缩的 JSON
- ApiRequestContext 记录客户端编码偏好并透传至 handler 链路
- 新增 http_compression 模块统一处理压缩相关判断逻辑
- 上游请求头丢弃列表新增 content-encoding 防止客户端值泄露
- ensure_json_body 支持解压 gzip 编码的请求体
v0.5.18 		2026-03-01 15:52:32 +08:00
fawney19
2dcccc9820 fix(kiro): 修复工具schema兼容性、消息交替和重复内容问题 
- 递归清理工具schema中Kiro不支持的additionalProperties和空required字段
- 将thinking prefix注入从history移到currentMessage，仅作用于当前轮次
- 修复连续assistant消息缺少user消息导致角色不交替的问题
- 增加流式content事件去重，跳过Kiro发送的重复内容
 2026-03-01 14:25:38 +08:00
fawney19
8fa97ab8da feat(provider): 更新请求模型添加格式转换开关字段 2026-03-01 13:08:20 +08:00
fawney19
a66fa9792d fix(stream): 修复流式请求超时和取消归因问题 
- 流式请求 timeout 改为 None，避免 provider.request_timeout 作为整条流总时长超时导致长响应被硬切断
- 重构 CancelledError 断连归因逻辑：提取探测方法并支持多次重试确认，降低误判率
- 新增 cancelled_unknown 状态处理断连检测不确定的场景，避免错误归因为 server_cancelled
- 在 upstream_response 中记录取消详情，便于排查
- 新增断连归因逻辑的单元测试
 2026-03-01 13:02:26 +08:00
fawney19
dc2bc83c17 refactor(frontend): 改进故障转移规则对话框的状态码输入与校验 
状态码输入从即时双向解析改为原始字符串绑定，保存时统一校验，
增加明确的错误提示；提取正则验证函数；优化小屏布局防止按钮挤压
 2026-03-01 12:37:08 +08:00
fawney19
8b0e92e408 perf(frontend): 管理页面更新操作改为局部刷新，避免全量重载列表 
Provider、API Key、Pool Key、Management Token 的更新操作
完成后直接替换本地列表中对应记录，仅创建操作保留全量刷新。
 2026-03-01 11:57:09 +08:00
fawney19
b61fc4eb6b feat(test): 模型测试支持故障转移，展示每次尝试详情 
- 后端新增 test-model-failover 接口，支持 global/direct 两种测试模式
- 利用 FailoverEngine 遍历候选并记录每次尝试的状态、延迟、错误等详情
- 前端 ModelsTab/ModelMappingTab 切换到新接口，移除格式选择下拉菜单
- 新增 TestResultDialog 组件，失败时展示候选尝试详情表格
- 简化组件 props 传递，移除不再需要的 endpoints/mappingPreview 依赖
 2026-03-01 03:37:41 +08:00
fawney19
fea3d183bf Merge pull request #195 from AAEE86/keys 
feat(pool): 新增账号配额展示并清理 Codex 旧限额字段
 2026-03-01 00:59:49 +08:00
fawney19
20ed9cd123 feat(proxy): worker 退出时优雅关闭 tunnel 连接，提升 max-requests 默认值 
- TunnelManager 新增 shutdown_all 方法，drain 飞行中请求后发送 GoAway
- shutdown 期间标记 draining 拒绝新请求进入
- gunicorn max-requests 默认值从 4000 提升到 50000，减少不必要的 worker 重启
 2026-03-01 00:54:37 +08:00
AAEE86
d7a8a89aa7 feat(pool): 新增账号配额展示并清理 Codex 旧限额字段 
- 后端池子 Key 列表新增 account_quota 字段，按 provider_type 生成配额摘要（codex/kiro/antigravity）
- 前端 PoolManagement 新增“配额”列与进度条展示，桌面端与移动端同步支持
- Provider 详情页移除 Codex code_review 限额展示，仅保留周限额与 5H 限额
- 清理 codex usage parser/realtime quota 中 code_review 相关解析与比较逻辑
- 同步更新调度与配额相关测试，改为忽略无关历史字段
 2026-03-01 00:32:14 +08:00
fawney19
005cc3e388 feat(failover): 支持 Provider 级别故障转移规则，默认全部转移策略 
- 新增 failover_rules 配置：支持 success_failover_patterns（成功响应匹配时转移）
  和 error_stop_patterns（错误响应匹配时终止），支持按 status_code 过滤
- 修改默认转移策略：ErrorClassifier 不再返回 RAISE，所有错误默认继续转移
- TaskService 中客户端错误不再直接抛出，改为 break 继续尝试下一个候选
- 修复 proxy tunnel 连接/断连竞态：引入 per-node 锁和事件时间戳排序
- 优化 ProxyNode 状态判定：OFFLINE 统一由心跳超时判定，兼容多 worker 场景
- has_tunnel 改为纯检查方法，避免在 finally 块中误清理新注册连接
- Redis stream NOGROUP 异常自愈处理
- OAuthAccountDialog 输入框焦点样式补全
 2026-03-01 00:21:16 +08:00
fawney19
fbcb54a8a5 feat(oauth): 优化凭据导入，支持多文件选择与更多 JSON 格式 
前端：简化导入界面状态管理，支持多文件拖拽/选择并自动合并内容，
移除冗余的 importFileName/manualPasteText 状态。
后端：_parse_tokens_input 新增支持 JSON 对象数组和单个 JSON 对象格式解析。
 2026-02-28 22:06:21 +08:00
github-actions[bot]
85a126f48a chore(proxy): update download links for proxy-v0.2.1 2026-02-28 13:09:33 +00:00
fawney19
44cd35c10e chore(proxy): bump aether-proxy to 0.2.1 proxy-v0.2.1 2026-02-28 21:02:21 +08:00
fawney19
a2d1cff3b0 perf(transport): 全链路传输压缩优化 
- 上游请求启用 HTTP/2 (HPACK 头部压缩 + 多路复用)，添加 h2 依赖
- 上游请求体超过阈值时自动 gzip 压缩，使用紧凑 JSON 序列化
- 添加 brotli 依赖，Accept-Encoding 支持 gzip/deflate/br
- 隧道帧压缩: Rust 端响应帧和 Python 端请求/响应帧均支持 gzip
- Rust 端压缩/解压逻辑统一提取到 protocol.rs
- Rust 端请求头构建改用 .headers() 替换 reqwest 默认值
- 新增 ENABLE_HTTP2、ENABLE_REQUEST_COMPRESSION 等环境变量配置
 2026-02-28 21:02:21 +08:00
fawney19
3ff67fec2f Merge pull request #193 from AAEE86/keys 
refactor(provider-keys): 拆分 keys 端点逻辑并补充配额刷新测试
 2026-02-28 17:15:19 +08:00
AAEE86
6a8b5e6c8e fix(provider_keys): 提升 Codex 配额异步同步的可靠性与可观测性 
- 为 flush 引入 FlushResult，统一返回更新数与重试批次
- 增加指数退避与失败日志限流，成功后重置 backoff
- 批量提交失败时回退到单条提交，降低整批失败风险
- 补充测试，覆盖 flush 重试与提交失败回退场景
 2026-02-28 16:54:37 +08:00
AAEE86
92e9caf57e feat(usage): 支持 Codex 配额响应头实时异步同步 
- 新增 parse_codex_usage_headers，统一解析响应头中的 Codex 配额信息
- 新增实时配额同步与异步调度器，按 provider_api_key_id 去重并后台落库
- 在 usage 记录与结算流程中接入配额同步投递，并在应用生命周期中启动/停止调度器
- 补充 codex_realtime_quota 与 codex_quota_sync_dispatcher 相关单元测试
 2026-02-28 16:35:56 +08:00
AAEE86
10ccbf109c Merge branch 'fawney19:master' into keys 2026-02-28 16:13:30 +08:00
fawney19
f2dc51434d refactor(models): 删除拆分的模型子模块文件，统一回 database.py 
- 删除 _base.py, auth.py, misc.py, model.py, provider.py, stats.py, usage.py, user.py
- Usage 表新增 cache_creation_input_tokens_5m/1h 字段支持按缓存 TTL 细分计费
- Model.global_model_id 改为 nullable=False，强制关联 GlobalModel
 2026-02-28 16:12:32 +08:00
fawney19
9d751e3525 fix: 修复迁移脚本 2026-02-28 15:33:43 +08:00
fawney19
27047e5880 fix(migration): backfill 前清空 user_model_usage_counts 确保幂等性 2026-02-28 15:28:34 +08:00
fawney19
4fdebfc78e perf(usage): 优化 admin usage records 查询性能 
- count 查询按需 JOIN，避免不必要的表关联
- 前端 onMounted 将 stats/heatmap/records/users 全部并行加载
- 调整缓存 TTL（聚合 30s->60s，列表 10s->15s）
- 为 request_candidates 添加复合索引优化 fallback/retry 查询
 2026-02-28 15:09:21 +08:00
fawney19
11832edf49 Merge pull request #192 from AAEE86/master 
refactor(usage): 移除时间线中的格式转换标签展示
 2026-02-28 14:47:18 +08:00
fawney19
87d50052cc refactor(proxy): 移除 unhealthy 状态、前端展示失败率替换连接数、命令提示修正 
- 移除 ProxyNodeStatus.UNHEALTHY 枚举值，仅保留 online/offline
- 迁移脚本将已有 unhealthy 数据迁移为 offline，upgrade/downgrade 均有幂等性保护
- 前端代理节点列表用失败率列替换连接数列，超过 5% 高亮显示
- 节点列表排序从 updated_at DESC 改为 name ASC
- Rust 端命令行提示从 aether-proxy 改为 ./aether-proxy
 2026-02-28 14:44:44 +08:00
AAEE86
08b89b7ef8 refactor(provider-keys): 拆分 keys 端点逻辑并补充配额刷新测试 
将 admin keys 接口的创建、更新、查询、删除、导出与配额刷新逻辑迁移到 provider_keys 服务层

新增 auth_type 归一化、重复校验、响应构建与 quota_refresh（codex/kiro/antigravity）模块，并补充对应单元测试
 2026-02-28 14:12:08 +08:00
fawney19
4b02078b60 fix(proxy): 自动注册节点时按 ip+port 匹配而非 name 2026-02-28 14:10:44 +08:00
fawney19
1d644de500 fix: 修复迁移脚本 2026-02-28 14:03:42 +08:00
fawney19
54530faf03 feat(proxy): 节点状态简化、连接事件记录、可靠性指标与批量删除 
- 移除 UNHEALTHY 中间状态，节点状态简化为 ONLINE/OFFLINE
- 新增 proxy_node_events 表记录 tunnel 连接/断开/错误事件
- 新增 failed_requests/dns_failures/stream_errors 可靠性指标（增量累加）
- tunnel 重连改为固定 1s 延迟，移除指数退避逻辑
- resolver/service 改为以 TunnelManager 内存状态判断节点可用性，避免 DB 竞态
- 修正 Claude cache_control 字段格式，使用 ttl 字段控制缓存时长
- 移除前端手动勾选 capability 的 UI，改为从价格配置自动推断
- 新增全局模型批量删除 API，替换前端并行单个删除
proxy-v0.2.0 		2026-02-28 13:52:32 +08:00
fawney19
ecb16d345a feat: 缓存计费细分、能力匹配优化、用户模型调用计数 
1. 缓存创建 tokens 区分 5min/1h TTL，支持按缓存时长差异化计费
   - Usage 表新增 cache_creation_input_tokens_5m/1h 字段
   - Claude handler 解析新格式 (ephemeral_5m/1h, claude_cache_creation_5/1h)
   - 计费规则支持 cache_ttl_pricing 覆盖 cache_creation 价格

2. 能力匹配机制优化
   - COMPATIBLE 能力不再硬过滤，改为排序阶段通过 capability_miss_count 优先级处理
   - cache_1h 改为 COMPATIBLE + REQUEST_PARAM（自动检测请求体中的 ttl=1h）
   - gemini_files 改为 EXCLUSIVE + REQUEST_PARAM（自动检测 fileData.fileUri）
   - 移除前端模型偏好/能力配置 UI（不再需要用户手动配置）

3. 新增用户-模型维度调用次数计数器 (UserModelUsageCount)
   - 原子递增，避免从 Usage 表聚合查询
   - 前端模型目录和用户可用模型列表展示调用次数

4. 其他改进
   - global_model_id 改为必填（NOT NULL），清理孤立模型
   - 模型映射对话框支持从上游获取模型列表并分组折叠
   - 端点测试不再依赖端点启用状态
   - 异步任务页面对普通用户隐藏用户信息列
   - Dashboard 响应式布局断点调整 (sm -> lg)
   - 号池管理仅展示已启用号池的提供商
 2026-02-28 11:45:04 +08:00
AAEE86
daecdb7676 feat: 统一供应商凭据标签并优化统计展示布局 2026-02-28 10:09:51 +08:00
AAEE86
423eb95f7a refactor(usage): 移除时间线中的格式转换标签展示 2026-02-28 09:42:33 +08:00
fawney19
82bbed2720 Merge pull request #191 from AAEE86/master 
feat(providers): 资源统计按 provider_type 显示密钥/账号
 2026-02-28 09:18:55 +08:00
AAEE86
90e804f608 feat(providers): 资源统计按 provider_type 显示密钥/账号 2026-02-28 08:58:12 +08:00
fawney19
e748277902 feat(proxy): 安全加固与架构优化 
- 引入 SafeDnsResolver 消除 DNS rebinding TOCTTOU 漏洞，DNS 缓存改为多地址存储
- 扩展私有 IP 检测范围（CGNAT 100.64/10、基准测试 198.18/15、保留 240/4）
- 请求处理增加 hop-by-hop 头过滤、URL scheme 校验、超时范围限制
- 动态配置从 RwLock 切换到 ArcSwap 实现无锁读取
- 启动注册失败的服务器支持后台自动重试
- WebSocket 帧大小上限提升至 64MiB 匹配 Python 端
- 心跳支持动态间隔更新，新增 failed_requests/dns_failures/stream_errors 指标
- 配置启动校验、systemd UMask=0077、配置文件权限 600
- Python 端支持 per-connection max_streams（X-Tunnel-Max-Streams）
 2026-02-28 01:32:28 +08:00
fawney19
2a0c684e88 feat: 新增全局模型批量管理功能，优化提供商更新接口 
- 模型管理页面新增批量管理对话框，支持搜索、快捷筛选和批量删除
- 快捷筛选支持：无提供商、无活跃提供商、已禁用、未调用、无价格
- 提供商 PATCH 接口返回完整的 ProviderWithEndpointsSummary
- 修复系统级格式转换开关的 tooltip 文案和按钮高亮样式
 2026-02-28 00:01:15 +08:00
fawney19
5bfaee47cc refactor(proxy): 端点检查统一使用 proxy_config 替代 proxy_param 
将 endpoint_checker、handler_adapter_base、gemini adapter 及
provider_query 中的 proxy_param 参数替换为 proxy_config，
通过 build_proxy_client_kwargs 统一构建代理客户端参数，
以支持 tunnel 模式代理。同时清理未使用的 import。
 2026-02-27 22:41:31 +08:00