GenarrativeAI/Genarrative
11
0
Fork 0
Code Issues 14 Pull Requests 3 Actions Packages Projects 3 Releases Wiki Activity
3,163 Commits 22 Branches 4 Tags
b3d6543d73e5e9c1249966cc393bbb5ad72134aa
Commit Graph

3163 Commits

This Branch
This Branch
All Branches
Author SHA1 Message Date
k88936 b3d6543d73 补充自动分离文字遮罩方案 
记录普通文字归属、遮罩字段与标记图绘制规则

明确不进入分离树、绑定结果和视觉模型契约
 2026-09-10 10:32:34 +08:00
k88936 8cd7c43b9e 更新自动分离接入文档状态 
将前端接入 TODO 更新为联调与失败注入测试待办。
 2026-09-09 21:02:09 +08:00
k88936 7fb7d246c0 将视觉步骤切换为自动分离 
前端仅调用一次 separate_ui，并完成 cut 图片登记、SpriteAsset 回填和 State 保存。

增加 sidecar 恢复选择面板，旧 bind_components 标记为未调用遗留命令。
 2026-09-09 21:00:53 +08:00
k88936 5844afa14d 抽取自动分离素材状态变换 
复用 SpriteAsset 校验并支持锁内构造下一份 State。

保留公开 addSpriteAssets 的锁保护与历史提交行为。
 2026-09-09 20:17:11 +08:00
k88936 615d1a28cd 补齐自动分离恢复状态胶水 
新增 separation 恢复探测、完成清理命令与 DTO。

持久化项目相对 cut 图片路径并保留 state sidecar 到最终提交。
 2026-09-09 20:16:09 +08:00
k88936 3e1e172f9c 补充自动分离前端接入合同 
明确 UI 编辑器单次调用 separation 与 sidecar 恢复弹窗

补充资源登记、State 回填、保存和 finalize 顺序

划定旧 binding 与 Runtime workflow 的本次不改范围
 2026-09-09 20:03:27 +08:00
k88936 53a919e39b 优化 UI 分离工作流程的提示生成与历史处理
Project CI / Repository checks (pull_request) Failing after 14s
Details
Project CI / Backend tests (pull_request) Failing after 14s
Details
Project CI / Frontend tests (pull_request) Successful in 2m50s
Details
Project CI / Native shell tests (pull_request) Failing after 3m4s
Details 
- 调整 initial_history 构建逻辑，增强系统与用户消息的一致性。
- 简化 SeparationNode 提示生成逻辑，仅保留节点 ID 与注释。
- 明确 extracted_area 的权威性为 processed 图像，并更新生成提示的规则。
 2026-09-09 19:04:56 +08:00
k88936 d4b5f9fc14 重构 UI Editor LLM repair history 
将 request_with_feedback 改为 run_with_repair_history 并统一 max_retries 与 validater 命名。

让 requester 接收 append-only LlmMessage history，业务校验失败追加序列化响应和错误反馈。

迁移 visual_binding 调用方并补充 retry-only 与业务反馈 history 测试。

同步 UI Editor 结构化请求 repair history 决策文档。
 2026-09-09 16:46:29 +08:00
k88936 6e4f9a6f1f 完善 UI 自动分离返工意见链路 
记录视觉模型 NeedRework 意见并注入后续提取提示

同步返工次数、problematic 终态和 512 字符校验

补充 separation DTO 类型、回归测试与技术方案
 2026-09-09 16:29:54 +08:00
k88936 8a0dcf8be7 增强分离标记框的可视辨识度
Project CI / Backend tests (pull_request) Failing after 15s
Details
Project CI / Repository checks (pull_request) Failing after 15s
Details
Project CI / Frontend tests (pull_request) Successful in 3m4s
Details
Project CI / Native shell tests (pull_request) Failing after 4m38s
Details 
为分离标记框增加两条绿色角到角交叉线。

新增 MARKER_LINE_WIDTH 常量统一配置标记线宽，并确保绘制结果裁剪在矩形内。

补充标记框像素级回归测试并同步更新自动分离专题文档。
 2026-09-09 16:24:11 +08:00
k88936 aa2a78f7e0 重命名 separated_image_area 为 extracted_area，优化命名一致性并明确区域含义 2026-09-09 15:48:32 +08:00
k88936 7aa96e8438 统一分离标记图中文注释 
说明紫色重建与绿色框绘制层级
 2026-09-09 15:16:39 +08:00
k88936 feb6bc0ad4 修正分离失败恢复边界 
图片编辑、写入和裁切失败保留状态并返回错误
仅视觉模型返工结果进入 problematic
 2026-09-09 15:07:49 +08:00
k88936 f349350d60 同步分离状态 TypeScript 类型 
加入 root_extractable 并将树字段统一为 trees
 2026-09-09 15:03:48 +08:00
k88936 df3a172bc9 补充 Raw GPT Image 2 multipart 合同 
明确分离图片编辑请求字段与旧协议边界
 2026-09-09 14:57:55 +08:00
k88936 9b4924c73e 补充分离批次重叠筛选测试 
验证 DFS 顺序下贪心跳过重叠叶节点
 2026-09-09 14:54:37 +08:00
k88936 d30bc462c5 格式化自动分离 Rust 模块 
统一树选择、标记图和批次流程代码风格
 2026-09-09 14:50:19 +08:00
k88936 26b9ad7fad 重构分离树与非重叠批次选择 
保留真实根节点并记录 root_extractable
按终态反查和 DFS 贪心筛选逻辑叶
拆出父子区域标记图生成模块
 2026-09-09 14:48:18 +08:00
k88936 bc5398894e 补充分离树与批次算法约定 
明确真实根节点、逻辑叶和非重叠贪心选择
补充父节点紫色重建与错误恢复边界
 2026-09-09 14:29:38 +08:00
k88936 11d4d3d930 适配 UI 分离图片编辑 multipart 接口
Project CI / Frontend tests (pull_request) Successful in 4m57s
Details
Project CI / Repository checks (pull_request) Failing after 10s
Details
Project CI / Backend tests (pull_request) Failing after 11s
Details
Project CI / Native shell tests (pull_request) Failing after 5m40s
Details 
将标记图 data URL 解码为 PNG 文件部件。

按 Raw GPT Image 2 新合同发送 prompt、尺寸和输出参数。

保留响应 data[].b64_json 解析与 separation 流程不变。
 2026-09-09 13:17:36 +08:00
k88936 418d5732de 调整UI识别指令，细化粒度要求并优化组件返回规则 2026-09-09 13:12:51 +08:00
k88936 592b6b4ee7 简化识别树验证测试中的断言格式 2026-09-09 13:12:51 +08:00
k88936 99c19e3ed9 补充分离流程排障日志 
记录 separation sidecar 状态读写与恢复阶段

记录树构造、批次选择、视觉绑定、裁切和 patch 结果

避免输出 base64、完整提示词和敏感凭据
 2026-09-09 13:12:51 +08:00
k88936 15e30acb0f 调整UI识别指令细节，明确文字组件识别规则与粒度标准 2026-09-09 13:12:51 +08:00
k88936 56fff8325b 将自动分离图像处理移出异步执行器 
在 spawn_blocking 中构建标记图并编码写入处理图

在 spawn_blocking 中完成处理图裁切与文件输出

保留 image-edit 和视觉绑定网络请求的 async 调度边界
 2026-09-09 13:12:51 +08:00
k88936 884c5ec5ee 补充自动分离 sidecar 并发边界约束 
记录前端单次运行与 runWithStateLocked 的并发前提

明确 sidecar 不参与正式资产写入和项目 revision

补充未来多窗口多进程场景的进程级锁 TODO

记录图像本地处理使用 spawn_blocking 的执行边界
 2026-09-09 13:12:51 +08:00
k88936 207b0820dd 统一分离树文件格式 
按仓库 rustfmt 规范整理 synthetic root 实现
 2026-09-09 13:12:51 +08:00
k88936 19f3d62d78 隔离非法分离区域导致的批次失败 
将裁切错误记录为 problematic 并继续流程
避免单个模型区域终止整页分离
 2026-09-09 13:12:51 +08:00
k88936 3c1e7bd599 保留分离问题节点的真实重做次数 
避免基础设施失败伪造达到上限
保持 problematic 节点诊断信息准确
 2026-09-09 13:12:51 +08:00
k88936 dda6b3946a 阻止识别结果引用未授权字体素材 
补齐识别阶段字体引用校验
增加伪造字体绑定回归测试
 2026-09-09 13:12:51 +08:00
k88936 aff40f794d 修复分离树合成根节点 ID 冲突 
避免单图根节点重复进入重做计数
补充根图片构造回归测试
 2026-09-09 13:12:50 +08:00
k88936 187faa607d 保留原始分离提示并拆分模块 
按模型、树、持久化、提示词和工作流拆分 separation

提取支持 more_turn 的反馈重试 harness

删除旧 separation.rs 文件
 2026-09-09 13:12:50 +08:00
k88936 109cc81740 拆分UI自动分离命令模块 
保留原始图片分离与绑定提示词

提取模型、树、持久化和工作流子模块

新增可配置 more_turn 反馈重试 harness
 2026-09-09 13:12:50 +08:00
k88936 f796aef7e2 完善UI自动分离批次处理 
复用资源ID安全路径并修正像素坐标

加入标记图、Raw编辑、视觉绑定修复与问题节点继续处理
 2026-09-09 13:12:50 +08:00
k88936 4cc7f4dd64 实现UI自动分离命令 
新增分离树、批次处理与sidecar状态

接入Raw GPT Image 2与视觉绑定重试

注册Tauri命令并补充识别组件草稿
 2026-09-09 13:12:50 +08:00
k88936 b2d4690f94 补充UI编辑器自动分离工作流合同 
新增自动分离、临时 sidecar 与视觉绑定设计合同

明确前端资产登记职责与恢复 TODO
 2026-09-09 13:12:50 +08:00
k88936 0400103a19 将 Raw 图片编辑入站改为 multipart 
移除 JSON/base64 入站兼容，仅接受 multipart 图片与参数字段

复用扣费前 PNG、尺寸、mask 和 prompt 校验并补充 multipart 测试

优化上游图片字节转发，避免再次克隆 image bytes

同步 Raw 图片编辑技术方案与 Axum multipart 依赖
 2026-09-09 13:06:22 +08:00
k88936 c049d68b8e 收紧 Raw 成功响应字段类型 
要求 data 与 b64_json 必填并移除无用 provider id

prompt 上限调整为 4 KiB 原始字节并同步文档
 2026-09-09 12:03:03 +08:00
k88936 acfcf0c158 同步 platform-image 的 serde 锁定依赖 
为 Raw typed 响应记录 serde workspace 依赖
 2026-09-09 11:51:25 +08:00
k88936 5bbedd9a5c 限制 Raw prompt 原始字节大小 
将 prompt UTF-8 原始字节限制为 16 KiB

补充超限回归测试并同步请求合同
 2026-09-09 11:50:30 +08:00
k88936 40316d82c4 在扣费前校验 Raw mask 尺寸 
解码时保留 image 与 mask 宽高并拒绝不一致输入

同步 Raw 图片编辑请求合同与回归测试
 2026-09-09 11:45:44 +08:00
k88936 6c77de4a36 为 Raw 成功响应收紧类型透传 
使用 typed JSON DTO 提取并原样转发 b64_json

不解码图片内容且忽略 output_format 回显
 2026-09-09 11:44:31 +08:00
k88936 b3693765ef 透传 Raw 图片结果避免解码回显字段 
仅转发上游 data.b64_json 并忽略 output_format

同步 Raw 技术方案并补充不解码回归测试
 2026-09-09 11:34:41 +08:00
k88936 f7edc9d0ee 区分 Raw 图片 PNG 资源限制错误
Project CI / Frontend tests (pull_request) Successful in 4m43s
Details
Project CI / Repository checks (pull_request) Failing after 11s
Details
Project CI / Backend tests (pull_request) Failing after 10s
Details
Project CI / Native shell tests (pull_request) Failing after 5m14s
Details 
将有效但超出解码限制的 PNG 映射为明确的 400 提示

补充超大合法 PNG 的回归测试
 2026-09-09 11:04:44 +08:00
k88936 f60771dd00 提前检查 Raw 图片请求预算 
在构造 multipart 表单前校验请求 deadline

避免预算耗尽时复制输入图片并缩短耗时统计范围
 2026-09-09 10:58:48 +08:00
k88936 f7cccd8592 补充 Raw 图片客户端错误上下文 
为 HTTP 客户端构造失败统一保留操作上下文

补充配置错误文案回归测试
 2026-09-09 10:57:04 +08:00
k88936 5ee2d940c1 修正 Raw 图片尺寸校验错误语义 
尺寸校验失败改用请求参数无效语义

补充错误文案回归测试
 2026-09-09 10:55:36 +08:00
k88936 c75a7725ce Merge remote-tracking branch 'origin/master' into feat/expose-image2edit
Project CI / Repository checks (pull_request) Successful in 2m51s
Details
Project CI / Native shell tests (pull_request) Failing after 4m9s
Details
Project CI / Backend tests (pull_request) Failing after 4m58s
Details
Project CI / Frontend tests (pull_request) Successful in 3m46s
Details
2026-09-09 10:42:22 +08:00
k88936 3a95715990 同步 Raw 图片编辑技术方案
Project CI / Native shell tests (pull_request) Failing after 6m36s
Details
Project CI / Backend tests (pull_request) Failing after 14s
Details
Project CI / Repository checks (pull_request) Failing after 15s
Details
Project CI / Frontend tests (pull_request) Successful in 4m22s
Details 
记录解码资源上限和阻塞线程策略
补充输出格式回退与成功追踪约定
 2026-09-08 23:41:27 +08:00
k88936 ed86963de2 修正 Raw 图片追踪结果类型 
明确输出数据集合类型
保持 API 编译检查通过
 2026-09-08 23:38:25 +08:00