github/dootask
1
0
Fork 0
mirror of https://github.com/kuaifan/dootask.git synced 2026-07-28 08:56:08 +00:00
Code Issues Packages Projects Releases Wiki Activity
4,435 Commits 10 Branches 288 Tags
Commit Graph

44 Commits

Author SHA1 Message Date
kuaifan
a19822a617 feat(ai-assistant): 新增 close_app 动作支持关闭当前应用窗口 
打开微应用后 AI 页面操作默认锁定在该应用 iframe 内部，无法关闭应用本身
（关闭控件在主程序外壳层）。新增外壳层 close_app 动作绕过 iframe 作用域：

- action-executor 注册 close_app，先用 store 状态判断有无打开应用（无则报错
  不假报成功），再经事件总线 observeMicroApp:close 投递给 MicroApps 组件。
- MicroApps 复用现成 onAssistClose（findLast(isOpen)+closeByName）作为该事件
  处理器，关闭最前打开的应用，零重复逻辑。
- page-context-collector 在有微应用打开时向模型注入 close_app 可用动作。
- 同步 ai-kb page-action chunk 与 events-map。

Co-Authored-By: Claude Opus 4.8 (1M context) <noreply@anthropic.com>
 2026-06-17 03:09:38 +00:00
kuaifan
a3d5bdf93c feat(ai-assistant): 重构页面操作为统一执行器(Web DOM floor + Electron CDP 双后端) 
页面操作(doo page → /ws → 浮窗 operation-module → action-executor)原用手写
iView-only 选择器 + 朴素 value= 赋值,在 React+Radix 同源 iframe 业务表单上几乎
填不进。重构为「复用 Playwright 注入脚本的描述层 + 按环境选后端的执行层」:

描述层(共用):
- 新增 aria/aria-bundle.js,vendoring Playwright ariaSnapshot/roleUtils/domUtils
  子集预构建为 ESM(Apache-2.0 NOTICE + 固定上游 commit),产出 YAML 快照与活的
  ref→Element Map。
- page-context-collector 改用 buildSnapshot 采集,operation-module 经 setRefMap
  以 Map 直接持有元素取代 selector 反查。

执行层(按环境选后端,失败回退):
- web-backend:原生 prototype value setter + beforeinput/input/change/blur 序列
  + 回读校验(不符报 value_not_applied,绝不假报成功);自定义下拉/日期 open→click。
- electron-backend + electron/lib/page-input.js:经 webContents.debugger 走 CDP
  Input 域产生 isTrusted=true 可信输入(insertText/dispatchMouseEvent/KeyEvent),
  任一步失败回退 Web 后端。
- 复杂控件(动态明细表/成员选择器/文件上传)如实返回 unsupported_widget。

协议与链路(doo page、active-context 失效守卫、导航类 action)保持不变。

Co-Authored-By: Claude Opus 4.8 (1M context) <noreply@anthropic.com>
 2026-06-17 02:03:59 +00:00
kuaifan
b0a4fe6646 feat(ai-assistant): AI 回复增加复制/时间/反馈取消,历史删除二次确认 
- 反馈行新增复制按钮(去推理段落)与回复时间(规则参考 formatMessageTime)
- 点赞/点踩支持再点取消;修复 feedbackLoading 持久化导致重载后无法再点
- 历史删除改为二次确认(垃圾桶→红勾),离开/3秒/下拉关闭自动复位,触摸端常显
- 回复完成后贴底用户自动滚动到底部,露出反馈按钮
- 后端 feedback__save 支持空 feedback 取消(删除记录),同步 ai-kb

Co-Authored-By: Claude Opus 4.8 (1M context) <noreply@anthropic.com>
 2026-06-16 22:58:50 +00:00
kuaifan
bfa0920579 feat(ai-assistant): 采集器补 tabindex/ARIA 角色覆盖 + label 去重 
借鉴 browser-use clickable_elements 规则补齐页面元素采集边界：
- 用已定义但闲置的 INTERACTIVE_ROLES 补全所有 ARIA 可交互角色选择器（原仅扫部分 role）
- 选择器加 [tabindex]:not([tabindex="-1"])，捕捉自定义可聚焦/可交互元素
- 第二遍扫描跳过 label[for]/包裹控件的 label，避免与其表单控件重复采集

纯 DOM 增量、零风险（只多采不误删）；真机验证无报错、label 去重生效。

Co-Authored-By: Claude Opus 4.8 (1M context) <noreply@anthropic.com>
 2026-06-12 08:18:24 +00:00
kuaifan
88fed0744c feat(ai-assistant): 页面操作穿透到当前微应用 iframe 内部 
- 新增 active-context.js：按 microApps 解析最前的同源微应用 iframe（src 匹配 + contentDocument 同源探测），给出 doc/frameKey
- 采集器/执行器从只认主 document 泛化为按 el.ownerDocument 自适应，覆盖主文档与 iframe；视口与事件构造器取元素所在 window
- operation-module 加 scope(auto/main/app)、跨源/未就绪降级、frame 标注，并存活动上下文供失效守卫
- ai-kb 同步 page-action / page-context-tool / element-action 三 chunk

Co-Authored-By: Claude Opus 4.8 (1M context) <noreply@anthropic.com>
 2026-06-12 07:02:35 +00:00
kuaifan
da095a1a80 feat(ai-assistant): 页面操作搬到主程序 /ws + doo task notify + 删 OCR 
页面操作传输层从 MCP 独立 WebSocket 迁到主程序常驻 /ws：
- 后端 AssistantController 加 operation__dispatch/result（fd 归属校验 +
  PushTask 精推 + Cache 轮询取结果），WebSocketService onMessage 加
  operationResult 回包分支
- 前端 actions.js 加 case "operation" 经 emitter 桥接到浮窗执行后回包；
  float-button.vue 接 aiOperationRequest；operation-module.js 解耦、
  executor 惰性化；删除 operation-client.js（不再单连 MCP WS）

ai-kb 同步：tool-binding.yaml 去掉 4 个工具（3 页面 + OCR），相关 chunk
reconcile（措辞去 MCP 化、OCR 改多模态识图），工具数 33→29

i18n：后端新增文案登记 original-api.txt

Co-Authored-By: Claude Opus 4.8 <noreply@anthropic.com>
 2026-06-12 01:31:21 +00:00
kuaifan
39b9a72b16 refactor(ai-assistant): 用内联深链替代 driver.js 页面引导 
「带我去」分步引导（driver.js + 四级元素定位 + show_guide）定位不稳、
二级菜单不可达、点高亮按钮触发跳转即被杀，体验差。改为 AI 回复正文里把
可定位的页面/面板渲染成可点深链 chip，点击直达那一屏。

- 新增深链目录：_meta/page-links.yaml（语义，供 AI 选择）+ deep-links.js
  （可执行映射，21 个无需运行时 id 的导航目的地），两端 id 一致性由
  tests/deep-links-parity.mjs 校验
- markdown.js 加 processDeepLinks：[文字](dootask://link/<id>) 合法 id →
  chip，非法 id → 纯文字（绝不渲染死链）；复用现有 dootask:// 点击拦截链路
- DialogMarkdown 加 link 分支调 openDeepLink；system.vue 支持 query.tab
  初始化，系统设置二级 Tab 可深链直达
- 彻底移除 driver.js 引导：删 guide-renderer.js/guide.css、show_guide
  前端通道、aiGuideStarted 监听、driver.js 依赖
- 同步 ai-kb：改写 guide/start-guide 两 chunk、tool-binding 去 show_guide
- 插件侧 prompt 改动规格见 docs/ai-deeplink-plugin-spec.md（独立仓库实施）

Co-Authored-By: Claude Opus 4.8 <noreply@anthropic.com>
 2026-06-10 23:55:09 +00:00
kuaifan
4de6c69972 feat(ai-assistant): RAG 反馈闭环 + driver.js 页面操作引导 
方向7 反馈闭环：
- 新增 ai_assistant_search_logs / ai_assistant_feedbacks 两表 + 模型
- AssistantController 加 log__search / feedback__save 端点，auth 透传 session_id→context_key
- 前端 AI 回复下方 👍/👎（可改票、随会话持久化回显），extractSourceIds 解析引用
- ai-kb：feedback chunk + README 运营 SQL 口径（低分 top query / 👎 source）

方向4 页面操作引导：
- 渲染层用 driver.js（高亮可点击挖洞 + 稳定定位），编排层自研
  （脚本 schema / 四级元素定位 / 跨页 pre_action 导航 / 找不到降级文字）
- leave-semantics：跳转动作在点「下一步」后才执行
- markdown.js 渲染 ```ai-guide 围栏为「带我去」按钮；DialogMarkdown 点击启动
- 近义词归一化（创建/新建/新增/添加互通）提升 target 命中
- ai-kb：guide/start-guide chunk + tool-binding 加 show_guide

Co-Authored-By: Claude Opus 4.8 (1M context) <noreply@anthropic.com>
 2026-06-10 16:07:08 +00:00
kuaifan
ec1ab31b0e refactor(ai-kb): 索引同步改为容器启动 reconcile 
- 删除 CI reindex workflow（ai-kb-reindex.yml）：内容入库不再依赖 CI
  远程触发，AI 插件容器每次启动按文件 hash 对账（reconcile）自动增量
  收敛，免重启即时生效时可手动调 POST /kb/reindex（默认 mode=reconcile）
- ai-kb README.md 同步更新贡献流程与内容同步机制说明
- CLAUDE.md 精简 ai-kb 同步规则：去除与 _schema/README 重复的写作规范
  与背景说明，保留同步时机、操作指引、改完无需触发索引三条
- 另：auth 接口 locale 检索语种缺省改为由请求语言推导（含 zh 视为 zh，
  否则 en），删除 config/ai.php 的 rag_supported_locales 与回退逻辑，
  前端改用 getLanguage() 统一映射，同步更新 ai-kb auth.md
- appstore 镜像升级 0.4.3 -> 0.5.0

Co-Authored-By: Claude Opus 4.8 (1M context) <noreply@anthropic.com>
Co-Authored-By: Claude Fable 5 <noreply@anthropic.com>
 2026-06-10 09:46:58 +00:00
kuaifan
af206480fb feat(ai-kb): 落地 RAG 知识库与灰度链路(48 feature / 546 chunk) 2026-06-10 04:08:17 +00:00
kuaifan
f6067d1bd5 feat(ai-assistant): AI 浮窗/浮按钮移动端适配与流式不中断 2026-06-10 04:05:09 +00:00
kuaifan
fbd1c829a1 fix(ai): AI助手图片压缩阈值从1024提升到1568，减少长图模糊 
Co-Authored-By: Claude Opus 4.6 (1M context) <noreply@anthropic.com>
 2026-04-17 05:12:16 +00:00
kuaifan
82d2ca6360 feat(ai): AI助手聊天记录服务端持久化 
- 图片缓存不再二次压缩，用户预览与AI收到的图片质量一致
- 新增 ai_assistant_sessions 表及 AiAssistantSession 模型
- 新增会话 API：session/list、session/save、session/delete
- 前端会话存储从 IndexedDB 切换为服务端 API，图片落盘到 uploads/assistant/{YYYYMM}/{user_id}/
- saveSessionStore 添加防抖，删除会话时同步清理内存缓存

Co-Authored-By: Claude Opus 4.6 (1M context) <noreply@anthropic.com>
 2026-04-17 04:22:35 +00:00
kuaifan
9097369b0c fix(ai-assistant): 修复图片预览调用不存在方法的错误 
将 $A.previewFile 替换为 this.$store.dispatch("previewImage")，
解决 TypeError: $A.previewFile is not a function 错误。

Co-Authored-By: Claude Opus 4.5 <noreply@anthropic.com>
 2026-01-20 14:58:37 +00:00
kuaifan
95c6b53f10 fix(ai-assistant): 优化图片压缩逻辑避免重复质量压缩 
- 新增 forceCompress 参数控制是否强制质量压缩
- compressImageForAI: 始终进行质量压缩（发送给 AI）
- saveImageToCache: 仅在需要缩小尺寸时才压缩（避免已压缩图片被重复压缩）

Co-Authored-By: Claude Opus 4.5 <noreply@anthropic.com>
 2026-01-20 14:52:57 +00:00
kuaifan
f7d5040b02 feat(ai-assistant): 支持拖放和粘贴上传图片 
- 新增拖放上传：可将图片拖放到对话窗口任意位置
- 新增粘贴上传：在输入框中可直接粘贴剪贴板图片
- 提取 handleImageFiles 通用方法供多种上传方式复用
- 添加拖放时的视觉反馈（虚线边框 + 提示遮罩）
- 使用计数器方式正确处理嵌套元素和拖出窗口的情况

Co-Authored-By: Claude Opus 4.5 <noreply@anthropic.com>
 2026-01-20 14:45:38 +00:00
kuaifan
07b99c6e75 fix(ai-assistant): 修复 SSE 连接失败时状态未正确更新的问题 
当 SSE 连接一开始就失败时，响应状态保持 'waiting' 而非 'streaming'，
导致 onFailed 回调不会更新状态，UI 一直显示 loading。

现在同时处理 'streaming' 和 'waiting' 状态，并标记为错误状态显示失败提示。

Co-Authored-By: Claude Opus 4.5 <noreply@anthropic.com>
 2026-01-20 14:20:50 +00:00
kuaifan
cb5e7e2cc7 refactor(ai): 优化 AI 提示词构建逻辑 
- withLanguagePreferencePrompt: 修复无语言标签时占位符未添加的问题
- handleBeforeSend: 简化操作会话提示词，移除冗余的工具名称说明

Co-Authored-By: Claude Opus 4.5 <noreply@anthropic.com>
 2026-01-20 13:47:25 +00:00
kuaifan
2180998e81 feat(ai-assistant): 添加图片发送功能支持多模态对话 
- 支持上传图片并压缩（当前消息 1024px，历史 512px）
- 图片独立缓存存储，使用占位符 [IMG:xxx] 替代 base64
- 新增 prompt-image.vue 组件展示历史图片缩略图
- 后端 AI.php 支持多模态消息格式处理
- 添加图片缓存清理机制（删除会话时同步清理）
- 优化 parsePromptContent 避免重复调用
- 会话标题自动过滤图片占位符

Co-Authored-By: Claude Opus 4.5 <noreply@anthropic.com>
 2026-01-20 09:31:34 +00:00
kuaifan
f36317b081 fix(operation-client): 修正 WebSocket 路径格式并优化连接 URL 生成 2026-01-19 10:52:22 +08:00
kuaifan
066a5a619c build 2026-01-19 09:43:37 +08:00
kuaifan
cb6c50b071 fix(ai-assistant): 修复弹窗和下拉菜单被其他弹窗遮挡的问题 
- 使用 window.modalTransferIndex + 1000 作为动态 z-index
  - 添加定时刷新机制：弹窗可见时 5 秒刷新，不可见时 20 秒刷新
  - modal.vue 通过 zIndex prop 接收并应用 z-index
  - float-button.vue 通过 $parent.topZIndex 获取 z-index
  - Dropdown 和 Select 使用 ViewUI 新增的 z-index prop
 2026-01-19 01:13:18 +00:00
kuaifan
2cb67fafe7 feat(ai-assistant): 支持任务弹窗和对话弹窗的场景检测 
- 在 page-context.js 的 getPageContext 和 getSceneKey 函数中优先检测弹窗状态
  - 当 taskId > 0 时使用 single-task 上下文
  - 当 dialogModalShow && dialogId > 0 时使用 single-dialog 上下文
  - 在 welcome-prompts.js 中添加弹窗场景检测逻辑
  - 提取 formatPrompts 辅助函数减少代码重复
  - 在 index.vue 的 welcomePromptsKey 中监听 taskId 和 dialogModalShow 变化
 2026-01-18 23:52:26 +00:00
kuaifan
8eaba6f364 fix(ai-assistant): 优化流式响应期间的 loading 状态显示 
- 修改 loading 显示条件，streaming 状态时继续显示 loading icon
  - SSEClient 添加可选的 onFailed 回调，处理连接失败情况
  - 修复 done 事件处理，确保状态正确转为 completed
  - 解决工具调用期间 loading 动画过早消失的问题
 2026-01-18 14:44:03 +00:00
kuaifan
59ad79fa58 feat(ai-assistant): 支持上下键切换历史输入 
- 按 ↑ 键切换到上一条历史输入（光标在第一行时生效）
  - 按 ↓ 键切换到下一条历史输入（光标在最后一行时生效）
  - 历史记录使用 IndexedDB 持久化存储，最多保存 50 条
  - 重复输入会移动到末尾而非重复添加
  - 弹窗关闭时自动重置导航状态
 2026-01-18 13:20:13 +00:00
kuaifan
c65f0276bd feat(ai-assistant): 支持编辑历史问题并重新发送 
- 鼠标悬停历史问题时显示编辑图标
  - 点击编辑后在原位置显示内联编辑器
  - 支持 Enter 发送、Shift+Enter 换行、Esc 取消
  - 发送后删除该问题及之后的对话历史，重新发送编辑后的问题
  - 正确处理中文输入法组合状态，避免误触发提交
 2026-01-18 12:56:16 +00:00
kuaifan
f8b335a003 feat(ai-assistant): 增加元素向量匹配与关键词搜索能力 
- 新增后端 match_elements API，使用向量相似度匹配页面元素
  - 页面上下文采集支持关键词过滤，按 name/aria-label/placeholder/title 匹配
  - 关键词匹配失败时自动降级为向量搜索
  - 改进 findElementByRef 函数，使用 selector + name 双重匹配提高准确性
 2026-01-18 11:50:27 +00:00
kuaifan
0ac4b546ba feat(ai-assistant): 实现 AI 前端操作能力 
新增三个 MCP 工具的前端支持：
  - get_page_context: 基于 ARIA 角色收集页面元素，支持分页和区域筛选
  - execute_action: 执行导航操作（打开任务/对话、切换项目/页面）
  - execute_element_action: 元素级操作（click/type/select/focus/scroll/hover）

  新增文件：
  - operation-client.js: WebSocket 客户端，处理与 MCP Server 的通信
  - page-context-collector.js: 页面上下文收集器，ref 系统和 cursor:pointer 扫描
  - action-executor.js: 操作执行器，支持智能解析如 open_task_123
  - operation-module.js: 模块编排，整合上述模块

  修改文件：
  - float-button.vue: 集成 operation-module，AI 助手打开时启用
  - index.vue: 发射关闭事件供 float-button 监听
 2026-01-18 01:35:13 +00:00
kuaifan
07a41ca0ac feat(ai-assistant): 扩充提示词库并优化随机选择策略 
- 为提示词增加 type（query/action/sync/review）和 pin 属性
  - 新增 selectPrompts 函数：优先展示 pin 提示，按类型多样化抽样
  - 各场景提示词数量扩充 2-3 倍，覆盖更多常见操作
  - 部分场景使用动态数据（如 taskName、userName、groupName）个性化提示
 2026-01-17 02:24:42 +00:00
kuaifan
347465fc4d feat(ai-assistant): 按场景隔离会话存储 
- 将 sessionStore 从对象改为数组，每个场景独立存储
  - sessionCacheKey 改为 sessionCacheKeyPrefix，拼接场景 key 动态生成
  - initSession 改为异步方法，切换场景时按需加载对应数据
  - 使用防抖更新 displayWelcomePrompts，避免场景切换时闪屏
  - 修复输入框文字颜色样式
 2026-01-17 02:24:31 +00:00
kuaifan
acb9cd317c feat(ai-assistant): 增加 SVG 图标和随机选择提示功能 2026-01-16 14:42:04 +00:00
kuaifan
b7213f8c47 feat(ai-assistant): 添加全屏切换功能 
- 添加全屏按钮，支持点击或双击标题栏切换全屏
  - 全屏时禁用拖动和调整大小
  - 全屏状态下占满视口（保留 12px 边距）
  - 关闭窗口时自动退出全屏状态
 2026-01-16 10:26:57 +00:00
kuaifan
a3caf5ebdf feat(ai-assistant): 支持拖动边缘调整聊天窗口大小 
- 添加 8 个方向的调整大小控制点（四边 + 四角）
  - 支持从任意边缘或角落拖动调整窗口尺寸
  - 尺寸自动保存到 IndexedDB，下次打开时恢复
  - 窗口大小限制：最小 380×400，最大 800×900
  - 视口尺寸变化时自动调整窗口大小和位置
 2026-01-16 10:24:41 +00:00
kuaifan
87dd07ef23 feat(ai-assistant): 基于场景标识管理会话恢复 
- 新增 getSceneKey 函数，根据路由和实体生成唯一场景标识
  - 会话初始化改为按 sceneKey 匹配历史记录，相同场景恢复会话
  - 统一全局 AI 助手打开方式，manage.vue 通过事件触发 float-button
  - resumeSession 超时时间统一为 86400 秒（1天）
 2026-01-16 08:49:25 +00:00
kuaifan
53dd9dca0f feat(ai-assistant): 浮动按钮支持拖拽到边缘自动收起 
- 拖拽按钮到屏幕边缘（≤12px）松开后自动收起为窄条
  - 鼠标悬停窄条时自动展开，离开 1 秒后收起
  - 点击收起状态的窄条直接打开 AI 助手
  - 收起/展开过渡动画平滑，按钮中心位置保持不变
  - 仅在 AI 插件安装后显示浮动按钮
 2026-01-16 07:46:41 +00:00
kuaifan
4ebbb387ee no message 2026-01-16 03:08:25 +08:00
kuaifan
9234fe3ed1 feat(ai-assistant): 添加欢迎界面快捷提示功能和交互优化 
主要变更：
  - 新增场景化快捷提示，根据页面类型显示相关操作建议
  - 重新设计欢迎界面 UI，支持图标和可点击的提示卡片
  - 修复浮动按钮点击判断逻辑（移动距离<5px 且 按下时间<200ms）
  - 优化加载状态显示，移除冗余文案
  - 支持 base64 编码格式的文件链接
 2026-01-16 02:31:13 +08:00
kuaifan
f4f9ee1d3d fix(ai-assistant): 修复深色模式反转样式和交互优化 
- 将 no-dark-content 类从容器移动到 SVG 元素，修复深色模式样式问题
  - 添加深色模式反转时的悬浮按钮和聊天窗口样式适配
  - 支持 Escape 键关闭聊天模式窗口
  - 移除多余空白行
 2026-01-16 01:07:54 +08:00
kuaifan
bc460f0da8 fix(ai-assistant): 修复 SSE 流式响应 done 事件错误处理 
- 解析 done 事件的 payload 检查是否携带错误信息
  - 移除错误提示中对 response.error 的直接展示
 2026-01-15 16:18:53 +00:00
kuaifan
ad66811f49 refactor(ai-assistant): 重构页面上下文配置，支持更多页面类型 
- 简化上下文提示词，移除能力范围描述
  - 新增多个独立页面上下文支持：单任务、单对话、单文件、工作汇报等
  - 传递路由参数给上下文函数，以获取实体 ID
  - 移除不必要的 title 属性
 2026-01-15 16:18:42 +00:00
kuaifan
70ad8c394a feat(ai-assistant): 添加聊天窗口模式和页面上下文感知 
- 新增 chat 显示模式，支持可拖拽的悬浮聊天窗口
  - 新增 page-context.js，根据当前路由提供针对性系统提示词
  - 优化浮动按钮：添加淡入淡出动画、修复右键菜单拖动问题、更新配色
  - 重构 Modal 为独立组件，支持 modal/chat 双模式切换
  - 恢复会话时自动滚动到底部
 2026-01-15 15:06:38 +00:00
kuaifan
32ffecb905 feat(ai-assistant): 为各场景添加自定义标题并优化浮动按钮显示 
- 为项目创建、任务创建、消息编写、汇报编辑、汇报分析场景的 AI 助手添加专属标题
  - 在模态框显示时自动隐藏浮动按钮，避免 UI 重叠
 2026-01-15 10:48:56 +00:00
kuaifan
b794ba7a6b refactor(ui): 优化客户端下载入口位置 
- 将仪表盘页面的客户端下载链接移至右上角用户菜单
  - 登录页保留右下角客户端下载链接
  - 新增 clientDownloadUrl 全局状态，统一管理下载地址
  - AI 浮动按钮在登录页不显示
 2026-01-15 09:09:58 +00:00
kuaifan
fb7731ddcd feat(ai-assistant): 添加全局浮动按钮入口 
- 新增 float-button.vue 组件，支持拖拽定位和位置持久化
  - 将 AIAssistant.vue 重构为目录结构（index.vue + float-button.vue）
  - 浮动按钮位置基于四角存储，窗口缩放时保持相对位置
  - 点击浮动按钮打开 AI 助手对话框
 2026-01-15 08:18:34 +00:00