YYPOST群发软件 发表于 前天 07:48

自动截图并发送给DEEPSEEK识别示例过程

自动截图并发送给DEEPSEEK识别示例过程



// AIWROK 自动化流程:截图B站验证码 → 启动DEEPSEEK助手 → 发送截图询问拖动距离 → 采集回答 → 切回B站拖动滑块
// 包名:com.deepseek.chat(DEEPSEEK AI)
//
// 使用说明:
//   1. 在B站验证码页面运行脚本
//   2. 脚本自动截图并发送给DEEPSEEK识别
//   3. 解析DEEPSEEK返回的拖动距离,切回B站拖动滑块

print.log("===== DEEPSEEK识别验证码拖动B站流程启动 =====");
print.time();

// ========== 配置区 ==========
var DEEPK包名 = "com.deepseek.chat";
var B站包名 = "tv.danmaku.bili";
var 截图保存路径 = "/sdcard/验证码截图.png";

var 等待回答超时秒 = 50;
var 回答输出等待秒 = 50;
var 滑块校准系数 = 1.0;

var 提问话术 = "请帮我分析这张图片,告诉我左边的方块需要向右移动多少像素才能和右边的缺口对齐,只回复座标数字就行了。";

// ========== 获取设备信息 ==========
var 屏幕宽 = screen.getScreenWidth();
var 屏幕高 = screen.getScreenHeight();
var 验证码滑块距离 = null;
print.log("屏幕尺寸:" + 屏幕宽 + " x " + 屏幕高);
try {
    var 代理状态 = agent.isOpen();
    print.log("代理状态:" + (代理状态 ? "已开启" : "未开启"));
} catch (e) {
    print.log("代理状态检查失败:" + e.message);
}

// ========== 工具函数 ==========

function 获取UI() {
    var xml = agent.getXml();
    return "" + xml;
}

function 字符串长度(s) {
    var str = "" + s;
    return str.length;
}

function 解码HTML实体(s) {
    var str = "" + s;
    str = str.replace(/
/g, "\n");
    str = str.replace(/
/g, "\r");
    str = str.replace(/        /g, "\t");
    str = str.replace(/'/g, "'");
    str = str.replace(/"/g, '"');
    str = str.replace(/"/g, '"');
    str = str.replace(/'/g, "'");
    str = str.replace(/&/g, "&");
    str = str.replace(/</g, "<");
    str = str.replace(/>/g, ">");
    return str;
}

function 获取当前最后AI回答(xml) {
    var 回答列表 = 采集AI回答列表(xml);
    if (回答列表.length === 0) return "";
    return 回答列表[回答列表.length - 1];
}

function OCR识别屏幕区域(xml) {
    try {
      var img = screen.screenShotFull();
      
      var ocrres = img.MLKitOcr('zhs');
      var ocrText = "";
      
      if (ocrres && typeof ocrres.getAllString === 'function') {
            ocrText = "" + ocrres.getAllString();
      } else if (ocrres && typeof ocrres.getJsonString === 'function') {
            var jsonStr = "" + ocrres.getJsonString();
            var textPattern = /"text"\s*:\s*"([^"]+)"/g;
            var match;
            var allText = [];
            while ((match = textPattern.exec(jsonStr)) !== null) {
                if (match && match.length > 0) {
                  allText.push(match);
                }
            }
            ocrText = allText.join("\n");
      } else {
            var str = "" + ocrres;
            var textPattern2 = /"text"\s*:\s*"([^"]+)"/g;
            var match2;
            var allText2 = [];
            while ((match2 = textPattern2.exec(str)) !== null) {
                if (match2 && match2.length > 0) {
                  allText2.push(match2);
                }
            }
            ocrText = allText2.join("\n");
      }
      
      img.recycle();
      
      if (ocrText && ocrText.length > 0) {
            print.log("✓ MLKitOcr识别成功");
            print.log("--- OCR结果开始 ---");
            print.log(ocrText);
            print.log("--- OCR结果结束 ---");
            return "" + ocrText;
      }
      
      print.log("⚠ MLKitOcr未识别到内容");
      return "";
    } catch (e) {
      print.log("⚠ OCR识别异常:" + e.message);
      return "";
    }
}

function 提取数字(文本) {
    var str = "" + 文本;
    var 精确匹配 = str.match(/距离加(\d+)/);
    if (精确匹配) {
      var num = parseInt(精确匹配);
      if (num >= 30) {
            return "" + num;
      }
    }
    var 备选匹配 = str.match(/距离精[\u51c6\u79ef\u786e]加?(\d+)/);
    if (备选匹配) {
      var num2 = parseInt(备选匹配);
      if (num2 >= 30) {
            return "" + num2;
      }
    }
    var allMatches = str.match(/\d+/g);
    if (allMatches) {
      var 候选数字 = [];
      for (var i = 0; i < allMatches.length; i++) {
            var n = parseInt(allMatches);
            if (n >= 30 && n < 1000) {
                候选数字.push(n);
            }
      }
      if (候选数字.length > 0) {
            候选数字.sort(function(a, b) { return b - a; });
            return "" + 候选数字;
      }
      var allNums = [];
      for (var j = 0; j < allMatches.length; j++) {
            allNums.push(parseInt(allMatches));
      }
      allNums.sort(function(a, b) { return b - a; });
      return "" + allNums;
    }
    return "";
}

function 采集AI回答列表(xml) {
    var xmlStr = "" + xml;
    var 回答列表 = [];

    var ocr文本 = OCR识别屏幕区域(xml);
    if (ocr文本 && 字符串长度(ocr文本) > 1) {
      回答列表.push(ocr文本);
      print.log("✓ OCR识别到屏幕文本");
      print.log("--- OCR结果开始 ---");
      print.log(ocr文本);
      print.log("--- OCR结果结束 ---");
      
      var ocr数字 = 提取数字(ocr文本);
      if (ocr数字) {
            print.log("✓ 从OCR结果中提取到数字:" + ocr数字);
            回答列表.push(ocr数字);
      }
    }

    var textViewPattern = /<node[^>]*?text="([^"]+)"[^>]*?class="android\.widget\.TextView"[^>]*?\/?>/g;
    var tvMatch;
    var 跳过顶部区域 = true;
    while ((tvMatch = textViewPattern.exec(xmlStr)) !== null) {
      if (tvMatch && 字符串长度(tvMatch) > 1) {
            var 原始文本 = tvMatch;
            var 解码文本 = 解码HTML实体(原始文本);
            
            if (解码文本.includes("使用识图模式开始对话") ||
                解码文本.includes("图片理解功能内测中") ||
                解码文本.includes("快速模式") ||
                解码文本.includes("专家模式") ||
                解码文本.includes("识图模式") ||
                解码文本.includes("拍照") ||
                解码文本.includes("相册") ||
                解码文本.includes("文件") ||
                解码文本.includes("发消息或按住说话") ||
                解码文本.includes("深度思考")) {
                continue;
            }
            
            if (!回答列表.includes(解码文本)) {
                回答列表.push(解码文本);
                print.log("✓ 在TextView中找到文本: '" + 解码文本 + "'");
            }
      }
    }

    if (回答列表.length === 0) {
      print.log("⚠ 未找到AI回答节点");
    } else {
      print.log("✓ 采集到" + 回答列表.length + "条AI回答");
    }

    return 回答列表;
}

function 全屏截图(保存路径) {
    try {
      var result = agent.shell("screencap -p " + 保存路径);
      print.log("✓ 截图命令执行:" + result);
      
      var lsResult = agent.shell("ls -la " + 保存路径);
      print.log("✓ 截图文件检查:" + lsResult);
      
      return true;
    } catch (e) {
      print.log("⚠ 截图失败:" + e.message);
      return false;
    }
}

function 判断DEEPK打开形式(xml) {
    var xmlStr = "" + xml;
   
    var hasInput = xmlStr.indexOf('text="发消息或按住说话"') !== -1;
    var hasPhoto = xmlStr.indexOf('text="拍照"') !== -1;
    var hasAlbum = xmlStr.indexOf('text="相册"') !== -1;
    var hasFile = xmlStr.indexOf('text="文件"') !== -1;
   
    if (hasInput && (hasPhoto || hasAlbum || hasFile)) {
      print.log("✓ DEEPSEEK APP打开形式:对话页面");
      return "对话页";
    }
   
    print.log("⚠ DEEPSEEK APP打开形式:未知页面");
    return "未知";
}

function 开启新对话(xml) {
    var xmlStr = "" + xml;
   
    var newChatIdx = xmlStr.indexOf('content-desc="开启新对话"');
    if (newChatIdx !== -1) {
      var 段 = xmlStr.substring(newChatIdx);
      var m = 段.match(/bounds="\[(\d+),(\d+)\]\[(\d+),(\d+)\]"/);
      if (m) {
            var x = (parseInt(m) + parseInt(m)) / 2;
            var y = (parseInt(m) + parseInt(m)) / 2;
            agent.click(x, y);
            print.log("✓ 已点击开启新对话按钮,坐标(" + Math.round(x) + "," + Math.round(y) + ")");
            sleep.second(秒 = 3);
            return true;
      }
    }
   
    var rightButtonPattern = /<node[^>]*?clickable="true"[^>]*?bounds="\[(\d+),(\d+)\]\[(\d+),(\d+)\]"/g;
    var rbMatch;
    var 右上角按钮 = [];
    while ((rbMatch = rightButtonPattern.exec(xmlStr)) !== null) {
      var bx1 = parseInt(rbMatch);
      var by1 = parseInt(rbMatch);
      if (bx1 > 屏幕宽 * 0.85 && by1 > 100 && by1 < 400) {
            右上角按钮.push({ x: (bx1 + parseInt(rbMatch)) / 2, y: (by1 + parseInt(rbMatch)) / 2 });
      }
    }
   
    if (右上角按钮.length > 0) {
      右上角按钮.sort(function(a, b) { return a.x - b.x; });
      var 最右边按钮 = 右上角按钮[右上角按钮.length - 1];
      agent.click(最右边按钮.x, 最右边按钮.y);
      print.log("✓ 已点击右上角按钮开启新对话,坐标(" + Math.round(最右边按钮.x) + "," + Math.round(最右边按钮.y) + ")");
      sleep.second(秒 = 3);
      return true;
    }
   
    print.log("⚠ 未找到开启新对话按钮");
    return false;
}

function 确保识图模式开启(xml) {
    var xmlStr = "" + xml;
   
    var pattern = /text="识图模式"[^>]*?bounds="\[(\d+),(\d+)\]\[(\d+),(\d+)\]"/;
    var match = pattern.exec(xmlStr);
    if (match) {
      var x1 = parseInt(match);
      var y1 = parseInt(match);
      var x2 = parseInt(match);
      var y2 = parseInt(match);
      var x = (x1 + x2) / 2;
      var y = (y1 + y2) / 2;
      
      var checkedPattern = /text="识图模式"[^>]*?checked="([^"]+)"/;
      var checkedMatch = checkedPattern.exec(xmlStr);
      if (checkedMatch && checkedMatch === "true") {
            print.log("✓ 识图模式已开启");
            return true;
      } else {
            agent.click(x, y);
            print.log("✓ 已点击识图模式按钮开启识图功能,坐标(" + Math.round(x) + "," + Math.round(y) + ")");
            sleep.second(秒 = 2);
            return true;
      }
    }
   
    var visualModePattern = /<node[^>]*?checkable="true"[^>]*?checked="([^"]+)"[^>]*?bounds="\[(\d+),(\d+)\]\[(\d+),(\d+)\]"/g;
    var vmMatch;
    var 模式按钮列表 = [];
    while ((vmMatch = visualModePattern.exec(xmlStr)) !== null) {
      var 已选中 = vmMatch;
      var mx1 = parseInt(vmMatch);
      var my1 = parseInt(vmMatch);
      var mx2 = parseInt(vmMatch);
      var my2 = parseInt(vmMatch);
      if (my1 > 屏幕高 * 0.3 && my2 < 屏幕高 * 0.5) {
            模式按钮列表.push({ checked: 已选中 === "true", x: (mx1 + mx2) / 2, y: (my1 + my2) / 2, x1: mx1 });
      }
    }
   
    if (模式按钮列表.length >= 3) {
      模式按钮列表.sort(function(a, b) { return a.x1 - b.x1; });
      var 第三个按钮 = 模式按钮列表;
      if (第三个按钮.checked) {
            print.log("✓ 识图模式(第三个按钮)已开启");
            return true;
      } else {
            agent.click(第三个按钮.x, 第三个按钮.y);
            print.log("✓ 已点击第三个模式按钮开启识图功能,坐标(" + Math.round(第三个按钮.x) + "," + Math.round(第三个按钮.y) + ")");
            sleep.second(秒 = 2);
            return true;
      }
    }
   
    print.log("⚠ 未找到识图模式按钮,跳过此步骤");
    return false;
}

function 查找输入框中心(xml) {
    var xmlStr = "" + xml;
   
    var inputIdx = xmlStr.indexOf('text="发消息或按住说话"');
    if (inputIdx !== -1) {
      var 段 = xmlStr.substring(inputIdx);
      var m = 段.match(/bounds="\[(\d+),(\d+)\]\[(\d+),(\d+)\]"/);
      if (m) {
            var x1 = parseInt(m);
            var y1 = parseInt(m);
            var x2 = parseInt(m);
            var y2 = parseInt(m);
            print.log("✓ 输入框定位:text=发消息或按住说话,bounds=[" + x1 + "," + y1 + "][" + x2 + "," + y2 + "]");
            return {
                x: (x1 + x2) / 2,
                y: (y1 + y2) / 2
            };
      }
    }

    var editTextIdx = xmlStr.indexOf('class="android.widget.EditText"');
    if (editTextIdx !== -1) {
      var 段2 = xmlStr.substring(editTextIdx);
      var m2 = 段2.match(/bounds="\[(\d+),(\d+)\]\[(\d+),(\d+)\]"/);
      if (m2) {
            var x1 = parseInt(m2);
            var y1 = parseInt(m2);
            var x2 = parseInt(m2);
            var y2 = parseInt(m2);
            print.log("✓ 输入框定位(EditText):bounds=[" + x1 + "," + y1 + "][" + x2 + "," + y2 + "]");
            return {
                x: (x1 + x2) / 2,
                y: (y1 + y2) / 2
            };
      }
    }

    var viewFactoryHolderIdx = xmlStr.indexOf('class="androidx.compose.ui.viewinterop.ViewFactoryHolder"');
    if (viewFactoryHolderIdx !== -1) {
      var 段3 = xmlStr.substring(viewFactoryHolderIdx);
      var m3 = 段3.match(/bounds="\[(\d+),(\d+)\]\[(\d+),(\d+)\]"/);
      if (m3) {
            var x1 = parseInt(m3);
            var y1 = parseInt(m3);
            var x2 = parseInt(m3);
            var y2 = parseInt(m3);
            print.log("✓ 输入框定位(ViewFactoryHolder):bounds=[" + x1 + "," + y1 + "][" + x2 + "," + y2 + "]");
            return {
                x: (x1 + x2) / 2,
                y: (y1 + y2) / 2
            };
      }
    }

    print.log("⚠ 未找到输入框,使用兜底坐标");
    return {
      x: 屏幕宽 * 0.35,
      y: 屏幕高 * 0.75
    };
}

function 查找加号按钮(xml) {
    var xmlStr = "" + xml;
   
    var plusDescIdx = xmlStr.indexOf('content-desc="切换至语音"');
    if (plusDescIdx !== -1) {
      var 段 = xmlStr.substring(plusDescIdx);
      var m = 段.match(/bounds="\[(\d+),(\d+)\]\[(\d+),(\d+)\]"/);
      if (m) {
            var x1 = parseInt(m);
            var y1 = parseInt(m);
            var x2 = parseInt(m);
            var y2 = parseInt(m);
            var centerX = (x1 + x2) / 2;
            var centerY = (y1 + y2) / 2;
            print.log("✓ 加号按钮定位:content-desc=切换至语音,坐标(" + Math.round(centerX) + "," + Math.round(centerY) + ")");
            return { x: centerX, y: centerY };
      }
    }

    var inputIdx = xmlStr.indexOf('text="发消息或按住说话"');
    if (inputIdx !== -1) {
      var 输入框段 = xmlStr.substring(inputIdx);
      var 输入框边界 = 输入框段.match(/bounds="\[(\d+),(\d+)\]\[(\d+),(\d+)\]"/);
      if (输入框边界) {
            var 输入框X2 = parseInt(输入框边界);
            var 输入框Y = parseInt(输入框边界);
            var 输入框底部Y = parseInt(输入框边界);
            var 输入框中心Y = (输入框Y + 输入框底部Y) / 2;
            
            var clickablePattern = /<node[^>]*?clickable="true"[^>]*?bounds="\[(\d+),(\d+)\]\[(\d+),(\d+)\]"/g;
            var clickMatch;
            var 候选按钮 = [];
            
            while ((clickMatch = clickablePattern.exec(xmlStr)) !== null) {
                var bx1 = parseInt(clickMatch);
                var by1 = parseInt(clickMatch);
                var bx2 = parseInt(clickMatch);
                var by2 = parseInt(clickMatch);
               
                if (by1 >= 输入框中心Y - 100 && by2 <= 输入框中心Y + 200 && bx1 > 输入框X2 - 50) {
                  候选按钮.push({ x: (bx1 + bx2) / 2, y: (by1 + by2) / 2 });
                }
            }
            
            if (候选按钮.length > 0) {
                候选按钮.sort(function(a, b) { return a.x - b.x; });
                print.log("✓ 加号按钮定位:输入框右侧clickable元素,坐标(" + Math.round(候选按钮.x) + "," + Math.round(候选按钮.y) + ")");
                return 候选按钮;
            }
      }
    }

    print.log("⚠ 加号按钮使用兜底坐标(输入框右侧)");
    var 输入框 = 查找输入框中心(xml);
    return {
      x: 屏幕宽 * 0.9,
      y: 输入框.y
    };
}

function 查找相册按钮(xml) {
    var xmlStr = "" + xml;
   
    var albumIdx = xmlStr.indexOf('text="相册"');
    if (albumIdx !== -1) {
      var 段 = xmlStr.substring(albumIdx);
      var m = 段.match(/bounds="\[(\d+),(\d+)\]\[(\d+),(\d+)\]"/);
      if (m) {
            var x1 = parseInt(m);
            var y1 = parseInt(m);
            var x2 = parseInt(m);
            var y2 = parseInt(m);
            var centerX = (x1 + x2) / 2;
            var centerY = (y1 + y2) / 2;
            print.log("✓ 相册按钮定位:text=相册,bounds=[" + x1 + "," + y1 + "][" + x2 + "," + y2 + "],坐标(" + Math.round(centerX) + "," + Math.round(centerY) + ")");
            return { x: centerX, y: centerY };
      }
    }

    var clickableViewPattern = /<node[^>]*?clickable="true"[^>]*?bounds="\[(\d+),(\d+)\]\[(\d+),(\d+)\]"/g;
    var clickMatch;
    var 候选按钮 = [];
   
    while ((clickMatch = clickableViewPattern.exec(xmlStr)) !== null) {
      var bx1 = parseInt(clickMatch);
      var by1 = parseInt(clickMatch);
      var bx2 = parseInt(clickMatch);
      var by2 = parseInt(clickMatch);
      
      if (by1 >= 屏幕高 * 0.8 && by2 <= 屏幕高 * 0.95) {
            候选按钮.push({ x: (bx1 + bx2) / 2, y: (by1 + by2) / 2 });
      }
    }
   
    if (候选按钮.length >= 3) {
      候选按钮.sort(function(a, b) { return a.x - b.x; });
      var 中间按钮 = 候选按钮;
      print.log("✓ 相册按钮定位:底部中间clickable元素,坐标(" + Math.round(中间按钮.x) + "," + Math.round(中间按钮.y) + ")");
      return 中间按钮;
    }

    print.log("⚠ 相册按钮使用兜底坐标(底部中间)");
    return {
      x: 屏幕宽 * 0.5,
      y: 屏幕高 * 0.88
    };
}

function 查找相册选项(xml) {
    var xmlStr = "" + xml;
   
    var text关键词 = ["相册", "图片", "照片", "所有照片", "从相册选择", "选择图片"];
    for (var i = 0; i < text关键词.length; i++) {
      var kw = text关键词;
      var idx = xmlStr.indexOf('text="' + kw + '"');
      if (idx !== -1) {
            var 段 = xmlStr.substring(idx);
            var m = 段.match(/bounds="\[(\d+),(\d+)\]\[(\d+),(\d+)\]"/);
            if (m) {
                print.log("✓ 相册选项定位:text=" + kw);
                return {
                  x: (parseInt(m) + parseInt(m)) / 2,
                  y: (parseInt(m) + parseInt(m)) / 2
                };
            }
      }
    }

    var desc关键词 = ["相册", "图片", "照片"];
    for (var j = 0; j < desc关键词.length; j++) {
      var kw2 = desc关键词;
      var idx2 = xmlStr.indexOf('content-desc="' + kw2 + '"');
      if (idx2 !== -1) {
            var 段2 = xmlStr.substring(idx2);
            var m2 = 段2.match(/bounds="\[(\d+),(\d+)\]\[(\d+),(\d+)\]"/);
            if (m2) {
                print.log("✓ 相册选项定位:content-desc=" + kw2);
                return {
                  x: (parseInt(m2) + parseInt(m2)) / 2,
                  y: (parseInt(m2) + parseInt(m2)) / 2
                };
            }
      }
    }
   
    return null;
}

function 粘贴文本(文本) {
    try {
      Clipboard.copy("" + 文本);
    } catch (e) {
      print.log("⚠ Clipboard.copy 失败:" + e.message);
    }
    sleep.millisecond(毫秒 = 300);

    try {
      agent.shell("service call clipboard 3 i32 1 s16 '" + 文本 + "' i32 0");
    } catch (e2) {
      // 忽略错误
    }
    sleep.millisecond(毫秒 = 300);

    agent.shell("input keyevent 279");
    sleep.millisecond(毫秒 = 500);
   
    try {
      agent.shell("input text '" + 文本 + "'");
      print.log("✓ 已通过input text直接输入文本");
    } catch (e3) {
      print.log("⚠ input text失败:" + e3.message);
    }
   
    sleep.second(秒 = 1);
    print.log("✓ 已粘贴文本:" + 文本);
}

function 是否在系统相册页面(xml) {
    var xmlStr = "" + xml;
   
    var packageMatch = xmlStr.match(/package="([^"]+)"/);
    var 当前包名 = packageMatch ? packageMatch : "";
   
    if (当前包名 && 当前包名 !== DEEPK包名) {
      print.log("✓ 检测到系统相册页面,包名:" + 当前包名);
      return true;
    }
   
    return false;
}

function 是否在图片预览页面(xml) {
    var xmlStr = "" + xml;
    if (xmlStr.indexOf('text="完成"') !== -1 || xmlStr.indexOf('text="发送"') !== -1) {
      return true;
    }
    if (xmlStr.indexOf('content-desc="完成"') !== -1 || xmlStr.indexOf('content-desc="发送"') !== -1) {
      return true;
    }
    return false;
}

function 查找图片预览确认按钮(xml) {
    var xmlStr = "" + xml;
   
    var 关键词 = ["完成", "发送", "确认"];
    for (var i = 0; i < 关键词.length; i++) {
      var kw = 关键词;
      var textIdx = xmlStr.indexOf('text="' + kw + '"');
      if (textIdx !== -1) {
            var 段 = xmlStr.substring(textIdx);
            var m = 段.match(/bounds="\[(\d+),(\d+)\]\[(\d+),(\d+)\]"/);
            if (m) {
                var x = (parseInt(m) + parseInt(m)) / 2;
                var y = (parseInt(m) + parseInt(m)) / 2;
                print.log("✓ 图片预览确认按钮定位:text=" + kw + ",坐标(" + Math.round(x) + "," + Math.round(y) + ")");
                return { x: x, y: y };
            }
      }
    }
   
    for (var j = 0; j < 关键词.length; j++) {
      var kw2 = 关键词;
      var descIdx = xmlStr.indexOf('content-desc="' + kw2 + '"');
      if (descIdx !== -1) {
            var 段2 = xmlStr.substring(descIdx);
            var m2 = 段2.match(/bounds="\[(\d+),(\d+)\]\[(\d+),(\d+)\]"/);
            if (m2) {
                var x = (parseInt(m2) + parseInt(m2)) / 2;
                var y = (parseInt(m2) + parseInt(m2)) / 2;
                print.log("✓ 图片预览确认按钮定位:content-desc=" + kw2 + ",坐标(" + Math.round(x) + "," + Math.round(y) + ")");
                return { x: x, y: y };
            }
      }
    }
   
    print.log("⚠ 图片预览确认按钮使用兜底坐标(底部中间)");
    return { x: 屏幕宽 * 0.5, y: 屏幕高 * 0.92 };
}

function 查找相册选择按钮(xml) {
    var xmlStr = "" + xml;
   
    var 关键词列表 = ["选择", "完成", "确认", "发送", "确定"];
    for (var i = 0; i < 关键词列表.length; i++) {
      var kw = 关键词列表;
      
      var textPattern = new RegExp('text="' + kw + '[^"]*"[^>]*?bounds="\\[(\\d+),(\\d+)\\]\\[(\\d+),(\\d+)\\]"', 'gi');
      var textMatch = textPattern.exec(xmlStr);
      if (textMatch) {
            var x = (parseInt(textMatch) + parseInt(textMatch)) / 2;
            var y = (parseInt(textMatch) + parseInt(textMatch)) / 2;
            print.log("✓ 相册选择按钮定位:text=" + kw + ",坐标(" + Math.round(x) + "," + Math.round(y) + ")");
            return { x: x, y: y };
      }
      
      var descIdx = xmlStr.indexOf('content-desc="' + kw + '"');
      if (descIdx !== -1) {
            var 段2 = xmlStr.substring(descIdx);
            var m2 = 段2.match(/bounds="\[(\d+),(\d+)\]\[(\d+),(\d+)\]"/);
            if (m2) {
                var x = (parseInt(m2) + parseInt(m2)) / 2;
                var y = (parseInt(m2) + parseInt(m2)) / 2;
                print.log("✓ 相册选择按钮定位:content-desc=" + kw + ",坐标(" + Math.round(x) + "," + Math.round(y) + ")");
                return { x: x, y: y };
            }
      }
    }
   
    var bottomButtonPattern = /<node[^>]*?clickable="true"[^>]*?bounds="\[(\d+),(\d+)\]\[(\d+),(\d+)\]"/g;
    var bottomMatch;
    var 底部按钮列表 = [];
    while ((bottomMatch = bottomButtonPattern.exec(xmlStr)) !== null) {
      var bx1 = parseInt(bottomMatch);
      var by1 = parseInt(bottomMatch);
      var bx2 = parseInt(bottomMatch);
      var by2 = parseInt(bottomMatch);
      if (by1 >= 屏幕高 * 0.85) {
            底部按钮列表.push({ x: (bx1 + bx2) / 2, y: (by1 + by2) / 2 });
      }
    }
   
    if (底部按钮列表.length > 0) {
      底部按钮列表.sort(function(a, b) { return b.x - a.x; });
      var 最右边按钮 = 底部按钮列表;
      print.log("✓ 相册选择按钮定位:底部最右边按钮,坐标(" + Math.round(最右边按钮.x) + "," + Math.round(最右边按钮.y) + ")");
      return { x: 最右边按钮.x, y: 最右边按钮.y };
    }
   
    print.log("⚠ 相册选择按钮使用兜底坐标(底部)");
    return { x: 屏幕宽 * 0.78, y: 屏幕高 * 0.92 };
}

function 查找第一张图片(xml) {
    var xmlStr = "" + xml;
   
    if (是否在系统相册页面(xmlStr)) {
      agent.shell("echo '" + xmlStr.substring(0, 5000) + "' > /sdcard/相册UI_dump.xml");
      print.log("✓ 已保存相册UI XML到/sdcard/相册UI_dump.xml");
      
      var nafPattern = /<node[^>]*?NAF="true"[^>]*?clickable="true"[^>]*?bounds="\[(\d+),(\d+)\]\[(\d+),(\d+)\]"/g;
      var nafMatch;
      var NAF小圆点列表 = [];
      
      while ((nafMatch = nafPattern.exec(xmlStr)) !== null) {
            var nx1 = parseInt(nafMatch);
            var ny1 = parseInt(nafMatch);
            var nx2 = parseInt(nafMatch);
            var ny2 = parseInt(nafMatch);
            var nw = nx2 - nx1;
            var nh = ny2 - ny1;
            
            if (nw >= 50 && nw <= 300 && nh >= 50 && nh <= 300) {
                if (ny1 >= 400 && ny2 <= 屏幕高 - 400) {
                  NAF小圆点列表.push({ x1: nx1, y1: ny1, x2: nx2, y2: ny2, x: (nx1 + nx2) / 2, y: (ny1 + ny2) / 2 });
                }
            }
      }
      
      if (NAF小圆点列表.length > 0) {
            NAF小圆点列表.sort(function(a, b) {
                if (a.y1 !== b.y1) return a.y1 - b.y1;
                return a.x1 - b.x1;
            });
            var 选中小圆点 = NAF小圆点列表;
            print.log("✓ ComposeView找到NAF小圆点选择框:坐标(" + Math.round(选中小圆点.x) + "," + Math.round(选中小圆点.y) + "),bounds=[" + 选中小圆点.x1 + "," + 选中小圆点.y1 + "][" + 选中小圆点.x2 + "," + 选中小圆点.y2 + "]");
            return { x: 选中小圆点.x, y: 选中小圆点.y };
      }
      
      var imageDescPattern = /<node[^>]*?content-desc="([^"]+\.(png|jpg|jpeg|gif))"[^>]*?class="android\.view\.View"[^>]*?bounds="\[(\d+),(\d+)\]\[(\d+),(\d+)\]"/gi;
      var imgMatch;
      var 图片节点列表 = [];
      
      while ((imgMatch = imageDescPattern.exec(xmlStr)) !== null) {
            var 文件名 = imgMatch;
            var ix1 = parseInt(imgMatch);
            var iy1 = parseInt(imgMatch);
            var ix2 = parseInt(imgMatch);
            var iy2 = parseInt(imgMatch);
            var iw = ix2 - ix1;
            var ih = iy2 - iy1;
            
            if (iw >= 100 && ih >= 100) {
                图片节点列表.push({ 文件名: 文件名, x1: ix1, y1: iy1, x2: ix2, y2: iy2, w: iw, h: ih });
            }
      }
      
      if (图片节点列表.length > 0) {
            图片节点列表.sort(function(a, b) {
                if (a.y1 !== b.y1) return a.y1 - b.y1;
                return a.x1 - b.x1;
            });
            var 第一张图片 = 图片节点列表;
            print.log("✓ 找到图片:" + 第一张图片.文件名 + ",bounds=[" + 第一张图片.x1 + "," + 第一张图片.y1 + "][" + 第一张图片.x2 + "," + 第一张图片.y2 + "]");
            
            var 选择框X = 第一张图片.x1 + 第一张图片.w * 0.77;
            var 选择框Y = 第一张图片.y1 + 第一张图片.h * 0.24;
            print.log("✓ 计算小圆点选择框坐标:(" + Math.round(选择框X) + "," + Math.round(选择框Y) + ")");
            return { x: 选择框X, y: 选择框Y };
      }
      
      var clickableViewPattern = /<node[^>]*?clickable="true"[^>]*?bounds="\[(\d+),(\d+)\]\[(\d+),(\d+)\]"/g;
      var clickMatch;
      var 可点击区域 = [];
      while ((clickMatch = clickableViewPattern.exec(xmlStr)) !== null) {
            var cx1 = parseInt(clickMatch);
            var cy1 = parseInt(clickMatch);
            var cx2 = parseInt(clickMatch);
            var cy2 = parseInt(clickMatch);
            var cw = cx2 - cx1;
            var ch = cy2 - cy1;
            可点击区域.push({ x1: cx1, y1: cy1, x2: cx2, y2: cy2, w: cw, h: ch, x: (cx1 + cx2) / 2, y: (cy1 + cy2) / 2 });
      }
      
      var 图片区域内可点击 = [];
      for (var k = 0; k < 可点击区域.length; k++) {
            var item = 可点击区域;
            if (item.y >= 400 && item.y <= 屏幕高 - 400) {
                图片区域内可点击.push(item);
            }
      }
      
      if (图片区域内可点击.length > 0) {
            图片区域内可点击.sort(function(a, b) {
                if (a.y !== b.y) return a.y - b.y;
                return a.x - b.x;
            });
            var 第一个可点击 = 图片区域内可点击;
            print.log("✓ ComposeView图片区域内第一个可点击元素:坐标(" + Math.round(第一个可点击.x) + "," + Math.round(第一个可点击.y) + ")");
            return { x: 第一个可点击.x, y: 第一个可点击.y };
      }

      print.log("⚠ 系统相册未找到图片,使用兜底坐标");
      return { x: 屏幕宽 * 0.25, y: 屏幕高 * 0.3 };
    }

    print.log("⚠ 未找到图片,使用兜底坐标(底部第一行第一列)");
    return { x: 屏幕宽 * 0.15, y: 屏幕高 * 0.85 };
}

function 查找发送按钮中心(xml) {
    var xmlStr = "" + xml;

    try {
      var detects = opencv.findImagesEx('图色168638.cv');
      if (detects != null && detects.length > 0) {
            print.log("✓ 发送按钮定位:图色匹配");
            var dStr = "" + detects;
            print.log("图色匹配结果:" + dStr);
            var m = dStr.match(/矩形区域:([\d.]+),\s*([\d.]+),\s*([\d.]+),\s*([\d.]+)/);
            if (m) {
                var left = parseFloat(m);
                var top = parseFloat(m);
                var right = parseFloat(m);
                var bottom = parseFloat(m);
                var centerX = (left + right) / 2;
                var centerY = (top + bottom) / 2;
                print.log("图色匹配百分比坐标:left=" + left + ", top=" + top + ", right=" + right + ", bottom=" + bottom);
                print.log("计算点击百分比:(" + centerX + "," + centerY + ")");
                agent.clickPercent(centerX, centerY);
                print.log("✓ 已点击发送按钮(图色)");
                return null;
            }
            print.log("⚠ 图色匹配结果格式解析失败");
      }
    } catch (e) {
      print.log("⚠ 图色匹配失败:" + e.message);
    }

    var inputIdx = xmlStr.indexOf('text="发消息或按住说话"');
    if (inputIdx !== -1) {
      var 输入框段 = xmlStr.substring(inputIdx);
      var 输入框边界 = 输入框段.match(/bounds="\[(\d+),(\d+)\]\[(\d+),(\d+)\]"/);
      
      if (输入框边界) {
            var 输入框信息 = {
                x1: parseInt(输入框边界),
                y1: parseInt(输入框边界),
                x2: parseInt(输入框边界),
                y2: parseInt(输入框边界),
                centerY: (parseInt(输入框边界) + parseInt(输入框边界)) / 2
            };

            var clickablePattern = /<node[^>]*?clickable="true"[^>]*?bounds="\[(\d+),(\d+)\]\[(\d+),(\d+)\]"[^>]*?\/?>/g;
            var clickMatch;
            var candidates = [];

            while ((clickMatch = clickablePattern.exec(xmlStr)) !== null) {
                var cx1 = parseInt(clickMatch);
                var cy1 = parseInt(clickMatch);
                var cx2 = parseInt(clickMatch);
                var cy2 = parseInt(clickMatch);
                var cw = cx2 - cx1;
                var ch = cy2 - cy1;

                var 是小按钮 = (cw < 300 && ch < 300);
                var 在输入框右侧 = (cx1 > 输入框信息.x2 - 100);
                var 在输入框水平行 = (cy1 >= 输入框信息.y1 - 100 && cy1 <= 输入框信息.y2 + 100);

                if (是小按钮 && 在输入框右侧 && 在输入框水平行) {
                  candidates.push({
                        x1: cx1, y1: cy1, x2: cx2, y2: cy2,
                        x: (cx1 + cx2) / 2,
                        y: (cy1 + cy2) / 2
                  });
                }
            }

            if (candidates.length > 0) {
                candidates.sort(function(a, b) {
                  return b.x1 - a.x1;
                });
                var 选中 = candidates;
                print.log("✓ 发送按钮定位:输入框右侧clickable元素,坐标(" + Math.round(选中.x) + "," + Math.round(选中.y) + ")");
                return { x: 选中.x, y: 选中.y };
            }

            var 预估X = 输入框信息.x2 + 100;
            var 预估Y = 输入框信息.centerY;
            print.log("⚠ 发送按钮使用输入框右侧兜底坐标(" + Math.round(预估X) + "," + Math.round(预估Y) + ")");
            return { x: 预估X, y: 预估Y };
      }
    }

    var sendTextIdx = xmlStr.indexOf('text="发送"');
    if (sendTextIdx !== -1) {
      var 段 = xmlStr.substring(sendTextIdx);
      var m = 段.match(/bounds="\[(\d+),(\d+)\]\[(\d+),(\d+)\]"/);
      if (m) {
            print.log("✓ 发送按钮定位:文本匹配");
            return {
                x: (parseInt(m) + parseInt(m)) / 2,
                y: (parseInt(m) + parseInt(m)) / 2
            };
      }
    }

    var sendDescIdx = xmlStr.indexOf('content-desc="发送"');
    if (sendDescIdx !== -1) {
      var 段2 = xmlStr.substring(sendDescIdx);
      var m2 = 段2.match(/bounds="\[(\d+),(\d+)\]\[(\d+),(\d+)\]"/);
      if (m2) {
            print.log("✓ 发送按钮定位:content-desc匹配");
            return {
                x: (parseInt(m2) + parseInt(m2)) / 2,
                y: (parseInt(m2) + parseInt(m2)) / 2
            };
      }
    }

    print.log("⚠ 发送按钮使用屏幕右侧兜底策略");
    agent.clickPercent(0.9, 0.75);
    print.log("✓ 已点击发送按钮(硬编码兜底)");
    return null;
}

function 等待AI回答完成(发送前的最后文本, 发送前回答数量) {
    var 已耗时 = 0;
    var 检查间隔秒 = 3;
    var 连续相同次数 = 0;
    var 上次规范化文本 = "";

    print.log("发送前最后AI回答:'" + 发送前的最后文本 + "',发送前回答数量:" + 发送前回答数量);

    sleep.second(秒 = 5);
    已耗时 += 5;

    while (已耗时 < 等待回答超时秒) {
      var xml = 获取UI();
      var 回答列表 = 采集AI回答列表(xml);
      
      if (回答列表.length > 0) {
            var 当前最后回答 = 回答列表[回答列表.length - 1];
            var 当前提取数字 = 提取数字(当前最后回答);
            var 当前规范化文本 = 当前最后回答.trim().replace(/\s+/g, " ");
            
            var 有新回答 = false;
            var 回答数量增加 = (回答列表.length > 发送前回答数量);
            
            var 发送前规范化 = 发送前的最后文本.trim().replace(/\s+/g, " ");
            有新回答 = (当前规范化文本 !== 发送前规范化) || (当前提取数字 !== "");
            
            if (有新回答 || 回答数量增加) {
                print.log("✓ 检测到新回答(" + 已耗时 + "秒):'" + 当前最后回答 + "',提取数字:'" + 当前提取数字 + "'");
               
                if (当前提取数字 !== "") {
                  print.log("✓ 提取到数字,直接返回:" + 当前提取数字);
                  return 当前提取数字;
                }
               
                if (当前规范化文本 === 上次规范化文本) {
                  连续相同次数++;
                  if (连续相同次数 >= 2) {
                        print.log("✓ 文本连续2次相同,回答完成");
                        var 最终数字 = 提取数字(当前最后回答);
                        if (最终数字 !== "") {
                            return 最终数字;
                        }
                        return 当前最后回答;
                  }
                } else {
                  连续相同次数 = 0;
                  上次规范化文本 = 当前规范化文本;
                }
            }
      }
      
      sleep.second(秒 = 检查间隔秒);
      已耗时 += 检查间隔秒;
    }

    print.log("⚠ 等待AI回答超时(" + 等待回答超时秒 + "秒),尝试返回当前内容");
    var xml = 获取UI();
    var 兜底列表 = 采集AI回答列表(xml);
    if (兜底列表.length > 0) {
      var 兜底文本 = 兜底列表[兜底列表.length - 1];
      print.log("✓ 超时兜底:返回当前采集到的回答:" + 兜底文本);
      return 兜底文本;
    }
    return null;
}

// ========== 主流程开始 ==========

function 主流程() {
    // 步骤1:全屏截图(B站验证码页面)
    print.log("\n========== 步骤1:全屏截图B站验证码 ==========");
    var 截图成功 = 全屏截图(截图保存路径);
    if (!截图成功) {
      print.log("✗ 截图失败,退出流程");
      print.log("===== DEEPSEEK识别验证码拖动B站流程结束 =====");
      return;
    }

    // 步骤2:启动DEEPSEEK APP
    print.log("\n========== 步骤2:启动DEEPSEEK APP ==========");
    try {
      app.openApp(DEEPK包名);
      print.log("✓ 已启动DEEPSEEK");
    } catch (e) {
      print.log("⚠ 启动失败:" + e.message);
    }
    sleep.second(秒 = 5);

    // 步骤3:点击右上角新对话按钮
    print.log("\n========== 步骤3:点击右上角新对话按钮 ==========");
   
    xml = 获取UI();
   
    var 新对话X = 屏幕宽 * 0.96;
    var 新对话Y = 屏幕高 * 0.06;
   
    var newChatIdx = xml.indexOf('content-desc="开启新对话"');
    if (newChatIdx !== -1) {
      var 段 = xml.substring(newChatIdx);
      var m = 段.match(/bounds="\[(\d+),(\d+)\]\[(\d+),(\d+)\]"/);
      if (m) {
            新对话X = (parseInt(m) + parseInt(m)) / 2;
            新对话Y = (parseInt(m) + parseInt(m)) / 2;
            print.log("✓ 新对话按钮定位:content-desc=开启新对话,坐标(" + Math.round(新对话X) + "," + Math.round(新对话Y) + ")");
      }
    }
   
    agent.click(新对话X, 新对话Y);
    print.log("✓ 已点击新对话按钮,坐标(" + Math.round(新对话X) + "," + Math.round(新对话Y) + ")");
   
    sleep.second(秒 = 3);
    print.log("✓ 新对话操作完成");

    // 步骤5:确保识图模式已开启
    print.log("\n========== 步骤5:确保识图模式已开启 ==========");
   
    var 识图模式X = 屏幕宽 * 0.8;
    var 识图模式Y = 屏幕高 * 0.53;
   
    var visualModeIdx = xml.indexOf('text="识图模式"');
    if (visualModeIdx !== -1) {
      var 段 = xml.substring(visualModeIdx);
      var m = 段.match(/bounds="\[(\d+),(\d+)\]\[(\d+),(\d+)\]"/);
      if (m) {
            识图模式X = (parseInt(m) + parseInt(m)) / 2;
            识图模式Y = (parseInt(m) + parseInt(m)) / 2;
            print.log("✓ 识图模式按钮定位:text=识图模式,坐标(" + Math.round(识图模式X) + "," + Math.round(识图模式Y) + ")");
      }
    } else {
      print.log("⚠ XML中未找到识图模式按钮,使用兜底坐标");
    }
   
    agent.click(识图模式X, 识图模式Y);
    print.log("✓ 已点击识图模式按钮,坐标(" + Math.round(识图模式X) + "," + Math.round(识图模式Y) + ")");
    sleep.second(秒 = 2);
    xml = 获取UI();

    // 步骤6:记录发送前的最后一条AI回答和数量
    print.log("\n========== 步骤6:记录发送前状态 ==========");
    var 发送前回答数量 = 0;
    print.log("✓ 发送前回答数量:" + 发送前回答数量);

    // 步骤7:点击加号按钮打开附件菜单
    print.log("\n========== 步骤7:点击加号按钮打开附件菜单 ==========");
   
    var 加号X = 屏幕宽 * 0.83;
    var 加号Y = 屏幕高 * 0.97;
   
    var plusDescIdx = xml.indexOf('content-desc="上传文件"');
    if (plusDescIdx !== -1) {
      var 段 = xml.substring(plusDescIdx);
      var m = 段.match(/bounds="\[(\d+),(\d+)\]\[(\d+),(\d+)\]"/);
      if (m) {
            加号X = (parseInt(m) + parseInt(m)) / 2;
            加号Y = (parseInt(m) + parseInt(m)) / 2;
            print.log("✓ 加号按钮定位:content-desc=上传文件,坐标(" + Math.round(加号X) + "," + Math.round(加号Y) + ")");
      }
    } else {
      print.log("⚠ XML中未找到加号按钮,使用兜底坐标");
    }
   
    agent.click(加号X, 加号Y);
    print.log("✓ 已点击加号按钮,坐标(" + Math.round(加号X) + "," + Math.round(加号Y) + ")");
    sleep.second(秒 = 2);

    // 步骤8:点击相册按钮选择图片
    print.log("\n========== 步骤8:点击相册按钮选择图片 ==========");
   
    var 相册选择成功 = false;
    var 尝试次数 = 0;
   
    while (!相册选择成功 && 尝试次数 < 5) {
      尝试次数++;
      xml = 获取UI();
      
      if (是否在系统相册页面(xml)) {
            print.log("✓ 已进入系统相册页面");
            相册选择成功 = true;
            break;
      }
      
      var 相册X = 屏幕宽 * 0.5;
      var 相册Y = 屏幕高 * 0.88;
      
      var albumIdx = xml.indexOf('text="相册"');
      if (albumIdx !== -1) {
            var 段 = xml.substring(albumIdx);
            var m = 段.match(/bounds="\[(\d+),(\d+)\]\[(\d+),(\d+)\]"/);
            if (m) {
                相册X = (parseInt(m) + parseInt(m)) / 2;
                相册Y = (parseInt(m) + parseInt(m)) / 2;
                print.log("✓ 相册按钮定位:text=相册,坐标(" + Math.round(相册X) + "," + Math.round(相册Y) + ")");
            }
      }
      
      agent.click(相册X, 相册Y);
      print.log("✓ 已点击相册按钮,坐标(" + Math.round(相册X) + "," + Math.round(相册Y) + ")");
      sleep.second(秒 = 2);
      
      xml = 获取UI();
      if (是否在系统相册页面(xml)) {
            print.log("✓ 已进入系统相册页面");
            相册选择成功 = true;
            break;
      }
      
      print.log("⚠ 第" + 尝试次数 + "次尝试:未进入相册页面,重新点击加号");
      agent.click(屏幕宽 * 0.77, 屏幕高 * 0.94);
      sleep.second(秒 = 2);
    }

    // 步骤9:选择第一张图片(系统相册用Canvas渲染,XML无节点,直接坐标点击)
    print.log("\n========== 步骤9:选择第一张图片 ==========");
   
    var 图片尝试次数 = 0;
    while (图片尝试次数 < 3) {
      图片尝试次数++;
      xml = 获取UI();
      
      if (是否在系统相册页面(xml)) {
            print.log("✓ 系统相册页面,点击图片位置");
            
            var 标题栏底部 = 432;
            var actionBarMatch = xml.match(/resource-id="android:id\/action_bar"[^>]*?bounds="\[(\d+),(\d+)\]\[(\d+),(\d+)\]"/);
            if (actionBarMatch) {
                标题栏底部 = parseInt(actionBarMatch);
            }
            
            var 图片区域顶部 = 标题栏底部;
            var 图片区域底部 = 屏幕高;
            var 图片区域高度 = 图片区域底部 - 图片区域顶部;
            
            var 图片X = 屏幕宽 * 0.5;
            var 图片Y = 图片区域顶部 + 图片区域高度 * 0.4;
            agent.click(图片X, 图片Y);
            print.log("✓ 已点击图片位置,坐标(" + Math.round(图片X) + "," + Math.round(图片Y) + ")");
            sleep.second(秒 = 3);
            
            xml = 获取UI();
            if (!是否在系统相册页面(xml)) {
                print.log("✓ 已离开相册页面,图片可能已添加");
                break;
            }
      } else {
            break;
      }
    }

    // 步骤10:等待图片添加到输入区域(等待回到DEEPSEEK对话页面)
    print.log("\n========== 步骤10:等待图片添加到输入区域 ==========");
    sleep.second(秒 = 3);
    xml = 获取UI();
   
    var packageMatch = xml.match(/package="([^"]+)"/);
    if (packageMatch && packageMatch === DEEPK包名) {
      print.log("✓ 已回到DEEPSEEK对话页面");
    }
   
    print.log("✓ 图片已添加到输入区域");
   
    var isQuickMode = xml.indexOf('快速模式') !== -1;
    if (isQuickMode) {
      print.log("✓ 当前是快速模式,切换到识图模式");
      var 识图模式X = 屏幕宽 * 0.75;
      var 识图模式Y = 屏幕高 * 0.72;
      agent.click(识图模式X, 识图模式Y);
      print.log("✓ 已点击识图模式按钮,坐标(" + Math.round(识图模式X) + "," + Math.round(识图模式Y) + ")");
      sleep.second(秒 = 2);
    }

    // 步骤11:粘贴文字询问拖动距离
    print.log("\n========== 步骤11:粘贴文字询问拖动距离 ==========");
    xml = 获取UI();
   
    var 输入框X = 屏幕宽 * 0.2;
    var 输入框Y = 屏幕高 * 0.72;
   
    var editTextIdx = xml.indexOf('class="android.widget.EditText"');
    if (editTextIdx !== -1) {
      var 段 = xml.substring(editTextIdx);
      var m = 段.match(/bounds="\[(\d+),(\d+)\]\[(\d+),(\d+)\]"/);
      if (m) {
            输入框X = (parseInt(m) + parseInt(m)) / 2;
            输入框Y = (parseInt(m) + parseInt(m)) / 2;
            print.log("✓ 输入框定位:class=EditText,坐标(" + Math.round(输入框X) + "," + Math.round(输入框Y) + ")");
      }
    } else {
      var inputKeywords = ["text=\"发消息\"", "text=\"发消息或按住说话\"", "text=\"在这里提问\"", "text=\"接着问\""];
      for (var k = 0; k < inputKeywords.length; k++) {
            var idx = xml.indexOf(inputKeywords);
            if (idx !== -1) {
                var 段 = xml.substring(idx);
                var m = 段.match(/bounds="\[(\d+),(\d+)\]\[(\d+),(\d+)\]"/);
                if (m) {
                  输入框X = (parseInt(m) + parseInt(m)) / 2;
                  输入框Y = (parseInt(m) + parseInt(m)) / 2;
                  print.log("✓ 输入框定位:" + inputKeywords.replace('text="', '').replace('"', '') + ",坐标(" + Math.round(输入框X) + "," + Math.round(输入框Y) + ")");
                  break;
                }
            }
      }
    }
   
    agent.click(输入框X, 输入框Y);
    print.log("✓ 已点击输入框,坐标(" + Math.round(输入框X) + "," + Math.round(输入框Y) + ")");
    sleep.second(秒 = 2);
   
    try {
      Clipboard.copy("" + 提问话术);
      sleep.millisecond(毫秒 = 500);
      agent.shell("input keyevent 279");
      sleep.second(秒 = 2);
      print.log("✓ 已通过剪贴板粘贴文本");
    } catch (e) {
      print.log("⚠ 剪贴板粘贴失败:" + e.message);
      agent.shell("input text '" + 提问话术 + "'");
      sleep.second(秒 = 2);
      print.log("✓ 已通过input text直接输入文本");
    }
    sleep.second(秒 = 2);

    // 步骤12:发送图片和文字
    print.log("\n========== 步骤12:发送图片和文字 ==========");
   
    var detects = opencv.findImagesEx('图色769678.cv');
    if (detects != null) {
      print.log("✓ 图色匹配找到发送按钮");
      print.log("图色匹配结果:" + detects);
      var dStr = "" + detects;
      var m = dStr.match(/矩形区域:([\d.]+),\s*([\d.]+),\s*([\d.]+),\s*([\d.]+)/);
      if (m) {
            var left = parseFloat(m);
            var top = parseFloat(m);
            var right = parseFloat(m);
            var bottom = parseFloat(m);
            var centerX = (left + right) / 2;
            var centerY = (top + bottom) / 2;
            agent.clickPercent(centerX, centerY);
            print.log("✓ 已点击发送按钮(图色匹配),百分比坐标(" + centerX.toFixed(4) + "," + centerY.toFixed(4) + ")");
      }
    } else {
      print.log("⚠ 图色匹配未找到发送按钮");
    }
   
    sleep.second(秒 = 35);

    // 步骤13:等待DEEPSEEK AI回答
    print.log("\n========== 步骤13:等待DEEPSEEK AI回答 ==========");
    xml = 获取UI();
    var AI回答 = 等待AI回答完成("", 0);
   
    if (!AI回答) {
      print.log("✗ 未获取到AI回答");
      print.log("===== DEEPSEEK识别验证码拖动B站流程结束 =====");
      return;
    }

    print.log("\n✓ 采集到AI回答");
    print.log("--- 采集内容开始 ---");
    print.log(AI回答);
    print.log("--- 采集内容结束 ---");

    // 步骤14:解析拖动距离坐标
    print.log("\n========== 步骤14:解析拖动距离坐标 ==========");
    print.log("✓ AI原始回答:'" + AI回答 + "'");
   
    var 所有数字 = AI回答.match(/\d+/g);
    var 拖动距离像素 = null;
    var AI图像宽度 = null;
   
    if (所有数字 && 所有数字.length >= 2) {
      var 数字列表 = [];
      for (var i = 0; i < 所有数字.length; i++) {
            数字列表.push(parseInt(所有数字));
      }
      print.log("✓ 提取到所有数字:" + 数字列表.join(", "));
      
      if (数字列表.length >= 5) {
            var x1 = 数字列表;
            var y1 = 数字列表;
            var x2 = 数字列表;
            var y2 = 数字列表;
            AI图像宽度 = 数字列表;
            拖动距离像素 = Math.abs(x2 - x1);
            print.log("✓ 识别到两组坐标+图像宽度:(" + x1 + "," + y1 + ") 和 (" + x2 + "," + y2 + "),图像宽度=" + AI图像宽度);
            print.log("✓ 计算拖动距离:|x2 - x1| = |" + x2 + " - " + x1 + "| = " + 拖动距离像素);
      } else if (数字列表.length >= 4) {
            var x1 = 数字列表;
            var y1 = 数字列表;
            var x2 = 数字列表;
            var y2 = 数字列表;
            拖动距离像素 = Math.abs(x2 - x1);
            AI图像宽度 = Math.max(x1, x2) + 100;
            print.log("✓ 识别到两组坐标格式:(" + x1 + "," + y1 + ") 和 (" + x2 + "," + y2 + ")");
            print.log("✓ 计算拖动距离:|x2 - x1| = |" + x2 + " - " + x1 + "| = " + 拖动距离像素);
            print.log("✓ 估算图像宽度:max(x1,x2)+100 = " + AI图像宽度);
      } else if (数字列表.length >= 2) {
            var 坐标匹配 = AI回答.match(/(\d+)\s*[,,]\s*(\d+)/);
            if (坐标匹配) {
                var cx1 = parseInt(坐标匹配);
                var cx2 = parseInt(坐标匹配);
                拖动距离像素 = Math.abs(cx2 - cx1);
                AI图像宽度 = Math.max(cx1, cx2) + 100;
                print.log("✓ 识别到坐标格式:(" + cx1 + "," + cx2 + "),计算距离:" + 拖动距离像素);
            } else {
                拖动距离像素 = 数字列表;
                print.log("✓ 提取到单个数字(拖动距离):" + 拖动距离像素);
            }
      } else {
            拖动距离像素 = 数字列表;
            print.log("✓ 提取到单个数字(拖动距离):" + 拖动距离像素);
      }
    } else if (所有数字 && 所有数字.length === 1) {
      拖动距离像素 = parseInt(所有数字);
      print.log("✓ 提取到单个数字(拖动距离):" + 拖动距离像素);
    } else {
      print.log("✗ 未找到有效的拖动距离");
      print.log("===== DEEPSEEK识别验证码拖动B站流程结束 =====");
      return;
    }
   
    var 图像缩放系数 = 1.0;
    if (拖动距离像素 < 30) {
      print.log("⚠ 提取到的拖动距离过小(" + 拖动距离像素 + "),可能是OCR识别错误,跳过缩放补偿");
    } else if (AI图像宽度 && AI图像宽度 > 0 && AI图像宽度 < 屏幕宽) {
      图像缩放系数 = 屏幕宽 / AI图像宽度;
      if (图像缩放系数 > 5) {
            图像缩放系数 = 1.0;
      } else {
            拖动距离像素 = Math.round(拖动距离像素 * 图像缩放系数);
            print.log("✓ 图像缩放补偿:AI图像宽度=" + AI图像宽度 + ",屏幕宽=" + 屏幕宽);
            print.log("✓ 缩放系数=" + 图像缩放系数.toFixed(2) + ",补偿后拖动距离=" + 拖动距离像素);
      }
    } else {
      图像缩放系数 = 屏幕宽 / 750;
      拖动距离像素 = Math.round(拖动距离像素 * 图像缩放系数);
      print.log("✓ 单数字模式补偿:假设AI图像宽度≈750,缩放系数=" + 图像缩放系数.toFixed(2));
      print.log("✓ 补偿后拖动距离=" + 拖动距离像素);
    }
   
    验证码滑块距离 = {
      x: 拖动距离像素,
      y: 0
    };

    // 步骤15:切换回B站并拖动滑块
    print.log("\n========== 步骤15:切换回B站并拖动滑块 ==========");
   
    agent.shell("input keyevent 187");
    print.log("✓ 已按后台键打开任务列表");
    sleep.second(秒 = 2);
   
    xml = 获取UI();
    var biliIdx = xml.indexOf('哔哩哔哩');
    if (biliIdx === -1) {
      biliIdx = xml.indexOf('bilibili');
    }
    if (biliIdx === -1) {
      biliIdx = xml.indexOf('B站');
    }
   
    if (biliIdx !== -1) {
      var 段 = xml.substring(biliIdx);
      var m = 段.match(/bounds="\[(\d+),(\d+)\]\[(\d+),(\d+)\]"/);
      if (m) {
            var clickX = (parseInt(m) + parseInt(m)) / 2;
            var clickY = (parseInt(m) + parseInt(m)) / 2;
            agent.click(clickX, clickY);
            print.log("✓ 已点击B站任务卡片,坐标(" + Math.round(clickX) + "," + Math.round(clickY) + ")");
      }
    } else {
      print.log("⚠ 未找到B站任务卡片,尝试直接打开");
      try {
            app.openApp(B站包名);
            print.log("✓ 已打开B站");
      } catch (e) {
            print.log("⚠ 打开B站失败:" + e.message);
      }
    }
    sleep.second(秒 = 3);

    xml = 获取UI();
    var 验证码区域左边界 = 屏幕宽 * 0.15;
   
    var 滑块轨道匹配 = xml.match(/<node[^>]*?text="拖动滑块完成拼图"[^>]*?bounds="\[(\d+),(\d+)\]\[(\d+),(\d+)\]"/);
    if (滑块轨道匹配) {
      验证码区域左边界 = parseInt(滑块轨道匹配);
    }

    var 拖动距离 = 验证码滑块距离.x * 滑块校准系数;

    var startX = 验证码区域左边界 + 50;
    var startY = 屏幕高 * 0.42;
    var endX = startX + 拖动距离;
    var endY = startY;

    print.log("✓ 验证码区域左边界: " + 验证码区域左边界 + ", 拖动距离: " + 拖动距离);
    agent.swip(startX, startY, endX, endY, 2000);
    print.log("✓ 已拖动滑块,起点(" + Math.round(startX) + "," + Math.round(startY) + "),终点(" + Math.round(endX) + "," + Math.round(endY) + ")");
}

主流程();

print.log("\n===== DEEPSEEK识别验证码拖动B站流程结束 =====");        

页: [1]
查看完整版本: 自动截图并发送给DEEPSEEK识别示例过程