设为首页收藏本站
AIWORK»AIWORK论坛 › AIWORK主页 › AIWORK技术交流 › 元宝截图B站验证码示例测试

元宝截图B站验证码示例测试

QQ896757558

380

主题

193

回帖

2397

积分

管理员

积分
2397
显示全部楼层


元宝截图B站验证码示例测试

1.png

2.png

3.png

4.png




  1. // AIWROK 自动化流程：截图B站验证码 → 启动元宝 → 发送截图询问拖动距离 → 采集回答 → 切回B站拖动滑块
  2. // 包名：com.tencent.hunyuan.app.chat（元宝）
  3. //
  4. // 使用说明：
  5. //   1. 在B站验证码页面运行脚本
  6. //   2. 脚本自动截图并发送给元宝识别
  7. //   3. 解析元宝返回的拖动距离，切回B站拖动滑块

  9. print.log("===== 元宝识别验证码拖动B站流程启动 =====");
  10. print.time();

  12. // ========== 配置区 ==========
  13. var 元宝包名 = "com.tencent.hunyuan.app.chat";
  14. var B站包名 = "tv.danmaku.bili";
  15. var 截图保存路径 = "/sdcard/验证码截图.png";

  17. var 等待回答超时秒 = 20;
  18. var 回答输出等待秒 = 5;
  19. var 滑块校准系数 = 1.0;

  21. var 提问话术 = "请帮我分析这张图片，告诉我左边的方块需要向右移动多少像素才能和右边的缺口对齐，只输出数字";

  23. // ========== 获取设备信息 ==========
  24. var 屏幕宽 = screen.getScreenWidth();
  25. var 屏幕高 = screen.getScreenHeight();
  26. var 验证码滑块距离 = null;
  27. print.log("屏幕尺寸：" + 屏幕宽 + " x " + 屏幕高);
  28. print.log("代理状态：" + (agent.isOpen() ? "已开启" : "未开启"));

  30. // ========== 工具函数 ==========

  32. function 获取UI() {
  33.     var xml = agent.getXml();
  34.     return "" + xml;
  35. }

  37. function 字符串长度(s) {
  38.     var str = "" + s;
  39.     return str.length;
  40. }

  42. function 解码HTML实体(s) {
  43.     var str = "" + s;
  44.     str = str.replace(/
/g, "\n");
  45.     str = str.replace(/
/g, "\r");
  46.     str = str.replace(/	/g, "\t");
  47.     str = str.replace(/'/g, "'");
  48.     str = str.replace(/"/g, '"');
  49.     str = str.replace(/"/g, '"');
  50.     str = str.replace(/'/g, "'");
  51.     str = str.replace(/&/g, "&");
  52.     str = str.replace(/&lt;/g, "<");
  53.     str = str.replace(/&gt;/g, ">");
  54.     return str;
  55. }

  57. function 采集AI回答列表(xml) {
  58.     var xmlStr = "" + xml;
  59.     var 回答列表 = [];

  61.     var messageLinearlayoutPattern = /<node[^>]*?resource-id="[^"]*?message_linearlayout"[^>]*?bounds="\[(\d+),(\d+)\]\[(\d+),(\d+)\]"/g;
  62.     var lineMatch;
  63.    
  64.     while ((lineMatch = messageLinearlayoutPattern.exec(xmlStr)) !== null) {
  65.         var lineStart = lineMatch.index;
  66.         var lineEnd = xmlStr.indexOf('/node>', lineStart);
  67.         if (lineEnd === -1) lineEnd = xmlStr.length;
  68.         var lineContent = xmlStr.substring(lineStart, lineEnd);
  69.         
  70.         if (lineContent.indexOf('chats_message_dtmp_answer_container') !== -1) {
  71.             var textViewPattern = /<node[^>]*?text="([^"]+)"[^>]*?class="android\.widget\.TextView"[^>]*?\/?>/g;
  72.             var tvMatch;
  73.             while ((tvMatch = textViewPattern.exec(lineContent)) !== null) {
  74.                 if (tvMatch[1] && 字符串长度(tvMatch[1]) > 1) {
  75.                     var 原始文本 = tvMatch[1];
  76.                     var 解码文本 = 解码HTML实体(原始文本);
  77.                     if (!回答列表.includes(解码文本)) {
  78.                         回答列表.push(解码文本);
  79.                         print.log("✓ 在回答容器中找到文本: '" + 解码文本 + "'");
  80.                     }
  81.                 }
  82.             }
  83.         }
  84.     }
  85.    
  86.     if (回答列表.length === 0) {
  87.         print.log("⚠ 未找到AI回答节点");
  88.     } else {
  89.         print.log("✓ 采集到" + 回答列表.length + "条AI回答");
  90.     }

  92.     return 回答列表;
  93. }

  95. function 获取当前最后AI回答(xml) {
  96.     var 回答列表 = 采集AI回答列表(xml);
  97.     if (回答列表.length === 0) return "";
  98.     return 回答列表[回答列表.length - 1];
  99. }

  101. function 全屏截图(保存路径) {
  102.     try {
  103.         var result = agent.shell("screencap -p " + 保存路径);
  104.         print.log("✓ 截图命令执行：" + result);
  105.         
  106.         var lsResult = agent.shell("ls -la " + 保存路径);
  107.         print.log("✓ 截图文件检查：" + lsResult);
  108.         
  109.         return true;
  110.     } catch (e) {
  111.         print.log("⚠ 截图失败：" + e.message);
  112.         return false;
  113.     }
  114. }

  116. function 查找输入框中心(xml) {
  117.     var xmlStr = "" + xml;
  118.    
  119.     var inputIdx = xmlStr.indexOf('edConversationInput');
  120.     if (inputIdx === -1) {
  121.         inputIdx = xmlStr.indexOf('text="发消息或按住说话..."');
  122.     }
  123.     if (inputIdx === -1) {
  124.         inputIdx = xmlStr.indexOf('class="android.widget.EditText"');
  125.     }
  126.    
  127.     if (inputIdx !== -1) {
  128.         var 段 = xmlStr.substring(inputIdx);
  129.         var m = 段.match(/bounds="\[(\d+),(\d+)\]\[(\d+),(\d+)\]"/);
  130.         if (m) {
  131.             var x1 = parseInt(m[1]);
  132.             var y1 = parseInt(m[2]);
  133.             var x2 = parseInt(m[3]);
  134.             var y2 = parseInt(m[4]);
  135.             print.log("✓ 输入框定位：bounds=[" + x1 + "," + y1 + "][" + x2 + "," + y2 + "]");
  136.             return {
  137.                 x: (x1 + x2) / 2,
  138.                 y: (y1 + y2) / 2
  139.             };
  140.         }
  141.     }

  143.     print.log("⚠ 未找到输入框，使用兜底坐标");
  144.     return {
  145.         x: 屏幕宽 * 0.4,
  146.         y: 屏幕高 * 0.92
  147.     };
  148. }

  150. function 查找加号按钮(xml) {
  151.     var xmlStr = "" + xml;
  152.    
  153.     var plusIdx = xmlStr.indexOf('flConversationInputPlus');
  154.     if (plusIdx !== -1) {
  155.         var 段 = xmlStr.substring(plusIdx);
  156.         var m = 段.match(/bounds="\[(\d+),(\d+)\]\[(\d+),(\d+)\]"/);
  157.         if (m) {
  158.             var x = (parseInt(m[1]) + parseInt(m[3])) / 2;
  159.             var y = (parseInt(m[2]) + parseInt(m[4])) / 2;
  160.             print.log("✓ 加号按钮定位：flConversationInputPlus，坐标(" + Math.round(x) + "," + Math.round(y) + ")");
  161.             return { x: x, y: y };
  162.         }
  163.     }

  165.     var cvPlusIdx = xmlStr.indexOf('cv_chat_input_plus');
  166.     if (cvPlusIdx !== -1) {
  167.         var 段2 = xmlStr.substring(cvPlusIdx);
  168.         var m2 = 段2.match(/bounds="\[(\d+),(\d+)\]\[(\d+),(\d+)\]"/);
  169.         if (m2) {
  170.             var x = (parseInt(m2[1]) + parseInt(m2[3])) / 2;
  171.             var y = (parseInt(m2[2]) + parseInt(m2[4])) / 2;
  172.             print.log("✓ 加号按钮定位：cv_chat_input_plus，坐标(" + Math.round(x) + "," + Math.round(y) + ")");
  173.             return { x: x, y: y };
  174.         }
  175.     }

  177.     var 输入框 = 查找输入框中心(xml);
  178.     if (输入框) {
  179.         var 预估X = 屏幕宽 * 0.92;
  180.         var 预估Y = 输入框.y;
  181.         print.log("⚠ 未找到加号按钮，使用输入框右侧兜底坐标(" + Math.round(预估X) + "," + Math.round(预估Y) + ")");
  182.         return { x: 预估X, y: 预估Y };
  183.     }

  185.     print.log("⚠ 加号按钮使用屏幕右侧底部兜底坐标");
  186.     return {
  187.         x: 屏幕宽 * 0.92,
  188.         y: 屏幕高 * 0.92
  189.     };
  190. }

  192. function 粘贴文本(文本) {
  193.     try {
  194.         Clipboard.copy("" + 文本);
  195.     } catch (e) {
  196.         print.log("⚠ Clipboard.copy 失败：" + e.message);
  197.     }
  198.     sleep.millisecond(毫秒 = 300);

  200.     try {
  201.         agent.shell("service call clipboard 3 i32 1 s16 '" + 文本 + "' i32 0");
  202.     } catch (e2) {
  203.         // 忽略错误
  204.     }
  205.     sleep.millisecond(毫秒 = 300);

  207.     agent.shell("input keyevent 279");
  208.     sleep.second(秒 = 1);
  209.     print.log("✓ 已粘贴文本：" + 文本);
  210. }

  212. function 查找相册选项(xml) {
  213.     var xmlStr = "" + xml;
  214.    
  215.     var text关键词 = ["相册", "图片", "照片", "所有照片", "从相册选择", "选择图片"];
  216.     for (var i = 0; i < text关键词.length; i++) {
  217.         var kw = text关键词[i];
  218.         var idx = xmlStr.indexOf('text="' + kw + '"');
  219.         if (idx !== -1) {
  220.             var 段 = xmlStr.substring(idx);
  221.             var m = 段.match(/bounds="\[(\d+),(\d+)\]\[(\d+),(\d+)\]"/);
  222.             if (m) {
  223.                 print.log("✓ 相册选项定位：text=" + kw);
  224.                 return {
  225.                     x: (parseInt(m[1]) + parseInt(m[3])) / 2,
  226.                     y: (parseInt(m[2]) + parseInt(m[4])) / 2
  227.                 };
  228.             }
  229.         }
  230.     }

  232.     var desc关键词 = ["相册", "图片", "照片"];
  233.     for (var j = 0; j < desc关键词.length; j++) {
  234.         var kw2 = desc关键词[j];
  235.         var idx2 = xmlStr.indexOf('content-desc="' + kw2 + '"');
  236.         if (idx2 !== -1) {
  237.             var 段2 = xmlStr.substring(idx2);
  238.             var m2 = 段2.match(/bounds="\[(\d+),(\d+)\]\[(\d+),(\d+)\]"/);
  239.             if (m2) {
  240.                 print.log("✓ 相册选项定位：content-desc=" + kw2);
  241.                 return {
  242.                     x: (parseInt(m2[1]) + parseInt(m2[3])) / 2,
  243.                     y: (parseInt(m2[2]) + parseInt(m2[4])) / 2
  244.                 };
  245.             }
  246.         }
  247.     }

  249.     return null;
  250. }

  252. function 是否在系统相册页面(xml) {
  253.     var xmlStr = "" + xml;
  254.    
  255.     var packageMatch = xmlStr.match(/package="([^"]+)"/);
  256.     var 当前包名 = packageMatch ? packageMatch[1] : "";
  257.     if (当前包名 && 当前包名 !== 元宝包名) {
  258.         print.log("✓ 检测到系统相册页面，包名：" + 当前包名);
  259.         return true;
  260.     }
  261.    
  262.     var gallery关键词 = ["最近", "图库", "Camera", "所有图片", "照片", "相册", "All photos", "Photos"];
  263.     for (var i = 0; i < gallery关键词.length; i++) {
  264.         if (xmlStr.indexOf('text="' + gallery关键词[i] + '"') !== -1 ||
  265.             xmlStr.indexOf('content-desc="' + gallery关键词[i] + '"') !== -1) {
  266.             var 有聊天输入 = xmlStr.indexOf("edConversationInput") !== -1;
  267.             if (!有聊天输入) {
  268.                 print.log("✓ 检测到相册页面（关键词：" + gallery关键词[i] + "）");
  269.                 return true;
  270.             }
  271.         }
  272.     }
  273.    
  274.     var 有图片文件 = xmlStr.indexOf('.png"') !== -1 || xmlStr.indexOf('.jpg"') !== -1 ||
  275.                      xmlStr.indexOf('.jpeg"') !== -1 || xmlStr.indexOf('.gif"') !== -1;
  276.     var 有选择按钮 = xmlStr.indexOf('text="选择"') !== -1;
  277.     var 有聊天输入2 = xmlStr.indexOf("edConversationInput") !== -1;
  278.     var 有聊天列表 = xmlStr.indexOf("chat_recycler_view") !== -1;
  279.    
  280.     if (有图片文件 && 有选择按钮 && !有聊天输入2 && !有聊天列表) {
  281.         print.log("✓ 检测到相册页面（元宝ComposeView，有图片文件和选择按钮）");
  282.         return true;
  283.     }
  284.    
  285.     return false;
  286. }

  288. function 是否在图片预览页面(xml) {
  289.     var xmlStr = "" + xml;
  290.     if (xmlStr.indexOf('text="完成"') !== -1 || xmlStr.indexOf('text="发送"') !== -1) {
  291.         return true;
  292.     }
  293.     if (xmlStr.indexOf('content-desc="完成"') !== -1 || xmlStr.indexOf('content-desc="发送"') !== -1) {
  294.         return true;
  295.     }
  296.     return false;
  297. }

  299. function 查找图片预览确认按钮(xml) {
  300.     var xmlStr = "" + xml;
  301.    
  302.     var 关键词 = ["完成", "发送", "确认"];
  303.     for (var i = 0; i < 关键词.length; i++) {
  304.         var kw = 关键词[i];
  305.         var textIdx = xmlStr.indexOf('text="' + kw + '"');
  306.         if (textIdx !== -1) {
  307.             var 段 = xmlStr.substring(textIdx);
  308.             var m = 段.match(/bounds="\[(\d+),(\d+)\]\[(\d+),(\d+)\]"/);
  309.             if (m) {
  310.                 var x = (parseInt(m[1]) + parseInt(m[3])) / 2;
  311.                 var y = (parseInt(m[2]) + parseInt(m[4])) / 2;
  312.                 print.log("✓ 图片预览确认按钮定位：text=" + kw + "，坐标(" + Math.round(x) + "," + Math.round(y) + ")");
  313.                 return { x: x, y: y };
  314.             }
  315.         }
  316.     }
  317.    
  318.     for (var j = 0; j < 关键词.length; j++) {
  319.         var kw2 = 关键词[j];
  320.         var descIdx = xmlStr.indexOf('content-desc="' + kw2 + '"');
  321.         if (descIdx !== -1) {
  322.             var 段2 = xmlStr.substring(descIdx);
  323.             var m2 = 段2.match(/bounds="\[(\d+),(\d+)\]\[(\d+),(\d+)\]"/);
  324.             if (m2) {
  325.                 var x = (parseInt(m2[1]) + parseInt(m2[3])) / 2;
  326.                 var y = (parseInt(m2[2]) + parseInt(m2[4])) / 2;
  327.                 print.log("✓ 图片预览确认按钮定位：content-desc=" + kw2 + "，坐标(" + Math.round(x) + "," + Math.round(y) + ")");
  328.                 return { x: x, y: y };
  329.             }
  330.         }
  331.     }
  332.    
  333.     print.log("⚠ 图片预览确认按钮使用兜底坐标（底部中间）");
  334.     return { x: 屏幕宽 * 0.5, y: 屏幕高 * 0.92 };
  335. }

  337. function 查找相册选择按钮(xml) {
  338.     var xmlStr = "" + xml;
  339.    
  340.     var 关键词列表 = ["选择", "完成", "确认", "发送", "确定"];
  341.     for (var i = 0; i < 关键词列表.length; i++) {
  342.         var kw = 关键词列表[i];
  343.         
  344.         var textPattern = new RegExp('text="' + kw + '[^"]*"[^>]*?bounds="\\[(\\d+),(\\d+)\\]\\[(\\d+),(\\d+)\\]"', 'gi');
  345.         var textMatch = textPattern.exec(xmlStr);
  346.         if (textMatch) {
  347.             var x = (parseInt(textMatch[1]) + parseInt(textMatch[3])) / 2;
  348.             var y = (parseInt(textMatch[2]) + parseInt(textMatch[4])) / 2;
  349.             print.log("✓ 相册选择按钮定位：text=" + kw + "，坐标(" + Math.round(x) + "," + Math.round(y) + ")");
  350.             return { x: x, y: y };
  351.         }
  352.         
  353.         var descIdx = xmlStr.indexOf('content-desc="' + kw + '"');
  354.         if (descIdx !== -1) {
  355.             var 段2 = xmlStr.substring(descIdx);
  356.             var m2 = 段2.match(/bounds="\[(\d+),(\d+)\]\[(\d+),(\d+)\]"/);
  357.             if (m2) {
  358.                 var x = (parseInt(m2[1]) + parseInt(m2[3])) / 2;
  359.                 var y = (parseInt(m2[2]) + parseInt(m2[4])) / 2;
  360.                 print.log("✓ 相册选择按钮定位：content-desc=" + kw + "，坐标(" + Math.round(x) + "," + Math.round(y) + ")");
  361.                 return { x: x, y: y };
  362.             }
  363.         }
  364.     }
  365.    
  366.     var bottomButtonPattern = /<node[^>]*?clickable="true"[^>]*?bounds="\[(\d+),(\d+)\]\[(\d+),(\d+)\]"/g;
  367.     var bottomMatch;
  368.     var 底部按钮列表 = [];
  369.     while ((bottomMatch = bottomButtonPattern.exec(xmlStr)) !== null) {
  370.         var bx1 = parseInt(bottomMatch[1]);
  371.         var by1 = parseInt(bottomMatch[2]);
  372.         var bx2 = parseInt(bottomMatch[3]);
  373.         var by2 = parseInt(bottomMatch[4]);
  374.         if (by1 >= 屏幕高 * 0.85) {
  375.             底部按钮列表.push({ x: (bx1 + bx2) / 2, y: (by1 + by2) / 2 });
  376.         }
  377.     }
  378.    
  379.     if (底部按钮列表.length > 0) {
  380.         底部按钮列表.sort(function(a, b) { return b.x - a.x; });
  381.         var 最右边按钮 = 底部按钮列表[0];
  382.         print.log("✓ 相册选择按钮定位：底部最右边按钮，坐标(" + Math.round(最右边按钮.x) + "," + Math.round(最右边按钮.y) + ")");
  383.         return { x: 最右边按钮.x, y: 最右边按钮.y };
  384.     }
  385.    
  386.     print.log("⚠ 相册选择按钮使用兜底坐标（底部）");
  387.     return { x: 屏幕宽 * 0.78, y: 屏幕高 * 0.92 };
  388. }

  390. function 查找第一张图片(xml) {
  391.     var xmlStr = "" + xml;
  392.    
  393.     if (是否在系统相册页面(xmlStr)) {
  394.         agent.shell("echo '" + xmlStr.substring(0, 5000) + "' > /sdcard/相册UI_dump.xml");
  395.         print.log("✓ 已保存相册UI XML到/sdcard/相册UI_dump.xml");
  396.         
  397.         var nafPattern = /<node[^>]*?NAF="true"[^>]*?clickable="true"[^>]*?bounds="\[(\d+),(\d+)\]\[(\d+),(\d+)\]"/g;
  398.         var nafMatch;
  399.         var NAF小圆点列表 = [];
  400.         
  401.         while ((nafMatch = nafPattern.exec(xmlStr)) !== null) {
  402.             var nx1 = parseInt(nafMatch[1]);
  403.             var ny1 = parseInt(nafMatch[2]);
  404.             var nx2 = parseInt(nafMatch[3]);
  405.             var ny2 = parseInt(nafMatch[4]);
  406.             var nw = nx2 - nx1;
  407.             var nh = ny2 - ny1;
  408.             
  409.             if (nw >= 50 && nw <= 300 && nh >= 50 && nh <= 300) {
  410.                 if (ny1 >= 400 && ny2 <= 屏幕高 - 400) {
  411.                     NAF小圆点列表.push({ x1: nx1, y1: ny1, x2: nx2, y2: ny2, x: (nx1 + nx2) / 2, y: (ny1 + ny2) / 2 });
  412.                 }
  413.             }
  414.         }
  415.         
  416.         if (NAF小圆点列表.length > 0) {
  417.             NAF小圆点列表.sort(function(a, b) {
  418.                 if (a.y1 !== b.y1) return a.y1 - b.y1;
  419.                 return a.x1 - b.x1;
  420.             });
  421.             var 选中小圆点 = NAF小圆点列表[0];
  422.             print.log("✓ ComposeView找到NAF小圆点选择框：坐标(" + Math.round(选中小圆点.x) + "," + Math.round(选中小圆点.y) + ")，bounds=[" + 选中小圆点.x1 + "," + 选中小圆点.y1 + "][" + 选中小圆点.x2 + "," + 选中小圆点.y2 + "]");
  423.             return { x: 选中小圆点.x, y: 选中小圆点.y };
  424.         }
  425.         
  426.         var imageDescPattern = /<node[^>]*?content-desc="([^"]+\.(png|jpg|jpeg|gif))"[^>]*?class="android\.view\.View"[^>]*?bounds="\[(\d+),(\d+)\]\[(\d+),(\d+)\]"/gi;
  427.         var imgMatch;
  428.         var 图片节点列表 = [];
  429.         
  430.         while ((imgMatch = imageDescPattern.exec(xmlStr)) !== null) {
  431.             var 文件名 = imgMatch[1];
  432.             var ix1 = parseInt(imgMatch[3]);
  433.             var iy1 = parseInt(imgMatch[4]);
  434.             var ix2 = parseInt(imgMatch[5]);
  435.             var iy2 = parseInt(imgMatch[6]);
  436.             var iw = ix2 - ix1;
  437.             var ih = iy2 - iy1;
  438.             
  439.             if (iw >= 100 && ih >= 100) {
  440.                 图片节点列表.push({ 文件名: 文件名, x1: ix1, y1: iy1, x2: ix2, y2: iy2, w: iw, h: ih });
  441.             }
  442.         }
  443.         
  444.         if (图片节点列表.length > 0) {
  445.             图片节点列表.sort(function(a, b) {
  446.                 if (a.y1 !== b.y1) return a.y1 - b.y1;
  447.                 return a.x1 - b.x1;
  448.             });
  449.             var 第一张图片 = 图片节点列表[0];
  450.             print.log("✓ 找到图片：" + 第一张图片.文件名 + "，bounds=[" + 第一张图片.x1 + "," + 第一张图片.y1 + "][" + 第一张图片.x2 + "," + 第一张图片.y2 + "]");
  451.             
  452.             var 选择框X = 第一张图片.x1 + 第一张图片.w * 0.77;
  453.             var 选择框Y = 第一张图片.y1 + 第一张图片.h * 0.24;
  454.             print.log("✓ 计算小圆点选择框坐标：(" + Math.round(选择框X) + "," + Math.round(选择框Y) + ")");
  455.             return { x: 选择框X, y: 选择框Y };
  456.         }
  457.         
  458.         var clickableViewPattern = /<node[^>]*?clickable="true"[^>]*?bounds="\[(\d+),(\d+)\]\[(\d+),(\d+)\]"/g;
  459.         var clickMatch;
  460.         var 可点击区域 = [];
  461.         while ((clickMatch = clickableViewPattern.exec(xmlStr)) !== null) {
  462.             var cx1 = parseInt(clickMatch[1]);
  463.             var cy1 = parseInt(clickMatch[2]);
  464.             var cx2 = parseInt(clickMatch[3]);
  465.             var cy2 = parseInt(clickMatch[4]);
  466.             var cw = cx2 - cx1;
  467.             var ch = cy2 - cy1;
  468.             可点击区域.push({ x1: cx1, y1: cy1, x2: cx2, y2: cy2, w: cw, h: ch, x: (cx1 + cx2) / 2, y: (cy1 + cy2) / 2 });
  469.         }
  470.         
  471.         var 图片区域内可点击 = [];
  472.         for (var k = 0; k < 可点击区域.length; k++) {
  473.             var item = 可点击区域[k];
  474.             if (item.y >= 400 && item.y <= 屏幕高 - 400) {
  475.                 图片区域内可点击.push(item);
  476.             }
  477.         }
  478.         
  479.         if (图片区域内可点击.length > 0) {
  480.             图片区域内可点击.sort(function(a, b) {
  481.                 if (a.y !== b.y) return a.y - b.y;
  482.                 return a.x - b.x;
  483.             });
  484.             var 第一个可点击 = 图片区域内可点击[0];
  485.             print.log("✓ ComposeView图片区域内第一个可点击元素：坐标(" + Math.round(第一个可点击.x) + "," + Math.round(第一个可点击.y) + ")");
  486.             return { x: 第一个可点击.x, y: 第一个可点击.y };
  487.         }

  489.         print.log("⚠ 系统相册未找到图片，输出调试信息：");
  490.         print.log("  当前包名：" + xmlStr.match(/package="([^"]+)"/)[1]);
  491.         print.log("  XML前1000字符：" + xmlStr.substring(0, 1000));
  492.         print.log("  NAF小圆点数量：" + NAF小圆点列表.length);
  493.         print.log("  图片节点数量：" + 图片节点列表.length);
  494.         
  495.         var allImgViews = xmlStr.match(/class="android\.widget\.ImageView"/g);
  496.         print.log("  全部ImageView数量：" + (allImgViews ? allImgViews.length : 0));
  497.         
  498.         return { x: 屏幕宽 * 0.25, y: 屏幕高 * 0.3 };
  499.     }

  501.     var rvPattern = /<node[^>]*?class="androidx\.recyclerview\.widget\.RecyclerView"[^>]*?bounds="\[(\d+),(\d+)\]\[(\d+),(\d+)\]"/g;
  502.     var rvMatch;
  503.     var 图片列表区域 = null;

  505.     while ((rvMatch = rvPattern.exec(xmlStr)) !== null) {
  506.         var rx1 = parseInt(rvMatch[1]);
  507.         var ry1 = parseInt(rvMatch[2]);
  508.         var rx2 = parseInt(rvMatch[3]);
  509.         var ry2 = parseInt(rvMatch[4]);
  510.         var 高度 = ry2 - ry1;

  512.         if (ry1 > 屏幕高 * 0.7 && 高度 > 300) {
  513.             图片列表区域 = {x1: rx1, y1: ry1, x2: rx2, y2: ry2};
  514.             print.log("✓ 找到底部图片列表RecyclerView：[" + rx1 + "," + ry1 + "][" + rx2 + "," + ry2 + "]");
  515.             break;
  516.         }
  517.     }

  519.     if (图片列表区域) {
  520.         var imgPattern = /<node[^>]*?class="android\.widget\.ImageView"[^>]*?\/?>/g;
  521.         var imgMatch;
  522.         var 候选 = [];
  523.         while ((imgMatch = imgPattern.exec(xmlStr)) !== null) {
  524.             var imgNode = imgMatch[0];
  525.             var boundsMatch = imgNode.match(/bounds="\[(\d+),(\d+)\]\[(\d+),(\d+)\]"/);
  526.             if (!boundsMatch) continue;
  527.             var ix1 = parseInt(boundsMatch[1]);
  528.             var iy1 = parseInt(boundsMatch[2]);
  529.             var ix2 = parseInt(boundsMatch[3]);
  530.             var iy2 = parseInt(boundsMatch[4]);
  531.             var iw = ix2 - ix1;
  532.             var ih = iy2 - iy1;

  534.             var 在区域内 = (ix1 >= 图片列表区域.x1 && ix2 <= 图片列表区域.x2 &&
  535.                             iy1 >= 图片列表区域.y1 && iy2 <= 图片列表区域.y2);
  536.             var 是大图 = (iw > 100 && ih > 100);

  538.             if (在区域内 && 是大图) {
  539.                 候选.push({
  540.                     x: (ix1 + ix2) / 2,
  541.                     y: (iy1 + iy2) / 2,
  542.                     y1: iy1,
  543.                     x1: ix1
  544.                 });
  545.             }
  546.         }

  548.         if (候选.length > 0) {
  549.             候选.sort(function(a, b) {
  550.                 if (a.y1 !== b.y1) return a.y1 - b.y1;
  551.                 return a.x1 - b.x1;
  552.             });
  553.             var 选中 = 候选[0];
  554.             print.log("✓ 第一张图片定位：底部图片列表内的ImageView，坐标(" + Math.round(选中.x) + "," + Math.round(选中.y) + ")");
  555.             return { x: 选中.x, y: 选中.y };
  556.         }
  557.     }

  559.     var imgPattern2 = /<node[^>]*?class="android\.widget\.ImageView"[^>]*?\/?>/g;
  560.     var imgMatch2;
  561.     var 候选2 = [];
  562.     while ((imgMatch2 = imgPattern2.exec(xmlStr)) !== null) {
  563.         var imgNode = imgMatch2[0];
  564.         var boundsMatch = imgNode.match(/bounds="\[(\d+),(\d+)\]\[(\d+),(\d+)\]"/);
  565.         if (!boundsMatch) continue;
  566.         var ix1 = parseInt(boundsMatch[1]);
  567.         var iy1 = parseInt(boundsMatch[2]);
  568.         var ix2 = parseInt(boundsMatch[3]);
  569.         var iy2 = parseInt(boundsMatch[4]);
  570.         var iw = ix2 - ix1;
  571.         var ih = iy2 - iy1;

  573.         if (iy1 > 屏幕高 * 0.7 && iw > 100 && ih > 100) {
  574.             候选2.push({
  575.                 x: (ix1 + ix2) / 2,
  576.                 y: (iy1 + iy2) / 2,
  577.                 y1: iy1,
  578.                 x1: ix1
  579.             });
  580.         }
  581.     }

  583.     if (候选2.length > 0) {
  584.         候选2.sort(function(a, b) {
  585.             if (a.y1 !== b.y1) return a.y1 - b.y1;
  586.             return a.x1 - b.x1;
  587.         });
  588.         var 选中2 = 候选2[0];
  589.         print.log("✓ 第一张图片定位：底部区域ImageView，坐标(" + Math.round(选中2.x) + "," + Math.round(选中2.y) + ")");
  590.         return { x: 选中2.x, y: 选中2.y };
  591.     }

  593.     print.log("⚠ 未找到图片，使用兜底坐标（底部第一行第一列）");
  594.     return { x: 屏幕宽 * 0.15, y: 屏幕高 * 0.85 };
  595. }

  597. function 查找发送按钮中心(xml) {
  598.     var xmlStr = "" + xml;

  600.     var sendTextIdx = xmlStr.indexOf('text="发送"');
  601.     if (sendTextIdx !== -1) {
  602.         var 段 = xmlStr.substring(sendTextIdx);
  603.         var m = 段.match(/bounds="\[(\d+),(\d+)\]\[(\d+),(\d+)\]"/);
  604.         if (m) {
  605.             print.log("✓ 发送按钮定位：文本匹配");
  606.             return {
  607.                 x: (parseInt(m[1]) + parseInt(m[3])) / 2,
  608.                 y: (parseInt(m[2]) + parseInt(m[4])) / 2
  609.             };
  610.         }
  611.     }

  613.     var inputIdx = xmlStr.indexOf('edConversationInput');
  614.     if (inputIdx !== -1) {
  615.         var 输入框段 = xmlStr.substring(inputIdx);
  616.         var 输入框边界 = 输入框段.match(/bounds="\[(\d+),(\d+)\]\[(\d+),(\d+)\]"/);
  617.         if (输入框边界) {
  618.             var 输入框信息 = {
  619.                 x1: parseInt(输入框边界[1]),
  620.                 y1: parseInt(输入框边界[2]),
  621.                 x2: parseInt(输入框边界[3]),
  622.                 y2: parseInt(输入框边界[4]),
  623.                 centerY: (parseInt(输入框边界[2]) + parseInt(输入框边界[4])) / 2
  624.             };

  626.             var clickablePattern = /<node[^>]*?clickable="true"[^>]*?bounds="\[(\d+),(\d+)\]\[(\d+),(\d+)\]"[^>]*?\/?>/g;
  627.             var clickMatch;
  628.             var candidates = [];

  630.             while ((clickMatch = clickablePattern.exec(xmlStr)) !== null) {
  631.                 var cx1 = parseInt(clickMatch[1]);
  632.                 var cy1 = parseInt(clickMatch[2]);
  633.                 var cx2 = parseInt(clickMatch[3]);
  634.                 var cy2 = parseInt(clickMatch[4]);
  635.                 var cw = cx2 - cx1;
  636.                 var ch = cy2 - cy1;

  638.                 var 是小按钮 = (cw < 300 && ch < 300);
  639.                 var 在输入框右侧 = (cx1 > 输入框信息.x2 - 100);
  640.                 var 在输入框水平行 = (cy1 >= 输入框信息.y1 - 100 && cy1 <= 输入框信息.y2 + 100);

  642.                 if (是小按钮 && 在输入框右侧 && 在输入框水平行) {
  643.                     candidates.push({
  644.                         x1: cx1, y1: cy1, x2: cx2, y2: cy2,
  645.                         x: (cx1 + cx2) / 2,
  646.                         y: (cy1 + cy2) / 2
  647.                     });
  648.                 }
  649.             }

  651.             if (candidates.length > 0) {
  652.                 var 发送按钮候选 = [];
  653.                 for (var ci = 0; ci < candidates.length; ci++) {
  654.                     var cand = candidates[ci];
  655.                     if (cand.y1 >= 输入框信息.y1 + 300) {
  656.                         发送按钮候选.push(cand);
  657.                     }
  658.                 }
  659.                
  660.                 if (发送按钮候选.length > 0) {
  661.                     发送按钮候选.sort(function(a, b) {
  662.                         return b.x1 - a.x1;
  663.                     });
  664.                     var 选中 = 发送按钮候选[0];
  665.                     print.log("✓ 发送按钮定位：输入框右侧下方clickable元素，坐标(" + Math.round(选中.x) + "," + Math.round(选中.y) + ")");
  666.                     return { x: 选中.x, y: 选中.y };
  667.                 }
  668.                
  669.                 candidates.sort(function(a, b) {
  670.                     return b.x1 - a.x1;
  671.                 });
  672.                 var 选中 = candidates[0];
  673.                 print.log("✓ 发送按钮定位：输入框右侧clickable元素，坐标(" + Math.round(选中.x) + "," + Math.round(选中.y) + ")");
  674.                 return { x: 选中.x, y: 选中.y };
  675.             }

  677.             var 预估X = 输入框信息.x2 + 100;
  678.             var 预估Y = 输入框信息.centerY;
  679.             print.log("⚠ 发送按钮使用输入框右侧兜底坐标(" + Math.round(预估X) + "," + Math.round(预估Y) + ")");
  680.             return { x: 预估X, y: 预估Y };
  681.         }
  682.     }

  684.     print.log("⚠ 发送按钮使用屏幕右侧兜底策略");
  685.     return {
  686.         x: 屏幕宽 * 0.92,
  687.         y: 屏幕高 * 0.92
  688.     };
  689. }

  691. function 等待AI回答完成(发送前的最后文本, 发送前回答数量) {
  692.     var 已耗时 = 0;
  693.     var 检查间隔秒 = 1;

  695.     print.log("发送前最后AI回答：'" + 发送前的最后文本 + "'，发送前回答数量：" + 发送前回答数量);

  697.     while (已耗时 < 等待回答超时秒) {
  698.         sleep.second(秒 = 检查间隔秒);
  699.         已耗时 += 检查间隔秒;

  701.         xml = 获取UI();
  702.         var 回答列表 = 采集AI回答列表(xml);
  703.         
  704.         if (回答列表.length > 0) {
  705.             var 当前最后回答 = 回答列表[回答列表.length - 1];
  706.             
  707.             var 有新回答 = (当前最后回答 !== 发送前的最后文本);
  708.             var 回答数量增加 = (回答列表.length > 发送前回答数量);
  709.             
  710.             if (有新回答 || 回答数量增加) {
  711.                 print.log("✓ 检测到新回答（" + 已耗时 + "秒）：'" + 当前最后回答 + "'，数量：" + 回答列表.length);
  712.                
  713.                 var 等待完成 = 0;
  714.                 var 上次长度 = 字符串长度(当前最后回答);
  715.                 while (等待完成 < 回答输出等待秒) {
  716.                     sleep.second(秒 = 1);
  717.                     等待完成++;
  718.                     
  719.                     xml = 获取UI();
  720.                     var 当前列表 = 采集AI回答列表(xml);
  721.                     if (当前列表.length > 0) {
  722.                         var 当前文本 = 当前列表[当前列表.length - 1];
  723.                         if (字符串长度(当前文本) === 上次长度) {
  724.                             print.log("✓ 文本停止变化，返回采集结果：" + 当前文本);
  725.                             return 当前文本;
  726.                         }
  727.                         上次长度 = 字符串长度(当前文本);
  728.                     }
  729.                 }
  730.                
  731.                 var 最终列表 = 采集AI回答列表(xml);
  732.                 if (最终列表.length > 0) {
  733.                     var 最终文本 = 最终列表[最终列表.length - 1];
  734.                     print.log("✓ 采集成功，返回结果：" + 最终文本);
  735.                     return 最终文本;
  736.                 }
  737.             }
  738.         }
  739.     }

  741.     print.log("⚠ 等待AI回答超时（" + 等待回答超时秒 + "秒），尝试返回当前内容");
  742.     xml = 获取UI();
  743.     var 兜底列表 = 采集AI回答列表(xml);
  744.     if (兜底列表.length > 0) {
  745.         var 兜底文本 = 兜底列表[兜底列表.length - 1];
  746.         print.log("✓ 超时兜底：返回当前采集到的回答：" + 兜底文本);
  747.         return 兜底文本;
  748.     }
  749.     return null;
  750. }

  752. // ========== 主流程开始 ==========

  754. function 主流程() {
  755.     // 步骤1：全屏截图（B站验证码页面）
  756.     print.log("\n========== 步骤1：全屏截图B站验证码 ==========");
  757.     var 截图成功 = 全屏截图(截图保存路径);
  758.     if (!截图成功) {
  759.         print.log("✗ 截图失败，退出流程");
  760.         print.log("===== 元宝识别验证码拖动B站流程结束 =====");
  761.         return;
  762.     }

  764.     // 步骤2：启动元宝APP
  765.     print.log("\n========== 步骤2：启动元宝APP ==========");
  766.     try {
  767.         app.openApp(元宝包名);
  768.         print.log("✓ 已启动元宝");
  769.     } catch (e) {
  770.         print.log("⚠ 启动失败：" + e.message);
  771.     }
  772.     sleep.second(秒 = 5);

  774.     // 步骤3：确认进入对话页面
  775.     print.log("\n========== 步骤3：确认进入对话页面 ==========");
  776.     var xml = 获取UI();
  777.     var hasRecyclerView = (xml.indexOf("chat_recycler_view") !== -1);
  778.     if (!hasRecyclerView) {
  779.         print.log("⚠ 当前页面可能不是元宝对话页，再次等待");
  780.         sleep.second(秒 = 3);
  781.         xml = 获取UI();
  782.         hasRecyclerView = (xml.indexOf("chat_recycler_view") !== -1);
  783.     }

  785.     if (hasRecyclerView) {
  786.         print.log("✓ 已进入元宝对话页面");
  787.     } else {
  788.         print.log("⚠ 未检测到消息列表，继续尝试");
  789.     }

  791.     // 步骤4：记录发送前的最后一条AI回答和数量
  792.     var 发送前回答列表 = 采集AI回答列表(xml);
  793.     var 发送前回答数量 = 发送前回答列表.length;
  794.     var 发送前最后文本 = "";
  795.     if (发送前回答列表.length > 0) {
  796.         发送前最后文本 = 发送前回答列表[发送前回答列表.length - 1];
  797.     }
  798.     print.log("✓ 发送前回答数量：" + 发送前回答数量 + "，最后文本：'" + 发送前最后文本 + "'");

  800.     // 步骤5：点击加号按钮打开附件菜单
  801.     print.log("\n========== 步骤5：点击加号按钮打开附件菜单 ==========");
  802.     var 加号按钮 = 查找加号按钮(xml);
  803.     agent.click(加号按钮.x, 加号按钮.y);
  804.     print.log("✓ 已点击加号按钮，坐标(" + Math.round(加号按钮.x) + "," + Math.round(加号按钮.y) + ")");
  805.     sleep.second(秒 = 2);

  807.     // 步骤6：选择相册或图片
  808.     print.log("\n========== 步骤6：选择相册或图片 ==========");
  809.     var 相册选择成功 = false;
  810.     var 尝试次数 = 0;
  811.     while (!相册选择成功 && 尝试次数 < 5) {
  812.         尝试次数++;
  813.         xml = 获取UI();
  814.         
  815.         if (是否在系统相册页面(xml)) {
  816.             print.log("✓ 已进入系统相册页面");
  817.             相册选择成功 = true;
  818.             break;
  819.         }
  820.         
  821.         var 相册选项 = 查找相册选项(xml);
  822.         if (相册选项) {
  823.             agent.click(相册选项.x, 相册选项.y);
  824.             print.log("✓ 已点击相册选项，坐标(" + Math.round(相册选项.x) + "," + Math.round(相册选项.y) + ")");
  825.             sleep.second(秒 = 2);
  826.             相册选择成功 = true;
  827.             break;
  828.         }
  829.         
  830.         var imgCount = (xml.match(/class="android\.widget\.ImageView"/g) || []).length;
  831.         if (imgCount >= 4) {
  832.             print.log("✓ 加号菜单底部已显示图片列表（检测到" + imgCount + "个图片）");
  833.             相册选择成功 = true;
  834.             break;
  835.         }
  836.         
  837.         print.log("⚠ 第" + 尝试次数 + "次尝试：未找到相册选项，等待重试");
  838.         sleep.second(秒 = 1);
  839.     }

  841.     // 步骤7：选择第一张图片（处理系统相册和图片预览页面）
  842.     print.log("\n========== 步骤7：选择第一张图片 ==========");
  843.     var 图片选择成功 = false;
  844.     var 图片尝试次数 = 0;
  845.     while (!图片选择成功 && 图片尝试次数 < 10) {
  846.         图片尝试次数++;
  847.         xml = 获取UI();
  848.         
  849.         if (图片尝试次数 === 1) {
  850.             var pkgMatch = xml.match(/package="([^"]+)"/);
  851.             print.log("调试：当前包名=" + (pkgMatch ? pkgMatch[1] : "未知"));
  852.             print.log("调试：XML前300字符=" + xml.substring(0, 300));
  853.             print.log("调试：是否有edConversationInput=" + (xml.indexOf("edConversationInput") !== -1));
  854.             print.log("调试：是否有chat_recycler_view=" + (xml.indexOf("chat_recycler_view") !== -1));
  855.             var dbgImgCount = (xml.match(/class="android\.widget\.ImageView"/g) || []).length;
  856.             print.log("调试：ImageView数量=" + dbgImgCount);
  857.         }
  858.         
  859.         if (是否在图片预览页面(xml)) {
  860.             var 确认按钮 = 查找图片预览确认按钮(xml);
  861.             agent.click(确认按钮.x, 确认按钮.y);
  862.             print.log("✓ 已点击图片预览确认按钮，坐标(" + Math.round(确认按钮.x) + "," + Math.round(确认按钮.y) + ")");
  863.             图片选择成功 = true;
  864.             sleep.second(秒 = 3);
  865.             break;
  866.         }
  867.         
  868.         if (是否在系统相册页面(xml)) {
  869.             var 第一张图片 = 查找第一张图片(xml);
  870.             if (第一张图片) {
  871.                 agent.click(第一张图片.x, 第一张图片.y);
  872.                 print.log("✓ 已点击第一张图片右上角小圆点，坐标(" + Math.round(第一张图片.x) + "," + Math.round(第一张图片.y) + ")");
  873.                 sleep.second(秒 = 2);
  874.                
  875.                 xml = 获取UI();
  876.                 var 选择按钮 = 查找相册选择按钮(xml);
  877.                 if (选择按钮) {
  878.                     agent.click(选择按钮.x, 选择按钮.y);
  879.                     print.log("✓ 已点击选择按钮，坐标(" + Math.round(选择按钮.x) + "," + Math.round(选择按钮.y) + ")");
  880.                     图片选择成功 = true;
  881.                     sleep.second(秒 = 3);
  882.                     break;
  883.                 } else {
  884.                     print.log("⚠ 第" + 图片尝试次数 + "次：未找到选择按钮，重新获取XML重试");
  885.                     sleep.second(秒 = 1);
  886.                     continue;
  887.                 }
  888.             } else {
  889.                 print.log("⚠ 系统相册未找到图片");
  890.                 sleep.second(秒 = 1);
  891.                 continue;
  892.             }
  893.         }
  894.         
  895.         print.log("⚠ 第" + 图片尝试次数 + "次尝试：未检测到相册页面，等待重试");
  896.         sleep.second(秒 = 1);
  897.     }

  899.     // 步骤8：等待图片添加到输入区域（等待回到元宝对话页面）
  900.     print.log("\n========== 步骤8：等待图片添加到输入区域 ==========");
  901.     var 图片添加成功 = false;
  902.     var 等待尝试次数 = 0;
  903.     while (!图片添加成功 && 等待尝试次数 < 10) {
  904.         等待尝试次数++;
  905.         xml = 获取UI();
  906.         
  907.         var packageMatch = xml.match(/package="([^"]+)"/);
  908.         if (packageMatch && packageMatch[1] === 元宝包名) {
  909.             print.log("✓ 已回到元宝对话页面");
  910.             if (xml.indexOf("edConversationInput") !== -1) {
  911.                 print.log("✓ 图片已添加到输入区域");
  912.                 图片添加成功 = true;
  913.                 break;
  914.             }
  915.         }
  916.         
  917.         print.log("⚠ 第" + 等待尝试次数 + "次尝试：图片尚未添加，等待重试");
  918.         sleep.second(秒 = 1);
  919.     }
  920.    
  921.     if (!图片添加成功) {
  922.         print.log("⚠ 多次等待图片未添加，继续后续步骤");
  923.     }

  925.     // 步骤9：粘贴文字询问拖动距离
  926.     print.log("\n========== 步骤9：粘贴文字询问拖动距离 ==========");
  927.     xml = 获取UI();
  928.     var 输入框 = 查找输入框中心(xml);
  929.     var AI回答 = null;
  930.     if (输入框) {
  931.         agent.click(输入框.x, 输入框.y);
  932.         sleep.second(秒 = 1);
  933.         粘贴文本(提问话术);
  934.         print.log("✓ 已粘贴文本：" + 提问话术);
  935.         sleep.second(秒 = 2);

  937.         // 步骤10：发送图片和文字
  938.         print.log("\n========== 步骤10：发送图片和文字 ==========");
  939.         xml = 获取UI();
  940.         var 发送按钮 = 查找发送按钮中心(xml);
  941.         if (发送按钮) {
  942.             agent.click(发送按钮.x, 发送按钮.y);
  943.             print.log("✓ 已点击发送按钮，坐标(" + Math.round(发送按钮.x) + "," + Math.round(发送按钮.y) + ")");
  944.         } else {
  945.             agent.shell("input keyevent 66");
  946.             print.log("⚠ 未找到发送按钮，已尝试按回车发送");
  947.         }
  948.         sleep.second(秒 = 3);

  950.         // 步骤11：等待元宝AI回答
  951.         print.log("\n========== 步骤11：等待元宝AI回答 ==========");
  952.         AI回答 = 等待AI回答完成(发送前最后文本, 发送前回答数量);
  953.     } else {
  954.         print.log("⚠ 未找到输入框");
  955.     }
  956.    
  957.     if (!AI回答) {
  958.         print.log("✗ 未获取到AI回答");
  959.         print.log("===== 元宝识别验证码拖动B站流程结束 =====");
  960.         return;
  961.     }

  963.     print.log("\n✓ 采集到AI回答");
  964.     print.log("--- 采集内容开始 ---");
  965.     print.log(AI回答);
  966.     print.log("--- 采集内容结束 ---");

  968.     // 步骤12：解析拖动距离坐标
  969.     print.log("\n========== 步骤12：解析拖动距离坐标 ==========");
  970.     print.log("✓ AI原始回答：'" + AI回答 + "'");
  971.    
  972.     var 所有数字 = AI回答.match(/\d+/g);
  973.     var 拖动距离像素 = null;
  974.     var AI图像宽度 = null;
  975.    
  976.     if (所有数字 && 所有数字.length >= 2) {
  977.         var 数字列表 = [];
  978.         for (var i = 0; i < 所有数字.length; i++) {
  979.             数字列表.push(parseInt(所有数字[i]));
  980.         }
  981.         print.log("✓ 提取到所有数字：" + 数字列表.join(", "));
  982.         
  983.         if (数字列表.length >= 5) {
  984.             var x1 = 数字列表[0];
  985.             var y1 = 数字列表[1];
  986.             var x2 = 数字列表[2];
  987.             var y2 = 数字列表[3];
  988.             AI图像宽度 = 数字列表[4];
  989.             拖动距离像素 = Math.abs(x2 - x1);
  990.             print.log("✓ 识别到两组坐标+图像宽度：(" + x1 + "," + y1 + ") 和 (" + x2 + "," + y2 + ")，图像宽度=" + AI图像宽度);
  991.             print.log("✓ 计算拖动距离：|x2 - x1| = |" + x2 + " - " + x1 + "| = " + 拖动距离像素);
  992.         } else if (数字列表.length >= 4) {
  993.             var x1 = 数字列表[0];
  994.             var y1 = 数字列表[1];
  995.             var x2 = 数字列表[2];
  996.             var y2 = 数字列表[3];
  997.             拖动距离像素 = Math.abs(x2 - x1);
  998.             AI图像宽度 = Math.max(x1, x2) + 100;
  999.             print.log("✓ 识别到两组坐标格式：(" + x1 + "," + y1 + ") 和 (" + x2 + "," + y2 + ")");
  1000.             print.log("✓ 计算拖动距离：|x2 - x1| = |" + x2 + " - " + x1 + "| = " + 拖动距离像素);
  1001.             print.log("✓ 估算图像宽度：max(x1,x2)+100 = " + AI图像宽度);
  1002.         } else if (数字列表.length >= 2) {
  1003.             var 坐标匹配 = AI回答.match(/(\d+)\s*[,，]\s*(\d+)/);
  1004.             if (坐标匹配) {
  1005.                 var cx1 = parseInt(坐标匹配[1]);
  1006.                 var cx2 = parseInt(坐标匹配[2]);
  1007.                 拖动距离像素 = Math.abs(cx2 - cx1);
  1008.                 AI图像宽度 = Math.max(cx1, cx2) + 100;
  1009.                 print.log("✓ 识别到坐标格式：(" + cx1 + "," + cx2 + ")，计算距离：" + 拖动距离像素);
  1010.             } else {
  1011.                 拖动距离像素 = 数字列表[0];
  1012.                 print.log("✓ 提取到单个数字（拖动距离）：" + 拖动距离像素);
  1013.             }
  1014.         } else {
  1015.             拖动距离像素 = 数字列表[0];
  1016.             print.log("✓ 提取到单个数字（拖动距离）：" + 拖动距离像素);
  1017.         }
  1018.     } else if (所有数字 && 所有数字.length === 1) {
  1019.         拖动距离像素 = parseInt(所有数字[0]);
  1020.         print.log("✓ 提取到单个数字（拖动距离）：" + 拖动距离像素);
  1021.     } else {
  1022.         print.log("✗ 未找到有效的拖动距离");
  1023.         print.log("===== 元宝识别验证码拖动B站流程结束 =====");
  1024.         return;
  1025.     }
  1026.    
  1027.     var 图像缩放系数 = 1.0;
  1028.     if (AI图像宽度 && AI图像宽度 > 0 && AI图像宽度 < 屏幕宽) {
  1029.         图像缩放系数 = 屏幕宽 / AI图像宽度;
  1030.         if (图像缩放系数 > 5) {
  1031.             图像缩放系数 = 1.0;
  1032.         } else {
  1033.             拖动距离像素 = Math.round(拖动距离像素 * 图像缩放系数);
  1034.             print.log("✓ 图像缩放补偿：AI图像宽度=" + AI图像宽度 + "，屏幕宽=" + 屏幕宽);
  1035.             print.log("✓ 缩放系数=" + 图像缩放系数.toFixed(2) + "，补偿后拖动距离=" + 拖动距离像素);
  1036.         }
  1037.     } else if (拖动距离像素 < 200) {
  1038.         图像缩放系数 = 屏幕宽 / 750;
  1039.         拖动距离像素 = Math.round(拖动距离像素 * 图像缩放系数);
  1040.         print.log("✓ 单数字模式补偿：假设AI图像宽度≈750，缩放系数=" + 图像缩放系数.toFixed(2));
  1041.         print.log("✓ 补偿后拖动距离=" + 拖动距离像素);
  1042.     }
  1043.    
  1044.     验证码滑块距离 = {
  1045.         x: 拖动距离像素,
  1046.         y: 0
  1047.     };

  1049.     // 步骤13：切换回B站并拖动滑块
  1050.     print.log("\n========== 步骤13：切换回B站并拖动滑块 ==========");
  1051.    
  1052.     agent.shell("input keyevent 187");
  1053.     print.log("✓ 已按后台键打开任务列表");
  1054.     sleep.second(秒 = 2);
  1055.    
  1056.     xml = 获取UI();
  1057.     var biliIdx = xml.indexOf('哔哩哔哩');
  1058.     if (biliIdx === -1) {
  1059.         biliIdx = xml.indexOf('bilibili');
  1060.     }
  1061.     if (biliIdx === -1) {
  1062.         biliIdx = xml.indexOf('B站');
  1063.     }
  1064.    
  1065.     if (biliIdx !== -1) {
  1066.         var 段 = xml.substring(biliIdx);
  1067.         var m = 段.match(/bounds="\[(\d+),(\d+)\]\[(\d+),(\d+)\]"/);
  1068.         if (m) {
  1069.             var clickX = (parseInt(m[1]) + parseInt(m[3])) / 2;
  1070.             var clickY = (parseInt(m[2]) + parseInt(m[4])) / 2;
  1071.             agent.click(clickX, clickY);
  1072.             print.log("✓ 已点击B站任务卡片，坐标(" + Math.round(clickX) + "," + Math.round(clickY) + ")");
  1073.         }
  1074.     } else {
  1075.         print.log("⚠ 未找到B站任务卡片，尝试直接打开");
  1076.         try {
  1077.             app.openApp(B站包名);
  1078.             print.log("✓ 已打开B站");
  1079.         } catch (e) {
  1080.             print.log("⚠ 打开B站失败：" + e.message);
  1081.         }
  1082.     }
  1083.     sleep.second(秒 = 3);

  1085.     xml = 获取UI();
  1086.     var 验证码区域左边界 = 屏幕宽 * 0.15;
  1087.    
  1088.     var 滑块轨道匹配 = xml.match(/<node[^>]*?text="拖动滑块完成拼图"[^>]*?bounds="\[(\d+),(\d+)\]\[(\d+),(\d+)\]"/);
  1089.     if (滑块轨道匹配) {
  1090.         验证码区域左边界 = parseInt(滑块轨道匹配[1]);
  1091.     }

  1093.     var 拖动距离 = 验证码滑块距离.x * 滑块校准系数;

  1095.     var startX = 验证码区域左边界 + 50;
  1096.     var startY = 屏幕高 * 0.42;
  1097.     var endX = startX + 拖动距离;
  1098.     var endY = startY;

  1100.     print.log("✓ 验证码区域左边界: " + 验证码区域左边界 + ", 拖动距离: " + 拖动距离);
  1101.     agent.swip(startX, startY, endX, endY, 2000);
  1102.     print.log("✓ 已拖动滑块，起点(" + Math.round(startX) + "," + Math.round(startY) + ")，终点(" + Math.round(endX) + "," + Math.round(endY) + ")");
  1103. }

  1105. 主流程();

  1107. print.log("\n===== 元宝识别验证码拖动B站流程结束 =====");
复制代码


quot var 列表 parseInt
相关帖子

上一篇: 示例千问自动采集文章保存记事本

下一篇: AIWROK软件测试文心识别识别验证码示例

发表于 2026-7-16 07:02:49

举报 回复

返回列表 发新帖

网站地图|手机版|AIWORK |网站地图

Copyright © 2001-2020, Tencent Cloud.　Powered by 留下备用