Selenium+Java - 结合sikuliX操作Flash网页

前言

前天被一个Flash的轮播图，给玩坏了，无法操作，后来请教了下crazy总拿到思路，今天实践了下，果然可以了，非常感谢！

模拟场景

1. 打开百度地图
2. 切换城市到北京
3. 使用测距工具
4. 测量 奥林匹克森林公园 —— 北京南苑机场 的距离

安装配置

• 首先下载sikuliX的jar包：https://launchpad.net/sikuli/sikulix/1.1.0
• 导入jar包：sikulixsetup-1.1.0.jar
• 双击java -jar sikulixsetup-1.1.0.jar，则会出现如下图，选择相应选项后，启动会下载sikulixapi.jar。不然会报错：libs to export not found on above classpath: /sikulixlibs/mac/libs64

 

• 启动成功后会出现如下提示

 

• 截取起点位置和终点位置的图片

 

sikuli操作Flash网页

具体示例代码如下；

import org.openqa.selenium.By;
import org.openqa.selenium.WebDriver;
import org.openqa.selenium.chrome.ChromeDriver;

import java.util.concurrent.TimeUnit;

import org.sikuli.script.FindFailed;
import org.sikuli.script.Pattern;
import org.sikuli.script.Screen;
import org.testng.annotations.BeforeClass;
import org.testng.annotations.Test;

/**
 * @rongrong 
 * Selenium结合sikuliX操作Flash网页案例
 */
public class TestSikuli {


    WebDriver driver;

    @BeforeClass
    public void beforeClass() {
        System.setProperty("webdriver.chrome.driver", "driver/chromedriver.exe");
        driver = new ChromeDriver();
    }

    @Test
    public void testBaiDuMap() {
        driver.manage().window().maximize();
        driver.manage().timeouts().implicitlyWait(10, TimeUnit.SECONDS);
        driver.manage().timeouts().pageLoadTimeout(10, TimeUnit.SECONDS);
        driver.get("http://map.baidu.com/");
        //打开城市下拉框
        driver.findElement(By.cssSelector(".ui3-city-change-inner")).click();
        //选择北京
        driver.findElement(By.cssSelector("[citycode='131']")).click();;
        // 打开工具下拉框
        driver.findElement(By.cssSelector("[map-on-click='Box'] em")).click();
        // 选择测距
        driver.findElement(By.cssSelector("[map-on-click='measure'] i")).click();
        Screen screen = new Screen();
        String start = "D:\\picture\\奥林匹克森林公园.png";
        String end = "D:\\picture\\北京南苑机场.png";
        Pattern from = new Pattern(start);
        Pattern to = new Pattern(end);
        try {
            if (screen.find(from) != null) {
                screen.click(from);
            }
            if (screen.find(to) != null) {
                screen.click(to);
            }
            screen.doubleClick();
        } catch (FindFailed e) {
            e.printstacktrace();
        }
    }
}

 

运行效果如下：