SikuliスクリプトでのUI操作自動化を試してみる

SikuliスクリプトはOpenCVを使った画像認識を利用して、GUI操作の自動化を行うスクリプトです。 指定した画像に一致した領域にカーソルを動かしてクリックさせたり、キーボードでの入力をさせたりすることができます。 そこで、今回はSikuliがUIテストに利用できるのかどうかを調べるために、iOSシミュレータに対してSikuliスクリプトを試しに使ってみました。 なお、MITのUIデザイングループが始めたオープンソースの研究プロジェクトであり(ソースはGitHubにあります)、現在はコロラド大学ボルダー校のSikuli Labがメンテナンスしているようです。 ダウンロードから起動まで Sikuliのサイトのダウンロードページからdmgファイルをダウンロードします。これをマウントして実行するだけです。 なお、Lion以降を利用している場合には、Gatekeeperの設定によって実行できな

[ko-ya-ma]

これは面白い。これでクッキー焼く人もいるのかな?

[koma_g]

コマンドラインでの実行

[ya--mada]

うほほい

[ikeikeikeike]

11件のコメント http://t.co/Zqb6An9OAx “Safx: SikuliスクリプトでのUI操作自動化を試してみる”

[Drunkar]

未来だ

[akulog]

とっても見た目が面白い。

[masakano]

おもしろい / 他8コメント http://t.co/ovbpywg4HU “Safx: SikuliスクリプトでのUI操作自動化を試してみる”

[potato777]

コードがおもしろい

[t-wada]

画像認識を使って GUI 操作を自動化する Sikuli スクリプトの日本語解説エントリ

[gin0606]

よさそう。calabashだとアプリの中の操作しか出来なくて不自由だった / “Safx: SikuliスクリプトでのUI操作自動化を試してみる”

[tuki0918]

画像を認識して自動化するやつ

[udzura]

マニアだな……

[yuiseki]

OpenCVを使った画像認識を利用して、GUI操作の自動化を行うスクリプト

[fmreal]

面白いなぁ