Selenium Conference 2015 参加報告
- 1. Selenium Conference 参加報告 サイボウズ株式会社 宮田 淳平 2015/10/20 Selenium勉強会＠サイボウズ
- 2. 自己紹介 ▌宮田 淳平 ▌サイボウズ入社7年目 生産性向上チーム所属 ▌趣味：ランニング 一昨日、四万十川ウルトラマラソン100km完走！ ▌11/17に『アジャイルアカデミー Selenium Boot Camp』のチューター やります テスト自動化入門者向けの有料講座 2
- 7. 会場の様子 7
- 8. 8
- 9. 9
- 10. 全体の雰囲気 ▌会場のほとんどの人は業務でSeleniumを使っている ▌いわゆる記録再生形式のツール(IDE/Builder)の話はほぼない 一つだけあるけど辛い内容 Why Building Record/Playback Tools Is So Hard ▌中級者以上向け セッションはBeginner, Intermediate, Advancedと分類されているけど、Beginner と書かれているものでもある程度Seleniumの知識がないと厳しそう ▌質疑応答は活発で、食事中でも参加者同士の議論が行われてたり 10
- 11. おもしろかったセッション 11
- 12. Selenium: State of the Union ▌WebDriverの生みの親Simon Stewart(Facebook)による Keynote ▌前半はWebのトレンドの移り変わり ▌後半はモバイルの自動テストの話 AndroidはselendroidとかappiumでOK iOSはフレームワークが変わったり速度が遅かったりで辛い ▌Facebookはこの問題を解決するためにWebDriverAgentと FBSimulatorControlをオープンソースで公開 12
- 15. Selenide: Concise UI Tests in Java ▌SelenideというJavaで書かれたオープンソースのSeleniumクライアント ライブラリの紹介 通常のSeleniumクライアントのラッパー Selenium界のjQueryみたいなもの ▌通常のSeleniumクライアントは冗長で不安定 ▌Selenideは簡潔で安定 テストを書く上ではまりがちな問題を気にしなくてよくなる ▌ビジネスロジックに集中できるようにするのが目的 15
- 16. Selenide: concise API @Test public void userCanLogin() { open("http://localhost:8080/login"); $(By.name("user.name")).setValue("john"); $("#submit").click(); $(".menu").shouldHave(text("Hello, John!")); } https://docs.google.com/presentation/d/1ZksjuL2vPN_pkhMuon0HH4gm7KNmjU50pByRRGzgVko/edit#slide=id.ga5fa11dc4_033
- 17. 1. smart waiting $(".loading_progress").shouldBe(visible); $("#menu").shouldHave(text("Hello, John!")); $(By.name("gender")).shouldNotBe(selected); $(By.name("gender")).should(disappear); forget the ajax! https://docs.google.com/presentation/d/1ZksjuL2vPN_pkhMuon0HH4gm7KNmjU50pByRRGzgVko/edit#slide=id.ga5fa11dc4_033
- 18. 3. Collections $$(“#employees tbody tr”).shouldHave( texts( “John Belushi”, “Bruce Willis”, “John Malkovich” ) ); https://docs.google.com/presentation/d/1ZksjuL2vPN_pkhMuon0HH4gm7KNmjU50pByRRGzgVko/edit#slide=id.ga5fa11dc4_033
- 21. 10. Selenide profiler Report for userCanReplyToIncomingMessages(ui.BankMessagesSpec) +----------------------+---------------------------------------------+--------+----------+ |Element |Subject |Status |ms. | +----------------------+---------------------------------------------+--------+----------+ |open |http://localhost:2070/ |PASSED |4669 | |open |http://localhost:2070/fakeLogin?username=bob |PASSED |1324 | |By.linkText: Quicky |click() |PASSED |793 | |#btn-message-reply |click() |PASSED |1002 | |By.name: message.text |should be(focused) |PASSED |57 | |By.name: message.text |should have(text 'long thread') |PASSED |47 | |By.name: message.text |set value(Hello world!) |PASSED |69 | |#send-button |click() |PASSED |1051 | |.alert-success |should be(visible) |PASSED |71 | +--------------------+-----------------------------------------------+--------+----------+ https://docs.google.com/presentation/d/1ZksjuL2vPN_pkhMuon0HH4gm7KNmjU50pByRRGzgVko/edit#slide=id.ga5fa11dc4_033
- 22. 11. fast set value Problem: WebElement.sendKeys() is slow Solution: mvn -Dselenide.fastSetValue=true https://docs.google.com/presentation/d/1ZksjuL2vPN_pkhMuon0HH4gm7KNmjU50pByRRGzgVko/edit#slide=id.ga5fa11dc4_033
- 23. Selenide: Concise UI Tests in Java ▌部分的に導入できるので、Seleniumテストを一から始めるチームはもち ろん、既にSelenium書いてるチームでも使えそう Java限定だけど・・・ ▌誰か実際の運用体験談お願いします！ 23
- 24. Distributed Automation Using Selenium Grid / AWS / Autoscaling ▌ExpediaがautoscaleするSelenium GridをAWS上で構築している 話 ▌構成と費用感、ハマリポイントなど 並列数を増やしていくとjenkins側や帯域などが問題になってくる ChromeよりFirefoxの方が消費するリソースが少ないらしい 24
- 25. GRID TOPOLOGy - 1 HUB • parallel execution for small projects • 1 executor - 1 hub - 11 nodes • eg: c3.8xlarge can execute 250*+ tests in parallel • Test run would finish in ~5mins c3.8xlarge c3.8xlarge c3.xlarge 25 …. https://www.slideshare.net/slideshow/embed_code/key/H7QmI1pAf2r9u7
- 26. GRID TOPOLOGy - 2 HUB • Suitable for medium size projects (500+ tests) • More tests by adding one more executor (2 executors 1 hub and 22 node),this could double your parallel execution cases c3.8xlarge c3.8xlarge c3.xlarge 26 …. …. https://www.slideshare.net/slideshow/embed_code/key/H7QmI1pAf2r9u7
- 27. GRID TOPOLOGy - 4 HUB HUB • Use two hubs to double the tests (1000+) • But speed is same as topology 2 (~5mins) • Double the cost c3.8xlarge c3.xlarge 27 https://www.slideshare.net/slideshow/embed_code/key/H7QmI1pAf2r9u7
- 28. Distributed Automation Using Selenium Grid / AWS / Autoscaling ▌ちょうどSelenium Gridをクラウドに移動しようとしてたのでとても参考に なった ▌うらやましい環境ではあるけど、正直がんばりすぎ＆コストかけすぎ感 jenkinsとhubは常時立ち上げてないといけないので、どう考えても月に数千ドル 〜数万ドルのコスト ▌UIテストの数は極力減らしましょうみたいな話もあってやはりどこも苦労し てる印象