作者Carlchen (backenfuerLily)
看板Python
标题[问题] Selenium locating elements Dcard
时间Sat May 7 13:47:44 2016
我想要做到的是
step1.自动登入Dcard
step2.进入抽卡的page
step3.save page
一开始上网查到mechanize这个工具
http://wwwsearch.sourceforge.net/mechanize/documentation.html
不过在step1就卡关,因为
https://www.dcard.tw/login
找不到<form>的tag
所以我放弃了mechanize,上网查到了selenium这个工具
http://selenium-python.readthedocs.io/
用find_element_by_XXX()的方法做完了step1
不过在step2又卡关了
http://imgur.com/fNujpAJ
如图
抽卡的page是在点击红色圈圈处会到的page
而红色圈圈处对应的code是红色框框处
我试过了
find_element_by_partial_link_text('card')
find_element_by_class_name('fa-book')
find_element_by_css_selector('i.fa.fa-book')
find_element_by_css_selector('i.fa-book')
结果都是
NoSuchElementException: Message: Unable to locate
element: {"method":"METHOD_NAME","selector":"XXX"}
而
find_element_by_class_name('fa fa-book')
结果是
InvalidSelectorException: message: The given selector
fa fa-book is either invalid or does not result in a WebElement.
The following error occurred:
InvalidSelectorError: Compound class names not permitted
请问大家这是发生了什麽问题?find_element_by_XXX()应该要怎麽写?
还是用别的方法来写会比较好写?
假如後来有顺利写完step1~step3,有办法排程让程式每天固定执行一次吗?
另外想问如果用jQuery做我这个需求会更简单,更好做吗?
以上谢谢
--
※ 发信站: 批踢踢实业坊(ptt.cc), 来自: 122.147.21.11
※ 文章网址: https://webptt.com/cn.aspx?n=bbs/Python/M.1462600069.A.E3A.html
※ 编辑: Carlchen (122.147.21.11), 05/07/2016 13:50:01
1F:→ s860134: fa05/07 16:55
s86大,你说的是find_element_by_class_name('fa')吗?
这个我有试过,只是它回传的是第一个出现class='fa'的地方,也就是会到feedback的pa
ge,可惜不是我要前往的page
2F:→ s860134: 因为他只吃 class name 所以你可以换成用 css_selector 05/07 19:03
3F:→ s860134: find_element_by_css_selector( 05/07 19:04
4F:→ s860134: '''li[ng-click="onClickNavigationItem('dcard')"]') 05/07 19:04
刚刚试了这个
find_element_by_css_selector(
'li[ng-click*="onClickNavigationItem(\'dcard\')"]')
还是 NoSuchElementException...
不知道是怎麽回事@@
5F:→ s860134: 刚刚测试应该是他页面是动态生成,所以你必须要有等待 05/08 11:23
7F:→ s860134: 至於排程这也不难 如果是 windows 用内建的就好 05/08 11:30
8F:→ s860134: 附属应用程式>系统工具>工作排程器>建立工作 05/08 11:33
9F:→ s860134: 触发程序>设定时间 动作设定 python 执行 scrpit 05/08 11:35
谢谢s大的帮忙,刚刚试过了,是OK的
不过动态生成是什麽我不知道@@
另外还有个问题,selenium的作法是要打开browser
如果在server上跑(纯文字介面),是不是就不会work了?可能要用别的工具来写?
10F:→ AndCycle: 你要用 PhantomJS 之类的东西 05/08 17:14
11F:嘘 peace9527: 迪卡好像不太想要使用者截抽到的卡的图 05/08 19:54
谢谢指教喔~如果我只是想要截图,我就不会上来问了XD
※ 编辑: Carlchen (122.147.21.11), 05/08/2016 20:32:16
12F:→ s860134: AndCycle 有提到 PhantomJS selenium 是有支援 05/08 22:21
13F:→ s860134: 可以解决你要在伺服器执行,动态生成是指并不是一次传给 05/08 22:22
14F:→ s860134: 你整个做好的网页,而是给浏览器程式码去执行和呈现 05/08 22:24