C#使用Selenium

介绍：

Selenium 是一个用于Web应用程序测试的工具。Selenium测试直接运行在浏览器中，就像真正的用户在操作一样。支持的浏览器包括IE（7, 8, 9, 10, 11），Mozilla Firefox，Safari，Google Chrome，Opera等。

利用它可以驱动浏览器执行特定的动作，如点击、下拉等操作，同时还可以获取浏览器当前呈现的页面的源代码，做到可见即可爬。

所以Selenium现在被广泛用于Python爬虫。查了下资料，发现这个工具确实强大，最重要的是，C#也是可以调用的。

官方支持Java，C#，Python,Ruby，PHP，Perl，Javascript等语言

Selenium使用Java开发，项目地址 https://github.com/SeleniumHQ/selenium

使用Selenium：

1、我们新建一个C#控制台程序

2、使用Nuget搜索以下依赖库

需要引用的核心库是Selenium.RC，Selenium.Support，Selenium.WebDriver

然后再需要引用浏览器驱动库，这里我以IE浏览器为例，Chrome使用方式跟IE是一样的，程序包名称为Selenium.WebDriver.ChromeDriver。

3、在Main函数中输入以下代码

 static void Main(string[] args)

         {

             using (IWebDriver driver = new OpenQA.Selenium.IE.InternetExplorerDriver())

             {

                 driver.Navigate().GoToUrl("http://www.baidu.com");  //driver.Url = "http://www.baidu.com"是一样的

                 var source = driver.PageSource;

                 Console.WriteLine(source);

             }

         }

运行，会弹出IE浏览器，网页加载完成后，浏览器会自动关闭。控制台输入结果如下

这样我们就可以轻松的获取动态渲染页面的源码。

基本用法：

这里我以https://technet-info.com/Main.aspx这个页面来演示。

页面源码如下

 <!DOCTYPE html>

 <html xmlns="http://www.w3.org/1999/xhtml">

 <head><meta http-equiv="Content-Type" content="text/html; charset=utf-8" /><meta name="description" content="Wandering the number of windows, stayed in the number of hotels, will feel that separation is not wronged, the feelings are used to browse or used to collect, so that the day had a memorable day" /><title>

     Welcome To Technet-Info : Personal Gallery

 </title><link rel="shortcut icon" type="image/x-icon" href="technet.ico" media="screen" /><link rel="stylesheet" href="Css/MainCss.css" /><link rel="stylesheet" href="Css/screen.css" />

     <style>

         #footer{

             display: flex;

             justify-content: center;

             align-items: center;

             position: fixed;

             bottom: 0;

             left: 0;

             width: 100%;

         }

     </style>

     <script type="text/javascript" src="js/jquery.js"></script>

     <script type="text/javascript" src="js/easySlider1.7.js"></script>

     <script type="text/javascript">

         $(document).ready(function () {

             $("#slider").easySlider({

                 auto: true,

                 pause:3000,

                 continuous: true,

                 numeric: true

             });

         });

     </script>

 </head>

 <body>

     <form method="post" action="./Main.aspx" id="form1">

 <div class="aspNetHidden">

 <input type="hidden" name="__VIEWSTATE" id="__VIEWSTATE" value="/wEPDwUKLTQyNjI2MTkwNmRkt331eyucv2SBluj0E2d+0haGV4exFHWtGQkZhNBnpHE=" />

 </div>

 <div class="aspNetHidden">

     <input type="hidden" name="__VIEWSTATEGENERATOR" id="__VIEWSTATEGENERATOR" value="202EA31B" />

 </div>

         <div id="main">

             <div id="header">

                 <div class="musicarea">

                     <iframe frameborder="no" border="0" marginwidth="0" marginheight="0" width=150 height=52 src="http://music.163.com/outchain/player?type=0&id=516657278&auto=1&height=32"></iframe>

                 </div>

                 <div class="content">

                     <div class="logo">

                         <div class="logo_img">

                             <div class="logo_img"></div>

                         </div>

                         <div class="logo_txt">

                             <div style="height: 50px;">

                                 <p></p>

                             </div>

                             <div style="height: 50px;">

                                 <p>我的freetime</p>

                             </div>

                         </div>

                     </div>

                     <div class="menu">

                 </div>

             </div>

             <div id="content">

                 </div>

                 <div id="cards">

                     </div>

                 <div id="pin">

                 </div>

             </div>

             <div id="footer">

                 <div id="copyright">

                     <p style="margin: 3px">

                         <a href="http://www.miitbeian.gov.cn/">湘ICP备16012349号</a>

                         <span>|</span>

                         <span>Copyright © 2016, www.technet-info.com, All rights reserved.</span>

                     </p>

                     <p><a href="mailto:zhaotianff@163.com">Email:zhaotianff@163.com</a></p>

                 </div>

             </div>

         </div>

     </form>

 </body>

 </html>

通过id获取元素

 //by id

 var byID = driver.FindElement(By.Id("cards"));

通过类名获取元素

 //by class name

 var byClassName = driver.FindElements(By.ClassName("menu"));

通过标签名获取元素

 //by tag name

 var byTagName = driver.FindElement(By.TagName("iframe"));

通过名字获取元素

 var byName = driver.FindElement(By.Name("__VIEWSTATE"));

通过链接文本获取元素

 //by linked text

 //<a href="http://www.google.com">linkedtext</a>>

 var byLinkText = driver.FindElement(By.LinkText("linkedtext"));

通过部分链接文本获取元素

 //by partial link text

 //<a href="http://www.google.com">linkedtext</a>>

 var byPartialLinkText = driver.FindElement(By.PartialLinkText("text"));

通过CSS选择器获取元素

 //by css

 var byCss = driver.FindElement(By.CssSelector("#header .content .logo"));

通过XPath来获取元素(XPath使用可以参考上一篇博客)

  //by xpath

  var byXPath = driver.FindElements(By.XPath("//div"));

执行JS

 //execute javascript

 var jsReturnValue = (IWebElement)((IJavaScriptExecutor)driver).ExecuteScript("jsfunname");

获取元素的值和属性

 //get element value and attribute value

 var byIDText = byID.Text;

 var byIDAttributeText = byID.GetAttribute("id");

模拟鼠标点击元素

  //click

  driver.FindElement(By.Id("copyright")).Click();

页面导航

 //Navigation

 driver.Navigate().Forward();

 driver.Navigate().Back();

拖拽操作(可以实现滑动验证码的验证)

 //Drag And Drop

 var element = driver.FindElement(By.Name("source"));

 IWebElement target = driver.FindElement(By.Name("target"));

 (new Actions(driver)).DragAndDrop(element, target).Perform();

示例代码

C#使用Selenium的更多相关文章

Python爬虫小白入门（四）PhatomJS+Selenium第一篇
一.前言在上一篇博文中,我们的爬虫面临着一个问题,在爬取Unsplash网站的时候,由于网站是下拉刷新,并没有分页.所以不能够通过页码获取页面的url来分别发送网络请求.我也尝试了其他方式,比如下拉 ...
Selenium的PO模式（Page Object Model）[python版]
Page Object Model 简称POM 普通的测试用例代码: .... #测试用例 def test_login_mail(self): driver = self.driver driv ...
selenium元素定位篇
Selenium webdriver是完全模拟用户在对浏览器进行操作,所有用户都是在页面进行的单击.双击.输入.滚动等操作,而webdriver也是一样,所以需要我们指定元素让webdriver进行单 ...
selenium自动化基础知识
什么是自动化测试? 自动化测试分为:功能自动化和性能自动化功能自动化即使用计算机通过编码的方式来替代手工测试,完成一些重复性比较高的测试,解放测试人员的测试压力.同时,如果系统有不份模块更改后,只要 ...
幼儿园的 selenium
from selenium import webdriver *固定开头 b=webdriver.Firefox() *打开火狐浏览器 browser. ...
使用selenium编写脚本常见问题（一）
前提:我用selenium IDE录制脚本,我用java写的脚本,如果大家想看的清楚明白推荐java/Junit4/Webdriver 我用的是java/TestNG/remote control 1 ...
关于selenium RC的脚本开发
第一.需要录制脚本,找个我也不说了.就是在firefox下下载一个selenium-IDE并且安装. 第二.在工具里找到selenium-IDE点击运行. 第三.默认是红色按钮点击状态的,接下来随便你 ...
基于python的selenium自动化测试环境安装
1. Python2安装官方网站:https://www.python.org/downloads/ (python3或新版本已经默认集成了pip包和path,安装的时候打勾就行,可以直接跳过下面第 ...
Selenium+python 配置
1. 安装python, www.python.org. 下载最新的python,应该是32位的.注意配置环境变量. 2. 安装PIP(pip是一个以Python计算机程序语言写成的软件包管理系统). ...
selenium 使用action进行鼠标，键盘操作
 <html> <head> <title>Set Timeout</title> <script&g ...

随机推荐

【POJ1068】Parencodings
题目传送门本题知识点:模拟这是一道恐怖的括号题.题意稍微理解以下还是可以的. 我们针对样例来理解一下 S.P.W 到底是什么意思: S:( ( ( ( ) ( ) ( ) ) ) ) P: \(P ...
咕泡学院java架构vip课程
1.wps文档地址 https://docs.qq.com/doc/DRVNLUndvTmFSdEhO 2.百度网盘地址 https://pan.baidu.com/s/1uxaTzJZHKrsw_H ...
vCenter线上操作磁盘扩容
以下截图是生产机器,目前是有一块盘,且根分区是/dev/sda3,因为磁盘不足,需要备份的数据要远远超过此时的空间大小:正常情况下,是可以新增硬盘硬盘作为备份但是作为宿主机下的虚机,因为一些不规范的 ...
css文字两行或者几行显示省略号
做这个省略的问题,突然发现显示省略号是有中英文区分的我做两行的时候用的是以下代码,在是中文的情况下是么得问题,到了英文下发现不起作用了 width: 250px; overflow: hidden; ...
团队作业-Beta冲刺(3/4)
队名:软工9组组长博客:https://www.cnblogs.com/cmlei/ 作业博客:https://edu.cnblogs.com/campus/fzu/SoftwareEngineer ...
Excel 如何查找问号 “?” 、星号“*” 、 “~”号
若需要查找问号“?”,则在查找内容文本框中输入“~?”.“?”为通配符,代替单个任意字符,如果直接查找,会找到包含数据的所有单元格. 若需要查找星号“*”,则在查找内容文本框中输入“~*”.“*”为通 ...
Spark布隆过滤器(bloomFilter)
数据过滤在很多场景都会应用到,特别是在大数据环境下.在数据量很大的场景实现过滤或者全局去重,需要存储的数据量和计算代价是非常庞大的.很多小伙伴第一念头肯定会想到布隆过滤器,有一定的精度损失,但是存储性 ...
几种常见的java网页静态化技术对比
名称优点缺点使用场景 jsp 1.功能强大,可以写java代码 2.支持jsp标签(jsp tag) 3.支持表达式语言(el) 4.官方标准,用户群广,丰富的第三方jsp标签库 5.性能良好. ...
windows系统下同时安装mysql5.5和8.0.11
前提:电脑已安装5.5,增安装8.0.11 zip版本 1.官网下载mysql10.8.0.11 —找到mysql community server 为下载页面URL:https://dev.mysq ...
利用Flex&b 开发一门语言
https://blog.csdn.net/CrazyHeroZK/article/details/87359818

C#使用Selenium

C#使用Selenium的更多相关文章

随机推荐

热门专题