风哥教程

培训 . 交流 . 分享
Make progress together!

爬虫入门书籍怎么选

[复制链接]
内容发布:suger| 发布时间:2021-10-9 16:27:03
现如今Python在人工智能、大数据、自动化运维、等方面具有独特的优势。随着Python继续占据编程语言主流的趋势,全国各城市的招聘岗位和薪酬也在大幅增加。此外,随着人工智能在中国的投资和规划,对人工智能人才的需求激增。Python是人工智能的开发语言。所以现在越来越多的人在开始学习Python,相信大家在学习Pythond的时候都会面临一个这样的问题,应该买哪本python书?
所以小编通过采集某网站上的关于python书籍的销量来并进行了数据分析,看下大家在进行书籍选择的时候是什么吸引了你,是销量?是书名?还是值得信赖的出版社?还是价格区间?以下是获取某网站书籍信息的销量示例:
// 要访问的目标页面string targetUrl = "https://www.jd.com/";// 代理服务器(产品官网 www.16yun.cn)string proxyHost = "http://t.16yun.cn";string proxyPort = "31111";// 代理验证信息string proxyUser = "username";string proxyPass = "password";// 设置代理服务器WebProxy proxy = new WebProxy(string.Format("{0}:{1}", proxyHost, proxyPort), true);ServicePointManager.Expect100Continue = false;var request = WebRequest.Create(targetUrl) as HttpWebRequest;request.AllowAutoRedirect = true;request.KeepAlive = true;request.Method    = "GET";request.Proxy     = proxy;//request.Proxy.Credentials = CredentialCache.DefaultCredentials;request.Proxy.Credentials = new System.Net.NetworkCredential(proxyUser, proxyPass);// 设置Proxy Tunnel// Random ran=new Random();// int tunnel =ran.Next(1,10000);// request.Headers.Add("Proxy-Tunnel", String.valueOf(tunnel));//request.Timeout = 20000;//request.ServicePoint.ConnectionLimit = 512;//request.UserAgent = "Mozilla/5.0 (Windows NT 6.3; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/48.0.2564.82 Safari/537.36";//request.Headers.Add("Cache-Control", "max-age=0");//request.Headers.Add("DNT", "1");//String encoded = System.Convert.ToBase64String(System.Text.Encoding.GetEncoding("ISO-8859-1").GetBytes(proxyUser + ":" + proxyPass));//request.Headers.Add("Proxy-Authorization", "Basic " + encoded);using (var response = request.GetResponse() as HttpWebResponse)using (var sr = new StreamReader(response.GetResponseStream(), Encoding.UTF8)){    string htmlStr = sr.ReadToEnd();}
从获取的数据分析小编发现,大部分书名都含有入门以及编程这两个关键词,小编猜测是这类命名对于小白来说可能更加有吸引力。


回复

使用道具 举报

1框架
高级模式
B Color Image Link Quote Code Smilies |上传

本版积分规则

热门文章教程

  • Oracle19c数据库发布与下载地址
  • 风哥Oracle数据库巡检工具V1.0(附2.6网页
  • Oracle Database 12c 数据库100个新特性与
  • Oracle 12cR2 九大新功能全面曝光_详解云数
  • 实战PHP与MySQL权威指南PDF电子书下载
  • 大数据技术与应用入门培训教程(电子版下载
快速回复 返回顶部 返回列表