Python小白想爬取网络数据，该怎么办？
Python小白想爬取网络数据？
python是一种很老的语言，以前一直不是很火，但是最近几年，由于全世界都在讨论大数据，人工智能，导致python也火起来了。
python因为是老语言，所以很多框架都很成熟，社区支持也很友好！
那么话说回来，使用python怎么进行网络爬虫，究竟需要什么知识呢？
1、网页的基础知识
***如你想抓包拿数据，那就另外说。
要想爬取网页数据，肯定需要网页的基础知识，知道网页的构建语法，所以要了解html，css，js的这些基础知识。
2、python基础知识
还要必须知道python的语法知识，这样才能写代码呀！
1. 提出这个问题，想必你已经对Python的基础知识有所了解，如果我猜错了，那么学习Python的基础语法知识是前提。当然不用深入学习，只需要在之后爬数据的时候带着学习不懂的就可以了。在运用中学习是更容易消化知识的。
2. 你的目的很清晰，想爬网络数据。我更建议你直接学习Scrapy爬虫框架，分分钟上手。对于新手来说，我不提倡重复造轮子，我们所学的东西都是来服务于解决实际问题的，怎么效率最高就怎么来，有好的框架就拿来用。
3. 怎么开始学习呢？Python语法必须要会，然后直接学习Scrapy，网上有很多教程，学会百度和Google是必不可少的技能。然后在学习Scrapy的时候，你会发现一点点又学会了查看网页结构，甚至还了解到了mysql等数据库，当然这些都是在学习Scrapy时慢慢积累的。如果刚开始就去啃这些知识，很容易失去耐心的，因为你的目的是去做爬虫，就去围绕学习Scrapy框架来扩充知识，这样更有目的和决心。
祝你成功^_^
如何编写Python程序的爬取信息？
首先感谢邀请哈~
最近我也在学习爬虫，就简单的分享下，我最近都看了什么吧
Python爬虫一般都是通过请求网站的接口，来达到获取数据的目的，所以第一步我们就是要掌握一些基本的发送WEB请求的模块，常用的有urllib、request等等吧。
当然这中间可能涉及到了一些其他的内容，比如请求的方法，参数，header的构造等等，需要结合具体的要爬取的页面来调整的~
***设我们已经拿到了网站的返回数据，肯定是要进行分析、提取的。毕竟一个网站那么大，不能所有的数据我们都要吧..这里就涉及到了楼上这位大神说的BeautifulSoup了。这个模块在解析html格式的时候十分的好用，方法也特别多，几乎可以满足你对数据提取的需要了，当然你也可以搭配上正则表达式（re模块）一起使用~
最后，***设你掌握了基础的爬虫技巧，但是你觉得自己开发起来比较耗时，希望有那种比较成熟的框架可以用，这时你就可以选择Scrapy了。它的操作十分简单，而且具备了如日志，存储，管道等等基础功能，只需要在它的基础之上稍微做下修改就可以部署使用了，再加上它是异步的，高并发式爬取，性能十分可观~
人生苦短，我用Python~
想学习python，应该在哪个辅导机构学习比较好？
我比较穷，舍不得花钱，都是在B站白嫖。
B站的***很丰富，有很多精品课程。有知名高校的，有各大培训机构的。有的是系统课程，几百集。也有针对知识点的短课程。都不要钱，还没广告。
Python是比较容易上手的一个编程语言，十年前我接触Python的时候，就是以一本英文版的如何编程开始的，这是欧-瑞利系列书籍中的一本，通俗易懂，当时可不像现在有那么多视频教程可以参考的。
Python确实是很简单的一门编程语言，如果没有编程基础的话，学起来可能还是要花点心思的，有编程基础哪怕是大学时学过，就可以很快上手。
至于选择什么辅导机构，说实在的，除非没有什么基础，想学以致用，否则没有必要选择辅导机构。
我一年多前花了5000多报名线上学习Python全栈自动化测试的课程，我是编程基础不错的，之所以花钱学习确实是因为想往自动化测试方向发展，之前曾看过不少公开课，但感觉无法深入，公开课多多少少都有所保留，所以我想试试线上课程。
为什么不选择线下培训机构？因为太浪费时间，而且费用也不会低，相比于线上培训，时间基本都是晚上，上课每周三次共6课时，总共120课时，几个月就可以学完。
我学到东西没？5个月时间我确实学到了不少，基础语法自然不必说，关键是接口测试和自动化测试框架，Python+Selenium的web网页测试，Python+appium应用测试，以及Python+Robot Framework等等，本来学习内容就很多的，我又有编程基础，学起来难不倒我。
找工作时我就犯嘀咕了，简历贴出去没有多少人问，可能我的年龄是个问题，还有两年就40了，年龄是个硬伤；再就是岗位，我之前做测试经理，带项目的，这个经验不写不太好，但就有人觉得从管理转技术不适合；最后是薪资要求，我写了两万到四万，目标是两万五，现在工资一万五，不可能写太低，可能人家觉得我要求高了，但我就是不想降低要求。
反正简历挂了差不多一年，除了一开始有些电话，后来就无人问津了。有几个外包想要我，我直接回绝了。培训机构虽然说帮忙推荐，可是推荐了几次，没人要，现在我也不抱什么希望了。
我现在就写写Python程序，自动处理电子表格的数据统计，目前在用Python写个网站，要实现质量数据的实时监控，能快速完成质量相关报告的生成，至于自动化测试，我前段时间给测试部门培训，他们懂的人不多，我已经不在测试部门了，也只是偶尔帮他们调试测试脚本，自动化测试就不是我现在要做的了。
如果不想花钱学，我推荐***比较丰富的B站，上面有不少***教程，总时长几百个小时的就有不少，根据自己发展方向选择，不要什么都学，这些***讲得非常细的有不少，上面可以倍速播放，学起来可以很快，但编程语言的学习不能缺少实操练习，线上培训老师会布置作业，这种***教程也有，因为是别人花钱学习过程中录制下来的，如果少了练习的话，可能学完也无法沉淀下来，不能变成自己的东西。
