python爬虫技术的选择:爬虫又是另外一个领域，涉及的知识点比较多，不仅要熟悉web开发，有时候还涉及机器学习等知识，不过在python里一切变的简单，有许多第三方库来帮助我们实现。使用python编写爬虫首先要选择合适的抓取模块，最简单的功能就是能发送和处理请求， 下面就介绍几个常用的抓取的方式。一、python 自带的urlib2和urlib或者第三方模块requests:这种方案适合简单的页面爬虫，比如爬取博客园推荐文章。urllib2和urllib是python自带模块可用来发送处理请求，虽然比较灵活但API易用性较差，所以一般都要进行二次封装，我曾经也进行过封装，发现自己封装出来的模块无限趋近于非常成熟的requests库，所以还是直接使用requests吧，当然requests只发送和接受请求，对于页面分析还要配合lxml或beautifulsoup等第三方库进行。高级点的爬虫不仅仅是发送和处理请求，还需要处理异常，请求速度控制等问题，这就需要我们写额外的代码去控制，当然我们可以自己写只是时间问题，但完全没有必要，接下来我会介绍第二种方案。二、scrapy框架:scrapy是爬虫领取的佼佼者，目前我做的项目无论复杂与否，都采用scrapy进行，对于请求调度，异常处理都已经封装好了，而且有第三方的scrapy-redis还可以支持分布式，我们把关注点放在更重要的页面分析和规则编写上，代码可以参考我github上的例子。三、python selenium:这种方式我称为终极必杀器，一般是实在没办法的时候才用，以前我在利用某家搜索引擎抓取文章时，该搜索引擎采用的比较高难度的反爬虫机制而且不断变化让人找不到规律，最典型的特点就是cookie会随机隐藏到某个页面js和图片中，解决方案就是模拟浏览器的行为加载所有js等静态资源文件，如果自己写个浏览器取解析太扯蛋了，如果chrome浏览器能开放接口，通过chrome的加载方式获取页面的内容就好了，这就是selenium了，selenium加上随机等待时间可以模拟出和人非常类似的操作行为，缺点就是速度较慢，但是一般爬虫对抓取速度要求不高，重要的是稳定性，这种方式对于抓取反爬虫机制做的好的大型网站比较适用。总结，对于大部分爬虫需求直接用scrapy解决，如果解决不了再采用第一种或第三种方案，就这么简单。

明确学习目标:重要的是明白学python的目的是什么，是数据挖掘还是想刷个火车票啥的，是机器学习还是搞个小脚本装下，是想成为厉害的harker还是强大的web开发者。只有明白了目的，才有学下去的动力。环境搭建。下载并安装好python及IDE,你需要明白什么是IDE，什么是命令行等，并配置好路径及环境变量。在这里推荐大家找下免费的pycharm，风格比较舒服，但是会比较慢。基础练习。没有编程基础的可以先过一下基础，可以找本书练，也可以在网上寻找视频练习。现在网络这么发达，应该加强在网上找答案的能力。根据自己的目标去深耕。知识的学习都是由浅入深的，先掌握基础，再根据自己的目标去练习，才会有效果。不要三心二意，今天学十分钟爬虫，明天学5钟机器学习什么的。不断练习，不断练习。量变到质变的过程。只有在敲代码的过程中才会遇到自己的问题，解决了就提升了。

0基础的人怎么学习python：Python的学习步骤，入门大致分为这样：找一个你觉得适合自己的新手书籍;找一个有经验的人带你学习;有时间就去都敲代码。以下是关于0基础的人怎么学习python的具体介绍。1.找一本适合自己的书，是新手级别的书籍，不能太难，每天学习的东西不要太多，会打乱节奏，学Python要循序渐进，不可以贪多，一上来就学，一定会吃力，时间久了就会没有兴趣，对初学者来说，兴趣很重要，有一本适合自己的书很重要。我推荐"A Byte of Python",这本书。2.有一条系统化的学习课程，如果你身边有一个Python技术非常好的人就好了，很多小问题都可以解决。因为很多弯路我们是不用走的，别人一句点醒，可能我们自己需要半天的时间，但是这个时间我们不用花。3.有时间就去都敲代码，很多人都说这句话，但是这就是学编程的实话。很多会看不会写，这都是亲身经历的，没有捷径，很多人只要看，却很少去写，这跟没学是一样的，有的有毅力把书的案例都敲了一遍，这是笨的学习方法，但是总比只看不写强。