python爬虫上可以干什么:(1) 不同领域、不同背景的用户往往具有不同的检索目的和需求，通用搜索引擎所返回的结果包含大量用户不关心的网页。(2)通用搜索引擎的目标是尽可能大的网络覆盖率，有限的搜索引擎服务器资源与无限的网络数据资源之间的矛盾将进一步加深。(3)万维网数据形式的丰富和网络技术的不断发展，图片、数据库、音频、视频多媒体等不同数据大量出现，通用搜索引擎往往对这些信息含量密集且具有一定结构的数据无能为力，不能很好地发现和获取。(4)通用搜索引擎大多提供基于关键字的检索，难以支持根据语义信息提出的查询。为了解决上述问题，定向抓取相关网页资源的聚焦爬虫应运而生。聚焦爬虫是一个自动下载网页的程序，它根据既定的抓取目标，有选择的访问万维网上的网页与相关的链接，获取所需要的信息。与通用爬虫(general?purpose web crawler)不同，聚焦爬虫并不追求大的覆盖，而将目标定为抓取与某一特定主题内容相关的网页，为面向主题的用户查询准备数据资源。

python用什么数据库好：在学习完Python的基础知识之后，有很多朋友为自己接下来要干什么感到迷茫。不知道应该通过什么样的项目来锻炼自己编程水平和思维能力。接下来我就给大家说几个适合Python的新手项目和练手项目，Python练手项目有哪些 跟我往下看。以下是小编为你整理的python用什么数据库好Web方向的练手项目:这个其实是肯定不用多少的了。Python的练手项目就是可以做一个网站了。我们可以做一个属于自己的博客。在做博客的时候，我们可以巩固的知识点是:Html+CSS+JS的基础知识，以及熟练的运用Python的Web开发框架(例如Django或者Flask)做出一个属于自己的网站。做一个网络数据抓取工具也就是我们常说的网络爬虫。可以找到一个自己喜欢的网站。试着抓取一些网站数据，在抓取数据的过程中，你会遇到例如 反抓取 需要登陆 验证码验证以及IP检测等多种问题。但这恰恰不就是提高的过程么。或许，你也可能写一个自己的“小百度”呢、做一个图像识别的项目:不要觉得太难。我们可以从一个简单的项目开启。验证码就是一个图片。我们是不是可以试着识别一下验证码上面的文字?不要觉得麻烦，也不要觉得太过简单。所有复杂的事情都是从简单开始的。学习验证码识别对于我们写网络爬虫是不是特别有用呢?在后期深入的过程中，你还可以做一个图像识别软件。做一个Python聊天机器人:是不是觉得现在手机软件中的智能聊天软件很神奇。你同样可以做一个属于自己的聊天机器人。前期我们可以做一个应答式的，也就是所有的会话就是存储在数据库中。后期的话可以学习人工智能学习。让你的机器人更加智能。

选择操作系统:学习任何一门语言，选择操作系统，搭建开发环境是必不可少的。学习Python，这里推荐Linux系统，在Linux平台一般都是配置好Python开发平台，安装好系统就可以写程序。如果你选择windows，就要自己下载并配置好Python开发环境。【开发环境的选择】选择一门重视大脑学习的书籍，在这里推荐《Head First Python》，这是我看过最注重大脑学习的书籍，对于新手入门极有好处。【书籍】仔细阅读有关Python的书籍，好记心不如烂不同，一定要做笔记，过后回顾笔记。书上给出的练习，一定要做，并且争取全部弄懂。书上有的练习代码，一定要自己调试一遍，知其所以然。【看书练习】每天的编码必不可少，既然选择学习编程，学习Python，坚持编码应该是必须做到的。没有代码积累，要写出高质量的代码，几乎不可能。【坚持编码】