python爬虫学不好怎么办？

Question

都说爬虫好学，我也看学习视频了，但是就是自己没有办法独立写出爬虫代码，怎么办？

Answer 1

大牛与小白的差别，就是小白花费九牛二虎之力完成的项目，大牛举手投足就能分分钟搞定。那大牛到底牛×在哪儿？是他们掌握了更多的工具和技能包，借力出招。今天小泽就给大家整理8个Python库及使用方法与场景，助你快速提高效率。（建议收藏）
在数据库中即时保存数据：Dataset
当我们想要在不知道最终数据库表长什么样的情况下，快速收集数据并保存到数据库中的时候，Dataset 库将是我们的最佳选择。Dataset 库有一个简单但功能强大的 API，因此我们可以很容易的把数据保存下来，之后再进行整理。
Dataset 建立在 SQLAlchemy 之上，所以如果需要对它进行扩展，你会感到非常熟悉。使用 Django 内建的 inspectdb 管理命令可以很容易地把底层数据库模型导入 Django 中，这使得和现有数据库一同工作不会出现任何障碍。
从网页抓取数据：Beautiful Soup
Beautiful Soup（一般写作 BS4）库使得从 HTML 网页中提取信息变得非常简单。当我们需要把非结构化或弱结构化的 HTML 转换为结构化数据的时候，就需要使用 Beautiful Soup 。用它来处理 XML 数据也是一个很好的选择，否则 XML 的可读性或许会很差。
和 HTTP 内容打交道：Requests
当需要和 HTTP 内容打交道的时候，Requests 毫无疑问是最好的标准库。当我们想要抓取 HTML 网页或连接 API 的时候，都离不开 Requests 库。同时，它也有很好的文档。
编写命令行工具：Click
当需要写一个简单的 Python 脚本作为命令行工具的时候，Click 是我最喜欢用的库。它的 API 非常直观，并且在实现时经过了深思熟虑，我们只需要记住很少的几个模式。它的文档也很优秀，这使得学习其高级特性更加容易。
对事物命名：Python Slugify
众所周知，命名是一件困难的事情。Python Slugify 是一个非常有用的库，它可以把一个标题或描述转成一个带有特性的唯一标识符。如果你正在做一个 Web 项目，并且你想要使用对搜索引擎优化友好SEO-friendly的链接，那么，使用 Python Slugify 可以让这件事变得很容易。

Answer 2

爬虫不是单纯学习python，就可以做项目的。它需要其他知识体系的支持，比如html/css/js ，request机制，json,数据库，简单的统计科学，等等等

Answer 3

你说的Python爬虫是 scrapy吧， 你搜一下 “scrapy中文” 有个中文翻译网站，里面一步步可以照着打，能抓取最基本的网页就可以了。
当然这只是入门，能抓下东西 后面就好办了

Answer 4

一开始可以学别人的代码咋写的，慢慢的再自己写

Answer 5

爬虫需要掌握Python基础，re正则块，Beatifulsoup，pyquery，xpath，selenium，scrapy等一些知识点，能爬取任何网站，包括某宝，某东。建议先去一些Python网站学习基础教程，然后再去深入学习python爬虫。蚁小二python小课就不错，零基础也能学习。