Scrapy是一个十分强大的爬虫框架，依赖的库比较多，至少需要依赖的库有Twisted 14.0、lxml 3.4和pyOpenSSL 0.14。在不同的平台环境下，它所依赖的库也各不相同，所以在安装之前，最好确保把一些基本库安装好。本节就来介绍Scrapy在不同平台的安装方法。

相关链接

※官方网站：https://scrapy.org

※官方文档：https://docs.scrapy.org

大家好，今天小编又和大家见面了，我是团队中的python高级研发工程师，日常工作是开发python代码；偶尔还要来平台写写文章；最近老板又给我安排一个活：帮助粉丝解决各种技术问题。

是的，朋友们如果在做项目或者写代码的过程中遇到了问题，欢迎私信小编，小编每天都会抽出一定的时间来帮忙解决粉丝朋友们的问题。此外，朋友们还可以私信来索取精美简历模板哦。

?

1.基本概念说明

文 | 李晓飞

一、什么是文章采集工具

文章采集工具是一种帮助用户收集、整理和管理各种类型文章的软件或在线服务。它能够自动抓取互联网上的文章，并提供多种功能，如去重、分类、标注等，帮助用户更高效地进行信息筛选和知识管理。

二、常见的文章采集工具

1.网页剪藏工具：如Evernote、Pocket等，可以将网页内容保存到个人笔记本中，方便随时查看和整理。

2. RSS阅读器：如Feedly、Inoreader等，可以订阅各种博客和新闻网站的RSS源，自动获取更新内容。

Scrapy 是一个用于Python的快速高级Web爬虫框架，主要用于从网站上抓取数据。它可以用于数据挖掘、信息处理和存储历史数据等多种用途。下面是一个简单的Scrapy实战教程，以帮助你开始使用Scrapy来构建自己的爬虫项目。

第一步：安装Scrapy

学习目标：

1. 了解 scrapy的概念

一、移动端框架选型

1、原生or 混合 or web

选型问题其实我并没有考虑，因为根据我们实际情况，最适合的还是混合开发。这里大概阐述一下原生、混合、web的区别。