2019-04-20

Scrapy框架的使用之Downloader Middleware的用法

Downloader Middleware即下载中间件，它是处于Scrapy的Request和Response之间的处理模块。我们首先来看看它的架构，如下图所示。

Scheduler从队列中拿出一个Request发送给Downloader执行下载，这个过程会经过Downloader Middleware的处理。另外，当Downloader将Request下载完成得到Response返回给Spider时会再次经过Downloader Middleware处理。

2019-04-20

python

Tenacity——Exception Retry 从此无比简单

Python 装饰器装饰类中的方法这篇文章，使用了装饰器来捕获代码异常。这种方式可以让代码变得更加简洁和Pythonic。

2019-04-20

python

Scrapy文件与图片下载

Media Pipeline

Scrapy为下载item中包含的文件(比如在爬取到产品时，同时也想保存对应的图片)提供了一个可重用的 item pipelines . 这些pipeline有些共同的方法和结构(称之为media pipeline)。

2019-03-22

javascript

VUE 单页面应用修改页面title

路由配置

routes: [
    {
        name: 'home',
        path: '/home/:openname',
        component: Home,
        meta: {
            title: '首页'
        }
    }
 ]