注：MySQL5.7，MySQL8.0 均可使用以下命令

一. 创建用户

命令:
CREATE USER 'username'@'host' IDENTIFIED BY 'password';

Read More

之前做了一个服务给公司在用，已经给事业部八十多人分配了账号。结果有一天，突然显示数据库连不上了。

然后赶紧处理，重启 Mysql 会一直 hung 住，到处查日志都没有，无奈之下，只能重装 Mysql。

在重装 Mysql 之前，备份了数据库的物理文件。物理文件是指数据库存放数据的那个文件夹（在 linux 下是 /var/lib/mysql , Mac 下是 /usr/local/var/mysql/ ）下对应数据库名的文件夹。

Read More

将一个表的字段更新到另一个表中

今天，遇到一个需求是要将MySQL的一个表中的字段更新到另一个表中，开始，我尝试用以下的SQL解决：

1
2
3
4

UPDATE t_order_temp
SET price=t_order.amount  
FROM t_order 
WHERE t_order_temp.conNumber=t_order.conNo 

但是没有成功，MySQL不支持这样的更新操作。

Read More

使用 response.follow

不同于使用 scrapy Request，需要通过相对路径构造出绝对路径，response.follow 可以直接使用相对路径，因此就不需要调用 urljoin() 方法了；注意，response.follow 直接返回一个 Request 实例，可以直接通过 yield 进行返回；

Read More

很多情况下，在一个爬虫里面需要存储不同的表，那么相应的在items.py里定义不同的类定义不同的字段，在scrapy里如何实现呢？

Read More