scrapy定时执行抓取任务

9-02 2,173 views

在ubuntu环境下,使用scrapy定时执行抓取任务,由于scrapy本身没有提供定时执行的功能,所以采用了crontab的方式进行定时执行: 首先编写要执行的命令脚本cro...
阅读全文 0

php图片下载方法

8-19 1,102 views

使用php的curl方法下载图片,只需要提供图片地址就可以了。 $url = "http://www.bac.com/1.gif"; getImage($url,'./'); function getImage($url,$path='',$f...
阅读全文 0

php 正则截取逗号之前的汉字

8-19 1,181 views

$foo = "一天晚上,一个喝的醉醺醺的人走进了派出所,大声地对警察说:“我要和我媳妇儿离婚!我实在受不了她每天晚上12点还往歌厅跑。” 警察劝解到:“这可是...
阅读全文 0

centos 7解决No module named ‘_sqlite3’ python3.5.1

8-15 3,703 views

1.Install sqlite-devel (or libsqlite3-dev on some Debian-based systems) yum install sqlite-devel , 2. 重新编译python /configure --enable-loadabl...
阅读全文 0

安装scrapy-redis 报错:libxml/xmlversion.h: No such file or directory

8-14 1,336 views

src/lxml/lxml.etree.c:157929: error: ‘xsltLibxsltVersion’ undeclared (first use in this function) src/lxml/lxml.etree.c:157941: error: ‘__pyx_v_4...
阅读全文 0

(原)一款ThinkCMF后台登陆界面整合

8-11 1,669 views

下载地址:http://pan.baidu.com/s/1bDAZsa 或者:点击下载login_h5 使用方法:找到application/Admin/Controller/PublicController.class.php;修改第30行...
阅读全文 0

python爬虫使用笔记

8-09 1,113 views

所需模块包 import requests url请求 import threading 多线程 from bs4 import BeautifulSoup 网页抓取元素扩展,类似JQ import datetime 时间库 import has...
阅读全文 0

Linux中find批量删除空文件及空文件夹脚本

8-08 1,250 views

转自:http://www.111cn.net/sys/linux/46433.htm linux下批量删除空文件(大小等于0的文件)的方法  代码如下 find . -name "*" -type f -size 0c | x...
阅读全文 0

Python删除目录下的文件以及文件夹

8-08 1,087 views

#!/usr/bin/env python import os import shutil filelist=[] rootdir="/home/zoer/aaa" filelist=os.listdir(rootdir) for f in filelist: ...
阅读全文 0

nginx设置php-fpm,mysql,nginx开机启动(yum安装的)

7-21 1,023 views

1.systemctl enable nginx.service (nginx开机启动) 2.systemctl enable php-fpm.service (php-fpm开机启动) 3.systemctl enable mysqld.service (mysql...
阅读全文 0