提示:如果官网是英文页面,建议使用谷歌浏览器能同步翻译页面。点击下载【谷歌浏览器最新绿色便携版】
注意:部分文章发布时间较长,可能存在未知因素,购买时建议在本站搜索商家名称,先充分了解商家动态。
交流:唯一投稿邮箱:hostvps@88.com。
注意:部分文章发布时间较长,可能存在未知因素,购买时建议在本站搜索商家名称,先充分了解商家动态。
交流:唯一投稿邮箱:hostvps@88.com。
建议Centos7,最好独服,不限流量。
默认使用的端口是;8080,安装完访问IP:8080
一、安装手撕包菜
1、卸载apache
yum -y remove httpd
并安装必要组件
yum update -y
yum install screen wget unzip gcc gcc-c++ python-devel -y
python simdht_worker.py
关闭防火墙
systemctl stop firewalld.service ; systemctl disable firewalld.service
2、安装
wget https://zhujiwiki.com/wp-content/uploads/2019/05/ssbc.sh
sh ssbc.sh
在是否可以用浏览器浏览网页处,选择 Y,然后设置用户名、密码
3、建议手动运行(也可不用)
cd workers python simdht_worker.py #爬虫运行,等2分钟出现数据之后CTRL+C停止 nohup python simdht_worker.py > /dev/zero 2>&1& #让爬虫在后台运行
继续
python index_worker.py #入库索引,等待10分钟出现数据后CTRL+C停止 nohup python index_worker.py >/dev/zero 2>&1& #让索引在后台运行
二、域名反代
使用宝塔面板,安装Nginx,使用自己的域名反代 IP:8080,即可用域名访问。
三、定时重启,解决磁力入库问题
这个程序隔一段时间,磁力就无法入库,建议设置定时重启。
下载下面的文件,放到 /root 目录下。
https://zhujiwiki.com/wp-content/uploads/2019/05/ssbc-reboot.sh
宝塔里,计划任务,建议每小时执行一次。待数据量大了之后,可设置每天重启。
sh ssbc-reboot.sh
四:相关问题
1、如果在另一台主机反代的话,磁力站的定时任务如下设置:
wget https://zhujiwiki.com/wp-content/uploads/2019/05/ssbc-reboot.sh
chmod +x ssbc-reboot.sh
crontab -e
每小时重启1次:
0 */1 * * * sh /root/ssbc-reboot.sh
2、搜索中文报错
修改/usr/lib64/python2.7/site.py
vi /usr/lib64/python2.7/site.py
在import sys下添加2行:
reload(sys) sys.setdefaultencoding('utf8')
3、MySQL出错
在 /etc/my.cnf 最后一行的下面添加
wait_timeout=2880000 interactive_timeout = 2880000 max_allowed_packet = 512M
转自:https://zhujiwiki.com/2286/