WebMonitor和Huginn一样支持XPath,实时监控网页变化,并发送通知。而且还可以用微信的Server酱、Telegram、以及邮件来接收通知,所以说用来监控网页变化或者其它应用还是非常方便的。
1、项目简介
项目:https://github.com/LogicJake/WebMonitor
文档:https://www.logicjake.xyz/WebMonitor/#/install
2、准备
1)宝塔面板
2)docker管理器(这个通过软件商店安装,此处略过~)
3)安装docker-compose
pip install docker-compose
如果提示:pip: command not found:解决如下:
wget https://bootstrap.pypa.io/get-pip.py python get-pip.py pip -V #查看pip版本
接下来就可以随便pip安装东西了~~
3、docker部署
1)新建一个docker-compose.yml
mkdir -p /opt/webmonitor && cd /opt/webmonitor && vi docker-compose.yml
2)写入如下配置代码
version: '3.5' services: webmonitor: image: logicjake/webmonitor container_name: webmonitor environment: - PORT=8000 - USERNAME=admin - PASSWORD=daniao # 设置你的管理员密码 ports: - 8000:8000 volumes: - ./data:/app/db restart: unless-stopped
3)然后自行docker-compose up -d 起来就部署好了:
docker-compose up -d
4)打开你的<IP:8000>,能访问到如下界面说明一切正常:(如果不能访问,安全中放行8000端口~)
注意:默认的账号密码:admin、password
4、手动部署
1)很多人不喜欢docker方式,那么我们可以手动部署。不过前提最好是如下试验代码安装。独立运行环境(py3.7)
curl -sSO http://download.bt.cn/install/install_panel.sh && bash install_panel.sh
2)下载 WebMonitor 的源码
git clone https://github.com/LogicJake/WebMonitor.git cd WebMonitor
3)下载完成后安装依赖
pip install -r requirements.txt
4)首次运行需要迁移数据库且设置管理账号,假设账号为 admin,密码为 password,运行端口为 8000
python manage.py migrate python manage.py initadmin --username admin --password password python manage.py runserver 0.0.0.0:8000 --noreload
5)非首次运行,只需指定端口
python manage.py runserver 0.0.0.0:8000 --noreload
注意:默认的账号密码:admin、password
5、设置网页监控
1)登录之后,我们首选需要设置通知方式,这里就用以Server酱的微信通知作为演示~
2)添加一个监控项目,在任务管理-网页监控管理-添加你的第一个监控。
举例:我这里想监控BUYVM的VPS是否有货,元素选择器类型使用XPath:
注意:
- 任务名称:这里随意,原则上填写需要监控的商品名称~
- 监控网址:填写监控网址
- 元素选择器类型:选择Xpath
3)元素选择器的内容可以通过Chrome浏览器F12获得:
4)以上保存即可完成监控项目的创建,下面找到任务状态可以看一下你添加的监控项目是否能够正常工作:
5)初次添加的监控项目,如果正常的话你的微信也应该能够收到Server酱发来的消息:
6、设置rss监控
设置方式和网页监控相似,这里就截一张图来表示了。
7、设置域名访问
直接看图:
8、最后
监控网页内容变化非常好用,安装方式也非常简单,有这方面需求的童鞋,可以用起来看看。具体特性如下:
- 支持requests请求网页,支持使用PhantomJS抓取异步加载的网页
- 支持 xpath 和 css selector 选择器,支持 JsonPath 提取 json 数据
- 支持邮件,pushover 和微信提醒(support by server酱)
- 简洁的UI,可视化操作
- 支持自定义请求头,抓取需要登录的网页
- 支持设置监控规则
- 监控RSS更新
- 数据导入导出
搬瓦工推荐方案
方案 | 内存 | CPU | 硬盘 | 流量/月 | 带宽 | 推荐机房 | 价格 | 购买 |
---|---|---|---|---|---|---|---|---|
KVM (最便宜) |
1GB | 2核 | 20GB | 1TB | 1Gbps | DC3 CN2 DC8 ZNET (购买后在后台迁移) |
$49.99/年 | 直达 |
KVM | 2GB | 3核 | 40GB | 2TB | 1Gbps | $52.99/半年 $99.99/年 |
直达 | |
CN2 GIA-E (最推荐) |
1GB | 2核 | 20GB | 1TB | 2.5Gbps | 美国 DC6 CN2 GIA-E 美国 DC9 CN2 GIA 日本软银 JPOS_1 荷兰 EUNL_9 美国圣何塞 CN2 GIA 加拿大 CN2 GIA |
$49.99/季度 $169.99/年 |
直达 |
CN2 GIA-E | 2GB | 3核 | 40GB | 2TB | 2.5Gbps | $89.99/季度 $299.99/年 |
直达 | |
HK (高端首选) |
2GB | 2核 | 40GB | 0.5TB | 1Gbps | 中国香港 CN2 GIA 日本东京 CN2 GIA 日本大阪 CN2 GIA 新加坡 CN2 GIA |
$89.99/月 $899.99/年 |
直达 |
HK | 4GB | 4核 | 80GB | 1TB | 1Gbps | $155.99/月 $1559.99/年 |
直达 | |
OSAKA | 2GB | 2核 | 40GB | 0.5TB | 1.5Gbps | 日本大阪 CN2 GIA | $49.99/月 $499.99/年 |
直达 |
OSAKA | 4GB | 4核 | 80GB | 1TB | 1.5Gbps | $86.99/月 $869.99/年 |
直达 | |
搬瓦工优惠码:BWHCGLUKKB | 搬瓦工购买教程:《2024年最新搬瓦工VPS购买图文教程》 |