使用绿联私有云Docker搭建自动化实时网页监控工具,实现降价提醒/RSS监控等

使用绿联私有云Docker搭建自动化实时网页监控工具,实现降价提醒/RSS监控等

哈喽小伙伴们好,我是Stark-C~

之前老是有小伙伴们在评论区说我分享的Docker容器都是通过Docker run命令部署的,能不能照顾下像绿联私有云这种新势力NAS的新手用户?OK,这不就安排上了嘛!

不知道小伙伴们有没有这个需求:有的时候我们想要第一时间获取一些网页上内容变化,比如说我在张大妈发的新帖热度怎么样,今天的榜一大哥又是谁?或者说我关注的某商品降价了,我也想第一时间获取,我关注的某影视资源网站又上新了哪些电影我也想第一时间知道。

那么怎么实现这些需求呢?很简单,我们仅需要一个网页监控工具来实时监控指定的网页内容,一旦发现内容有新的变化,就会立即通过信息提醒我们。而这个网页监控工具就是我将要给小伙伴们分享的『WebMonitor』。

WebMonitor简介

WebMonitor是一个基于Python的监控工具,可以通过获取网站的HTML代码来监测网站的变化情况,并支持多种通知方式。

根据作者自己的介绍,它具有以下特性:

  • 支持requests请求网页,支持使用PhantomJS抓取异步加载的网页

  • 支持 xpath 和 css selector 选择器,支持 JsonPath 提取 json 数据

  • 支持邮件,pushover,微信提醒(support by server酱),Bark推送,自定义GET/POST通知, Slack 通知以及 Telegram 通知

  • 支持一个任务多个选择器提取信息

  • 支持自定义消息模板

  • 简洁的UI,可视化操作

  • 支持自定义请求头,抓取需要登录的网页

  • 支持设置监控规则

  • 监控RSS更新

  • 数据导入导出

反正说的很多专业术语咱也不懂~简单来说吧,它其实是给一些建站或者运维的专业人士用作网络安全和管理的,让他们搭建的网站在遇到问题时第一时间发出警报。但是咱们也要学以致用,根据它的使用特性,挖掘出不一样的玩法(SAO操作~),比如前面说的榜单知晓、提醒降价、RSS监控等。

WebMonitor部署

使用绿联私有云Docker搭建自动化实时网页监控工具,实现降价提醒/RSS监控等_第1张图片

开始之前先打开绿联的Docker目录,新建一个新文件夹【webmonitor】用于存放WebMonitor容器的相关数据库。别问为什么你没有Docker目录,没有不知道自己建一个嘛~

使用绿联私有云Docker搭建自动化实时网页监控工具,实现降价提醒/RSS监控等_第2张图片

接着直接打开绿联的Docker管理器,选择“镜像管理--本地镜像--添加”,默认“官方库”即可,URL/镜像名称输入“webmonitor”,在下方列表中选择“logicjake/webmonitor”这个镜像,下一步。

使用绿联私有云Docker搭建自动化实时网页监控工具,实现降价提醒/RSS监控等_第3张图片

安装版本默认“latest”(也就是最新版的意思),确认。

使用绿联私有云Docker搭建自动化实时网页监控工具,实现降价提醒/RSS监控等_第4张图片

镜像自动拉取,可以看到拉取进度。

使用绿联私有云Docker搭建自动化实时网页监控工具,实现降价提醒/RSS监控等_第5张图片

等到出现“拉取完成”的字样,点击“右下角的”完成“按钮即可。

使用绿联私有云Docker搭建自动化实时网页监控工具,实现降价提醒/RSS监控等_第6张图片

然后在拉取到本地的webmonitor镜像下面,点击“创建容器”。

使用绿联私有云Docker搭建自动化实时网页监控工具,实现降价提醒/RSS监控等_第7张图片

容器名称默认便是webmonitor,可以不用改,直接“下一步”。

使用绿联私有云Docker搭建自动化实时网页监控工具,实现降价提醒/RSS监控等_第8张图片

然后在“存储空间”这里:

  • 文件/文件夹:选择我们前面创建在Docker目录下的webmonitor文件夹;

  • 装载路径:手动输入“/app/db”;

  • 类型:读写

使用绿联私有云Docker搭建自动化实时网页监控工具,实现降价提醒/RSS监控等_第9张图片

接着是“端口设置”,本地端口改成没被占用的任意端口,容器内部端口“5000”不要动。

使用绿联私有云Docker搭建自动化实时网页监控工具,实现降价提醒/RSS监控等_第10张图片

“环境”这里:

  • PORT:容器内部端口,默认5000不用管;

  • USERNAME:登录用户名,默认“admin”可以自行修改;

  • PASSWORD:登录密码,默认“admin”可以自行修改;

其它默认,点击“下一步”。

使用绿联私有云Docker搭建自动化实时网页监控工具,实现降价提醒/RSS监控等_第11张图片

最后检查以上设置选项没有问题,点击“完成”按钮即可。

使用绿联私有云Docker搭建自动化实时网页监控工具,实现降价提醒/RSS监控等_第12张图片

在“容器管理”中对刚创建的webmonitor容器点击“启动”按钮。

使用绿联私有云Docker搭建自动化实时网页监控工具,实现降价提醒/RSS监控等_第13张图片

看到容器名称前显示“运行中”就说明启动成功。同时,为了我们以后可以更方便的管理该容器,我们可以为它建立一个快捷方式。

使用绿联私有云Docker搭建自动化实时网页监控工具,实现降价提醒/RSS监控等_第14张图片

快捷方式的名称可以自行更改,网址其实就是“http://本地IP:端口号”。

使用绿联私有云Docker搭建自动化实时网页监控工具,实现降价提醒/RSS监控等_第15张图片

创建好的快捷方式会出现在绿联私有云NAS的桌面上,和我们使用的Windows电脑的快捷方式一样,直接点击就能直接打开该容器。

WebMonitor体验

登录:

使用绿联私有云Docker搭建自动化实时网页监控工具,实现降价提醒/RSS监控等_第16张图片

点击我们创建的webmonitor容器快捷方式就能看到它的登录界面了,首次打开需要输入用户名和密码,也就是前面我们创建容器的时候“环境”那步提到的登录用户名和密码,因为我没有修改,所以这里都是默认的“admin”。

使用绿联私有云Docker搭建自动化实时网页监控工具,实现降价提醒/RSS监控等_第17张图片

登录进来的webmonitor页面,UI界面确实简洁,并且原生中文也很友好。

通知方式:

使用绿联私有云Docker搭建自动化实时网页监控工具,实现降价提醒/RSS监控等_第18张图片

首先添加一个通知方式。在左侧的状态栏选择“系统管理--通知方式”,点击“添加”即可。它目前支持的通知方式有:邮件,pushover,微信提醒(support by server酱),Bark推送,自定义GET/POST通知, Slack 通知以及 Telegram 通知。

使用绿联私有云Docker搭建自动化实时网页监控工具,实现降价提醒/RSS监控等_第19张图片

我这里就以最简单的“Server 酱”的微信提醒方式为例,直接将Server 酱获取的SendKey复制粘贴过来即可。

使用绿联私有云Docker搭建自动化实时网页监控工具,实现降价提醒/RSS监控等_第20张图片

不过免费的Server 酱每天有条数限制,我们也可以添加一个邮箱的通知方式。

使用绿联私有云Docker搭建自动化实时网页监控工具,实现降价提醒/RSS监控等_第21张图片

需要说明的是在添加邮箱之前你需要先设置好“系统邮箱”。我这里是设置的QQ邮箱的SMTP服务器来发送邮件的,官方有详细教程,这里因为篇幅原因就不赘述了。

使用绿联私有云Docker搭建自动化实时网页监控工具,实现降价提醒/RSS监控等_第22张图片

添加好的通知方式会出现在这里,勾选之后点击“保存”即可。

RSS监控:

这里以监控我个人比较喜欢的果壳网的RSS为例:

使用绿联私有云Docker搭建自动化实时网页监控工具,实现降价提醒/RSS监控等_第23张图片

选择“任务管理--RSS监控管理--增加”。

使用绿联私有云Docker搭建自动化实时网页监控工具,实现降价提醒/RSS监控等_第24张图片

在这步:

  • 任务名称:随意,建议直接填RSS订阅名称即可;

  • RSS地址:当前的RSS链接,可以找网友们分享的,也可以用某些浏览器插件获取;

  • 频率(分钟):默认的5分钟即可,时间别太短了,一个是因为怕被网站认定为爬虫将我们的IP封了,另一个原因是信息太频繁反而会打扰我们;

  • 通知方式:我就将前面添加的QQ邮箱和Server 酱两个都添加进去吧。

完成后直接点右下角的“保存”按钮。

使用绿联私有云Docker搭建自动化实时网页监控工具,实现降价提醒/RSS监控等_第25张图片

添加成功。

使用绿联私有云Docker搭建自动化实时网页监控工具,实现降价提醒/RSS监控等_第26张图片

在“任务状态”里面也能看到创建任务成功的提示。

使用绿联私有云Docker搭建自动化实时网页监控工具,实现降价提醒/RSS监控等_第27张图片

5分钟之后准时收到Server 酱发过来的信息。

使用绿联私有云Docker搭建自动化实时网页监控工具,实现降价提醒/RSS监控等_第28张图片

并且QQ邮箱也是同步到达。

使用绿联私有云Docker搭建自动化实时网页监控工具,实现降价提醒/RSS监控等_第29张图片

“任务状态”也会有新的运行结果。

网页监控:

网页监控其实就是针对指定网页内的特定区域,如果有变化就会提醒。

使用绿联私有云Docker搭建自动化实时网页监控工具,实现降价提醒/RSS监控等_第30张图片

就比如说今天演示的绿联DX4600 Pro的商品详情页面,如果我们想要监控它的价格,特价的商品价就是我们需要监控的“ 特定区域”。不过这里的价格短时间应该不会有变化,所以我来演示怎么监控我值得买的粉丝变化吧~

使用绿联私有云Docker搭建自动化实时网页监控工具,实现降价提醒/RSS监控等_第31张图片

比如说,我现在打开我的值得买个人主页,然后要监控我的粉丝变化,页面显示的粉丝数量就是我需要的“特定区域”。

使用绿联私有云Docker搭建自动化实时网页监控工具,实现降价提醒/RSS监控等_第32张图片

然后就在个人主页里,按键盘的“F12”键调出开发者工具,在开发者工具栏的左上角有一个选择模式小箭头(快捷方式为Ctrl+Shift+C),单击会变成蓝色,然后在主页里选中“特定区域”的粉丝数量,会看到在开发者工具栏会有一行高亮的代码,这行代码其实就是页面显示粉丝数量的代码(准确说是“元素”)。

使用绿联私有云Docker搭建自动化实时网页监控工具,实现降价提醒/RSS监控等_第33张图片

接着鼠标右键这行代码,选择“复制--复制XPath”,将它先随便粘贴并保存到文本文档备用。

使用绿联私有云Docker搭建自动化实时网页监控工具,实现降价提醒/RSS监控等_第34张图片

回到WebMonitor容器,选择“任务管理--网页监控管理--增加”。

使用绿联私有云Docker搭建自动化实时网页监控工具,实现降价提醒/RSS监控等_第35张图片

使用绿联私有云Docker搭建自动化实时网页监控工具,实现降价提醒/RSS监控等_第36张图片

在该页面:

  • 任务名称:随意,我这里填写的就是“值得买粉丝”;

  • 监控网址:填写我们本人账号的值得买主页链接;

  • 元素选择器类型:选择“Xpath”;

  • 元素选择器:将前面保存的XPath内容粘贴过来;

  • 频率(分钟):还是默认5分钟吧;

  • 通知方式:Server 酱和QQ邮箱全部启用吧。

完成以上记得保存。

使用绿联私有云Docker搭建自动化实时网页监控工具,实现降价提醒/RSS监控等_第37张图片

然后在“任务状态”可以看到创建任务成功的提示。

使用绿联私有云Docker搭建自动化实时网页监控工具,实现降价提醒/RSS监控等_第38张图片

和前面的RSS订阅一样,Server 酱准时发送提醒过来。

使用绿联私有云Docker搭建自动化实时网页监控工具,实现降价提醒/RSS监控等_第39张图片

当然,QQ邮箱也不会缺席。

使用绿联私有云Docker搭建自动化实时网页监控工具,实现降价提醒/RSS监控等_第40张图片

在“任务状态”也能看到检测到变化的提醒!

使用绿联私有云Docker搭建自动化实时网页监控工具,实现降价提醒/RSS监控等_第41张图片

监控的粉丝量也是完全正确!

总结

在这个信息大爆炸的时代,玩的就是信息差。如果我们能在第一时间获取到自己关注的最新消息,在很多时候你就能快人一步获得先机,而今天分享的这款WebMonitor网页监控工具无疑就是你最得力的助手。

当然,今天分享的网页监控只是我们普通玩家最常用的用途,它其实可用的范围非常广,如果说小伙伴们还能有其它的玩法和思路,欢迎评论区“嘚瑟”出来~

https://item.jd.com/100039880211.html

https://item.jd.com/100052528552.html

好了,以上就是今天给大家分享的内容,我是爱分享的Stark-C,如果今天的内容对你有帮助请记得收藏,顺便点点关注,咱们下期再见!白白~

你可能感兴趣的:(docker,自动化,java)