用这个开源工具从任何网站获取变化提醒

开源
使用 changeetection.io 在网站发生变化或更新时获得提醒。

那一年是 2020 年,关于大流行病的消息迅速涌来,每个人都感到完全被类似的新闻文章所淹没,提供了不同程度的更新。

但我需要知道的是,我们的官方准则何时改变。最后,这就是对我来说最重要的事情。

无论关注的是大流行病还是最新的科技新闻,提前了解网站内容的变化都至关重要。

​changedetection.io​​​ 项目为网站变更检测和通知提供了一个简单但强大的开源解决方案。它很容易设置,而且可以通知 70 多个(还在不断增加)不同的通知系统,如 Matrix、Mattermost、​​Nextcloud​​​、​​Signal​​​、​​Zulip​​​、​​Home Assistant​​、电子邮件等等。它还能通知专有应用,如 Discord、Office365、Reddit、Telegram 和许多其他应用。

但 ​​changeetection.io​​ 并不只是局限于观察网页内容。你也可以监视 XML 和 JSON 源,它将建立一个 RSS 馈送,记录变化的网站。

由于其内置的 JSON 简单存储系统,不需要设置复杂的数据库来接收和存储信息。你可以 ​​使用 Docker 镜像运行​​​ 或用 ​​pip​​​ 安装它。该项目有一个 ​​全面的维基帮助页​​,大多数常见的问题都有涵盖。

对于使用复杂 JavaScript 的网站,你可以用内置的 ​​Playwright 内容获取器​​​ 将你的 ​​changeetection.io​​ 连接到 Chromium 或 Chrome 浏览器。

运行后,在你的浏览器(默认情况下是 ​​http://localhost:5000​​)中访问该应用。如果你的电脑可以从外部网络访问,你可以在 设置Settings中设置一个密码。

change detection watch list

change detection watch list

提交你想监控的页面的 URL。有几个与如何过滤该网页有关的设置。例如,你很可能不想知道一家公司在其网站页脚列出的股票价格何时发生变化,但你可能想知道他们在其博客上发布的新闻文章。

监控一个网站

想象一下,你想添加你最喜欢的网站 ​​Opensource.com​​ 进行监控。你只想知道主要标注文章何时包含 “python” 一词,并且通过 Matrix 收到通知。

要做到这点,首先要使用“视觉选择器Visual Filter Selector”工具。(这需要连接 playwright 浏览器界面)。

Find an element to monitor

Find an element to monitor

该工具会自动计算出针对内容的最佳 Xpath 或 CSS 过滤器。否则,你会从每天的页面更新中得到大量的噪音。

接下来,访问“过滤器和触发器Filters & Triggers”标签。

Filters and triggers

Filters and triggers

在 “CSS/JSON/XPATH 过滤器CSS/JSON/XPATH Filter”区域(蓝色圆圈),你可以看到上一步自动生成的 CSS 过滤器。

有几个有用的过滤器,比如“移除元素Remove elements”(适合移除嘈杂的元素)、“忽略文本Ignore text”、“触发/等待文本Trigger/wait for text”,和“如果文本匹配则阻止变化检测Block change-detection if text matches”(用于等待一些文本消失,如“售罄”)。

在“触发/等待文本Trigger/wait for text”(红色圆圈)中,输入你想监测的关键词。(在这个例子中是 “python”)。

最后一步是在“通知Notifications”选项卡中,你要在那里配置你想收到的通知。下面我使用 Matrix API 添加了一个 Matrix 房间作为通知目标。

Notifications tab

Notifications tab

通知的 URL 的格式是 ​​matrixs://username:password@matrix.org/#/room/#room-name:matrix.org​​。

然而,​​t2Bot​​​ 格式也支持。这里有更多的 ​​Matrix 通知选项​​。

就是这些了! 现在只要内容有变化,你就会通过 Matrix 收到信息。

还有更多

​changedetection.io​​​ 还有很多东西。如果你喜欢调用一个自定义的 JSON API,你不需要使用通知的 API(使用 ​​jsons://​​ )。你还可以创建一个自定义的 HTTP 请求(POST 和 GET),在检查前执行 JavaScript(也许是为了预先填充一个用户名和密码的登录字段),以及更多有趣的功能,更多的功能将陆续推出。

不要再浏览网站,而是开始监测网络吧!

责任编辑:庞桂玉 来源: Linux中国
相关推荐

2021-11-11 12:19:47

开源开源工具Linux 桌面

2020-02-11 20:00:29

开源开源工具天气预报

2021-02-08 08:40:00

Zint二维码开源

2021-08-31 09:41:57

LinuxiPhone开源工具

2021-09-01 09:47:25

Linux 工具 开发

2019-05-21 14:08:40

豆瓣Python图书

2021-08-31 10:39:52

语音克隆MockingBird合成器

2017-11-03 17:05:11

开源

2021-04-19 16:15:35

开源开源工具

2022-08-03 14:40:10

CentOS开源

2021-04-09 06:15:54

开源工具Python编程语言

2023-02-24 09:54:54

开源React

2023-04-18 18:22:31

开源工具数据库

2022-07-11 09:09:41

科技

2009-03-31 16:41:38

网络性能网络监控开源

2019-07-23 09:56:11

ChromeFirefoxSafari

2021-05-28 09:51:32

开源技术 工具

2021-06-08 11:48:40

SQL数据库电子表格

2019-09-29 10:42:02

人工智能机器学习技术

2021-05-12 11:08:33

PPT代码工具
点赞
收藏

51CTO技术栈公众号