用户名  找回密码
 立即注册

QQ登录

只需一步,快速开始

查看: 8378|回复: 0

[杂谈] huginn|全网数据监控与通知工具—安装教程、全方位介绍

[复制链接]
发表于 2021-5-10 21:41:17 | 显示全部楼层 |阅读模式 来自 中国–湖北
今天发现了一个特别棒的工具—huginn,很实用,应用范围很广,确实是网络工具库中的神器。它可以监控网络上的一切资源,并将这些资源按照你的需要发送给你。实现这一功能只需要简单的配置就可以了。列举一下,huginn 主要的应用场景和功能。
1 跟没有 RSS 的网站定制 RSS 种子
2 监控知乎、微博、贴吧等平台指定的信息,一旦监控到信息,邮件通知你本人
3 监控各大购物平台商品信息,一旦发现折扣信息,邮件通知你
4 支持各种形式的发送和接收 WebHooks。
Huginn 就是私有的 IFTTT,自定义程度非常高,只要你思路开阔,想法够野一定能发挥出巨大的价值。
Huginn 安装
Huginn 的安装方法有很多种,我推荐一种,就是通过 docker 安装。原因很简单,安装快,而且这本身就是 docker 的主要应用场景和优势所在。如果是常规安装方式,需要安装依赖包、ruby 环境、数据库、nginx、huginn 及各种配置;但是 docker 就只需要下载 docker 镜像,运行 huginn 容器就可以了。
1 安装 docker
建议最低配置为 1G 内存、1 核 CPU。推荐使用 vultr 的基础款云服务器,自带一键安装 docker 功能。均采用千兆带宽、SSD 硬盘,稳定性有保障,按小时计费,随用随停,且支持支付宝付款。而且 vultr 现在还有注册送 100 美元的活动,参考:VULTR 2020 年优惠,新用户直接送 100 美元,附额外领 3 美元教程
推荐阅读:月付 3-7 刀,质量口碑保证,网络线路优秀的 vps 盘点
Centos7 安装 docker 命令如下:
  • curl -fsSL https://get.docker.com/ | sh
  • systemctl start docker
  • systemctl status docker
  • systemctl enable docker
注:安装 docker 要求系统内核版本高于 3.0,基本上只能安装在 KVM 架构的 vps 上。
2 运行 huginn 容器
  • docker run  --name huginn  -p 3000:3000 huginn/huginn
注:重启容器会导致数据丢失,请勿轻易应用到生产环境。
Huginn 界面
部署成功后访问 IP+3000 端口,出现界面,点击登录,默认账号密码是 admin/password.登录成功后,界面如下
Huginn 使用介绍-以 website agent 采集网页为例
简单通过一个例子介绍下 huginn 的使用方法。监控 v2ex 首页第一个帖子,首页第一个帖子变化时,发送邮件通知。
1 新建一个 agent,负责每隔一分钟采集 v2ex 第一个帖子的标题,配置如下。点击 agents->new agent .
tpye 选择 website agent,表示从 web 站点采集数据;
name 是这个 agent 的名称
schedule 表示多久采集一次,本次设置的是每分钟一次
其他的暂时不用管,重要的是配置 option,即从 v2ex 采集第一个帖子的规则。
需要配置采集地址 url,即 v2ex 首页的网址;v2ex 第一个帖子的 css 定位,可以通过 f12 查看帖子的 xpath,下图所示。
但是获取的 xpath 经常有问题,推荐通过 selectorgadget chrome 扩展去获取定位;再配置获取的内容,我是获取的文字内容,填 normalize-space(.)即可
最后点击“dry run” 测试一下是否可以获取到内容,下图所示即成功。点击 save,保存该 agent
运行几分钟后,可以看到每分钟都能获取到新的 v2ex 帖子。
使用邮件通知 email agent
通过以上 v2ex agent 实现了每隔一分钟检测一次首页第一个帖子。然后再尝试一下将 v2ex agent 中的内容通过邮件发布。
需要另外新建一个 agent,type 选择 Email Agent,sources 选择我们之前创建的 v2ex agent,options 中填邮件内容,我们通过{{title}}引入了 v2ex agent 中的 title 字段。这样 v2ex agent 每次检测到内容更新,就会触发 email agent,将更新的内容通过邮件发送到本人。
另外,还需要配置邮件发送接收相关内容。
首先要配置配置 stmp 服务器。然后将 stmp 配置信息写到 huginn 容器的环境变量中去。所以需要用以下方式启动 huginn 容器。
补充:stmp 服务器配置可以参考:https://www.vpsjxw.com/vps_use/stmp_python/
  • docker run  --name huginn \
  •      -p 3000:3000 \
  •      -e SMTP_DOMAIN=163.com \
  •      -e SMTP_USER_NAME=AAAAAA@163.com \
  •      -e SMTP_PASSWORD=password \
  •      -e SMTP_SERVER=smtp.163.com \
  •      -e EMAIL_FROM_ADDRESS= AAAAAA @163.com \
  •      huginn/huginn
其次,配置接收邮件人。
点击界面右上角的 account,将默认的邮箱 admin@example.com,改为接收邮箱号,邮件配置就完成了

发帖求助前要善用【论坛搜索】功能,那里可能会有你要找的答案;

如何回报帮助你解决问题的坛友,好办法就是点击帖子下方的评分按钮给对方加【金币】不会扣除自己的积分,做一个热心并受欢迎的人!

回复

使用道具 举报

▶专业解决各类DiscuzX疑难杂症、discuz版本升级 、网站搬家 和 云服务器销售!▶有偿服务QQ 860855665 更多精品应用
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

关闭

站长推荐

在飘仙这里购买服务器空间的好处

1、凡是在飘仙这边购买服务器空间的,飘仙所提供的服务都超出了空间商本身的义务

      在飘仙这里 飘仙会大家尽量少走冤枉路,不花冤枉钱 

2、服务器空间质量可靠,价格优惠,8折优惠长期折扣,不玩套路! 

    所谓套路就是:新用户首单超低配置的服务器空间 给个很大的折扣(还鼓励一次购买多年),表明看起来价格很低,等升级续费或二次购买的时候 价格爆贵!——新手大多不能准确估算自己需要什么样的配置

查看 »

QQ|侵权投诉|广告报价|手机版|小黑屋|西部数码代理|飘仙建站论坛 ( 豫ICP备2022021143号-1 )

GMT+8, 2025-4-5 10:53 , Processed in 0.041096 second(s), 8 queries , Redis On.

Powered by Discuz! X3.5

© 2001-2025 Discuz! Team.

快速回复 返回顶部 返回列表