首页 > 传媒 > 关键词  > 智能运维最新资讯  > 正文

智能运维技术专题|数据可视化之F5 Telemetry Streaming

2021-06-11 15:20 · 稿源: 站长之家用户

智维数据【智能运维技术专题】概览

随着互联网不断发展,为了适应高并发、大流量业务,负载均衡技术在整个IT架构中占据着重要地位。

F5 作为全球领先的应用交付厂商,为全球大型企业、运营商、政府与消费品牌提供更加快速、安全以及智能的应用。

随着语音、数据、视频流量、移动员工和应用的迅猛增长,F5 在满足企业和机构IT需求的同时,也抓住了市场的潜在机遇。通过收购Nginx,进一步巩固了市场地位。

智维数据(nCompass)通过与F5 LTM、F5 GTM、Nginx对接,助力企业实现业务长期稳定运行。

1、通过iControl集中管理所有F5 设备,减少IT人员维护成本。

2、通过HSL获取Http、DNS、系统日志,并进一步分析处理,助力企业保障业务稳定运行。

3、通过Telemetry Streaming,监控设备性能指标,助力企业保障设备稳定运行。

4、通过Nginx日志分析网站运行情况,助力企业保障业务稳定运行。

5、通过综合数据分析实现端到端的可视化,助力IT人员更加了解自己业务架构。

上一章我们介绍了如何利用F5 的HSL来收集日志,并做了具体场景分析。本章我们介绍如何使用Telemetry Streaming来完善F5 监控,并做具体的场景分析。

数据可视化之F5 Telemetry Streaming

2.1 F5 Telemetry Streaming是什么

F5 Telemetry Streaming(TS)是独立于TMOS的RPM包,作为iControlLX扩展。规范化将统计信息和事件从BIG-IP转发到消费者,例如Fluentd、ES、S3 存储等。

2.2 F5 Telemetry Streaming优点

上一章我们介绍了如何利用F5 的HSL来收集日志,那TS的优点是什么呢?免去一系列复杂的格式匹配,可以把系统状态和业务日志的进行收集和整合,然后输出到指定的消费者。

2.3 F5 Telemetry Streaming架构

TS两个核心组件:

1、Event Listener主要用于接收事件日志。

2、SystemPoller收集统计信息。例如:设备统计信息,VS、Pool统计信息等

2.4 F5 Telemetry Streaming应用场景

TS可以收集日志信息进行分析。和HSL应用场景是一样的,这里不在赘述。除了日志以外就是统计信息。

LTM:

设备监控:有了TS可以替代SNMP监控方式。TS可以监控磁盘使用率、磁盘IO、接口状态和流量、内存、cpu、连接数等信息 。

资产梳理:获取设备的基本信息。例如版本、许可、接口信息等。可以进行资产的管理和统计,包含许可到期提醒等。

集群信息维护:可以清楚知道目前哪个设备是处于Active,配置是否有同步。防止主设备出现问题的时候备用设备配置不一致。

生命周期管理:设备license、https证书管理,可以在过期前进行预警。

应用梳理:通过流量和连接数可以筛选无效配置。通过irules规则命中统计,可以筛选高频使用的irule结合基础监控优化irules规则。

GTM:

GTM和LTM统计信息少有区别,除了LTM设备监控、资产处理、集群信息维护、生命周期管理以外,还有如下场景:

应用梳理:可以统计 wideip、pool等信息,包括状态是否启用等。

配置优化:可以统计具体配置项来分析哪些配置不合理。例如,应该配置topology的,结果走了轮询策略等。

2.5 配置Telemetry Streaming

目前F5 消费TS数据支持pull和push两种方式。

pull:是F5 主动发给第三方中间件。例如,kafka、fluend、Elasticsearch等

push:是主动拉去F5 的数据。最典型的就是prometheus

此处我们使用push方式把TS数据发给fluend。

1、下载rpm包并导入到F5 设备,通过github下载最新的rpm包

https://github.com/F5Networks/f5-telemetry-streaming/releases/download/v1.20.0/f5-telemetry-1.20.0-3.noarch.rpm

2、导入rpm包到F5 设备。找到如下图位置点击import

3、选择刚才下载好的⽂件进⾏导⼊,如下图:

4、导⼊成功后会在列表⾥⾯显示,如下图:

5、安装好rpm包,我们要通过F5 设备接⼝来进⾏数据配置。此处我是⽤postman来进⾏数据post操作

因为F5 需要登录操作,我们要设置账户密码(必须是管理员账户才可以)

选择headers我们使⽤json格式

选择body输⼊我们要向F5 接⼝post的具体数据如下图:

此时我是将数据push到fluend。其中systemPoller⾥⾯的interval60 是每隔60s push⼀次数据。Consumer使⽤的fluend,path是fluentd⽤到的tag

点击send验证提交结果如下图,出现success表示正常提交

2.6fluend安装与配置

1、安装,执⾏如下命令

curl -L https://toolbelt.treasuredata.com/sh/install-redhat-td-agent4.sh | sh

2、 配置,为了⽅便看到⽇志输出内容我暂时先把内容打印到了stdoutvi /etc/td-agent/td-agent.conf

3、重启服务

systemctl restart td-agent

4、验证

通过查看⽇志可以知道TS数据已经进来了,密密麻麻看不懂是什么。我们做⼀个格式转换,可以看到已经输出了指标数据:system、widips、vs、pool、irules等。

2.7 N-Compass⽇志分析平台

通过上⾯配置我们已经获取了F5 http⽇志和系统⽇志。接下来就是如何分析,N-Compass可以根据不同场景灵活定制视图,使得客户更加了解⾃⼰的业务。遇到突发问题可以快速定位,甚⾄是提前预警。

基础监控:

F5 GTM:

F5 LTM:

特别声明:以上内容(如有图片或视频亦包括在内)均为站长传媒平台用户上传并发布,本平台仅提供信息存储服务,对本页面内容所引致的错误、不确或遗漏,概不负任何法律责任,相关信息仅供参考。站长之家将尽力确保所提供信息的准确性及可靠性,但不保证有关资料的准确性及可靠性,读者在使用前请进一步核实,并对任何自主决定的行为负责。任何单位或个人认为本页面内容可能涉嫌侵犯其知识产权或存在不实内容时,应及时向站长之家提出书面权利通知或不实情况说明,并提供身份证明、权属证明及详细侵权或不实情况证明(点击查看反馈地址)。本网站在收到上述法律文件后,将会依法依规核实信息,沟通删除相关内容或断开相关链接。

  • 相关推荐
  • 大家在看
  • 运维工程师福音:如何利用AR技术减少舟车劳顿提升运维效率?

    一名资深的运维工程师的特征是怎样的?身着衬衫或Polo衫,背负能放进一台笔记本电脑的双肩包,大概率戴着眼镜且一脸疲惫,但敲打代码排除故障时格外认真。此外他们一定拥有丰富的差旅经验,并且大概率拥有各家航空公司的VIP会员身份。然而和驴友们主动的寻山问水不同,运维工程师们的旅途奔波则是被动的。当运维需求不期而至,他们就需要整好背包迅速出发,往往是行至航站楼时正朝露,飞机落地时已正午,客户的厂房还往往地处偏远?

  • 广联达论道第二届全国基础设施智慧建造与运维学术论坛 为“新基建”支招

    10 月 16 日- 17 日,第二届全国基础设施智慧建造与运维学术论坛在南京举行,来自全国各地的土木、交通、建筑、城市规划、测绘、人工智能、电子信息等领域的 500 余名专家、领军企业代表齐聚一堂,围绕基础设施智慧建造与运维话题展开深入探讨,助力“新基建”按下“加速键”。本届大会由中国土木工程学会、中国铁道学会、中国建筑学会等十个一级学会与东南大学共同主办,东南大学智慧建造与运维国家地方联合工程研究中心、华为技?

  • 兰宝环保|定制化运维模式专业、科学地解决VOCs废气治理设备沸石转轮运行过程中的问题

    在环保政策驱动下,近年来企业环保意识明显提高,全国各大、中型企业大多进行了环保设施的投资。但根据中央生态环保督查组全国各地工业企业排污情况督查结果来看,很多企业已经投资了环保设施,却仍存在超标乃至被处罚的情况,其问题何在?事实上,在VOCs废气治理设备投入运行后,也随之产生新的问题,即对设备的日常管理维护和定期维护保养重视度不够,亦或维护管理不专业。废气治理设备在复杂工况下长期运行,部件的磨损消耗,耗材的耗损等,?

  • 声纹解锁、智能降噪…两轮车智能还远吗?

    科技驱动出行场景的百花齐放,两轮车开始了“进化”升级。适用于通勤代步、即时配送、共享出行领域的两轮车,能否也像汽车一样,为用户提供车联网服务?能否支持骑行环境的降噪、兼容大多数的蓝牙耳机,还能语音启动导航、接打电话?思必驰作为车载语音交互提供商,由传统赋能四轮车智能化,拓展到了两轮车智能市场。“电动”热 两轮车迎来发展高光车联网行业迎来爆发式增长。四轮车领域,通过购车补贴推动电动汽车增长,效果显著?

  • 智能网卡大会 | 看大咖如何解读智能网卡新趋势

    9月25日,2021中国智能网卡研讨会在北京隆重召开。本届大会由“科创中国”未来网络专业科技服务团指导,江苏省未来网络创新研究院、网络通信与安全紫金山实验室联合主办,SDNLAB社区承办。大会以“智领创新,芯动未来”为主题,工信部通信科技委专职常委、中国通信学会信息网络技术专业委员会主任委员赵慧玲出席大会并进行致辞,江苏省未来网络创新研究院团队总监魏亮代表主办方致欢迎词。中国科学技术出版社有限公司总经理助理、?

  • 大力智能学习灯,用科技护眼,用实力助学

    有不少家长因为本身就是劣质照明的受害者,所以在给孩子选择学习照明灯具时就会格外的注意。与此同时越来越多五花八门的电子产品,如:学习平板、学习机等,也成了威胁孩子视力的另一大因素。而大力智能学习灯在“推动家庭学习数字化和智能化”品牌使命的鼓舞下真正为解决家长头疼的这两难问题交上了自己的答卷。突破性智能护眼科技,提供舒适学习用光,提升学习专注力大力智能学习灯一直聚焦书桌学习场景的用光问题,始终保持对孩

  • 价格便宜了 华为Sound SE智能音箱曝光

    9月27日晚,有数码博主爆料称,华为智慧生活App上架了一款Sound SE智能音箱,据说在这个月底发售。早在2019年11月,华为就带来了第一代Sound X智能音箱,与帝瓦雷联合设计,其设计灵感源于维也纳音乐金色大厅,售价1999元。今年7月,华为又推出了新一代Sound X音箱,它是华为首款搭载HarmonyOS 2的智能音箱,售价2199元。新一代华为Sound X 采用了360全金属出音孔和3D曲面无接缝工艺,厚度仅为 0.8mm,相比上一代塑胶网+网布的结构

  • 多城共同点亮人工智能算力网络,赋能人工智能产业发展

    [中国,深圳, 2021 年 9 月 25 日] 在华为全联接 2021 上,中国科学技术信息研究所(简称“中信所”)、AITISA(新一代人工智能产业技术创新战略联盟)、鹏城实验室联合发布《人工智能计算中心发展白皮书2.0——从人工智能计算中心走向人工智能算力网络》(简称“白皮书2.0”)。深圳、武汉、西安、成都、北京、上海等 21 个城市共同点亮“人工智能算力网络”,通过“一网络”实现“算力、数据、生态”三汇聚,以“大算力+大数据?

  • 人工智能可以评估人类心理健康

    一个跨学科合作项目进行的一项研究表明,人工智能可以从问卷调查和大脑扫描中检测出对心理健康有参考价值的信号,而不需要专家的评估。研究人员利用了英国生物银行的优势,这是世界上最大和最全面的生物医学数据库之一,其中包含了英国人口详细和安全的健康相关数据。这项工作发表在开放性期刊《GigaScience》上。精神健康问题在全球范围内一直在增加,世卫组织确定在2007年至2017年期间,精神健康状况和药物滥用疾病增加了13%。这

  • 智能网卡大会 | SDNLAB联合创始人魏亮:智能网卡的发展需要产业生态的支持

    9月25日,2021中国智能网卡研讨会在北京隆重召开。本届大会由“科创中国”未来网络专业科技服务团指导,江苏省未来网络创新研究院、网络通信与安全紫金山实验室联合主办,SDNLAB社区承办。江苏省未来网络创新研究院团队总监魏亮先生作为大会主办方,为大会致欢迎辞。魏亮首先对中国科协、科创中国项目对本次大会的指导和支持表示了感谢。“科创中国”未来网络专业科技服务团(以下简称“未来网络科技服务团”)是中国科协“科创中?

这篇文章对你有价值吗?

  • 热门标签

热文

  • 3 天
  • 7天