应用智慧运维监控管理案例

时间:2023年03月27日 来源:

Argus监控运维系统采用高性能深度列式存储集群,能提供超高压缩比、顺序存储和自定义数据等功能,满足企业PB级数据存储的需求,实现海量数据毫秒级的响应。以观纵服务的某企业为例,该企业承担着产业链上下游数百家企业海量电子信息的实时汇聚和处理,每天新生成日志数据达到数十TB。云智慧助力该客户打造的数字化运维日志中心,数据存储压缩比达到了1:0.3,能支持10万/秒并发数据实时分析处理,数据传输和平台解析处理吞吐量达540MB/s,处理延时控制在300毫秒以内。 对于运维监控的告警信息,应该如何分析,或者说应该从哪些方向去分析呢?应用智慧运维监控管理案例

对于服务器的监控同样也是从状态、性能与容量这几个维度入手。虽然SNMP也可以用于服务器监控,但相对于agent主动上报指标与数据会少很多。

服务器的状态监控主要包含服务器是否ping的通、agent上报是否超时与电源运行状态等等。对于性能与容量这两类维度,主要依赖当前OS的数据捕获,一般来说对于服务器监控来说在通用场景下主要关注CPU、内存、流量与包量这四个指标即可,但是别的指标也建议尽量捕获。

单个监控对象的数据丰富了会有如下好处:避免对象的监控盲点不同的监控数据点可以部分对应出该服务器所承载的业务特性指标,例如存储类业务也会关注disk_total_read、svctm_time_max、await_time_max等等系统指标生产的数据足够丰富能够催生出更加丰富的运维数据消费场景。服务器监控相对是很标准的监控模型,针对于物理服务器与虚拟机都有共性指标。这部分主要做到采集的数据丰富与上报的准确性(算法准确)。 统一运维监控方案即使零经验的小白用户,也可以通过Argus管理IT运维监控,执行运维监控管理。

监控是整个运维以及产品整个生命周期非常重要的一环,它旨在事前能够及时预警发现故障,事中能够结合监控数据定位问题,事后能够提供数据用于分析问题。监控贯穿应用的整个生命周期。即从程序设计、开发、部署、下线。其主要的服务对象有:技术和业务。技术通过监控系统可以了解技术的环境状态,可以帮助检测、诊断、解决技术环境中的故障和问题。然而运维监控系统的实质目标是业务,是为了更好的支持业务运行,确保业务的持续开展。所以监控的目的可以简单归纳如下:1、能够对系统进行7*24小时的实时监控 2、能够及时反馈系统状态 3、保证平台的稳定运行 3、保证服务的安全可靠 4、保证业务的持续运行

在云原生时代,基础设施与应用的部署构建都发生了极大变化,传统的监控方式已经无法适应云原生的场景。Prometheus支持对kubernetes和容器的监控,基本上是完美选择,那么通过Prometheus监控体系如何搭建PAAS监控体系?监控哪些对象?

k8s管理组件、节点、pod容器、各种中间件数据库组件指标:mysql、redis、kafka、rocketmq、activemq、zookeeper、elasticsearch、mongodb、nginx、clickhouse。同时,还提供了kingbase、polardb、GreatDB等国产数据库的监控。

怎么监控?

k8s组件监控:Prometheus直接拉取各组件的metrics接口数据;

节点监控:在各节点部署node_exporter,Prometheus自动发现所有节点对象拉取exporter提供的数据;

pod容器监控:用各节点部署的kubelet的cadivisor功能,使Prometheus自动发现并拉取cadivisor提供的容器运行时指标,并部署kube-state-metrics拉取pod容器元数据。 我们要运维监控这个东西的什么属性?比如CPU的使用率、负载、用户态、内核态、上下文切换。

大集群场景特点数据规模大:监控对象targets多,数千万时序数据time-series,单Prometheus负载非常高。

当series数据超过300万时,Prometheus内存增长较为明显,需要使用较大内存的机器来运行。压测过程中,我们使用了工具去生成预期数目的series,工具生成的series每个label的长度及值的长度都较小,固定为10个字符左右。我们的目的是观察相对负载变化,实际生产中由于label长度不同,服务发现机制(比如Pod频繁重启)的消耗不同,相同的series数目所消耗的负载会比压测中高不少。目前Argus有好几个集群的采集端Prometheus消耗内存在30G以上,这会导致查询效率下降,严重的会导致OOM,有的大集群内存消耗达几百G。 运维监控体系一般来说包括数据采集、数据检测、告警管理、故障管理、视图管理和监控管理6大模块。有什么好用的运维监控系统

Argus运维监控系统可手动设置贴合业务的事件聚合规则、消息分派规则,并可查看与管理事件集、事件。应用智慧运维监控管理案例

2020年12月13日,据海外媒体报道,一个名为APT的网络入侵组织把世界出名网管软件厂商SolarWinds作为入侵目标。这次APT攻击首先是对SolarWinds旗下的Orion网络监控软件更新服务器进行入侵,并在软件更新(Orion)中植入了恶意代码。透露大约有1.8万客户在其系统上部署了该更新,且对美国财政部高层领导使用的电子邮件系统也造成了影响。

SolarWinds的系统被攻击之后,已导致全球许多组织的网络遭到破坏,涉及的供应链范围极为广大,被称为2020年美国极大网络安全事件。

“太阳风”(SolarWinds) 是一家专职提供IT监控和运维解决方案的商业公司。其产品SolarWinds Orion Network Performance Monitor(NPM)是集网络监测、设备性能维护管理、故障监控、网络实时流量监控和历史数据统计、汇总和历史数据分析、虚拟数据中心监控、网络拓扑监控等功能于一体的网络管理系统。该软件主要是用于企业内部网络管理,目前全球客户超过32万家。SolarWinds作为一个齐全的IT管理系统还有一些功能的欠缺,而且中文支持也是一个国内推广的难题。像同一类型的软件Hostmonitor、CA Unicenter也是存在同样的问题。 应用智慧运维监控管理案例

上海观纵科技有限公司位于上海市奉贤区望园南路1288弄80号1904、1909室,是一家专业的一般项目:技术服务、技术开发、技术咨询、技术交流、技术转让、技术推广;软件开发;人工智能基础软件开发;人工智能应用软件开发;数据处理服务;信息技术咨询服务;信息系统集成服务:信息系统运行维护服务;计算机系统服务;软件销售;计算机软硬件及辅助设备批发;计算机软硬件及辅助设备零售;电子产品销售;通信设备销售;通讯设备销售;咨询策划服务;市场调查(不含涉外调查);广告制作;广告发布;广告设计、代理;会议及展览服务;货物进出口。(除依法须经批准的项目外,凭营业执照依法自主开展经营活动) 许可项目:建筑智能化系统设计;建设工程施工;网络文化经营;互联网信息服务。(依法须经批准的项目,经相关部门批准后方可开展经营活动,具体经营项目以相关部门批准文件或许可证件为准)公司。webfunny,walkingfunny,argus是上海观纵科技有限公司的主营品牌,是专业的一般项目:技术服务、技术开发、技术咨询、技术交流、技术转让、技术推广;软件开发;人工智能基础软件开发;人工智能应用软件开发;数据处理服务;信息技术咨询服务;信息系统集成服务:信息系统运行维护服务;计算机系统服务;软件销售;计算机软硬件及辅助设备批发;计算机软硬件及辅助设备零售;电子产品销售;通信设备销售;通讯设备销售;咨询策划服务;市场调查(不含涉外调查);广告制作;广告发布;广告设计、代理;会议及展览服务;货物进出口。(除依法须经批准的项目外,凭营业执照依法自主开展经营活动) 许可项目:建筑智能化系统设计;建设工程施工;网络文化经营;互联网信息服务。(依法须经批准的项目,经相关部门批准后方可开展经营活动,具体经营项目以相关部门批准文件或许可证件为准)公司,拥有自己**的技术体系。公司坚持以客户为中心、一般项目:技术服务、技术开发、技术咨询、技术交流、技术转让、技术推广;软件开发;人工智能基础软件开发;人工智能应用软件开发;数据处理服务;信息技术咨询服务;信息系统集成服务:信息系统运行维护服务;计算机系统服务;软件销售;计算机软硬件及辅助设备批发;计算机软硬件及辅助设备零售;电子产品销售;通信设备销售;通讯设备销售;咨询策划服务;市场调查(不含涉外调查);广告制作;广告发布;广告设计、代理;会议及展览服务;货物进出口。(除依法须经批准的项目外,凭营业执照依法自主开展经营活动) 许可项目:建筑智能化系统设计;建设工程施工;网络文化经营;互联网信息服务。(依法须经批准的项目,经相关部门批准后方可开展经营活动,具体经营项目以相关部门批准文件或许可证件为准)市场为导向,重信誉,保质量,想客户之所想,急用户之所急,全力以赴满足客户的一切需要。自公司成立以来,一直秉承“以质量求生存,以信誉求发展”的经营理念,始终坚持以客户的需求和满意为重点,为客户提供良好的webfunny前端监控,webfunny前端埋点,全链路应用性能监控,Argus-IT运维监控,从而使公司不断发展壮大。

信息来源于互联网 本站不为信息真实性负责