12 天前 / 小米云技术官方
本文介绍了高可用、持久存储、可动态调整的Kubernetes监控方案的实现过程。 上篇文章回顾：记一次kubernetes集群异常：kubelet连接apiserver超时 小米的弹性调度平台（Ocean）以及容器平台主要基于开源容器自动化管理平台kubernetes（简称k8s）来提供服务，完善的监控系统提高容器服务的质量的前提。不同于传统物理主机，每个容器相当于一个主机，导致一台物理主机上的系统指标数量成本增长，总的监控指标规模相当庞大（经线上统计，每node指标达到10000+）。此外，为了避免重复造轮，需要最大限度的利用公司的监控报警系统，需要把k8s的监控和......
16 天前 / 跨界架构师
这里是Z哥的个人公众号 每周五早8点 按时送达 当然了，也会时不时加个餐～ 我的第「74」篇原创敬上 今天端午节，估计这篇文章送达的时候你还在睡觉：D，Z哥先祝你度过个愉快的小假期。 这篇是「分布式系统理论」系列的第22篇，也是最后一篇。我们来聊聊分布式系统中的最后一道保障——监控。 监控这个事情，有点像我们平时对人的健康体检。想要效果好、结果靠谱，就得“全面体检”，每一项都做，否则哪怕检查报告都是正常，也不代表没有问题。下面这个景象是不是很熟悉？ 运营小姐姐问：现在系统好卡啊。 ......
16 天前 / 蚂蚁金服分布式架构SOFAStack
SOFA Scalable Open Financial Architecture是蚂蚁金服自主研发的金融级分布式中间件，包含了构建金融级云原生架构所需的各个组件，是在金融场景里锤炼出来的最佳实践。 SOFALookout 是蚂蚁金服在 SOFAStack 体系内研发开源的一款解决系统的度量和监控问题的轻量级中间件服务。本文给大家介绍下SOFALookout 服务器端主要提供的特性以及使用方式。SOFALookout：https://github.com/sofastack/sofa-lookout | 前言容器，K8S，微服务，Mesh 以及 Serverless 这些新技术方向正在根本的变革我们运行软件的方式。我们构建的系统更加分布式化，另外由......
19 天前 / AIOps智能运维
作者简介 运小伟 百度高级研发工程师 负责百度监控平台报警子系统的设计和研发，在大规模分布式系统、运维监控、精准报警等方面具有广泛的实践经验。 前文回顾 我在百度对抗报警风暴（一） 我在百度对抗报警风暴（二） AIOps时代，你准备好了吗？ 干货概览 Argus（Noah 监控3.0）是百度内部最大的监控平台，提供了机器监控、进程监控、日志监控、远程监控、自定义监控等多种监控方式。它还支持集群级别的监控配置和管理，并支持复杂的异常判断，提供多种途径的报警手段。 图1 Argus监控系统示意图 从系统架构层面，Ar......
22 天前 / u128287
点击上方“马蜂窝技术”，关注订阅更多优质内容 部门的业务线越来越多，任何一个线上运行的应用，都可能因为各种各样的原因出现问题：比如业务层面，订单量比上周减少了，流量突然下降了；技术层面的问题，系统出现 ERROR ，接口响应变慢了。拿大交通业务来说，一个明显的特点是依赖很多供应商的服务，所以我们还需要关注调用供应商接口是否出现异常等等。 为了让大交通下的各业务线都能够通过报警尽早发现问题、解决问题，进而提升业务系统的服务质量，我们决定构建统一的监控报警系统。一方面在第一时间发现已经出现的系统异常，及......
23 天前 / 董鹏
微信公众号：内核小王子 关注可了解更多关于数据库，JVM内核相关的知识; 如果你有任何疑问也可以加我pigpdong[1] 此为轻松构建微服务系列的第九篇文章 前言随着微服务化,以及集群规模化,传统的日志检索,指标监控,调用链分析作为功能单一的系统,已经无法更好的帮我们分析问题,我们需要一个监控平台将他们之间的数据进行整合和分析,输出更友好的视图给用户. 指标报警 -> 应用 -> 服务 -> 事物 -> 堆栈 -> 日志 以下为随手记的监控平台的Focus架构 下图描述了典型的三层监控体系,将基础层,中间件层,应用层的数据进行聚合分析 基础层:监控主机......
29 天前 / sjf0115
DataFun社区大数据、算法的交流学习平台圈内人都在关注 本文根据阿里巴巴高级技术专家李钰（Yu Li）老师在中国HBase技术社区第二届MeetUp：“HBase技术解析及应用实践”中分享的《HBase in Practice-性能、监控及问题解决》编辑整理而成，在未改变原意的基础上稍做整理。 李钰（Yu Li）老师 今天分享主要从两个大的部分介绍，第一部分会讲一些性能优化的知识，针对IO的性能优化，不同版本值得注意的性能问题/优化；第二部分将监控应该关注哪些指标以及在日志里面如何做问题排查。 首先讲一下针对IO性能优化。每个厂商IO硬件性......
37 天前 / wxm
阿里云IoT物联网平台作为一款公有云产品，对设备连接频率，数据上报频率，下行指令频率，消息流转频率都做了基础的使用限制。 完整使用限制文档，请参阅： https://help.aliyun.com/document_detail/30527.html 既然云产品设置了使用限制，那么当我们使用IoT物联网平台时，一旦触发了限制条件，就期望立刻感知到异常，以便做相应业务调整。 通过阅读IoT物联网平台产品文档，我们得知以下使用限制在云监控产品事件监控中会生成系统事件，这样我们就可以配置相应告警规则，通过邮件，短信，钉钉等方式推送到运维人员手上。 云监......
40 天前 / MobService
Mob技术专家/一勾前言由于nginx的快速和高效，生产中的大部分应用都会选择使用nginx来做反向代理，这时对于nginx的监控就显得非常有必要，需要能够直观的显示出nginx实时的流量，访问量，响应时间，http状态码等指标。 prometheus具有由度量名称和键/值对标识的时间序列数据的多维数据模型，能够很好的对nginx的这些指标进行收集，并配合grafana进行图像展示。 收集nginx指标的较多采用的有nginx-vts模块，prometheus-lua两种方式进行采集，本文采用nginx-vts模块方式进行数据收集。 nginx-vts模块1、添加nginx模块nginx -V #configure argu......
41 天前 / laoyang360
0、监控Elasticsearch集群的重要性Elasticsearch具有通用性，可扩展性和实用性的特点，集群的基础架构必须满足如上特性。合理的集群架构能支撑其数据存储及并发响应需求。相反，不合理的集群基础架构和错误配置可能导致集群性能下降、集群无法响应甚至集群崩溃。 适当地监视群集可以帮助您实时监控集群规模，并且可以有效地处理所有数据请求。 本文我们将从五个不同的维度来看待集群，并从这些维度中提炼出监控的关键指标，并探讨通过观察这些指标可以避免哪些潜在问题。 1、集群健康维度：分片和节点集群、索引、分片、副本的定义不再赘述。分......
43 天前 / AIOps智能运维
作者简介 四金 百度高级研发工程师 负责百度智能运维（Noah）监控平台的设计和研发工作，在监控系统的配置管理方向有广泛实践经验。 干货概览 随着软件系统的发展，监控目标场景越来越广泛，对监控系统的能力要求也越来越高。对于监控系统来说，从能力上看基本可以划分为数据采集、数据计算、数据存储、异常检测、报警处理以及监控可视化六块。为了更好应对大规模、复杂化的监控业务场景，我们不仅仅需要在具体监控能力上做深、做强，还需要建立对应机制来统筹这些能力一起良好协作。今天的这篇文章就为大家介绍监控系统的神经中......
43 天前 / 小柒2012
点击▲关注 “爪哇笔记” 给公众号标星置顶 更多精彩 第一时间直达 前言 前几天，在食堂吃饭，本来每天中午的新闻三十分换成了视频监控。我们已经习惯了，前十分钟看着领导都很忙，中间十分钟中国人民都很幸福，后十分钟别的国家都生活在水深火热里，顺便跟同事谈谈国家大事。突然主角换成了我们自己，便毫无抬头的欲望。 恰巧最近也有在接触大屏监控的解决方案，于是乎，就索性拿树莓派实验了一把，做一个智能监控系统。 软硬件清单读卡器以及 SD 卡(装系统用) 摄像头一枚，支持 USB SSH连接工具(SecureCRT，Xshell) 宽带、路由器(家中......
44 天前 / 小柒2012
点击▲关注 “爪哇笔记” 给公众号标星置顶 更多精彩 第一时间直达 前言 前几天，在食堂吃饭，本来每天中午的新闻三十分换成了视频监控。我们已经习惯了，前十分钟看着领导都很忙，中间十分钟中国人民都很幸福，后十分钟别的国家都生活在水深火热里，顺便跟同事谈谈国家大事。突然主角换成了我们自己，便毫无抬头的欲望。 恰巧最近也有在接触大屏监控的解决方案，于是乎，就索性拿树莓派实验了一把，做一个智能监控系统。 软硬件清单读卡器以及 SD 卡(装系统用) 摄像头一枚，支持 USB SSH连接工具(SecureCRT，Xshell) 宽带、路由器(家中......
52 天前 / AIOps智能运维
作者简介 董涵 百度资深研发工程师 负责百度智能运维（Noah）服务管理和分布式监控架构研发工作，在分布式系统和大规模数据处理、可用性工程方向有广泛的实践经验。 干货概览 对于互联网行业来说，最有价值的数据往往蕴含在服务的日志之中。从日志中，我们不仅仅可以获取到服务的使用量、服务效果、问题定位信息等，还可以通过监控系统及时地识别出服务的”健康”状态，规避风险，推动服务优化升级。 在监控系统中，日志处理就是采集服务运行时生成的原始日志，根据用户配置的解析规则，从中提取可用数据，形成监控指标的过程，这个......