20 天前 / 老张
性能测试过程中，监控分析和调优是最核心也是占比最大的一部分。性能分析的目的是找出系统性能存在的瓶颈与风险，性能调优就是尽可能用更少的资源提供更好的服务。而其关键点，就是生成负载、监控相关指标。性能测试前期的需求调研、开始前的准备工作，都是为了保证后期的监控分析调优能顺利且高效进行。那么，一个完整的监控体系，需要包含哪些？这篇文章，聊聊我在工作实践中如何监控，以及比较完善的监控体系，都包含哪些指标和工具。。。 在讲述监控分级体系之前，有必要了解下面的概念： APM(Application Performance Management)：对......
23 天前 / AIOps智能运维
作者简介 刘伟伟 百度高级研发工程师 负责百度智能运维产品（Noah）监控平台的设计和研发工作，在系统监控、业务监控等方向有广泛的实践经验。 多年之后，这名少年站在无数聚光灯前，准会想起那个遥远的下午。 这天，少年所要接手的系统是公司最新研发的某金融类产品，摆在面前的是一张画满了各种形状和符号的A4图纸，顺着箭头的方向，他依次看到了“服务注册”、“服务发现”、“负载均衡”以及“服务网关”等熟悉的词汇，同时纸张的主要位置整齐地画满了相互独立的方格，用交错的线条连接，这不由得让他想起校招面试中默写Dij......
32 天前 / 一猿小讲
【这是一猿小讲的第 68篇原创分享】 场景一：页面提示超时了，到底是哪个服务响应慢了呢？ 场景二：系统当前的处理能力如何，TPS、QPS 指标是多少呢？ 场景三：线上服务部署在多台机器上，你挨个登录机器去查日志，感觉烦不烦？ 面对诸如上面的场景，如果你正在纠结，那今天罗列推荐的这些轮子，多少都能解你所惑。 0. 监控天下三分 先帝创业未半而中道崩殂，今监控天下三分。如下图所示，监控的天下被划分为基于 Tracing（调用链）监控、基于Metrics（指标）监控、基于Logging（日志） 的监控。 1.基于 Tr......
35 天前 / Fundebug
前言 这是学习源码整体架构第四篇。整体架构这词语好像有点大，姑且就算是源码整体结构吧，主要就是学习是代码整体结构，不深究其他不是主线的具体函数的实现。文章学习的是打包整合后的代码，不是实际仓库中的拆分的代码。 其余三篇分别是： 1.学习 jQuery 源码整体架构，打造属于自己的 js 类库 2.学习underscore源码整体架构，打造属于自己的函数式编程类库 3.学习 lodash 源码整体架构，打造属于自己的函数式编程类库 感兴趣的读者可以点击阅读。 导读 本文通过梳理前端错误监控知识、介绍 sentry错误监控原理、 sentry初始化、 Aj......
37 天前 / 江城子
背景介绍 饿了么监控系统 EMonitor ：是一款服务于饿了么所有技术部门的一站式监控系统，覆盖了系统监控、容器监控、网络监控、中间件监控、业务监控、接入层监控以及前端监控的数据存储与查询。每日处理总数据量近 PB ，每日写入指标数据量百T，每日指标查询量几千万，配置图表个数上万，看板个数上千。 CAT：是基于 Java 开发的实时应用监控平台，为美团点评提供了全面的实时监控告警服务。 本文通过对比分析下两者所做的事情为契机讨论监控系统或许该有的面貌，以及浅谈下监控系统发展的各个阶段。 CAT 做的事情（开源版） 首先要强......
50 天前 / 程序员武功秘籍
CEP - Complex Event Processing复杂事件处理。 订单下单后超过一定时间还未进行支付确认。 打车订单生成后超过一定时间没有确认上车。 外卖超过预定送达时间一定时限还没有确认送达。 Apache FlinkCEP API CEPTimeoutEventJob FlinkCEP源码简析DataStream和PatternStreamDataStream 一般由相同类型事件或元素组成，一个DataStream可以通过一系列的转换操作如Filter、Map等转换为另一个DataStream。 PatternStream 是对CEP模式匹配的流的抽象，把DataStream和Pattern组合在一块，然后对外提供select和flatSelect等方法。PatternStream并不......
55 天前 / Howie6879
上一篇推文中提到，我希望通过监控微信对应的聊天记录，来实现一个消息自动处理的机器人，上篇文章实现的就是自动保存感兴趣的文章到Bear。 虽说那篇文章比较实用，也有很多朋友表示喜欢，但还有不少缺陷： 对技术薄弱的朋友复现困难，项目很多配置需要手动生成，前期校验工作很多二次开发比较困难，不能直接作为第三方包使用项目兼容性不强，目前只支持Mac并且只支持微信这个APP，其他如钉钉就没辙项目稳定性不强，微信更改机制可能又需要重头再来 对，问题很多，但在勉强能用的情况下我并不是很有动力进行新方案的开发。那么是什么原因促使我......
55 天前 / 宜信技术学院
活动关于我们Kubernetes监控实践（2）：可行监控方案之Prometheus和Sensu 作者：译文 浏览：1368 日期：2019-09-27 本文介绍两个可行的K8s监控方案：Prometheus和Sensu。两个方案都能全面提供系统级的监控数据，帮助开发人员跟踪K8s关键组件的性能、定位故障、接收预警。 一、K8s监控之Prometheus1.1 简介Prometheus是针对容器和微服务的开源监控预警工具，功能稳健，适用于开发流程中的云端管理员和开发人员等各个相关方。Prometheus定时聚合配置对象中的指标数据，评估规则表达式，展示结果，发送预警。 Prometheus不仅能够监控预定义指标，还......
64 天前 / 开发者头条
点击链接或图片即可阅读 喜欢请分享到朋友圈哦 项目介绍 falcon-log-agent 是一个开源版的日志采集工具，旨在从流式的日志中抓取、统计日志中的特征信息。获取的特征信息，与开源版 Open-Falcon 监控系统打通。可用于业务指标的衡量、也可用于稳定性的建设。Feature准确可依赖：历经滴滴线上业务近一年考验，统计准确性高。性能高、资源消耗可控：性能优化程度高，单核单策略可支撑日志分析：20W 条/秒。接入成本低：外挂式采集，只需要标准化日志即可；输出数据直接对接 open-falcon。GitHub 地址 如何获取项目地址？点击链接，打开后......
80 天前 / 小柒2012
点击▲关注 “爪哇笔记” 给公众号标星置顶 更多精彩 第一时间直达 前言 在上一篇推文中，我们使用时序数据库InfluxDb做了流控数据存储，但是数据存储不是目的，分析监控预警才是最终目标，那么问题来了，如何更好的实现呢？用过阿里巴巴 Sentinel 控制台的小伙伴，是不是觉得它的控制台丑爆了，而且只有短短的五厘米，显然不能满足大部分人或者场景的使用。架构 工具sentinel-dashboard（控制台，收集数据） Influxdb（时序数据库，存储数据） Chronograf （展示控制台，显示监控预警） 安装Sentinel 控制台 和 时序数据库 Influxdb 的安......
82 天前 / sjf0115
本文根据dbaplus社群第198期线上分享整理而成，文末还有好书推荐哦~ 讲师介绍陈晓宇 宜信容器云架构师 负责宜信PaaS平台的设计和推广，帮助企业从传统应用迁移至云原生； 在云计算相关行业具有丰富的研发与架构经验，参与多个社区开源项目（Openstack、Kubernetes、Harbor等）； 曾参与编写《深入浅出Prometheus》一书。 一、简介 Kubernetes自从2012年开源以来便以不可阻挡之势成为容器领域调度和编排的领头羊，Kubernetes是Google Borg系统的开源实现，于此对应Prometheus则是Google BorgMon的开源实现。Promet......
84 天前 / 一猿小讲
【这是一猿小讲的第53篇原创分享】 你们之中很多人多多少少都接触过监控，但是你所知道的监控，到底属于哪一类呢？这期我们就从下面这张图开始聊起。如图所示，可以清晰的看出，监控的世界可以被划分为基于 Logging 的监控、基于 Tracing 的监控、基于 Metrics 的监控。 图片来源：http://peter.bourgon.org/blog/2017/02/21/metrics-tracing-and-logging.html 基于 Logging 的监控，背后对应的是日志系统。我们都知道，线上服务在马不停蹄的向外喷日志，但是可以通过 FileBeat、Flume 等 Agent 完成日志的采集，并存储到 ElasticSe......
100 天前 / Fundebug
Fundebug前端异常监控服务Fundebug提供专业的前端异常监控服务，我们的插件可以提供全方位的异常监控，可以帮助开发者第一时间定位各种前端异常，包括但不限于JavaScript执行错误以及HTTP请求错误。 并且，Fundebug支持Source Map还原，记录用户行为以及“录制”用户操作视频，帮助开发者快速复现BUG，提高Debug效率，欢迎大家免费试用~ Fundebug前端异常监控插件更新至2.0.0，全面支持TypeScript，为使用TypeScript的用户提供更好的编程体验。 关于TypeScript想必大家都听说过TypeScript： Vue 3.0使用TypeScript重写Node.js作者使用TypeScrip......
100 天前 / 大数据手稿笔记
最近在做大数据监控平台的方案调研，做了一些开源解决方案的尝试，今天分享一下基于Telegraf+InfluxDB+Grafana的监控平台整体部署过程。文章开始会简单介绍下 TICK 技术栈，接下来就是本次方案各个组件的安装部署了。希望对正在调研大数据监控平台或对监控系统感兴趣的同学有所帮助。 我们知道这种监控平台的数据特征一般都是时间序列数据（简称 时序数据），那么相应的这些数据最好是存储在时序数据库中，目前主流的时序数据库有InfluxDB、OpenTSDB、Graphite、TimescaleDB等。其中，InfluxDB是目前监控领域使用较多的时序数据库，并且基于Influx......
102 天前 / CainGao0
“Grafana在的使用场景与公司当前的数据场景非常契合。所以选型了Grafana进行数据的展现与一些告警的实现。利用Grafana的能力融合硬件监控+业务监控为运维提供实时报表与实时监控能力。Grafana展现Zabbix实时大屏则能够直接展现Zabbix的异常指标数据。” Grafana安装 Grfana的安装比较简单方便，基本参照Grafana官方文档就能够完成安装。 Grafana有安装版与Cloud版。我们当前使用自己安装的方式进行Grafana的使用。在 You Run It 选择Download进行Grafana包的下载。会进入页面 https://grafana.com/grafana/download 选择系统对......