9 天前 / mr7
引言今天是2019年2月6号，也就是大年初二，我接到了高中同学刘有码面试失利的消息。 他面试的时候，身份是某知名公司的小码农一枚，却因为不懂自己生产上Redis是如何部署的，导致面试失败！ 人间惨剧，莫过于此。 接到他面试失利的消息，我差点发出猪一样的笑声，显然是平时太少关注孤独烟这个公众号！ 我提笔6次，放笔6次，差点因为过于兴奋而没法编下去。最后还是硬着头皮写下了本文! 因此,今天我们来谈谈Redis集群这个话题，需要说明的是本文 适合人群：不知道自己生产Redis集群架构，以及对Redis集群不了解的人 不适合群: 对自己生产Red......
21 天前 / 深广大数据Club
微信公众号：深广大数据Club 关注可了解更多大数据相关的资讯。问题或建议，请公众号留言; 如果你觉得深广大数据Club对你有帮助，欢迎转发朋友圈 本文介绍如何部署Apache Flink On YARN(也就是如何在YARN上运行Flink作业)，采用HDP 2.6.5以及Apache Flink 1.7.2。 Yarn在Hadoop的生态系统中担任了资源管理和任务调度的角色，可以更好对集群资源进行调度和控制。 此处不对HDP安装做讲述，需要安装HDP的可以通过HDP官网安装指南进行安装。 官方文档QuickStart中包含两种Flink启动方式： 启动一个YARN session(Start a long-running Flin......
32 天前 / 逗逗
温馨提示：要看高清无码套图，请使用手机打开并单击图片放大查看。 Fayson的github：https://github.com/fayson/cdhproject 提示：代码块部分可以左右滑动查看噢 1.文档编写目的 Fayson在之前的文章中介绍过《CDH网络要求(Lenovo参考架构)》，《如何为Hadoop集群选择正确的硬件》和《CDH安装前置准备》，而我们在搭建Hadoop集群时，还一件很重要的事就是如何给集群分配角色。 本文主要介绍由Cloudera Manager管理的CDH集群的角色划分。实际部署你可能还需要考虑工作负载的类型和数量，真实要部署的哪些服务，硬件资源，......
36 天前 / cbsfly
写这篇文章原因所有监控的agent底层最终都是查询的/proc和/sys里的信息推送(如果错了轻喷)，因为在Kubernetes中收集宿主机信息方面也想用pod跑，会面临到问题。 常见的zabbix_agent默认读取fs的/proc和/sys，容器跑agent会导致读取的不是宿主机的/proc和/sys。 而prometheus的node-exporter有选项--path.procfs和--path.sysfs来指定从这俩选项的值的proc和sys读取，容器跑node-exporter只需要挂载宿主机的/proc和/sys到容器fs的某个路径挂载属性设置为readonly后用这两个选项指定即可，zabbix4.0看了文档和容器都找不到类似选项应该不支持。 虽......
44 天前 / 好雨科技
今天，终于，官宣，Rainbond v5.0正式发布！ 今天，终于，官宣，Rainbond v5.0正式发布！ 今天，终于，官宣，Rainbond v5.0正式发布！ Rainbond是开源的企业应用云操作系统，支撑企业应用的开发、架构、交付和运维的全流程，通过无侵入架构，无缝衔接各类企业应用，底层资源可以对接和管理IaaS、虚拟机和物理服务器。我们在5.0版本中进行了大量优化重构，同时也增加了多项重要的功能，使得Rainbond的社区兼容性和稳定性得到全面提升。 · 特· 别· 致· 谢· 此前发布的Beta版本，经过几十家企业用户安装试用，并积极给予我们反馈和支持，......
52 天前 / CodeSheep
文章共 1273字，阅读大约需要 4分钟，文尾有计时器可自行对时！ 概 述Kubernetes集群的搭建方法其实有多种，比如我在之前的文章《利用K8S技术栈打造个人私有云（连载之：K8S集群搭建）》中使用的就是二进制的安装方法。虽然这种方法有利于我们理解 k8s集群，但却过于繁琐。而 kubeadm是 Kubernetes官方提供的用于快速部署Kubernetes集群的工具，其历经发展如今已经比较成熟了，利用其来部署 Kubernetes集群可以说是非常好上手，操作起来也简便了许多，因此本文详细叙述之。 注：本文首发于 作者公众号CodeSheep，可长按/扫描下面的小心心来订阅......
59 天前 / Jackeyzhe
前面我们介绍了国人自己开发的Redis集群方案——Codis，Codis友好的管理界面以及强大的自动平衡槽位的功能深受广大开发者的喜爱。今天我们一起来聊一聊Redis作者自己提供的集群方案——Cluster。希望读完这篇文章，你能够充分了解Codis和Cluster各自的优缺点，面对不同的应用场景可以从容的做出选择。 Redis Cluster是去中心化的，这点与Codis有着本质的不同，Redis Cluster划分了16384个slots，每个节点负责其中的一部分数据。slot的信息存储在每个节点中，节点会将slot信息持久化到配置文件中，因此需要保证配置文件是可写的。当客户端连接时，......
60 天前 / 好学的阳明
上节课和大家讲解了 Prometheus Operator 的安装和基本使用方法，这节课给大家介绍如何在 Prometheus Operator 中添加一个自定义的监控项。 除了 Kubernetes 集群中的一些资源对象、节点以及组件需要监控，有的时候我们可能还需要根据实际的业务需求去添加自定义的监控项，添加一个自定义监控的步骤也是非常简单的。 第一步建立一个 ServiceMonitor 对象，用于 Prometheus 添加监控项第二步为 ServiceMonitor 对象关联 metrics 数据接口的一个 Service 对象第三步确保 Service 对象可以正确获取到 metrics 数据 接下来我们就来为大家演示如何添......
68 天前 / 恒生技术君
一、RabbitMQ默认集群原理RabbitMQ本身是基于Erlang编写，Erlang语言天生具备分布式特性（通过同步Erlang集群各节点的erlang.cookie来实现）。因此，RabbitMQ天然支持集群。集群是保证可靠性的一种方式，同时可以通过水平扩展以达到增加消息吞吐量能力的目的。 下图为集群的示例： 上面图中采用三个节点组成了一个RabbitMQ的集群，Exchange A（交换器）的元数据信息在所有节点上是一致的，而Queue（存放消息的队列）的完整数据则只会存在于它所创建的那个节点上。，其他节点只知道这个queue的metadata信息和一个指向queue的owner node的指......
71 天前 / WilliamGuo
kubernetes多集群管理平台[Wayne](https://github.com/Qihoo360/wayne) v1.1.0正式发布新增加了Ingress支持，增加了国际化，增加了部署资源的迁移，详见[https://github.com/Qihoo360/wayne/blob/v1.1.0/CHANGELOG.md](https://github.com/Qihoo360/wayne/blob/v1.1.0/CHANGELOG.md)- Feature: Adding internationalization features- Feature: Add Ingress support- Feature: User can edit description in app page- Feature: Add kubernetes deployment migration- Feature: OpenAPI add RESTART_DEPLOYMENT- Fix: Cancel forced to uppercase p......
75 天前 / 深广大数据Club
微信公众号：深广大数据Club 关注可了解更多大数据相关的资讯。问题或建议，请公众号留言; 如果你觉得深广大数据Club对你有帮助，欢迎赞赏 本文主要讲述Apache Flink在集群模式下提交任务的执行流程源码分析。 本地模式任务提交源码解析可以参考上篇文章《Flink源码解析 | 从Example出发：读懂本地任务执行流程》进行了解。 Apache Flink集群模式任务提交执行流程入口与本地模式入口相同。 我们还是从SocketWindowWordCount入手. 任务代码入口 SocketWindowWordCount.runfinalStreamExecutionEnvironmentenv=StreamExecutionEnvironment.g......
90 天前 / sjf0115
女主宣言 本文是作者根据实际经验总结出的关于Kafka集群的故障恢复相关的总结，希望对大家有所帮助。 PS：丰富的一线技术、多元化的表现形式，尽在“HULK一线技术杂谈”，点关注哦！ Kafka 集群部署环境 1、kafka 集群所用版本 0.9.0.1 2、集群部署了实时监控: 通过实时写入数据来监控集群的可用性, 延迟等; Part 1 1 集群故障发生 ● 集群的实时监控发出一条写入数据失败的报警, 然后马上又收到了恢复的报警, 这个报警当时没有重要,没有去到对应的服务器上去看下log,恶梦的开始啊~~~ ● 很快多个业务反馈Topic无法写入, 运维人员......