2 天前 / HueiFeng
作者：余生大大，大数据开发工程师，云原生爱好者，KubeSphere 社区用户。 前言 Redis 是在开发过程中经常用到的缓存中间件，在生产环境中为了考虑稳定性和高可用一般为集群模式的部署。 常规部署在虚拟机上的方式配置繁琐并且需要手动重启节点，而使用 K8s 进行 Redis 集群的部署有以下优点： 安装便捷：使用镜像或者 yaml 配置文件即可一件安装。自动调度：容器挂掉后会自动调度重启和资源分配。缩扩容方便：在 扩容、缩容 方面的优点无需多说，一键伸缩。稳定高效：K8s 在整个集群上进行调度，只要整个集群不挂掉总会调度到合适节点重启容器服务。
16 天前 / Scenic
作者：老 Z，云原生爱好者，目前专注于云原生运维，KubeSphere Ambassador。 前言知识点定级：入门级 RabbitMQ 单节点安装部署 RabbitMQ 集群安装部署 GitOps 运维思想演示服务器配置主机名 IPCPU 内存系统盘数据盘用途 zdeops-master192.168.9.92440200Ansible 运维控制节点 ks-k8s-master-0192.168.9.9141640200+200KubeSphere/k8s-master/k8s-worker/Cephks-k8s-master-1192.168.9.9241640200+200KubeSphere/k8s-master/k8s-worker/Cephks-k8s-master-2192.168.9.9341640200+200KubeSphere/k8s-master/k8s-worker/Cephstorage-node-0192.168.9.95284020...
18 天前 / Scenic
讲师简介许世威，华为云边缘计算技术专家。硕士毕业于浙江大学，2017 年加入华为云云原生团队，参与华为内部云原生技术平台建设与开源社区贡献。主要负责云原生智能边缘平台的设计与开发，KubeEdge 社区研发工作，在云原生和边缘容器等领域拥有丰富的开源社区与商业落地实践经验。 分享内容简介随着越来越多的企业以及组织将 KubeEdge 大规模落地，KubeEdge 的可扩展性和大规模部署逐步成为社区用户的关注点。因此，KubeEdge 社区进行了 KubeEdge 集群的大规模性能测试，目前 K8s + KubeEdge 集群能够稳定支持 10 万边缘节点同时在线...
23 天前 / HueiFeng
背景 kubeasz 是一个利用 ansible-playbook 基于二进制方式自动化部署和运维 k8s 集群的开源项目，目前该项目最新发布版本为 3.3.0，基于该版本我们可以快速实现部署最高版本为 1.24.1 的 k8s 集群。 安装规划 K8s HA-architecture 基于 kubeasz 安装的 k8s 高可用架构方案如上，目前 kubeasz 的官方文档中 Node 节点还使用的是 haproxy 处理自身高可用，但实际上 kubeasz-3.3.0 目前是使用 kube-lb 代替了 haproxy，这部分内容官方还没有来得及更新，使用上留意下就可以了。
47 天前 / 数栈DTinsightu580540
导读： 8 月 2 日晚，袋鼠云大数据运维专家海洋为大家带来了「ChengYing 部署 Hadoop 集群实战」的分享，我们将直播精华部分做了整理，带大家再次回顾内容，加深对技术细节的了解。 你能看到 Hadoop 集群部署准备 Hadoop 集群部署流程 Hadoop 集群使用与运维 Taier 对接 Hadoop 操作流程 Hadoop 集群近期规划 直播课件获取： 关注公众号“数栈研习社”，后台私信“ChengYing”获得直播课件 直播视频回看： https://www.bilibili.com/video/BV1SG4y1e7rBspm_id_from=333.999.0.0 演讲 / 海洋 整理 / 花夏 本期我们带大家回顾一下海洋同学的直播分享《...
52 天前 / 莫若
作者 | Bryan Beaudreault 译者 | Sambodhi 策划 | TinaHubSpot 的数据基础设施团队，每天都要处理 2.5PB 以上的低延迟流量，他们亲眼目睹了 Locality 对于 HBase 的性能有多么重要。请继续阅读，以了解更多关于这些问题：什么是 Locality ，为什么如此重要，以及我们如何在不断增长的 HBase 集群中使保持 Locality 成为一个不成问题的问题。 HubSpot 的一些最大的数据集存储在 HBase 中，这是一个开源的、分布式的、版本化的、非关系型的数据库，模仿谷歌的 BigTable。
55 天前 / sjf0115
本文翻译自 StreamNative 博客《Pulsar Isolation Part IV: Single Cluster Isolation》[1]，作者高冉，StreamNative 软件工程师，Apache Pulsar Committer。 校对：StreamNative 译者简介宋博，就职于北京百观科技有限公司，高级开发工程师，专注于微服务、云计算与大数据领域。 介绍这是我们关于如何在 Apache Pulsar 中实现资源隔离博客系列中的第四篇。在深入研究之前，让我们回顾一下前三篇博客所涵盖的内容。 深度解析如何在 Pulsar 中实现隔离介绍了在 Pulsar 中实现隔离的三种方法。
64 天前 / sjf0115
导语 近期，腾讯 TEG 数据平部 MQ 团队开发部署了一套底层运维指标性能分析系统（本文简称 Data 项目） ，目前作为通用基础设施服务整个腾讯集团。该系统旨在收集性能指标、上报数据以用于业务的运维监控，后续也将延用至前后端实时分析场景。 腾讯 Data 项目选用 Apache Pulsar 作为消息系统，其服务端采用 CVM 服务器（Cloud Virtual Machine，CVM）部署，并将生产者和消费者部署在 Kubernetes 上，该项目 Pulsar 集群是腾讯数据平台部 MQ 团队接入的消息量最大的 Pulsar 集群。
71 天前 / Scenic
本公众号曾发表过多篇 Harbor 高可用方案的文章，除了本篇之外，还有以下文章可参考： 一文读懂 Harbor 的高可用方案 | 收藏 Harbor 2.0 配置高可用的镜像仓库 在 Kubernetes 中部署高可用 Harbor 镜像仓库 本文由开源摘星计划支持项目 Harbor 的贡献者「勾永彪」投稿。 开源摘星计划（WeOpen Star） 是由腾源会 2022 年推出的全新项目，旨在为开源人提供成长激励，为开源项目提供成长支持，助力开发者更好地了解开源，更快地跨越鸿沟，参与到开源的具体贡献与实践中。
76 天前 / HueiFeng
备注：本文首发于 InfoQ 中文站点，作者为鲍明宇、张大伟。 关于 Apache Pulsar 云原生时代消息队列和流融合系统，提供统一的消费模型，支持消息队列和流两种场景，既能为队列场景提供企业级读写服务质量和强一致性保障，又能为流场景提供高吞吐、低延迟；采用存储计算分离架构，支持大集群、多租户、百万级 Topic、跨地域数据复制、持久化存储、分层存储、高可扩展性等企业级和金融级功能。 GitHub 地址：http://github.com/apache/pulsar/ 导读近期，腾讯 TEG 数据平部 MQ 团队开发部署了一套底层运维指标性能分析系统（本文简称 Data 项目） ...
79 天前 / Scenic
Helm Charts[1] 如今已是一种非常流行的软件打包方式，在其应用市场中你可以找到接近一万款适用于云原生环境的软件。然后在如今的混合云多集群环境中，业务越来越依赖部署到不同的集群、不同的环境、同时指定不同的配置。再这样的环境下，单纯依赖 Helm 工具可能无法做到灵活的部署和交付。 在本文中，我们将介绍如何通过 KubeVela[2] 解决多集群环境下 Helm Chart 的部署问题。如果你手里没有多集群也不要紧，我们将介绍一种仅依赖于 Docker 或者 Linux 系统的轻量级部署方式，可以让你轻松的体验多集群功能。
79 天前 / BloomingRose
原文： blog.csdn.net/Seky_fei/article/details/107239765 在服务开发中，单机都会存在单点故障的问题，及服务部署在一台服务器上，一旦服务器宕机服务就不可用，所以为了让服务高可用，分布式服务就出现了，将同一服务部署到多台机器上，即使其中几台服务器宕机，只要有一台服务器可用服务就可用。 redis 也是一样，为了解决单机故障引入了主从模式，但主从模式存在一个问题：master 节点故障后服务，需要人为的手动将 slave 节点切换成为 maser 节点后服务才恢复。
80 天前 / Scenic
最近遇到了一个 alertmanager HA 集群莫名发送告警恢复消息的问题。简单来说就是线上配置了一个一直会产生告警的规则，但却会收到 alertmanager 发来的告警恢复消息，与预期不符。 所使用的告警架构如下，vmalert 产生的告警会通过 LB 发送到某个后端 alertmanager 实例。原本以为，接收到该告警的 alertmanager 会将告警信息同步到其他实例，当 vmalert 产生下一个相同的告警后，则 alertmanager 实例中的第二个告警会刷新第一个告警，后续通过告警同步将最新的告警发送到各个 alertmanager 实例，从而达到抑制告警和抑制告警恢复的效果 (。
96 天前 / 我是阳明
前面我们提到了 Loki 部署的单体模式和读写分离两种模式，当你的每天日志规模超过了 TB 的量级，那么可能我们就需要使用到微服务模式来部署 Loki 了。 微服务部署模式将 Loki 的组件实例化为不同的进程，每个进程都被调用并指定其目标，每个组件都会产生一个用于内部请求的 gRPC 服务器和一个用于外部 API 请求的 HTTP 服务。 ingesterdistributorquery-frontendquery-schedulerquerierindex-gatewayrulercompactor 将组件作为单独的微服务运行允许通过增加微服务的数量来进行扩展，定制的集群对各个组件具有更好的可观察性。
101 天前 / BloomingRose
1 使用 kubeadm 部署 Kubernetes 如无特殊说明，以下操作可以在所有节点上进行。 1.1 首先我们需要配置一下阿里源 cat/etc/yum.repos.d/kubernetes.repo [kubernetes] name=Kubernetes baseurl=http://mirrors.aliyun.com/kubernetes/yum/repos/kubernetes-el7-x86_64 enabled=1 gpgcheck=1 repo_gpgcheck=0 gpgkey=http://mirrors.aliyun.com/kubernetes/yum/doc/yum-key.gpg http://mirrors.aliyun.com/kubernetes/yum/doc/rpm-package-key.gpg EOF 1.2 开始安装执行以下命令开始安装，可以默认安装也可以指定版本安装，目前的最新版本是 1.24.1...