3 天前 / 志军
一、前置知识点理解 Ingress 简单的说，ingress 就是从 kubernetes 集群外访问集群的入口，将用户的 URL 请求转发到不同的 service 上。Ingress 相当于 nginx、apache 等负载均衡方向代理服务器，其中还包括规则定义，即 URL 的路由信息，路由信息得的刷新由 Ingress controller[1]来提供。 理解 Ingress Controller Ingress Controller 实质上可以理解为是个监视器，Ingress Controller 通过不断地跟 kubernetes API 打交道，实时的感知后端 service、pod 等变化，比如新增和减少 pod，service 增加与减少等；当得到这些变化信息后...
16 天前 / KevinYan
前言之前给大家介绍过几种在笔记本电脑上安装 Kubernetes 集群的工具，虽然安装起来不太繁琐但是多多少少还是需要花一些时间的，对于不想瞎倒腾，就想快速安装个本地集群开始学习和测试的同学，推荐你们试一试 Docker 桌面应用里自带的 Kubernetes 集群。其实我也是之前用 Minikube 安装的集群莫名其妙坏掉启动不起来后，偶然发现 Docker 桌面应用里内嵌了一个 Kubernetes 集群，试了试效果感觉还是挺不错的。下面我带大家简单过一下启用集群方法，全程几乎就是点点点，也不需要做啥。
21 天前 / sjf0115
背景现状 HDFS 全称是 Hadoop Distributed File System，其本身是 Apache Hadoop 项目的一个模块，作为大数据存储的基石提供高吞吐的海量数据存储能力。自从 2006 年 4 月份发布以来，HDFS 目前依然有着非常广泛的应用，以字节跳动为例，随着公司业务的高速发展，目前 HDFS 服务的规模已经到达“双 10”的级别： 单集群节点 10 万台级别单集群数据量达到 10EB 级别主要使用场景包括 离线 OLAP 查询引擎存储底座，包括 Hive/ClickHouse/Presto 等场景机器学习离线训练数据近线 ByteMQ 流式任务 Checkpoint 业界很多公司在维护 HDFS 服务时...
31 天前 / AddoZhang
tools 之前写过一篇介绍了工具加速云原生 Java 开发。 其实日常工作中在集群上的操作也非常多，今天就来介绍我所使用的工具。 kubectl-alias 使用频率最高的工具，我自己稍微修改了一下，加入了StatefulSet的支持。 这个是我的 https://github.com/addozhang/kubectl-aliases，基于 https://github.com/ahmetb/kubectl-aliases。 比如输出某个 pod 的 json，kgpoojson xxx等同于kubectl get pod xxx -o json。 结合 jq 使用效果更好 。
35 天前 / AddoZhang
本文详细介绍了 Jenkins 如何通过tekton-client-plugin[1]实现与 Kubernetes 上的 Tekton Pipeline 交互，包括 Kubernetes 上安装 Jenkins、Tekton Pipelines 等。 关于如何使用 Tekton Pipeline 实现 CICD 可以看这篇文章云原生 CICD: Tekton Pipeline 实战 [2] 本文用于构建的项目以及所有 manifest yaml 都在可以在这里 [3]下载。 TL;DR 惯例，先上总结。tekton-client-plugin虽然还是处于初期阶段，但是其价值非常明显，尤其是对先用使用 Jenkins 作为 CICD 实现的用户来说。
36 天前 / 钟子敬07
前言 ZooKeeper 作为 dubbo 的注册中心，可谓是重中之重，线上 ZK 的任何风吹草动都会牵动心弦。最近笔者就碰到线上 ZK Leader 宕机后，选主无法成功导致 ZK 集群拒绝服务的现象，于是把这个 case 写出来分享给大家 ( 基于 ZooKeeper 3.4.5)。 Bug 现场一天早上，突然接到电话，说是 ZooKeeper 物理机宕机了，而剩余几台机器状态都是 sh zkServer.sh status it is probably not running 笔者看了下监控，物理机宕机的正好是 ZK 的 leader。
42 天前 / u128287
本文是上海站 Meetup 讲师王文虎根据其分享内容整理的文章。 KubeSphere 社区的小伙伴们，大家好。我是中通快递容器云平台的研发工程师王文虎，主要负责中通快递容器云平台开发、应用容器化推广、容器平台运维等工作。非常感谢 KubeSphere 社区的邀请，让我有机会跟大家分享中通快递关键业务和复杂架构挑战下的 Kubernetes 集群服务暴露实践。 ZKE 容器管理平台首先介绍一下中通的容器云管理平台 ZKE。ZKE 平台是基于 KubeSphere 开发的，现在管理的中通内部集群超过十个，包含开发、测试、预发布、生产等环境，所有用户都通过 ZKE 平台管理容器应用。
53 天前 / u128287
一、摘要信也容器云平台基于 Kubernetes 和 Docker 开发，自 2018 年底上线以来，总共维护了 8 套 k8s 集群，生产接入超过 850 个应用，全环境实例数达到 9000。作为一家金融科技公司，服务稳定性必然是逃不开的话题，本次分享就以集群部署、高可用控制器、监控智能化处理三个部分，为大家介绍容器云在稳定性保障方面的一些经验和思考。 二、集群部署以生产环境为例，我们有两个机房，每个机房部署了两套 K8S 集群，同一机房的集群节点数相等。
58 天前 / 叫我阿柒啊
前言 2020 年 4 月 30 日，Redis 6.0.0 正式发布，标志着 redis 从此告别单线程。在此之前，在大数据生产环境中使用的是一个 30 个节点的 Codis 集群，SparkStreaming 以此作为缓存，QPS 高峰大概在 2000w/s。 因为 Codis 不再更新迭代，于是在 Redis 6.0.6 版本发布的时候搭建了 Redis Cluster，新的应用将不再使用 Codis。之前连接 Codis 使用的 Java 客户端是 Jedis，通过 Pipeline 方式批次执行命令，以此来提高效率。而 Redis Cluster 的客户端 JedisCluster 没有提供 Pipeline 方式，只能单条执行命令，于是开始考虑其他的 Java 客户端。
59 天前 / KevinYan
今天用这篇文章带大家在自己的电脑上搭建一个 Kubernetes Etcd 集群，Kubernetes 本身的功能就依赖 Etcd 实现，不过并不会开放给我们的程序使用，所以需要自己单独搭建。 Etcd 现在是分布式服务架构中的重要组件，它由 CNCF 孵化托管， 在微服务和 Kubernates 集群中不仅可以作为服务注册与发现，还是一个用于配置共享的分布式键值存储，采用 raft 算法，实现分布式系统数据的可用性和一致性。 一般用 Go 语言开发的 gRPC 服务会使用 Etcd 实现服务发现和注册。
69 天前 / kafeidou
4 月 26 日，在华为开发者大会（Cloud）2021 上，工商银行 Paas 云平台架构师沈一帆发表了《工商银行多 k8s 集群管理及容灾实践》主题演讲，分享了工商银行使用多云容器编排引擎 Karmada 的落地实践过程。 演讲主要包含四方面的内容： 1) 工行云计算业务背景 2) 业界多集群管理方案及选型 3) 为什么选择 Karmada4) 落地情况及未来展望 工行云计算业务背景 近几年互联网的崛起，对金融行业的金融模式及服务模式都产生了巨大的冲击，这令我们不得不做出一些巨大的革新。同时从现在的角度来看，银行业务系统入云已是大势所趋。
72 天前 / 知了一笑
一、Flink 概述 1、基础简介 Flink 是一个框架和分布式处理引擎，用于对无界和有界数据流进行有状态计算。Flink 被设计在所有常见的集群环境中运行，以内存执行速度和任意规模来执行计算。主要特性包括：批流一体化、精密的状态管理、事件时间支持以及精确一次的状态一致性保障等。Flink 不仅可以运行在包括 YARN、Mesos、Kubernetes 在内的多种资源管理框架上，还支持在裸机集群上独立部署。在启用高可用选项的情况下，它不存在单点失效问题。
76 天前 / 携程技术
作者简介 Liang，携程研发总监，关注 DevOps，前端 & 服务端质量保障、能效提升； Tony，携程资深测试经理，关注自动化测试框架及平台类工具开发。 一、背景 在携程内部业务高频率敏捷迭代发布节奏下，线上生产服务质量需要同步快速提升。这就依赖自动化测试的覆盖率提升，测试任务执行频次提升，测试任务执行速率提升。 通过调研机票前台内部，以及携程其他事业部前台研发和测试团队，发现存在普遍共性痛点。需要清晰化解耦自动化测试体系的三层架构，解决当前核心瓶颈。 SaaS 上层服务，例如 UI 测试，API 测试，兼容性测试，稳定性测试。
80 天前 / 知了一笑
一、Spark 概述 1、Spark 简介 Spark 是专为大规模数据处理而设计的，基于内存快速通用，可扩展的集群计算引擎，实现了高效的 DAG 执行引擎，可以通过基于内存来高效处理数据流，运算速度相比于 MapReduce 得到了显著的提高。 2、运行结构 Driver 运行 Spark 的 Applicaion 中 main()函数，会创建 SparkContext，SparkContext 负责和 Cluster-Manager 进行通信，并负责申请资源、任务分配和监控等。