sjf0115 sjf0115 / 4 天前

字节跳动 Flink 单点恢复功能实践

背景在字节跳动的实时计算场景中,我们有很多任务(数量 2k+)会直接服务于线上,其输出时延和稳定性会直接影响线上产品的用户体验,这类任务通常具有如下特点: 流量大,并发高(最大的任务并行度超过 1w)拓扑类似于多流 Join,将各个数据源做整合输出给下游,不依赖 Checkpoint 没有使用 Checkpoint 并且对短时间内的小部分数据丢失不敏感(如 0.5%),但对数据输出的持续性要求极高在 Flink 现有的架构设计中...

Flink 字节跳动

hyper0x hyper0x / 4 天前

还在担心服务挂掉?Sentinel Go 让服务稳如磐石

背景 微服务的稳定性一直是开发者非常关注的话题。随着业务从单体架构向分布式架构演进以及部署方式的变化,服务之间的依赖关系变得越来越复杂,业务系统也面临着巨大的高可用挑战。 在生产环境中大家可能遇到过以下不稳定的情况: 大促时瞬间洪峰流量导致系统超出最大负载,load 飙高,系统崩溃导致用户无法下单 “黑马”热点商品击穿缓存,DB 被打垮,挤占正常流量 调用端被不稳定第三方服务拖垮,线程池被占满...

Golang sentinel

钟子敬07 钟子敬07 / 4 天前

只要我跑的够快,内卷它就卷不到我

前言 最近刚刚入职,确实很忙,大周末的跑到公司来研究 Apollo 的源码。但是答应了群友出一篇面试的文章,所以想来想去先把文章写了再说。 先大概说下我的面试经历吧 笔者是从 9 月 3 号开始面试的,9 月 15 号入职了微盟,目前是微盟基础技术中心的一名高级开发工程师。期间一共面试了 9 家公司,其中 4 家确定了 offer 跟具体薪资。

面试

aoho求索 aoho求索 / 4 天前

彻底搞懂 Etcd 系列文章(八):Etcd 事务 API

0 专辑概述 etcd 是云原生架构中重要的基础组件,由 CNCF 孵化托管。etcd 在微服务和 Kubernates 集群中不仅可以作为服务注册与发现,还可以作为 key-value 存储的中间件。 《彻底搞懂 etcd 系列文章》将会从 etcd 的基本功能实践、API 接口、实现原理、源码分析,以及实现中的踩坑经验等几方面具体展开介绍 etcd。预计会有 20 篇左右的文章,笔者将会每周持续更新,欢迎关注。

API Etcd

FX_SKY FX_SKY / 4 天前

分布式事务精华总结篇,实打实的干货

- 总述 - 咱们前面分别对分布式事务的几个分支:XA、2PC、3PC、TCC、Saga、事务消息、最大努力事务进行的详细介绍。本篇作为分布式事务设计的收尾篇,讲对前面的内容查缺补漏和总结,最后对市面的一些开源框架做一些介绍。 - 查缺补漏 -1.补偿型事务柔性事务分补偿型事务和通知型事务。但对补偿型事务没有进行详细介绍,那什么是补偿型事务呢,在 Atomikos 公司 Guy Pardon 的论文《Business_Activities》中有这样的...

分布式

东溪陈姓少年 东溪陈姓少年 / 4 天前

[译] 2020 年 Spring 状态报告

Spring

Thinkgamer Thinkgamer / 4 天前

计算广告与推荐系统有哪些区别?使用的主流模型有哪些?

点击标题下「搜索与推荐 Wiki」可快速关注▼精彩推荐▼1、最差的算法工程师也不过如此了 2、算法工程师的数学基础|如何理解概率分布函数和概率密度函数 3、特征工程|连续特征的常见处理方式(含实例) 4、论文|从 DSSM 语义匹配到 Google 的双塔深度模型召回和广告场景中的双塔模型思考导读:"计算广告与推荐系统有哪些区别?"、"目前各公司广告算法使用的主流模型有哪些?",又到了小编逛知乎的日子 ^_^...

广告 推荐系统

知了一笑 知了一笑 / 4 天前

架构设计:基于 Seata 中间件,微服务模式下事务管理

一、Seata 简介 1、Seata 组件 Seata 是一款开源的分布式事务解决方案,致力于提供高性能和简单易用的分布式事务服务。Seata 将为用户提供了 AT、TCC、SAGA、XA 事务模式,为用户打造一站式的分布式解决方案。 2、支持模式 AT 模式 基于支持本地 ACID 事务的关系型数据库。 Java 应用,通过 JDBC 访问数据库。 一阶段:业务数据和回滚日志记录在同一个本地事务中提交,释放本地锁和连接资源。

中间件 架构 微服务 Seata

GeekOnline GeekOnline / 4 天前

WICC 2020 重磅来袭!你关心的通信前沿技术都在这里!

随着信息技术的不断发展,以云计算技术理念和服务模式所提供的 IP 通信能力,已经开始被广泛应用于互联网应用、企业级应用和新兴的智能硬件场景中。毋庸置疑的是,以云方式来实现话音、视频、消息等能力的运营、维护和管理,并以服务的方式向应用提供支持,将带来业务运营和产品体验上的显著升级和突破。 如今,面对开发者企业对通信的新诉求,通信的场景正由单一走向多样化。

通信 WICC

kyrie注入 kyrie注入 / 4 天前

渗透测试之信息收集

关注 Web 安全渗透测试之信息收集 2020-09-21 11:14:25 一、域名信息 whois 查询 whois 信息在线收集地址站长之家: http://whois.chinaz.com/ 阿里云域名信息查询:https://whois.aliyun.com 爱站:https://whois.aizhan.com/ 微步:https://x.threatbook.cn/ whois 反查站长之家:http://whois.chinaz.comwhois 反查可根据 whois 获取到的域名所有人、域名注册商、域名注册日期和过期日期等,使用邮箱...

Web安全

为了减少您的阅读压力,首页仅提供最新的 10 页文章列表,如需查阅更多内容请点击对应的文章标签。

Top