10 小时前 / 前端De早读课
前言 个人比较感兴趣的一个话题方向。今日前端早读课文章由蚂蚁金服 @ 玉伯分享。公号：语雀授权。 正文从这开始～～ 技术人除了做技术还能做什么？我想很多人都想过这个话题。 其中的一个答案是「做产品」，因为，每个技术人心目中都会有一个产品梦。今天想跟大家聊一下这个话题：技术人如何做产品，谈谈我在做产品的过程中的一些感受。 先做一个简单自我介绍，我叫玉伯，08 年加入阿里，写代码写了十几年，一直在前端、小程序和客户端领域，希望能够推动整个终端技术往前发展。
4 天前 / sjf0115
点击关注公众号，探索更多 Shopee 技术实践 目录 1.Shopee数据系统建设中面临的典型问题 2.为什么选择Hudi 3.Shopee在Hudi落地过程中的实践 4.社区贡献 5.总结与展望 湖仓一体（LakeHouse）作为大数据领域的重要发展方向，提供了流批一体和湖仓结合的新场景。目前，企业许多业务中会遇到的数据及时性、准确性，以及存储的成本等问题，都可以通过湖仓一体方案得到解决。 当下，几个主流的湖仓一体开源方案都在不断迭代开发中，业界的应用也都是在摸索中前行，在实际的使用中难免会遇到一些不够完善的地方和未支持的特性。
5 天前 / Thoughtworks
技术的作用力 2022 年 9 月 20 日 by 林森 Leave a Comment8 世纪前半叶，一项技术的革新在历史上产生了巨大的催化影响，那便是马镫。 马镫和马鞍（图片来自 Unsplash）。 作为一项古老的发明，马镫对于生活本身来说影响是正向的，它让人们在骑马时更稳健，提高了安全性和骑行效率。但从宏观角度来看，马镫却极其深刻地影响了历史的进程。在马镫出现前，因为缺少固定在马背上的能力，反作用力让骑兵在作战时无法抵御多次冲击，因此仅作为军队的辅助力量。但马镫的应用让威力巨大的骑兵战术有了可能，人类战争史也迎来了骑兵主导的年代。
7 天前 / vivo互联网技术
vivo 互联网安全团队 - Xie Peng 互联网的大数据时代的来临，网络爬虫也成了互联网中一个重要行业，它是一种自动获取网页数据信息的爬虫程序，是网站搜索引擎的重要组成部分。通过爬虫，可以获取自己想要的相关数据信息，让爬虫协助自己的工作，进而降低成本，提高业务成功率和提高业务效率。 本文一方面从爬虫与反反爬的角度来说明如何高效的对网络上的公开数据进行爬取，另一方面也会介绍反爬虫的技术手段，为防止外部爬虫大批量的采集数据的过程对服务器造成超负载方面提供些许建议。
7 天前 / 逗逗
作者 | 王晔倞 编辑 | 褚杏娟 你好，我是悟空。网关系列文章：「架构选型」5 种 API 网关技术选型 「天翼账号」网关系统 架构演进历程 6000 字 | 16 图 | 深入理解 Spring Cloud Gateway 的原理 7000 字 | 32 图 | 手摸手 Spring Cloud Gateway + JWT 实现登录认证不同行业之间，都会存在一些业务属性上的差距。对于金融领域的应用软件来说，因其涉及到钱等因素，所以在业务上会有以下独特属性： 稳定性。金融领域跟钱强相关，这对于业务稳定性就有着非常严格的要求，稳定性一旦出现问题，它将影响整个交易系统的成败。 强监管。
9 天前 / hyper0x
来源：Gartner 公司 编辑：蒲蒲近日，Gartner 发布了最新的《2022 年人工智能技术成熟度曲线》报告，报告称尽早采用复合型人工智能（AI）、决策智能等 AI 技术将给企业机构带来明显的竞争优势，缓解 AI 模型脆弱性引发的问题，有助于捕捉业务背景信息，推动价值实现。 已进入生产成熟期的技术，其实际效益已得到证明和认可。随着越来越多的企业机构认为风险已下降至可接受程度，AI 技术的采用开始进入快速增长阶段（见图一）。 AI 一直是企业、政府和社会讨论的热门话题，企业机构很难分辨哪些 AI 技术具有真正的业务价值。
11 天前 / Dr_Hydra
哈喽大家好啊，我是 Hydra。 前一段时间，boss 交给我个任务，让我调研一下知识图谱技术。虽说有点 NLP 的底子，不过研究起这个来还是满头的包，终于还是在搜集了不少资料后划拉出来 50 多页的 PPT，那么今天就浅浅的给大家分享一下知识图谱的相关知识。 概述 诞生知识图谱的概念诞生于 2012 年，由谷歌公司首先提出。大家都知道，谷歌是做搜索引擎的，所以他们最早提出了 Google Knowledge Graph 后，首先利用知识图谱技术改善了搜索引擎核心。 注意上面的说法，虽然知识图谱诞生于 2012 年，但其实在更早的时间它还有另外一个名字，那就是语义。
17 天前 / 小渣
大家好，我是李哥。 进阿里以来一直听说一句话：“没有经过双 11 峰值验证过的技术都是玩具”。虽然有些夸张，但是不可否认的是，一年一度的双 11，是技术最好的孵化器，也是技术同学最向往的阅兵场。 我很荣幸，担任今年年中大促的技术一号位，也就是技术负责人。今天就来跟大家聊一聊我们作为一名技术在大促中要去做哪些技术保障，以及如何去做。也希望大家看完，就像身临其境的感受了一次大促。也感谢大家的关注、点赞、分享。 我将故事分为三大部分：事前、事中、事后，最后我们再总结。
19 天前 / sjf0115
分享嘉宾：董一峰 字节跳动 编辑整理：胡胜达蔚来汽车 出品平台：DataFunTalk 导读：ClickHouse 已经成为行业主流且热门的开源引擎。随着业务数据量扩大，场景覆盖变广泛，在复杂 query 场景下，ClickHouse 容易存在查询异常问题，影响业务正常推进。本次主要分享字节跳动如何解决 ClickHouse 复杂查询问题，并详细解读技术实现细节，目前该能力已经通过火山引擎 ByteHouse 面向开发者输出。 全文将围绕以下几方面展开： 项目背景 技术方案 优化与诊断 效果及展望 01 项目背景 1. ClickHouse 执行模式 ClickHouse 的执行模式相对比较简单...
25 天前 / 九彩拼盘
本文根据玉伯在掘金开发者大会上的演讲整理而成。 技术人除了做技术还能做什么？我想很多人都想过这个话题。 其中的一个答案是「做产品」，因为，每个技术人心目中都会有一个产品梦。今天想跟大家聊一下这个话题：技术人如何做产品，谈谈我在做产品的过程中的一些感受。 先做一个简单自我介绍，我叫玉伯，08 年加入阿里，写代码写了十几年，一直在前端、小程序和客户端领域，希望能够推动整个终端技术往前发展。这十几年里，也一直带领团队通过开源做了很多技术产品，包括 Ant Design、AntV 等。但今天想聊的不是这些，而是「语雀」。
39 天前 / 莫若
本文引用自 InfoQ 社区“5 亿用户如何高效沟通？钉钉首次对外揭秘即时消息服务 DTIM”一文，作者陈万红等、策划褚杏娟，即时通讯网有修订和改动。 一、引言本文是国内企业 IM 的事实王者钉钉首次对外深度解密其即时消息服务（即 DingTalk IM，简称 DTIM）的技术设计实践。 本篇文章内容将从模型设计原理到具体的技术架构、最底层的存储模型到跨地域的单元化等，全方位展现了 DTIM 在实际生产应用中所遇到的各种技术挑战及相应的解决方案，希望借本文内容的分享能为国内企业级 IM 的开发带来思考和启发。
42 天前 / sjf0115
华润万家是世界 500 强企业华润集团旗下优秀零售连锁企业，也是中国最具规模的零售连锁企业。万家数科商业数据有限公司（以下简称“万家数科”）是华润万家 100% 控股的信息科技公司，在服务华润万家的同时，为零售商及其生态提供核心业务系统的整体解决方案与运维服务。 2019 年，万家数科自主研发了聚合支付平台——Vapay，作为腾讯、阿里的独立软件服务商 (ISV)为零售商提供聚合支付服务，开启市场化之路。2021 年自主研发了供应商数据服务平台——数据罗盘，为零供协同赋能。
43 天前 / sjf0115
Binlog 导入是通过获取并解析 Mysql 数据库的 Binlog 日志，增量同步用户在 Mysql 数据库的所有更新操作，为 Doris 提供了一种对接 Mysql 数据库的 CDC(Change Data Capture) 功能。 Binlog 导入已在 0.15 版本发布，本文主要介绍的是 Binlog 导入的总体设计与实现思路。 作者｜百度 PALO 徐洋 总体架构 Binlog 导入目前需要依赖 canal 作为中间媒介，让 canal 伪造成一个从节点去获取 Mysql 主节点上的 Binlog 并解析，再由 Doris 去获取 canal 上解析好的数据。 后续 Binlog 导入可支持除了 canal 外的不同数据源。
46 天前 / sjf0115
本文整理自《Kafka-on-Pulsar Meetup》上 StreamNative 软件工程师、Apache Pulsar Committer、KoP Maintainer 徐昀泽的《2022 Kafka-on-Pulsar 技术动态》的分享，重点介绍 KoP 项目在 2022 年的最新动向和技术演进趋势。 点击进入小程序，查看 KoP Meetup 回顾视频 走近 KoP 要了解 KoP，首先要从 Kafka 和 Pulsar 谈起。同为消息队列，它们的模型很相似。两者都通过 Broker 将数据上下游分为生产者、消费者，基于 Topic 进行生产和消费。同时，Pulsar 和 Kafka 都支持 Topic 分区化从而增加处理的并行度。
47 天前 / BloomingRose
大家好，我是田螺！ 对于 CDN 这个东西，相信大家都有耳闻，感觉既陌生但又熟悉。最近深入了解了一下 CDN，这才发现原来它如此重要！今天就跟大家分享下关于 CDN 的那些事儿。 浏览器的网络请求要理解 CDN 这件事情，我们就得先理解浏览器发出一个请求的过程是怎样的，其整体过程如下图所示。 浏览器网络请求过程用户在浏览器中输入要访问的网址域名。浏览器向本地 DNS 服务器请求对域名的解析。如果本地 DNS 服务器有域名的解析结果，那么直接响应用户请求，返回该域名对应的 IP 地址。