17 天前 / merjiezo
为什么会有数据变更在以平台为级别的软件集合中，为了保证软件质量的可控，错误的可追溯，不可避免的会通过一些流程来约束、框定公司的各种条条框框，比如发布需要有流程才能发布，业界有JIRA、ITSM这种优秀的集成式软件来制定流程。 而其中数据变更也需要一个流程来控制，当线上需要发生数据变更的时候，团队需要先编写数据库脚本，编写完后提一个流程到DBA这边，DBA执行以后会告诉提变更的人具体变更的行数有多少，确认后DBA再做COMMIT，执行完后确认变更结果，至此一整个数据变更的业务流就完成了。 而这一切的一切都是需要人来参与的，人就代......
22 天前 / 公众号「后端进阶」
最近在公司推行Docker Swarm集群的过程中，需要用到Jenkins来做自动化部署，Jenkins实现自动化部署有很多种方案，可以直接在jenkins页面写Job，把一些操作和脚本都通过页面设置，也可以在每个项目中直接写Pipeline脚本，但像我那么追求极致的程序员来说，这些方案都打动不了我那颗骚动的心，下面我会跟你们讲讲我是如何通过Pipeline脚本实现自动化部署方案的，并且实现多分支构建，还实现了所有项目共享一个Pipeline脚本。 使用Jenkins前的一些设置为了快速搭建Jenkins，我这里使用Docker安装运行Jenkins： $sudodockerrun-it-d\ --rm\ -uroot\......
26 天前 / 蚂蚁金服移动开发平台mPaaS
作者：曲仁军（骁然），蚂蚁金服技术专家。本文将聚焦支付宝在移动端如何构建日志自动化采集和分析能力，从而通过“数据采集、计算、分析、决策”完成针对业务性能的监控与用户行为分析。 现场视频（复制地址到浏览器中打开）： http://t.cn/AiKXsaob 0 背景 结合《蚂蚁金服面对亿级并发场景的组件体系设计》，我们能够通盘了解支付宝移动端基础组件体系的构建之路和背后的思考。本文基于服务端组件体系的基础，着重探讨“自动化日志收集与分析”在支付宝 App 内的演进之路。 1 支付宝移动端技术服务框架 这是整个支付宝移动端无线基础团......
42 天前 / 蚂蚁金服移动开发平台mPaaS
作者：周力（问瑾），蚂蚁金服技术专家。本文围绕支付宝面向移动应用日志复杂的测试工作，如何思考演进出成熟稳定的测试用例管理展开讨论和总结。 相比普通测试用例，自动化用例在形式、实现方式及内容上有一定的特殊性；同时自动化用例管理作为移动测试平台的一个重要组成部分，如何对其进行有效管理是平台面临的一个重大挑战。 活动推荐：5 月 18 日 mPaaS 线下沙龙 CodeDay#2 北京站，《高可用、全集成、定制化，蚂蚁金服如何持续演进自动化测试》将带领大家进一步了解支付宝如何从开源的自动化方案，到自研并逐步完善无线实验集群技术体系。......
64 天前 / 翟志军
本文介绍如何使用 Jenkins + Ansible 实现对 Nginx 的自动化部署。最终达到的效果有如下几点： 只要你将 Nginx 的配置推送到 GitHub 中，Jenkins 就会自动执行部署，然后目标服务器的 Nginx 配置自动生效。这个过程是幂等（idempotent）的，只要代码不变，执行多少遍，最终效果不变。如果目标机器没有安装 Nginx，则会自动安装 Nginx。自动设置服务器防火墙规则。1. 实验环境介绍本次实验使用 Docker Compose 搭建 Jenkins 及 Jenkins agent。使用 Vagrant 启动一台虚拟机，用于部署 Nginx。使用 Vagrant 是可选的，读者可以使用 VirtualBox 启动......
86 天前 / dreamans
本站文章除注明转载外，均为本站原创或编译。欢迎任何形式的转载，但请务必注明出处，尊重他人劳动共创开源社区。转载请注明：文章转载自 开源中国社区 [http://www.oschina.net]本文标题：Syncd v2.0.0 版本发布，简单高效的自动化部署工具本文地址：https://www.oschina.net/news/105558/syncd-2-0-0-released
93 天前 / 祝坤荣
Making Facebook self-healing: Automating proactive rack maintenance 原文：https://code.fb.com/production-engineering/making-facebook-self-healing-automating-proactive-rack-maintenance/ 作者： Romain Komorn 翻译： 时序 本文是第二部分，第一部分可看： 让facebook自愈：自动化主动机架维护 - 1 Pre-disable(预关闭): 这一步主要是保证目前池子中认为是空闲的主机在主机级别关闭或批量操作期间交换多个主机时不会重新被加入到生产环境。 Host-level disable:(主机级关闭)：在一些场景，由于在预关闭时已经......
100 天前 / 祝坤荣
Making Facebook self-healing: Automating proactive rack maintenance 原文：https://code.fb.com/production-engineering/making-facebook-self-healing-automating-proactive-rack-maintenance/ 作者： Romain Komorn 翻译： 时序 我们一直希望facebook的产品和服务在任何使用它的人，无论他们在世界的哪里，都能工作正常，这驱动我们主动监测和定位我们基础设施产品的问题，让我们避免可能引起百万用户在任何时间使用facebook时导致变慢或中断服务的情况。 在2011，我们引入了 Facebook Auto Remediation (FBAR)服务，一组运行......
131 天前 / Bo_hemian
1. 引言个人以为，机器学习是朝着更高的易用性、更低的技术门槛、更敏捷的开发成本的方向去发展，且Auto-ML或者Auto-DL的发展无疑是最好的证明。因此花费一些时间学习了解了Auto-ML领域的一些知识，并对Auto-ML中的技术方案进行归纳整理。 众所周知，一个完整的机器学习项目可概括为如下四个步骤。 其中，特征工程（提取）往往是决定模型性能的最关键一步。而往往机器学习中最耗时的部分也正是特性工程和超参数调优。因此，许多模型由于时间限制而过早地从实验阶段转移到生产阶段从而导致并不是最优的。 自动化机器学习(AutoML)框架旨在减少算......
131 天前 / 美团技术团队
总第332篇 2019年 第10篇 境内度假是一个低频、与节假日典型相关的业务，流量在节假日较平日会上涨五到十几倍，会给生产系统带来非常大的风险。因此，在2018年春节前，基于美团基础的压测平台Quake，我们把整个境内度假业务接入了全链路压测，来系统性地评估容量和发现隐患，最终确保了春节期间系统的稳定。 在整个过程中，我们意识到，全链路压测在整个系统稳定性建设中占有核心重要的位置，也是最有效的方案。结合实际业务节假日的频率（基本平均一个月一次），如果能够把它作为稳定性保障的常规手段，我们的系统质量也能够得到很好的保障。......
153 天前 / mr7
前言 随着招聘业务线无线端流量逐年增长，越来越多主业务迁入58APP，发版过程中的APP回归工作也随之增长。怎样低成本、高效率的产出自动化用例，减轻日常重复工作以及保证测试场景的覆盖是App端自动化在团队开展的初衷。自动化框架的高稳定性，扩展性，易用性是一个基础，报告数据的综合参考性以及问题排查定位的辅助功能是自动化效果最终的一个体现。 底层框架为什么选择Appium Appium具有运行稳定，支持多语言，跨平台的特点，应用广泛，社区资源分享多，易于学习。为了后续IOS部分的扩展，选择了Appium。 Appium自动化原理 Appium是使用N......
165 天前 / 美团技术团队
总第325篇 2019年 第003篇 本文介绍了在美团客户端单周发版快速迭代的背景下，美团交通业务线多个仓库的多个发版分支的自动化管理方法。 背景目前，互联网产品呈现出高频优化迭代的趋势，需求方希望尽早地看到结果，并给予及时反馈，所以技术团队需要用“小步快跑”的姿势来做产品，尽早地交付新版本。基于以上背景，美团客户端研发平台适时地推行了单周发版的迭代策略。单周版本迭代的优点可以概括为三个方面：更快地验证产品创意是否符合预期，更灵活地上线节奏，更早地修复线上Bug。 首先说一下美团平台的发版策略，主要变更点是由之......
182 天前 / darkness463
这篇文章写了有段时间了，但出于一些原因一直没有发。最近一段时间出现了很多利用自动化工具刷资讯类App的现象（主要是现在看新闻/视频给钱的App太多了），作案的工具也从按键精灵类的脚本到了辅助服务App，于是把这篇文章修改了一下发了出来。 写这篇文章的原因是上半年时货XX向我们反馈说，有人在卖一种设备，这种设备可以帮司机抢单，据说一个设备卖680，每个月还要300的月卡，现在市面上最少有2000台这种设备，一个月净挣60W。他们希望我们能帮忙把这种作弊的司机检测出来。 我听说之后，不由感叹灰黑产真的很赚钱啊。 在Android上想要实现......