6 天前 / 闲鱼技术
笔者代表闲鱼参加了Facebook在4月30日举行的为期二天的F8大会，地点加州，本文就心得与思考和大家分享。 对国内开发者而言，Facebook的产品设计、社区、VR/AR等有一些借鉴意义；对海外开发者而言，Facebook是连接用户，规模增长必不可少的产品。除有限的技术热点外，F8带来的更多的是Facebook的规划和为企业提供的商业赋能，而商业部分也是笔者这次的关注重点。 海外关系的主导者 如图，全球38亿互联网用户（含PC和移动）中，有71％(27亿)用户使用了Facebook家族的产品。由于在中国无法访问，如果去除中国互联网群体影响（中国互联网用户占全球2......
11 天前 / 大数据技术博客
谁说 Facebook 弃用 Cassandra？相反 Facebook 拥有全世界最大的 Cassandra 部署，而且他们对 Cassandra 做了很多性能优化，包括Cassandra onRocksDB 以提升 Cassandra 的响应时间。 在 Instagram （Instagram是Facebook公司旗下一款免费提供在线图片及视频分享的社交应用软件，于2010年10月发布。）上，我们拥有世界上最大的 Apache Cassandra 数据库部署。我们在 2012 年开始使用 Cassandra 取代 Redis ，在生产环境中支撑欺诈检测，Feed 和 Direct inbox 等产品。起初我们在 AWS 环境中运行了 Cassandra 集群，但是当 Instagram 架构发生变化时......
26 天前 / LinuxEverything
点击上方蓝色字关注我们~
introduce cpu.headroom knob to cpu controllerFrom Song Liu
27 天前 / reesunhuang
导读：Facebook在OSDI 2014上发表论文f4: Facebook’s Warm BLOB Storage System，这个系统主要目的就是降低存储成本，在容忍磁盘，主机，机架等故障的同时，保证一定的可用性。该系统用于存储介于冷热数据之间的温数据，国内对于温数据的存储研究较少，Facebook实现该系统的思路十分值得深入研究。 概览 首先说下 BLOB 的意思， 英文全称是 Binary Large OBjects，可以理解为任意二进制格式的大对象；在 Facebook 的语境下，也就是用户在账户里上传的的图片，视频以及文档等数据，这些数据具有一次创建，多次读取，不会修改，偶尔删除 的特点......
27 天前 / algorithmdog
中心 xueminsi 给大家带来的 Prophet 算法的简介和使用。 Prophet是Facebook开源的一款针对时间序列基于Python和R语言的数据预测工具，其工作发表在论文《Forecasting at scale》(Taylor S J, LethamB. Forecasting at scale[J]. The American Statistician, 2018, 72(1): 37-45)。这里的“at scale”并不是常说的数据存储和计算复杂度，而是指数据的复杂度（如数据中存在大量异常点）和预测结果的评估复杂度。用于预测的时间任务常具有以下特征： 对于历史在至少几个月（最好是一年）的每小时、每天或每周的观察 强大的多次的「人类规模级」......
59 天前 / 祝坤荣
Making Facebook self-healing: Automating proactive rack maintenance 原文：https://code.fb.com/production-engineering/making-facebook-self-healing-automating-proactive-rack-maintenance/ 作者： Romain Komorn 翻译： 时序 本文是第二部分，第一部分可看： 让facebook自愈：自动化主动机架维护 - 1 Pre-disable(预关闭): 这一步主要是保证目前池子中认为是空闲的主机在主机级别关闭或批量操作期间交换多个主机时不会重新被加入到生产环境。 Host-level disable:(主机级关闭)：在一些场景，由于在预关闭时已经......
66 天前 / 祝坤荣
Making Facebook self-healing: Automating proactive rack maintenance 原文：https://code.fb.com/production-engineering/making-facebook-self-healing-automating-proactive-rack-maintenance/ 作者： Romain Komorn 翻译： 时序 我们一直希望facebook的产品和服务在任何使用它的人，无论他们在世界的哪里，都能工作正常，这驱动我们主动监测和定位我们基础设施产品的问题，让我们避免可能引起百万用户在任何时间使用facebook时导致变慢或中断服务的情况。 在2011，我们引入了 Facebook Auto Remediation (FBAR)服务，一组运行......
69 天前 / 开发者头条
机器之心编译 机器之心编辑部 一直以来，社区对 Facebook 的硬件研究比较关注。在今日的开放计算项目全球峰会上，Facebook 技术策略主管 Vijay Rao 开源了全新的 AI 硬件：面向 AI 训练与推理的硬件系统 Zion 与 Kings Canyon，以及针对视频转码的 Mount Shasta。这篇博客内容对此进行了详细介绍。 Facebook 的基础设施现在每月为其整个应用和服务系统上超过 27 亿的人提供服务。他们的工程师设计并创建了高级、高效的系统来扩大这一基础设施，但是随着工作负载的增长，单靠通用处理器已经无法满足这些系统的需求。晶体管增长的速度已大......
71 天前 / figo
文章作者：王喆Hulu Senior Research SDE 内容来源：王喆的机器学习笔记@知乎专栏 出品社区：DataFun 注：欢迎后台留言投稿「行知」专栏文章。 今天我们重读一篇经典的CTR预估领域的论文，Facebook在2014发表的“Practical Lessons from Predicting Clicks on Ads at Facebook”（下载地址见文末）。 在这篇文章中，Facebook提出了经典的GBDT（Gradient Boosting Decision Trees）+LR(Logistics Regression)的CTR模型结构，可以说开启了特征工程模型化、自动化的新阶段。此外其在五年前就采用的online learning，online data joiner，negati......
93 天前 / heartEngine
近日，Redux 作者Dan Abramov(@dan_abramov)发 Twitter 表示: 我们更新了发给前端工程师候选人的措辞，以更好地反映该角色在 Facebook 的面试过程。希望能帮助大家准备面试！ 我们一起来看看具体的内容叭。 我们将尽量保持实用性，并关注你在构建应用时可能遇到的问题。我们不会要求你从头写一个排序算法，但我们希望你了解进行 JavaScript 对象和数组操作时相关的性能。你得能找出并修复代码瓶颈，并解释你所做的权衡。 我们不会要求你实现红黑树之类的模糊数据结构，但这能帮你总结概括 UI 工程化中常见的数据结构，如数组(arrays), 映射(maps......
120 天前 / 蚂蚁金服分布式架构SOFAStack
原创声明：本文系作者原创，谢绝个人、媒体、公众号或网站未经授权转载，违者追究其法律责任。 Google Dapper 首先简单回顾一下 Google 的 Dapper，2010 年 Google 发布 Dapper 的论文系统阐述了在复杂的、大规模分布式集群环境下如何进行系统的跟踪以及问题的分析与定位。通过产生一个全局唯一的 traceId 以及用 span、annotation 核心数据模型把相关调用组成一个完整的调用树。关于 Dapper 如何做低消耗、应用级透明等细节，可以参考 Dapper 的论文。这里主要是简单回顾一下其核心思想，因为后续出现的分布式跟踪产品包括本文要分析的 ......
123 天前 / hyper0x
Prophet 简介Facebook 去年开源了一个时间序列预测的算法，叫做 fbprophet，它的官方网址与基本介绍来自于以下几个网站： Github：https://github.com/facebook/prophet官方网址：https://facebook.github.io/prophet/论文名字与网址：Forecasting at scale，https://peerj.com/preprints/3190/从官网的介绍来看，Facebook 所提供的 prophet 算法不仅可以处理时间序列存在一些异常值的情况，也可以处理部分缺失值的情形，还能够几乎全自动地预测时间序列未来的走势。从论文上的描述来看，这个 prophet 算法是基于时间序列分解和机器学习的拟合来做......
201 天前 / openio
选自code.fb作者：JASON GAUCI、EDOARDO CONTI、KITTIPAT VIROCHSIRI机器之心编译参与：路、王淑婷今日，Facebook 开源了适合大规模产品和服务的强化学习平台 Horizon，这是第一个使用强化学习在大规模生产环境中优化系统的开源端到端平台。Horizon 包含的工作流程和算法建立在开放的框架上（PyTorch...