14 天前 / 白露未晞
近期文章回顾 从零开始实现一个深度学习框架 | 常用优化算法介绍与实现 科学净化自己的微博,带大家写个批量拉黑微博机器人的小工具咯~ 给大家整个小说下载器,一起"欢度"五一~ 之前的论文下载器支持百度文库下载啦~ 导语 其实我不是一个喜欢炒冷饭的人,以前发过一遍的东西再发一次真的很没意思,不过为了避免公众号代码频繁被盗用售卖的问题,我还是重新整理了一下之前模拟登录系列相关的 20 多个爬虫实战案例,通过 python 包的方式发布到了 pypi,这样大家想要运行测试的话可以直接安装调用对应的程序就行了...
114 天前 / 逗逗
导读: 本文先介绍了效果广告的基本原理,然后以云音乐广告系统从浅层模型到深度模型的演进为主线,介绍了广告算法团队在算法优化过程中遇到的问题、思考和解决的过程。 广告是云音乐的重要收入来源之一,最近两年云音乐广告平台在深度(机器)学习技术上做了很大的投入,期间也遇到了许多问题,也取得了一些不错的成果。本文将以模型演进为主线,重点介绍遇到的问题、思考和解决问题的过程,希望能为其他同学在类似的算法场景下提供一些参考。
141 天前 / sjf0115
简介:本文由网易云音乐实时计算平台研发工程师岳猛分享,主要从以下四个部分将为大家介绍 Flink + Kafka 在网易云音乐的应用实战: 背景 Flink + Kafka 平台化设计 Kafka 在实时数仓中的应用 问题 & 改进 直播回放:https://developer.aliyun.com/live/2894 一、背景介绍 (一)流平台通用框架 目前流平台通用的架构一般来说包括消息队列、计算引擎和存储三部分,通用架构如下图所示。客户端或者 web 的 log 日志会被采集到消息队列;计算引擎实时计算消息队列的数据;实时计算结果以 Append 或者 Update 的形式存放到实时存储系统中去。
168 天前 / codexiaosheng
点击方“逆锋起笔”,公众号回复编程资源 领取大佬们推荐的学习资料 作者:我不是秃头哆唻咪(侵删)https://blog.csdn.net/weixin_44864260/article/details/113428996 此货很干,跟上脚步!!!Cookiecookie 是什么东西?小饼干?能吃吗?简单来说就是你第一次用账号密码访问服务器服务器在你本机硬盘上设置一个身份识别的会员卡 (cookie)下次再去访问的时候只要亮一下你的卡片 (cookie)服务器就会知道是你来了,因为你的账号密码等信息已经刻在了会员卡上需求分析爬虫要访问一些私人的数据就需要用 cookie 进行伪装想要得到 cookie 就得先登录...
240 天前 / sjf0115
网易云音乐从 2018 年开始搭建实时计算平台,经过几年的发展已经渗透到云音乐的各个业务当中。本文是大愚老师的一篇实践分享,将从一个日常运维问题出发,带领大家了解云音乐实时计算平台的一些工作进展和未来规划。 网易云音乐实时数仓平台上线以后,经过一年半的发展,整体实时数仓已经初具规模,我们已有实时数仓表 300+,运行中的任务数有 1200+。其中 1000 左右的任务是 SQL 任务, Kafka 总出口流量达到到 18GB/S,总用户数达到了 200+。
327 天前 / sjf0115
云音乐数仓在经历了前期混沌摸索,中期建设完善,如今已逐步形成了一套适合自己的数仓体系和建设规范。增量模型及任务全部走线上设计评审流程,但仍有大量历史任务“年久失修”等待治理。本文以重构会员自动化运营模型为例,分享下数据任务重构实践。 1 背景 云音乐会员自动化运营,通过对人群、资源位、投放规则等配置打包形成不同的投放策略,完成站内资源整合。针对不同用户不同行为不同位置推送不同资源内容,精准投放,加强转化,提高会员渗透率,提高会员续费率。 (自动化运营策略) 运营效果的评估,依赖大量数据指标在不同分析维度的表现。
441 天前 / hyper0x
数仓模型架构搭建、模型设计是整个数仓建设的核心部分。数仓建模的价值体现在:数据质量、健壮水平、资源消耗、服务响应速度。 写在前面:我们为什么要建模 这里想先说下,这些年我在数仓摸爬滚打的一些经历: 刚毕业那会儿,我觉得数仓简单啊,不就是用 sql 开发一张张表嘛,谁不会呀,那段时间觉得好没挑战呀,没事的时候捣鼓下高大上的 spark、scala 啥的。 后来开始接触模型,我的认知开始发生变化,原来每一个表都是一个个精心设计的模型,我以为数仓就是一个个模型。 再后来,接触越来越复杂的业务,我发现,设计模型也不是一个简单的事情。
572 天前 / sjf0115
简介:本文由网易云音乐实时计算平台研发工程师岳猛分享,主要从以下四个部分将为大家介绍 Flink + Kafka 在网易云音乐的应用实战: 背景 Flink + Kafka 平台化设计 Kafka 在实时数仓中的应用 问题 & 改进 直播回放:https://developer.aliyun.com/live/2894 一、背景介绍 (一)流平台通用框架 目前流平台通用的架构一般来说包括消息队列、计算引擎和存储三部分,通用架构如下图所示。客户端或者 web 的 log 日志会被采集到消息队列;计算引擎实时计算消息队列的数据;实时计算结果以 Append 或者 Update 的形式存放到实时存储系统中去。
589 天前 / 程序猿石头
点击上方蓝色字体,关注我 —— 一个在阿里云打工的清华学渣! 图 by:于海童 @ 清华 关于号主:程序猿石头 (ID: tangleithu),现任阿里巴巴技术专家,清华学渣,前大疆后端 Leader。欢迎关注,交流和指导!背景最近秋招季,不知道参加校招的同学收获如何? 下面这篇文章来自 zz 学弟(石头稍作改动),作为非 CS 专业的选手,分享自己转行互联网,参与校招、斩获大厂 Offer 的经验。全篇干货满满,希望能给大家带来收获。 后续我将逐步找优秀的同学给大家分享校招经验,敬请期待。
590 天前 / fanchaoo
We use optional third-party analytics cookies to understand how you use GitHub.com so we can build better products.You can always update your selection by clicking Cookie Preferences at the bottom of the page.For more information, see our Privacy Statement. Essential cookiesWe use essential cookies to perform essential website functions, e.g. they're used to log you in.Learn more
634 天前 / 苏生不惑
苏生不惑第 163 篇原创文章,将本公众号设为星标,第一时间看最新文章。 关于网易云音乐之前写过以下文章,有兴趣可以点击阅读: 那些你可能不知道的网易云音乐奇技淫巧 不想下载那么多音乐软件?全网音乐在线听和下载 如何轻松下载腾讯 / 微博 / 优酷 / 爱奇艺 /b 站等全网视频? 网易云音乐等级快速升级:每天自动打卡听歌 300 首 现在每天早上 8 点 20 给几十个网易账号打卡听歌 300 首(如果想给你的账号打卡升级发你的账号和 md5 加密后的密码给我),目前用的腾讯云的云函数免费服务,应该可以一直打卡下去。
958 天前 / hui朝晖
本系列可能会伴随大家很长时间,这里我会从0开始搭建一个「网易云音乐」的APP出来。 下面是该APP 功能的思维导图: 因为工作的原因,一星期有可能只更新一篇该系列的文章,不过一星期最少一篇。 本章节为第一节,从创建项目说起。 创建「网易云音乐」项目首先看一下本地 Flutter 环境: 创建命令就都知道了,不用命令的话,用 AS 或者 VS 更简单。 项目创建好后,删除无用代码,然后开始创建文件夹: 一共分为六个文件夹: model:存放所有数据类pages:存放所有的页面provider:存放所有的 Providerroute:存放路由相关utils:存放所有的...
1032 天前 / Thinkgamer
本文选自网易云音乐推荐算法负责人-肖强前辈在全球人工智能峰会上的分享,主要介绍了三方面:关于网易云音乐,AI算法在音乐推荐中的应用和AI场景下的音乐思考。这里拿来分享给大家,并加上自己的理解,希望对大家有所帮助。 ——文章概要 首先说明我是网易云音乐的深度用户,目前级别LV9,每天都会去听日推。喜欢网易云音乐的原因不仅是友好的用户交互设计,而且还是因为在网易云音乐中能看到一个个陌生的故事。虽不知这些故事是真是假,但总会找到一些共鸣,在这里像是一个心灵的寄托一样。
1153 天前 / Fundebug
首发于微软信仰中心写文章网易云音乐插件现已登陆 Visual Studio CodeFdyohttps://surface.wiki1,076 人赞同了该文章Visual Studio Code 插件市场最近上架了网易云音乐插件 :D!这是一位第三方开发者开发的插件,基本可以替代网易云音乐应用了!现在你甚至可以用音乐播放器来写代码了,哈哈哈哈哈哈! 支持的功能如下: 发现音乐 (歌单 / 新歌 / 排行榜)搜索 (单曲 / 歌手 / 专辑 / 歌单)用户登录 (手机号 / 邮箱)用户收藏 (歌单 / 歌手 / 专辑)每日歌曲推荐喜欢音乐逐行歌词热门评论无海外限制使用方法很简单: 只需要按下 F1 ...