从前始终关注某大咖微博，一直点击刷新按钮，刷新微博页面，期待能第一工夫取得微博内容。其实能够用软件帮你盯着，只有博主更新了马上揭示。首先在网站资讯监控工具里，增加须要监控的微博页面，应用“微博监控计划”，设定好微博监控周期和过滤关键词。而后设置微博更新后的揭示形式，能够在电脑屏幕右下角弹窗揭示，声音揭示；也能够应用邮件揭示（可绑定微信qq手机揭示）。收到的揭示内容就是更新的内容。最初，点击开始监控按钮，软件主动关上微博，检测更新内容，如果蕴含指定的关键词，立马记录显示在表格中，同时报警揭示。
简介： 本文讲述了微博机器学习平台和深度学习平台的业务性能和云上实际，分析了阿里云大数据在微博这两大学习平台的架构建设上所起到的作用。 作者：新浪微博数据计算平台零碎架构师 曹富强 本文讲述了微博机器学习平台和深度学习平台的业务性能和云上实际，分析了阿里云大数据在微博这两大学习平台的架构建设上所起到的作用。 微博介绍微博是2008年上线的，中国头部、风行的社交媒体平台，提供人们在线创作、分享和发现优质内容的服务，微博的大规模机器学习平台可反对千亿级参数、百万QPS调用。目前微博的日活是2.22亿，月活是5.16亿。 微博机器学习平台（WML）劣势微博机器学习平台的特点是样本规模大，百亿级样本，实时性比拟高，是分钟级，而后模型规模是百亿级，模型实时性依据不同场景有小时级、分钟级和秒级。作业的稳定性的话要求是三个9，平台业务多，场景丰盛迭代快。 微博机器学习平台（WML）CTR模型 微博机器学习平台的CTR模型通过数字版本的迭代，从1.0的离线机器学习到3.0的离线和深度，到5.0的在线机器学习、离线机器学习和深度机器学习联合。再到目前咱们是往在线深度学习方向倒退。总体来说通过历史迭代，目前撑持的参数规模达千亿级，服务峰值达百万QPS，模型更新是10分钟量级。 微博机器学习平台（WML）架构 咱们看一下微博机器学习平台的架构，微博机器学习平台为CTR、多媒体等各类机器学习和深度学习算法，提供从样本解决、模型训练、服务部署到模型预估的一站式服务。总体的话是基于在线计算集群，离线计算集群和高性能计算集群。咱们通过资源的WeiBox调度框架和WeiFlow工作流引擎，计算平台的话是WeiLearn框架集成的Hadoop/Spark、Flink/Storm、TensorFlow/Pytorch，提供了诸多丰盛的算法。基于这些算法，训练的模型，咱们入到咱们WeiPS模型库，而后通过WeiServing对外提供在线推理服务。 微博机器学习在阿里云上实际 咱们的阿里云上实际应用了Flink、MaxCompute、Alink、PAI。基于这些服务提供了热门微博、Feed流、绿洲举荐，应用MaxCompute实现在雷同规模下万亿样本百亿特色全量训练，比Hadoop集群晋升10倍。反对从天级到分钟级的实时热门微博、Feed流业务举荐及搜寻样本施行训练、上线，业务举荐成果晋升10%。基于Flink搭建了实时计算平台，集成了作业提交端UI/WeiClient、作业管理、资源管理、日志零碎、监控报警零碎等各链路，作业规模上千。整体来说阿里云建设机器学习有几大劣势：反对大规模解决、算法丰盛、平台成熟运维不便、投入工夫间接聚焦到业务。 微博深度学习平台（WDL）典型业务场景 接下来介绍微博深度学习相干的业务，目前的话在微博的关系流、绿洲、新浪视频举荐、注释举荐流外面都有深度学习的利用。 微博深度学习平台（WDL）架构 基于在线gpu的机器，咱们通过K8s和Yarn治理，而后通过WeiArena和el-submit提交工作。咱们的WeiLearn集成了TensorFlow、Pytorch引擎，而后集成了样本库读取和输入的模型库。而后WeiServing加载了模型库，对外提供两路服务，一个是通过AI服务间接对外提供AI输入能力，另外就是咱们的计算服务WeiStorm，集成了数据流，调用WeiServing RPC服务框架，实时生成多媒体特色，对外提供在线服务推理。 微博深度学习平台（WDL）多媒体特色生成 微博机器学习深度平台多媒体特色的生成，只有两条链路，第一路是离线的训练，离线训练模型通过数据源的解决输入到样本库，而后通过咱们WeiServing分布式训练模型调用，输入到模型库，这一路的话是一键CICD、分布式训练、反对多品种的模型。另一路是在线推理，在线推理的话生产多媒体实时数据流，调用咱们的WeiServingRPC框架，输入多媒体特色，而后利用到业务，这条链路的话，咱们通过对账零碎、case追踪、全链路监控去做服务保障，成功率是99.99%，延时是秒级延时。开发模式是通过UI化、配置化、一键部署。 微博深度学习平台（WDL）基本功能 微博深度学习平台产品性能的话，一个是样本库，而后分布式训练，模型库，在线推理服务和计算服务。样本库的话次要是蕴含样本数据管理和样本分布式存储，对在各节点上零散的样本进行对立治理；分布式训练的话，内置罕用深度学习算法并继续新增成熟的算法，标准样本读取，训练gpu集群的灵便调度和训练模型的对立存储；模型库的话提供分布式系统和本地两种存储形式，为在线推理服务提供模型；在线推理服务，反对Python和C++模型的一键部署，实现模型推理的服务化以及监控、告警等。可封装为HTTP服务，对外间接提供AI的能力，实现AI能力的间接输入；计算服务，基于外部的多媒体散发零碎，接入多媒体数据流，调用在线推理服务，实时生成多媒体特色。 微博深度学习平台（WDL）业务实际 微博深度学习平台业务实际，晚期的话基于单机训练解决大规模数据时训练周期长，迭代慢，影响业务成果。 于是咱们提供了多媒体深度学习服务计划，微博深度学习平台就应运而生，实现了样本存储、离线训练、在线推理及模型存储一体化性能。最终产生的成果和业务价值是：分布式训练极大缩短了训练工夫，为疾速业务迭代提供良好基础；一体化服务让咱们只须要专一于模型算法优化，进步业务效率，整体上为业务赋能和业务承建产生了微小的推动力。原文链接本文为阿里云原创内容，未经容许不得转载。
一键中转链接制作方法：1.关上淘丞相官网地址： http://sina-t.cn/taochengxiang 2.注册登录后，点击页面banner上的【立刻制作】按钮开始制作 3.找到本人的微博页面，点击右上角复制微博链接 4.在输入框粘贴复制到的微博链接，点击生成 5.复制失去的链接，关上卖家后盾-店铺治理-店铺装修-手淘首页装修-装修页面 6.拖拽左侧的图文类分类下题目模块或者自定义模块 7.在题目输入框输出：“一键中转微博”，链接栏输出方才生成的链接，点击保留