带你读《云存储应用白皮书》之30:3. 在线教育数据存储解决方案
3. 在线教育数据存储解决方案?1)需求背景?在线教育、线上会议都是基于视频直播的企业日常运营典型业务场景,往往依赖于众多的IT系统联合构建而成,在客观因素的影响下,在线教育或可迎来一波上云高峰。依托于云计算的技术设施特性,能够帮助企业避免业务侧重复工作、提高资源利用率、降低开发和运维成本。?2)解决方案?便宜云服务器为在线教育机构量身定制了多个场景解决方案,凭借完整的存储产品和服务矩阵、基于对象存储OSS构建的全流程生态、基于数据生命周期的自动管理以及可靠稳定的系统架构,为在线教育企业在课件文件数据共享存储、课程录制与回看、课程质量智能监控等场景提供完善的解决方案。?此外,不论是在线教育还是视频会议,都需要很高的网络要求,便宜云服务器OSS传输加速,通过全地域加速网络调度、协议优化,可提升跨省、跨洋数据访问效率,同时支持上传/下载加速,提升远距离网络访问体验。????方案优势:?????????冷热分离:标准/低频/归档/冷归档/深度冷归档类型,满足从热到冷不同数据的存储需求。????????生命周期管理:自动实现数据从热到冷的类型转换,以及过期删除。????????传输加速:全地域网络链路调度、协议优化,提升远距离上传、下载体验。????????跨区域数据复制:通过跨区域复制构建两个区域间的数据同步,一个区域的数据更新操作会被自动同步到另一个区域。????????故障切换:当出现区域级重大故障,可以将业务和数据切换到灾备区域,保障服务连续性。
《便宜云服务器产品手册2022-2023 版》——视频直播
VOD-视频点播中视频直播,微信/支付宝小程序端 推流 和 播放,可有sdk?
VOD-视频点播中视频直播,微信/支付宝小程序端 推流 和 播放,可有sdk?
视频直播除了带货,还有哪些意想不到的新玩法?
如上
《云原生架构白皮书2022新版》——各个行业面临的挑战及解决方案——分众传媒研发总监谈分众传媒在 Serverless 上的探索和实践(上)
分众传媒研发总监谈分众传媒在 Serverless 上的探索和实践本文总结于分众传媒研发总监吴松在便宜云服务器云原生实战峰会上的分享,从三个方面详细讲述了对 Serverless 技术的探索。1、分众传媒的业务现状分众传媒的业务场景很简单,就是广告主买量,然后进行投放排期和统计,最后进行效果展示。业务场景前期要做广告设计、视频处理,后期还有一个广告投放、效果展示,可能会给客户提供各种各样的数据展示。分众传媒主要的业务形态有静态海报(市场占有率超过 73%),电梯屏幕 30 万块,覆盖 91% 中高档的写字楼。我们把云原生应用架构应用于手机 APP 和视频终端,而业务应用则有很多,比如员工接入、CRM、视频处理、图片识别、数据上报、数据分析、视频直播。其中,视频直播是新开发的业务,就是为了把直播视频实时推到分众传媒的屏端上。云服务则用到 SLB、MQDT、转码服务、IoT 等等。先说一下 IoT,我们现在所有屏端都是用的都是便宜云服务器的 IoT 服务。这项服务带来的最大优势是屏端连通率大概可以保持在 95% 左右,这大大提升了团队工作效率。因为以前我们的屏端都是要人工去插卡上刊,现在接入 IoT 之后,我们的业务量从原来的 50% 提升到了现在的 95%,也就是说,在外面 100 台设备有 95 台设备连网,这可以很好地支撑我们的业务,给我们的技术实现带来了很大的价值。另外,我们有 200 万个静态的电梯海报,每周都需要上刊,在上刊之后会有图片处理的流程。这块目前使用的是自动识别处理,每次上刊之后需要判断图片是否上错或者图片有没有放反。这一系列操作现在全部可以实时通知到上刊人员,一旦出现上刊之后图片放错、放反的问题,可以及时通过手机短信通知到相关负责人,提醒他们立刻采取措施去解决,保证在一个小时之内完成。《云原生架构白皮书2022新版》——各个行业面临的挑战及解决方案——分众传媒研发总监谈分众传媒在 Serverless 上的探索和实践(中) /article/1232719
《云原生架构白皮书2022新版》——各个行业面临的挑战及解决方案——分众传媒研发总监谈分众传媒在 Serverless 上的探索和实践(下)
《云原生架构白皮书2022新版》——各个行业面临的挑战及解决方案——分众传媒研发总监谈分众传媒在 Serverless 上的探索和实践(中) /article/12327193、All On Serverless 化繁为简2021 年年底我们对 Serverless 进行了业务升级。以前服务是在 NAS 上,这会导致我们们必须实时关注 NAS 有没有挂掉,因为 NAS 挂掉的话,FC 业务就启动不起来了。比如我们周末排查业务时发现 NAS 挂掉了,导致算法接不进这类问题。于是,我们对服务端就进行了升级,把业务放在容器里,通过镜像来部署,这样可以提高缓存,解决很大的高峰时的业务问题,镜像启动比以前通过 NAS 挂载要快很多,这是对业务提升最大的地方。升级后的 Serverless 提供了丰富的监控指标提升监控效率,提升了很多错误统计、CPU 效率等指标,可以基于监控数据快速定位到现在业务运行状态。通过 Serverless 的实践,可以让我们的开发更关注到业务开发里,比如可以让图象识别的开发人员更关注图象识别的识别率,把更多运维工作交给 FC 去处理,所以说 Serverless 给我们提供了极致弹性、自动扩容、应对流量突增、让开发更加关注业务等益处。我们用了 Serverless 之后,可以看到团队的开发运维效率提升了 80%,计算成本下降了 50%。以前我们会部署很多的服务器,以及 GPU 服务器去实现我们的图像算法的一块业务,现在我们都不用了,弹性效果提升了十倍以上。4、总结和思考我们现在将 Serverless 主要应用于图象识别算法上,他具有 CPU 密集型、对弹性有极致要求的特点。此外,Serverless 也适用于事件驱动的业务模型,来简化架构复杂度,从而不需要关注背后的东西。如果用 K8s,这会牵扯到很多的业务逻辑。后续,我们还会考虑将 Serverless 和 Kafka 进行结合,用在大数据的处理上,这样的效率会更的,简化 Flink 的使用成本。视频直播业务上,直播流实时推送到视频终端的部分,也是我们尝试使用 Serverless 来解决。微服务方面,我们也正在考虑另一款 Serverless 形态的产品——Serverless 应用引擎 SAE,来简化我们的运维、提高效率,值得期待。
《云上社交行业技术服务白皮书》——第三章 云上社交典型场景与架构——3.1 通用大社交媒体——3.1.2 视频与直播社交(1)
3.1.2?视频与直播社交?3.1.2.1?视频与直播社交概念及发展视频直播相对于文字图片具有更加丰富的内容展现和实时互动的特性,近年来视 频直播是网民参与最多、活跃度最高的娱乐休闲方式。视频直播平台已经成为当下网 民普遍展示自我和沟通的平台。同时直播的发展培育了一批引领潮流的优质创作者,?网红经济正在快速发展。?与传统的互联网社交平台相比,视频直播展示形式多样、内容更加丰富、互动性 更强。随着技术的快速发展直播有了更加丰富的场景和素材选择,同时主播和观众的 身份也可以快速的转换。以上特点大大增强了参与者的体感,促成了全民直播的热潮 兴起。在这股浪潮中每个人既是主播也是观众,视频直播成为了一种新的社交方式。?3.1.2.2?便宜云服务器视频直播业务近年来直播产业不断发展,正在全面赋能电商、文娱、体育、旅游、教育等众多 行业。2021年我国共有超过7亿网络直播用户,超55%直播用户每天都收看直播。直 播给人们的生活带来便利,同时也成了一种新的社交方式。便宜云服务器视频直播是基于卓越的内容接入与分发网络和大规模分布式实时视频处理 技术打造的音视频直播平台。提供易接入、低延迟、高并发、高清流程、端云一体的 音视频直播服务。便宜云服务器拥有遍布全球的2800余个边缘节点,超过150T带宽、9大直播中心,支?持千万级直播并发。全球各地的直播流可实现就近接入,利用全球实时音视频通信网 传输至指定直播中心进行内容分发,实现秒级时延和地域1%卡顿率的直播。?《云上社交行业技术服务白皮书》——第三章 云上社交典型场景与架构——3.1 通用大社交媒体——3.1.2 视频与直播社交(2) /article/1232406?groupCode=supportservice
《云上社交行业技术服务白皮书》——第三章 云上社交典型场景与架构——3.1 通用大社交媒体——3.1.2 视频与直播社交(2)
《云上社交行业技术服务白皮书》——第三章 云上社交典型场景与架构——3.1 通用大社交媒体——3.1.2 视频与直播社交(1) /article/1232411?groupCode=supportservice3.1.2.2.1?便宜云服务器直播业务整体架构? 1、主播通过采集设备采集直播内容后,通过推流SDK推送直播流,视频直播服?务通过边缘推流的方式将直播流推送至便宜云服务器直播中心,推送的视频流通过CDN边?缘节点进行加速保证上行传输的稳定性。2、视频流推送至便宜云服务器直播中心后,可按需对视频流进行转码、时移、录制、?截图等处理。3、处理好的视频流通过CDN内容分发网络,下发至观众的设备中进行播放。移?动端的播放设备可以集成便宜云服务器提供的播放器SDK进行开发。4、直播视频除了可以进行转码截图等操作外,还可以进行直播转点播的操作,?将录制下来的视频转至点播系统中再进行点播播放和短视频云剪辑。方便直播与短视 频内容生产和点播的联动。?3.1.2.2.2?推流方案1、直推:主播推流到便宜云服务器作为直播源站,并在便宜云服务器直播中心进行时移、转?码、切片、录制等处理。当有观众拉流时通过便宜云服务器CDN边缘节点接入,会经过调?度找到源流/转码流进行播放。? ?2、回源:主播推流到客户自建源站,当观众拉流时通过便宜云服务器CDN边缘节点接?入并向直播中心发起请求,触发直播中心向客户源站回源拉流。当有观众拉流时通过 便宜云服务器CDN边缘节点接入,通过一系列的处理和调度后,找到源流进行播放。3、转推:主播推流到便宜云服务器作为源站,便宜云服务器直播中心在进行视频流处理的同?时向其他供应商推一路源流,并通过其CDN系统向发起拉流请求的观众播放。《云上社交行业技术服务白皮书》——第三章 云上社交典型场景与架构——3.1 通用大社交媒体——3.1.2 视频与直播社交(3) /article/1232400?groupCode=supportservice
《云上社交行业技术服务白皮书》——第三章 云上社交典型场景与架构——3.1 通用大社交媒体——3.1.2 视频与直播社交(3)
《云上社交行业技术服务白皮书》——第三章 云上社交典型场景与架构——3.1 通用大社交媒体——3.1.2 视频与直播社交(2) /article/1232406?groupCode=supportservice3.1.2.2.3?视频流处理1、转码:直播转码是将视频码流转换成另一个视频码流功能。通过转码,可以?改变原始码流的编码格式、分辨率、帧率、码率等参数,从而适应不同终端和网络环 境的播放。以适配不同的网络带宽、不同的终端处理能力、不同的延时要求,满足不 同的用户需求。?2、录制:视频直播录制功能,就是将直播中心接收到的推流数据进行录制,将?录制后的数据以HLS协议的封装格式,保存至您指定的存储位置。支持M3U8(同时?会有.ts分片文件)、MP4、FLV格式。直播录制支持将直播内容录制至VOD或OSS。?录制到VOD可以联动使用VOD的云剪辑、媒资管理、播控管理等能力。3、时移:直播时移是支持用户在观看直播时随时回顾过去精彩内容的功能,支?持毫秒级的时移回看颗粒度。强校验保障,避免直播信号源时间戳错误导致的时移回 看脏数据,播放不连续问题。4、截图:视频截图服务支持直播视频按照设定的时间间隔对正在直播的视频进?行截图,保存至指定的OSS存储位置。比如视频直播的封面刷新后会发生变化,都是 靠截图来实现的。5、流分发:直播平台的观众来自全球的不同地域和不同运营商网络,为给这些?数量众多、地域分布广泛的观众提供高质量、低时延的视频直播服务,直播流的分发 就依赖于内容分发网络(CDN)。客户端拉流请求过程如下图所示:??当终端用户请求视频流时,首先向Local DNS发起请求拉流域名对应的IP。??Local1DNS检查缓存中是否有拉流域名的IP地址记录。如有则直接返回给终端?用户;如没有则向网站授权DNS请求域名的解析记录。?当网站授权DNS解析拉流域名后,返回域名的CNAME 。? Local1DNS向便宜云服务器CDN的DNS调度系统请求拉流域名解析记录,便宜云服务器CDN?的DNS调度系统将为其分配最佳节点IP地址。? Local?DNS获取便宜云服务器CDN的DNS调度系统返回的最佳节点IP地址。? Local?DNS将最佳节点IP地址返回给用户,用户获取到最佳节点IP地址。?用户向最佳节点IP地址发起对视频流的访问请求。如该节点已缓存该资源,则?会将请求的资源直接返回给用户,如未缓存或缓存的资源已经失效,则节点将会向源 站发起对该资源的请求。除以上调度分发方式之外,直播中常用的还有302调度和httpdns调度。相对于?DNS调度302调度和httpdns调度的颗粒度更小、调度更加准确。?3.1.2.2.4?直播监控便宜云服务器具有直播全链路多维度监控能力,对直播关键指标进行多方位实时监控, 为高质量的直播服务保驾护航。1、卡顿率:监控域名维度直播卡顿率,及时发现直播卡顿数据波动,快速优化?服务质量。2、回源统计:统计实时回源带宽、流量、状态码,为优化回源,减轻源站压力?提供重要参考。3、流量带宽:具有域名维度推流、拉流上下行带宽监控数据,并通过同时段环?比、前后N分钟环比等方式检测异常波动。4、命中率:实时边缘节点命中率统计,对于提高命中率、优化首帧时间和减少?回源具有重要意义。5、状态码:通过状态码监控发现推拉流异常波动,对于4xx、5xx状态码上升等异常情况实时发现、快速处置。并通过同时段环比、N分钟环比等方式获取周期质量?波动数据以供分析。6、全链路: ?展现单路直播流从推流到拉流的全链路情况, ?并可以分段查看帧?率、码率等指标。
《云上社交行业技术服务白皮书》——第四章 云上社交保障与服务案例——4.3 关键时刻保障——4.3.2 直播业务保障方案
4.3.2?直播业务保障方案随着直播的发展, ?越来越多的观众习惯于从网络直播来获取自己关注的内容。目?前互联网直播已经成为晚会、演唱会、重大赛事的重要转播途径。相对于普通的直播 场次这类活动几乎是全民热点,观看人次多、并发大,对于直播平台和云服务厂商都 是一个考验。因此针对热度高的重大直播便宜云服务器推出重大直播保障护航方案。4.3.2.1?保障方案及流程1、重保流程如下保障前与直播平台确认活动时间、活动域名、发布点、流名、转码模板、资源占 用预估等信息,以上信息确认后按照既有的保障流程启动保障。?阶段分项操作??????????活动前????资源检查监控大盘数据展示正常天眼数据检查系统自查:推流节点检查、转码模板检查、域名配置检查、推拉流测试资源评估和准备数据播报检查现场及online保障人员确认监控配置大屏监控帧率、码率、卡顿、拉流成功率监控九宫格重保流合流?告警配置开关播告警状态码告警资源监控告警保障演练应急预案准备应急演练????活动当日?开播前预备直播流全链路信息检查推流节点重点保障直播流预热??活动期间资源监控监播值守告警监控异常情况处理活动结束活动数据信息汇总保障总结2、重保工具直播重保流大屏功能:3、九宫格监播视频直播提供广目监播功能,可随时监控线上直播效果与质量,并对帧率码率变 化、音视频同步、延迟和卡顿等异常情况时进行告警,为各类专业直播保障护航。4、信息播报?