ITBear旗下自媒体矩阵:

日均2000亿条日志信息承载了多少秘密? Tech Minds首次登陆上海

   时间:2016-09-26 17:07:04 来源:飞象网 编辑:星辉 发表评论无障碍通道

又拍云主办的高端技术领导人私享会“Tech Minds”先后在深圳、广州、北京成功举办,凭借私密的分享环境、高质量的对话嘉宾、前沿的行业和技术话题,又拍云Tech Minds已经成为技术圈子中非常受欢迎的“思想汇”活动。

9月22日,又拍云Tech Minds首次进入上海,盛大游戏、PPTV、龙珠直播、哔哩哔哩(B站)、游族网络、echo、游戏多、51job、漫画岛、一药网、恺英网络、高效运维等互联网企业的技术高管,齐聚黄浦江畔,就“做追求极致用户体验的偏执狂”的交流主题展开了激烈的讨论。

日志:承压日均2000亿条的日志系统

又拍云CTO黄慧攀在Tech Minds No.4上做了“访问日志的大数据分享应用”,分享了又拍云在访问日志方面的管理和应用方法。又拍云目前在全球范围内部署了4000多台服务器,每台服务器日均产生5GB压缩日志,每天又拍云的服务器总共会生成2000多亿条日志。

在庞大的数据量下,传统的日志管理手段容易出现数据存入集群性能低、服务器资源占用高的问题。又拍云采取了更为快捷的日志管理方式,在处理日志数据时,先对日志进行预先合并计算,再存入ELK。这个方式将记录数量压缩了1000倍,大大降低了海量日志数据对服务器的压力。

在日志应用方面,黄慧攀以又拍云日志系统为例,详细介绍了如何从一条日志信息中提炼出全网汇总数据、CSN服务节点信息、服务状态、路由状态、客户对应关系、客户分布情况、客户健康信息等关键信息,从这些数据分析中,又拍云能够随时感知客户的变化、快速定位问题。

直播:声音连续性比视频连续性更重要

直播无疑是2016年最为热门的互联网行业,秀场直播、游戏直播、电商直播、体育直播、教育直播等各种直播方式都爆发出极强的活力。龙珠直播作为国内最早的游戏直播玩家之一,已成为这一领域的领先者。在直播的用户体验方面,龙珠直播有着独到的经验。龙珠直播CTO谭振林在交流中提出一个观点:在直播过程中,声音的连续性比视频的连续性更为重要。

直播成为互联网行业的新热点,吸引了众多企业投入其中,但直播既吃硬件也吃软件的特性,对许多参与其中的企业提出了较高的技术门槛。Tech Minds No.4的嘉宾们就直播行业在功能实现、网络优化方面贡献了各自的妙招。

又拍云直播整体解决方案旨在降低直播行业的技术门槛,不但提供了直播服务中必不可少的CDN网络,还将转码录制、鉴黄禁播、推拉流加密、连麦等直播必不可少的功能打包其中,甚至开发、开源了适用于iOS的直播播放器。据介绍,又拍云直播整体解决方案已经将直播延时降低到1到2秒,视频、音频的推拉流也很稳定。

UGC安全:既要大数据,也要靠用户

文字、直播、点播视频、图片等大量UGC内容充斥着不良信息,既严重影响了用户体验,也对互联网公司的信息安全管理提出了很大的挑战。

即便是哔哩哔哩(B站),在受众逐渐从二次元爱好者扩展到三次元的时候,都会有一些播主上传限制级视频。B站在依靠大数据、云计算对限制级内容自动进行处理的同时,也积极鼓励用户用举报不良视频。“举报”已经成为B站及时发现、处理限制级视频必不可少的一个功能。“UGC不能缺少用户互相监督的环节。” 哔哩哔哩UGC技术总监毛剑强调技术很重要,激发用户对社区的爱护、认可也极为重要。

l除了精彩的干货和经验分享,又拍云还组织与会嘉宾进行了一场精彩的德州扑克比赛,并为嘉宾准备了机械键盘、互联网书籍等大量精美礼品。

l获取Tech Minds的分享全文,参加Tech Minds的精彩活动,了解技术圈的最新八卦和精彩干货,请持续关注又拍云公众号(ID:upaiyun)。

举报 0 收藏 0 打赏 0评论 0
 
 
更多>同类资讯
全站最新
热门内容
网站首页  |  关于我们  |  联系方式  |  版权声明  |  RSS订阅  |  开放转载  |  滚动资讯  |  争议稿件处理  |  English Version