作者介绍:赵健博,快手大数据架构团队的负责人,负责快手公司内Hadoop生态中存储、调度、计算、AI架构等子系统内核与周边子系统的研发,与在公司内的应用。先后就职于百度、奇虎360、58集团,快手。大数据领域专家,2009年毕业于中国科学院计算所,主要研究领域包括分布式计算、调度与存储系统等。
快手每天都有海量的视频数据上传存储,到目前为止所有的视频以及衍生数据总量更是数量庞大,且视频本身有大有小,如何存储这些数据将是一个颇具挑战性的问题。本次演讲介绍一种可以快速构建海量短视频存储的服务的方案、我们在实践中遇到的问题以及解决方案,例如我们是怎么解决高可用、高扩展性、高性能等问题的。
主要内容:
在线短视频存储服务系统的要求;
在线短视频存储服务系统的架构与实现细节;
实践中遇到的问题与解决方案;
未来规划。
听众受益:
掌握如何快速构建一个海量对象存储服务;
了解到海量分布式存储服务可能会遇到的一些问题,如可用性、扩展性、性能问题,并针对这些问题提供一种解决方案。
演讲视频
幻灯片
以上就是赵健博老师在 QCon 上海 2018 的精彩分享,更多架构话题探索请持续关注新一届的 QCon 大会。
领取专属 10元无门槛券
私享最新 技术干货