当前位置:科学 > 正文

大厂绝密!对象存储和块存储系统的设计思路和落地实践!

2023-07-04 22:01:37  来源:DataFunTalk

数据是业务的基石,如何高效便捷的管理和存储好数据,是各家互联网公司面临的挑战。互联网公司内部的存储系统基本由对象存储系统,NoSQL存储系统和分布式块存储系统构成。其中NoSQL系统,各家以自研为主,贴近各自的业务需求。而对象存储系统和分布式块存储系统,则是少数大厂的独门秘诀。

本论坛,以干货为主调,邀请了相关领域的负责人来给大家分享这些系统的设计思路、日常运维心得、领域思考等。通过论坛,听众既可以学习到前沿的对象存储和块存储设计方案,也可以学习到各家的NoSQL系统的演进路线,更可以学习到为提升系统的SLA指标,大家所做的努力。

欢迎点击「链接」了解更多信息下面是本论坛的详细介绍


(相关资料图)

出品人:司春峰 bilibili 技术专家

个人介绍:2009年毕业于南京大学。先后在EMC的统一存储部门,百度基础架构部和B站基础架构部从事存储系统的研发工作。创建了B站的对象存储系统和KV存储系统。目前负责B站的分布式存储团队。


林堂辉 bilibili 基础架构部 资深研发工程师

个人介绍:2016年加入B站,作为核心开发亲历了B站从单体架构到微服务的架构改造,后续又负责消息队列、服务发现、数据传输等微服务中间件的开发。目前负责NoSQL存储,从零到一搭建了分布式KV存储系统,为全站业务提供了高性能稳定可靠的存储服务。

演讲题目:如何打造一个高可靠的线上存储系统

演讲提纲:对于每天承载亿级请求的在线存储系统,如何通过多活来保证在线服务的可用性。同时对于机器故障数据损坏等,如何通过数据备份容灾来保证数据的可靠性,对于数据损坏如何快速进行修复。最后,介绍一些常用的运维sop来对故障进行预防及快速响应。

听众收益:

1.如果打造多活存储系统

2.如何通过point-in-time recovery来保证服务的可靠性。

3.通过完善的日常sop来对风险进行预防及快速响应。


侯雪峰 金山云 研发专家

个人介绍:2017加入金山云,目前负责云存储大数据方面的研发,曾就职于百度,对大数据架构有着深入的研究与学习,云原生时代对计算、存储计算分离、流计算、消息队列方面有着深入学习和成功案例。

演讲题目:金山云大数据存算分离架构实践

演讲提纲:

1. 大数据存算分离介绍

2. 金山云存算分离方案

3. 托管存算分离方案 Gaea

4. Serverless 存算分离方案 KS3-HDFS

听众收益:

1. 通过大数据存算分离,降低大数据50%以上的存储成本

2. 存算分离结合弹性计算,节省30%以上的计算资源

3. 存算分离方案如何选型


郭波 百度云存储高级研发架构师

个人介绍:硕士毕业于华中科技大学计算机专业,随即加入百度基础架构体系存储方向,长期致力于分布式存储/云存储架构/云存储产品的研发和推广,具备超过十年的相关经验。目前作为云存储部门高级研发架构师负责Aries存储系统的研发和演进,该系统作为云存储数据面底座,支撑了百度智能云多个云存储产品以及百度网盘的数据存储需求和快速发展,同时也负责了部分NoSQL数据库产品的演进。

演讲题目:百度云磁带库存储架构的设计与实践

演讲提纲:本演讲介绍百度云存储最新一代磁带库存储架构与设计,包括设计细节与实践案例。通过该演讲,听众可以获得一种成功落地的大规模应用磁带库的方案,并可以从中获得一些百度云在磁带库存储上的经验与思考,以及分布式存储在架构设计上的一些经验与思考。演讲内容大致分为以下4个部分:

1. 介绍企业级磁带与磁带库的特性及合适的应用场景;

2. 百度云存储数据面底座Aries系统的总体设计与概念;

3. Aries系统接入和应用磁带库的架构设计细节;

4. 一个实践案例的解析。

听众收益:

1. 企业级磁带和磁带库有哪些典型特性?有哪些适合的应用场景?

2. 百度云存储数据面底座Aries是怎么样设计的?

3. Aries如何接入和应用磁带库?有什么实践案例?


吴宏松 网易 基础平台 资深服务端开发工程师

个人介绍:吴宏松,Curve开源社区maintainer,2015年硕士毕业,并于2016年开始在网易从事云计算基础设施相关工作,先后参与开发以及优化了网易第一代分布式块存储,Ceph以及Curve等。

演讲题目:国产开源分布式存储系统--Curve

演讲提纲:

1. CurveBS介绍

简要介绍CurveBS的架构设计,以及我们开始开发CurveBS项目的初心。

2. CurveBS结构设计特点

从CurveBS项目的一些特点展开介绍Curve,包括高性能,易运维,云原生,更稳定等,同时分享交流一些我们系统设计方面的一些取舍。

3. CurveBS应用案例以及开源现状

简要介绍下CurveBS的业务应用案列以及开源现状。

4. Curve roadmap

简要介绍下Curve近两年的项目规划以及社区规划。

听众收益:

1. 了解CNCF 分布式存储项目Curve的架构以及特点

2. 了解Curve的应用案例

3. 了解Curve的RoadMap


沈泰宁 PingCAP 分布式存储部门 高级软件工程师

个人介绍:

TiDB 项目 committer

TiDB 备份恢复

TiDB 数据同步

TiKV 项目 committer

grpc-rs 项目 maintainer

rust-prometheus 项目 maintainer

演讲题目:分布式事务型 KV 数据库 TiKV 的实现和实践

演讲提纲:在这次分享中,我们将会探讨 TiKV,一款支持事务的分布式 KV 数据库。首先,我们会介绍包括它的功能特性和应用场景;然后,我们将会阐述 TiKV 的架构和实现,了解它的分层设计,各层的算法和实现;最后,我们将讨论在过去几年的技术发展中 TiKV 遇到的挑战和解决方案。

听众收益:

1. 了解 TiKV 的使用场景和设计目标。

2. 了解分布式事务型 KV 数据库的架构和实现。

3. 了解 TiKV 过去几年实践中遇到的问题和解决方案。

点击链接即可免费报名:「链接」

关键词:

推荐阅读

月壤形成的主要原因 月壤与土壤有什么区别

月壤形成的主要原因月壤形成过程没有生物活动参与,没有有机质,还极度缺水干燥;组成月壤的矿物粉末基本是由陨石撞击破砰形成,因此,粉末 【详细】

域名抢注是是什么意思?投资角度来看什么域名好?

域名抢注是是什么意思域名抢注是通过抢先注册的方式获得互联网删除的域名的使用权。域名是由点分隔的一串数字,用于标记一台计算机或一组计 【详细】

捷达保养费用是多少?捷达是哪个国家的品牌?

捷达保养费用是多少?全新捷达的保修期为2年或6万公里,以先到者为准,新车可享受一次免费保养,首次免费保养在5000-7500km或1年内进行。如 【详细】

天然气泄露会造成爆炸吗?天然气泄漏怎么办?

天然气泄露会造成爆炸吗?家里用的天然气如果泄露是会发生爆炸的。当空气中含有混合天然气时,在与火源接触的一系列爆炸危险中,就会发生爆 【详细】

四部门明确App收集个人信息范围 个人信息保护范围判断标准

四部门明确App收集个人信息范围近日,国家互联网信息办公室、工业和信息化部、公安部、国家市场监督管理总局联合印发《常见类型移动互联网 【详细】

相关新闻

关于我们  |  联系方式  |  免责条款  |  招聘信息  |  广告服务  |  帮助中心

联系我们:85 572 98@qq.com备案号:粤ICP备18023326号-40

科技资讯网 版权所有