设为首页加入收藏
群晖首页图片
网站标志
新闻详情
 
当前位置
新闻搜索
 
 
分布式存储为什么不直接管理裸盘?
作者:管理员    发布于:2019-02-11 20:33:24    文字:【】【】【
分布式存储为什么不直接管理裸盘?
 

特别邀请业内多位从业多年的存储专家,来帮助大家解答关于存储技术、存储行业、存储应用、存储研发等各种问题。

 



【问】:现在看到的大多数分布式存储中,数据最终还是存储为文件系统中的一个文件。为什么不能像ceph中bluestore一样,直接管理裸盘,避免文件系统的写放大等问题带来的性能损耗呢?

【大师】:一方面,直接管理裸盘需要自己开发一个管理裸盘的系统,这个投入和复杂度都比较高,一般公司搞不定,而且裸盘的需求一般在SSD介质和对性能要求高的场景,有些场景用了裸盘反而是过度设计。再一方面,ceph以前的版本存在写放大是因为写日志然后再写数据盘的问题,这样一个写被放大成2个 ,体现出来就是性能降低一倍。一般是block存储会用裸盘,其他方式因为没必要。

不过,有研发实力的情况下,还是要用裸盘。对象存储做的好,也是用裸盘的。

bluestore也不是完全的裸盘操作,metadata还是存在文件系统上。这也算是个讨巧的设计,这玩意本来就不是说要完全抛弃文件系统,主要是为了解决btr的写放大问题,同时又想要保留指针型的特性。对于用户来说,你做分布式看要干啥,数据填埋场的场景,真的没必要,本来就是一次写入,多次读取的场景,写优化没多大意义。如果是交易型的场景需就对写要求高些。

当然了,文件系统有个最大的难题是文件系统里头的IO和缓存难以由外头控制,性能体现出来就是抖,用裸盘有个好处就是什么都可以自己控制,在对性能和抖动要求都非常苛刻的场景还是要裸盘来搞定。

实际上,也不见得说是外部控制就一定抖,自己控制就不抖,这个没有绝对的,本质来说数据落盘还是需要文件系统来处理。当然NFS不也可以跑Oracle数据库吗。NFS跑Oracle数据库是可以跑,在功能上是没问题,但是还有别的问题,比如抖。

因此,ceph有他的特殊性,毕竟是全栈文件系统,要平衡的东西更多,你弄swift就没这么多事,没有SAN和NAS的包袱。

可是呢,ceph的毛病就是三合一 没有达到原生的最优化。比如用ceph跑数据库不太好搞不定吧。块、文件、对象都有其原生属性。

以前觉得ceph是朵奇葩,这两年看越来越觉得春天才刚刚开始,可是,ceph到底好在那里呢?众说纷纭,一是老能搭上热点的船,OpenStack搭一波,Data lake搭一波,AI又能搭一波,容器搭一波;二是命好;三是万金油。由此可见,ceph需要解决的问题也多。

一个非常形象的比喻:如果说块存储是跑车,文件存储是卡车,对象存储是渡轮,ceph就是变形金刚,一会变跑车,一会变卡车,一会变渡轮。但形态不同关注也不同,跑车关注极致性能,卡车性能差点,渡轮关注量。然而从极致性能到极致的量,就暗藏了很大的挑战。

所以,也有业内人士认为:开源ceph做对象存储的不错,其他如文件、块两个没有达到原生的能力。不是说ceph不好,而是说对于一般用户还是搞不定,开源的跟商业化的自然有差异。当然了,作为技术人员其实应该感谢ceph,使得技术人员不会因为 “平庸”而被辞退,感谢Sage Weil,带动一大波就业。

扩展知识:Sage Weil

Ceph是根据加州大学Santa Cruz分校的Sage Weil的博士论文所设计开发的新一代分布式文件系统软件。最早,Ceph是加州大学Santa Cruz分校的一个研究项目,  项目创始人就是Sage Weil。为此,Sage Weil也有着“Ceph之父”美誉。

本次答疑:常平、马总mushroom、Juernum、乐成祥
编辑整理:阿明。


数据保护解决方案提供商:为企业级用户提供云计算环境下的数据备份、恢复、迁移、灾难恢复演练等产品与解决方案。(容灾备份解决方案提供商)

  ---------------------------------------------------------------------------------------------------

 

 IT解决方案:

   文件共享、私有云盘、企业网盘  解决方案

   存储雷电MAS/DAS /SAN/JBOD/IPSAN ISCSI 解决方案

   企业级存储 解决方案

   备份 容灾 数据保护 解决方案

   防勒索病毒解决方案


  NAS 应用场景:完美解决文件共享/文件分享问题,替代传统文件服务器

  NAS网络存储 文件NAS存储 PC备份 服务器备份 数据库备份

 磁带库 灾备 灾难备份 不同 备策略建立独立的备份作业, 文件备份 系统备份 数据库备份 虚机备份

非结构化数据的备份

群晖备份一体机 适用于的企级备份软件有:

(acronis 安克诺斯 /veeam卫盟/veritas华睿泰/commvault 慷孚沃德 /arcserver )

  PHD virtual , Nakivo, IBM spectrum protect , (TSM) HP data protector

  DELL  EMC Networker  RecoverPoint Quest  veritas system recovery 18

虚拟数据保护方案:RTO 小于2分钟

虚拟机备份解决方案:无代理备份方案、oVirt 备份方案,Ovirt虚拟化备份,

VMware vSphere 备份方案、Citrix XenServer备份方案、RedHat RHV备份方案、、Ovirt备份方案、、H3C CAS备份方案、、Openstack备份方案、、华为 FusionSphere备份方案、、中科睿光 SVM备份方案、、深信服 HCI备份方案、、云宏CNware备份方案、、浪潮 InCloud Sphere备份方案、、中标麒麟高级服务器虚拟化备份方案、、噢易服务器虚拟化备份方案、

 兼容国内备份软件:联鼎,精容数安,鼎甲,火星仓,合力记易UPM,浪擎,爱数 云祺 盛思睿


 西南NAS存储总分销:威联通 qnap, 色卡司thecus,infotrend普安, 华芸asustor qsan, 海康hikvision IPsan ,大华 dahua IPsan铁威马TerraMaster,Freenas,  EMC,netapp,  

NAS专用硬盘:  seagate 希捷 酷狼ironwolf ,锡捷seagateironwolf 酷狼pro  

                            WD westdigital 红盘  

黑群晖无法升级,易丢失数据,建议用白群晖,黑群晖洗白

产品:国行原装正品, Synology群晖科技官网

synology partner:

深圳市凯洛蜜贸易有限公司

深圳国亿国际贸易有限公司(深圳国亿国际)

世平伟业国际贸易(上海)有限公司(上海世平伟业)

群晖官网:synology inc , 群晖科技官网 

服务区域:四川群晖 成都群晖 西藏群晖  重庆群晖贵州群晖 贵阳群晖 云南群晖  昆明群晖 

NAS品类:存储服务器,NAS网络存储服务器,群晖NAS网络存储,synology nas  ,网络附加存储, nas存储器, nas服务器,企业级网络存储器,网络存储器,NAS云存储,网络存储池

私有云存储


 群晖配件:群晖钥匙, 群晖硬盘钥匙,群晖硬盘托架钥匙,  
                    群晖网卡, 群晖万兆网卡,  群晖内存, 群晖电源, 群晖主板


 群晖售后:
群晖客服、群晖官网客服电话 

                    

       群晖技术支持电话 群晖nas售后客服电话 群晖售后电话 群晖存储盘客服电话


       群晖售后电话400 群晖售后服务电话 群晖nas客服电话 群晖nas售后电话


维修:群晖保修保内保外维修  群晖保修 群晖维修,亚马逊海淘的群晖保修

               港版群晖维修


群晖数据恢复:  服务器数据恢复 raid数据恢复  nas数据恢复   希捷数据恢复  西数硬盘恢复  seagate 数据恢复  WD数据恢复 群晖硬盘数据恢复 


 代理体系:synology群晖全国总代理、synology群晖国代,synology群晖总代理,synology群晖总分销商、synology群晖授权经销商、synology群晖官方代理商)方案适用机型:

19-系列

DS1219+ ,UC300 RackStation

18-系列FS1018RS3618xsDS3018xsRS2818RP+RS2418(RP)+RS818(RP)+DS918+DS718+DS418DS418playDS218+DS218playDS418jDS218DS218jDS118、NVR1218

17-系列FS3017、FS2017、RS18017xs+、RS4017xs+、RS3617xs+、RS3617RPxs、RS3617xs、RS217、DS3617xs、DS1817+、DS1517+、DS1817、DS1517、扩展柜:417sas、RX1217sas、RX1217、DX517;

16-系列:RS18016xs+、RS2416RP+、RS2416+、DS916+、DS716+II、DS716+、RS816、DS416、DS416play、DS416slim、DS416j、DS216+II、DS216+、DS216play、DS216、DS216j、DS216se、DS116、NVR216、群晖扩展柜 RX1216sas;

15-系列RC18015xs+DS3615xsDS2015xsRS815(RP)+DS2415+DS1515+DS415+RS815DS1515DS715DS415playDS215+DS215jDS115DS115jDS1815+

14-系列RS3614xs+RS2414(RP)+RS814(RP)+RS814DS414DS214+DS214playRS214DS414jDS414slimDS214DS214seDS114EDS14

13-系列RS10613xs+RS3413xs+DS2413+DS1813+DS1513+DS713+DS413DS213+DS413jDS413jDS213DS213jDS213air

12-系列DS112、DS112j、DS112+、DS212、DS212j、DS212+、DS412+、DS712+、DS1512+、DS1812+、DS3612xs、RS212、RS812、RS812+、RS812RP+、RS2212+、RS2212RP+、RS3412RPxs、RS412xs、RS412RPxs;

11-系列

DS1511+、ds2411+, RS3411xs、RS3411RPxs、DS3611xs,扩展箱 DX1211、rx1211rp+, rs411

RS2211(RP)+,RS3411(RP)xs,RX1211(RP)

10-系列:DS1010+,DS710+,RS810(RP)+, ,rx410

09-系列

ds509+ ,rs409,rs409RP+,rx4


早期系列:ds-101 

群晖配件:

M2D17 ,synology 群晖监控许可证


成都科汇科技有限公司 --- 专业数据备份服务商

无论您的IT架构是 本地化、云端、还是混和云 都能提供一站式数据备份方案。

京东群晖synology  天猫群晖 线下代理售后维修服务站

四川成都群晖官方授权核心代理商(企业级服务商)

四川成都群晖synology解决方案中心

四川成都群晖synology体验中心

四川成都synology群晖线下实体店

四川成都群晖synology售后维修中心

四川成都群晖synology官方授权专卖店

成都科汇科技有限公司

地址:成都市人民南路四段1号时代数码大厦18F

群晖电话:400-028-1235(群晖400)

QQ:     2231749852

手机:138 8074 7621(微信同号)

微信公众号:群晖Synology技术中心



脚注备案信息
群晖技术群