首页 国内 国际 汽车资讯   财经 it资讯 时尚资讯 综艺频道   论坛 明星资讯 美食资讯 大数据
休闲 医疗资讯 文化资讯 新能源 消费 戏剧歌舞 创业交流 人工智能 图片 家电资讯 影视头条 娱乐资讯
您当前位置:乐陵K网>>大数据

淘宝架构师讲述分布式文件系统优缺点

乐陵K网  2020-05-21 20:29:56

8月27日消息,2010年系统架构师大会今天在北京永泰福朋.喜来登大酒店隆重开幕。本次大会主题为:“企业IT应用最佳实践”,是由IT168联合旗下三大技术社区ChinaUnix、ITPUB、IXPUB主办的继2009年第一届系统架构师大会之后偏重技术经验分享和案例剖析的又一次技术盛宴。据悉,本次技术大会邀请了30多位各行各业、国内最顶级的技术专家分享来自最终企业用户端的系统架构成功实践经验。


▲2010系统架构师大会专题

淘宝网开放平台技术部资深架构师余庆先生首先回顾了自己在Yahoo工作时的经历,他表示Yahoo当时的相册和论坛系统整个结构都进行了针对大规模分布式存储和并发操作的改进。之后的演讲中,余庆从整个分布式文件系统的发展说起,谈到了FastDFS文件系统的概念和具体优缺点。


▲ 淘宝网开放平台技术部资深架构师 余庆

据了解,yahoo论坛和相册以前一直面临着扩容问题,同步延迟问题,同步失败问题等。其pat同步、定式扫描以及farm式集中式存储的热备都带来立刻高昂的成本消耗。2008年底,处于减低成本的考虑,中国yahoo采用分布式文件系统替换了古老的YMDB系统。

余庆介绍了通用分布式文件系统和专用分布式文件系统的有关发展。他表示,相比起来通用分布式文件系统对开发者来说具有友好性强的优势,系统复杂性相对较高,性能一般;而专用分布式文件系统能个的开发者友好性较差,系统复杂性较低,性能较高。因此,根据专用性和通用性的原则,架构师在选择两种分布式系统的时候需要考虑有关分布式系统的应用环境。

据余庆介绍,FastDFS系统是一个类似于Google FS的轻量级分布式文件系统,用C语言实现,支持包括Linux、FreeBSD、AIX等UNIX系统。从诞生之初至今,FastDFS已经推出了31个版本。



第三十届CIO班招生
法国布雷斯特商学院硕士班招生
北达软EXIN网络空间与IT安全基础认证培训
北达软EXIN DevOps Professional认证培训
  • ·淘宝架构师讲述分布式文件系统优缺点
  • ·荣瑞投资基金管理有限公司:涉及下一个投资机遇
  • ·苹果成全球第四大游戏公司:就靠App Store抽成
  • ·qq企业邮箱怎么注册收费
  • ·云安全体系架构与关键技术
  • ·2019 C-V2X“四跨”示范活动在即,C-V2X通信安全验证将重磅亮相
  • ·来学网荣获网易金翼奖“2019年度用户信赖教育品牌”
  • ·大数据挖掘必备的30个知识点
  • ·科技巨头在云计算领域不断加大投入 同比增幅接近30%
  • ·特斯拉给出能立即交车的购车方案 提升Model 3交付量
  • 云安全体系架构与关键技术
    云安全体系架构与关键技术
    来学网荣获网易金翼奖“2019年度用户信赖教育品牌”
    来学网荣获网易金翼奖“2019年度用户信赖教育品牌”
    推荐新闻
  • 淘宝架构师讲述分布式文件系统优缺点
  • 荣瑞投资基金管理有限公司:涉及下一个投资机遇
  • qq企业邮箱怎么注册收费
  • 2019 C-V2X“四跨”示范活动在即,C-V2X通信安全验证将重磅亮相
  • 微软:Windows 10不再自动备份注册表 不是Bug
  • 城市商业传说:打飞的吗?无人的那种
  • 密码法1月1日起实施,商用密码应用系列培训来了
  • 4个隐藏的云计算成本会让员工面临解雇的风险
  • 疫情复盘:以零售药店数据为例看如何利用大数据示警未知疫情
  • 金小桃:大数据应用推动医疗大健康产业的发展
  • 乐陵K网