IT168首页 | 产品报价 | ChinaUnix社区 | ITPUB社区 | OA维修站 | 文库 | 博客 | 会议 | 自测 | 专题 | 订阅 | IT选型顾问
热点推荐 加盟IT168选型顾问俱乐部 获享5大权益

分布式文件系统

分布式文件系统是大型分析非常重要的一环。即使你是在使用Spark,你仍然需要将大量的数据快速的存入内存,所以文件系统一定要可以是高速率的。但是,HDFS并不像它标榜的那样好,它是大数据分析的薄弱环节。

05日更新
为何HDFS是大数据分析的软肋

Ceph程序代码人人皆可取得,但想要易于部署与管理,功能、效能、稳定性样样精通,达到企业等级的储存系统需求,就要各凭本事了。且看新兴与既有储存厂商如何以Ceph开创新局!

开源式存储当道 Ceph系统抢占企业应用

18日下午,京东商城云平台系统技术部高级架构师桂创华出席“存储与文件系统”专场,以《京东文件系统:从2013到2015》为主题,与大家分享介绍了京东的技术团队是如何研发逐步完善其自主研发的分布式文件系统JFS (Jingdong File system)。

DTCC:JFS——京东双十一背后的隐形之剑

开源云计算被认为是IT的趋势。我们熟知的几个IT巨头的云计算平台,如亚马逊EC 2、IBM的蓝云、微软的Azure、Sun Cloud等,那么开源云计算的平台又有哪些呢?

盘点:你可能不知道的Linux下开源云平台

新的数据源不断涌现,非结构化数据呈指数倍数增长,这也为企业的IT管理人员带来了诸多存储方面的难题。作为存储操作系统的重要组成部分,文件系统也面临着变革与创新。面对市场上种类繁多的文件系统产品,企业IT管理员们究竟应该从何下手?本文将围绕文件系统这一话题展开,希望能对正在选型中的企业有所

帮你Hold住

针对业务运营数据飞速增长的情况,刘海锋表示,传统的关系型数据库价格昂贵,没法按需扩容,只能定期删除数据,很麻烦。开源存储系统虽然便宜,但难以选型、定制和维护。这两点也是此前京东文件存储的主要痛点。

刘海锋:自研文件系统JFS令京东如虎添翼

英特尔认为,随着一些新兴的IT技术兴起,如微博、平安城市、医疗以及企业云等,将使得传统的存储解决方案很难应对这些挑战。因为这些应用或者方案大多都是以海量的非结构化数据为主,不管是在容量、性能、价格、灵活性、容错或响应速度方面,如果用传统的纵向扩展存储解决方案去解决的话,将付出高昂的

IDF 2013:英特尔平台横向扩展存储调优

PCIe SSD和闪存卡提供了比任何其它非易失性解决方案更快的存储访问,但PCIe存储的缺点是,它只能从PCIe卡插入的服务器是访问和管理。这当服务器崩溃时能够成为一个实际的问题,你的数据会被困在里面。Virident的FlashMAX Fabric软件通过使PCIe闪存的行为更像是一个SAN或者作为一个分布式的缓存,解决了

26日更新
Virident将PCIe闪存从服务器上“解锁”

对于IT主管来说,为大数据构建一个同时具有高可扩展性和成本效益的存储基础架构是非常关键的,也是必要的。日前,Garter对目前市场主流的九大存储供应商所推出的9款横向扩展文件系统产品进行了对比评测分析,并指出了各自的有点和需改进的地方,以供用户在采购时进行对比参考,以下为报告主要内容(注:

九大主流横向扩展文件系统存储对比评测

作为全球最大的社交网站,Facebook每天要处理大量的数据。而Facebook的成长过程都包含了哪些数据天才的智慧呢?近日知名科技网站Wired发表文章向人们介绍了Facebook崛起背后的数据英雄。

Facebook为何崛起?看背后一群数据英雄

通过分布式文件系统网络管理员可以将服务器文件分散存储到网络上的多台服务器上,以提高服务器性能并增强服务器的容错性。

02日更新

分布式文件系统是微软服务器中很重要的一项功能。通过分布式文件系统网络管理员可以将服务器文件分散存储到网络上的多台服务器上,以提高服务器性能并增强服务器的容错性。

02日更新

目前的工业趋势表明,作为企业存储领域的一部分,分布式文件系统将会成为日益重要的技术并得到迅猛发展。

02日更新

最近很多人都在讨论Spark这个貌似通用的分布式计算模型,国内很多机器学习相关工作者都在研究和使用它。Spark是一个通用的并行计算框架,由UCBerkeley的AMP实验室开发。那么Spark和Hadoop有什么不同呢?

数据存储主要有两种方式:Database和FileSystem,后面发展出了Object-oriented storage,但是总的来看就是存储结构化和非结构化数据两种。 DB开始是为了结构化数据存储和共享而服务的。FileSystem存储和共享的是大文件,非结构的数据,像图片,文档,影音等。随着数据量的增大……

大话Cloud Storage和Big Data的演化

58同城是位于北京的分类信息网站,提供房产、招聘、黄页、团购、交友、二手、宠物、车辆、周边游等海量分类信息。58在google top1000全球网站排行版中排名在50-60左右

13日更新
58同城徐振华:58同城分布式存储架构

时下,“大数据”已逐渐成为人们热议的名词之一。据IDC预测,到2020年,全球数据总量将增长50倍,其中80%为非结构化数据。

分布式文件系统的构建具有很大的实用价值,它可以提高服务器的容错能力,均衡服务器的负担等等。本文对其部署进行了简介。

15日更新

Megastore是谷歌一个内部的存储系统,它的底层数据存储依赖Bigtable,也就是基于NoSql实现的,但是和传统的NoSql不同的是,它实现了类似RDBMS的数据模型,同时提供数据的强一致性解决方案,并且将数据 进行细颗粒度的分区,然后将数据更新在机房间进行同步复制 。

Google Megastore分布式存储技术全揭秘

最新的VMware旗舰产品vSphere平台支持虚机负载平衡,vSphere早就有的DRS(分布式资源调度)功能能够帮助整个集群中通过主机实现负载均衡。然而直到现在,DRS仍只是一个概念,其只能对正在进行的虚机进行负载均衡。vSphere 5.0的发布,将负载均衡理念延伸到了虚拟机磁盘文件系统。

金秋十月 与你饮酒论道
热门文章

热门活动

it168文库会议频道上线

热门标签

热点推荐