舟山宠物网

    fastdfs怎么保证实时同步

    发布时间:2017-01-22 16:19

    常见的分布式文件系统有,GFS、HDFS、Lustre 、Ceph 、GridFS 、mogileFS、TFS、FastDFS等。各自适用于不同的领域。它们都不是系统级的分布式文件系统,而是应用级的分布式文件存储服务。
    GFS(Google File System)
    --------------------------------------
    Google公司为了满足本公司需求而开发的基于Linux的专有分布式文件系统。。尽管Google公布了该系统的一些技术细节,但Google并没有将该系统的软件部分作为开源软件发布。
    下面分布式文件系统都是类 GFS的产品。

    HDFS
    --------------------------------------
    Hadoop 实现了一个分布式文件系统(Hadoop Distributed File System),简称HDFS。 Hadoop是Apache Lucene创始人Doug Cutting开发的使用广泛的文本搜索库。它起源于Apache Nutch,后者是一个开源的网络搜索引擎,本身也是Luene项目的一部分。Aapche Hadoop架构是MapReduce算法的一种开源应用,是Google开创其帝国的重要基石。

    Ceph
    ---------------------------------------
    是加州大学圣克鲁兹分校的Sage weil攻读博士时开发的分布式文件系统。并使用Ceph完成了他的论文。
    说 ceph 性能最高,C++编写的代码,支持Fuse,并且没有单点故障依赖, 于是下载安装, 由于 ceph 使用 btrfs 文件系统, 而btrfs 文件系统需要 Linux 2.6.34 以上的内核才支持。
    可是ceph太不成熟了,它基于的btrfs本身就不成熟,它的官方网站上也明确指出不要把ceph用在生产环境中。

    Lustre
    ---------------------------------------
    Lustre是一个大规模的、安全可靠的,具备高可用性的集群文件系统,它是由SUN公司开发和维护的。
    该项目主要的目的就是开发下一代的集群文件系统,可以支持超过10000个节点,数以PB的数据量存储系统。
    目前Lustre已经运用在一些领域,例如HP SFS产品等。

    回复:

    那非常简单:data/。文件全部调整完成后才能启动集群服务;sync/:此类文件.datstorage server需要调整的文件列表,将旧IP调整为新IP,直接将data目录拷贝过去即可,需要将文件名中的IP地址调整过来。tracker server上需要调整的文件列表.datdata/。注意storage的data目录下有一个。IP不一样的话:data/,会比较麻烦一些.conf修改好即可.mark,而且是一样的.datdata/。另外,那么比较容易。如果使用了V4的自定义server ID特性;${ip_addr}_${port},需要将后缀为mark的IP地址和端口命名的同步位置记录文件名改名。如果是用IP地址作为服务器标识.data_init_flagdata/,那么需要修改tracker和storage的data目录下的几个数据文件.打头的隐藏文件也需要修改;storage_sync_timestamp;storage_groups_new;storage_servers_new,直接将tracker上的IP和ID映射文件storage_ids。如果新旧IP地址一一对应回复 6# guliny FastDFS集群整体迁移的问题

    回复:

    目前FastDFS支持类Unix系统 ,在Linux和FreeBSD下测试过,本文使用的是Ubuntu10.4,建议安装之前先简单了解一下FastDFS的原理 ,这对后继的配置部分会有很好的理解。 一、准备工作-安装libevent FastDFS 内部绑定了 libevent 作为 http 服务器 ...

    回复:

    目前FastDFS支持类Unix系统 ,在Linux和FreeBSD下测试过,本文使用的是Ubuntu10.4,建议安装之前先简单了解一下FastDFS的原理 ,这对后继的配置部分会有很好的理解。 一、准备工作-安装libevent FastDFS 内部绑定了 libevent 作为 http 服务器 ...

    回复:

    在B服务器上删除该文件会失败,因为文件不存在(文件还没同步过去)!

    回复:

    一、磁盘恢复概述 顾名思义,磁盘恢复也就是一台服务器的某个磁盘坏掉,换了一个新的硬盘,然后将旧磁盘本应该有的数据拷贝到新硬盘的过程。FastDFS原生支持该过程,可以自动检测,并完成。FastDFS推荐的方式是一个磁盘挂载成一个Store-Path,换...

    回复:

    FastDFS是一个开源的轻量级分布式文件系统,它对文件进行管理,功能包括:文件存储、文件同步、文件访问(文件上传、文件下载)等,解决了大容量存储和负载均衡的问题。特别适合以文件为载体的在线服务,如相册网站、视频网站等等。

    回复:

    目前FastDFS支持类Unix系统 ,在Linux和FreeBSD下测试过,本文使用的是Ubuntu10.4,建议安装之前先简单了解一下FastDFS的原理 ,这对后继的配置部分会有很好的理解。 一、准备工作-安装libevent FastDFS 内部绑定了 libevent 作为 http 服务器 ...

    回复:

    FastDFS是一个开源的轻量级分布式文件系统,它对文件进行管理,功能包括:文件存储、文件同步、文件访问(文件上传、文件下载)等,解决了大容量存储和负载均衡的问题。特别适合以文件为载体的在线服务,如相册网站、视频网站等等。 FastDFS服务...

    回复:

    回复 6# guliny FastDFS集群整体迁移的问题。如果新旧IP地址一一对应,而且是一样的,那非常简单,直接将data目录拷贝过去即可。IP不一样的话,会比较麻烦一些。如果使用了V4的自定义server ID特性,那么比较容易,直接将tracker上的IP和ID映射...

    回复:

    常见的分布式文件系统有,GFS、HDFS、Lustre、Ceph、GridFS、mogileFS、TFS、FastDFS等。各自适用于不同的领域。它们都不是系统级的分布式文件系统,而是应用级...

    回复:

    目前FastDFS支持类Unix系统 ,在Linux和FreeBSD下测试过,本文使用的是Ubuntu10.4,建议安装之前先简单了解一下FastDFS的原理 ,这对后继的配置部分会有很好的理解。 一、准备工作-安装libevent FastDFS 内部绑定了 libevent 作为 http 服务器 ...

    上一篇:血糖升高和热量高的食物,哪个长胖更快 下一篇:春节手机充值送的双色球在哪找

    返回主页:舟山宠物网

    本文网址:http://0580pet.cn/view-146595-1.html
    信息删除