CN103581207A - 云端数据存储系统及基于该系统的数据存储与共享方法 - Google Patents

Abstract

一种云端数据存储系统，该系统包括：由多个服务器组成的网络服务器组以及一中间层设备，该中间层设备与网络服务器组中的每个服务器通讯连接，以进行数据的交互，该中间层设备接入一网络，并与接入该网络的多个客户端进行数据通信。各客户端保存有各种共享数据并通过中间层设备提供该共享数据的各种属性信息。该属性信息被存储在所述网络服务器组中。该中间层设备建立客户端之间的点对点共享连接，并控制各共享数据通过该点对点共享连接在客户端之间的传输，以实现客户端之间的点对点数据共享。本发明还提供一种基于所述云端数据存储系统的数据存储与共享方法。本发明可解决因服务器带宽压力导致的数据传输速率低下的问题。

Description

云端数据存储系统及基于该系统的数据存储与共享方法

技术领域

本发明涉及一种云端数据的存储与共享，尤其涉及一种云端数据存储系统及基于该系统的数据存储与共享方法。

背景技术

随着3G和4G网络在全球范围的发展，以及平板电脑、上网本、智能手机等移动终端的日渐成熟，移动通信与互联网融合将成为网络发展的趋势。此外，云计算与移动互联网的互搭将给予用户全新的体验，并给企业用户带来无限商机传统的云数据存储方案，由用户将数据存储于网络服务器中，给用户带来了很大的便利性同时，也会增加服务器的存储量和负载。同时，由于数据存储于服务器，为了减少服务器的负载而进行数据传输限速将导致用户对数据传输速率的不满意。

发明内容

鉴于以上内容，有必要提供一种云端数据存储系统，由多个服务器组成的网络服务器组以及一中间层设备，该中间层设备与网络服务器组中的每个服务器通讯连接，该中间层设备经由一网络与多个客户端进行数据通信，该多个客户端包括请求共享数据的一第一客户端及一个或多个存储有该共享数据的第二客户端；

该中间层设备包括：获取单元，用于获取每个客户端通过网络提供的共享数据的属性信息，并将各共享数据的属性信息存储在网络服务器组的服务器中；请求处理单元，用于根据接收到第一客户端发送的访问一目标共享数据的数据访问请求，从所述网络服务器组中搜索存储有该目标共享数据的所有第二客户端，并将存储有该目标共享数据的所有第二客户端的位置信息返回给所述第一客户端；及共享连接单元，用于通过所述网络建立所述第一客户端与一个或多个第二客户端之间的点对点下载连接，将所述目标共享数据从该一个或多个存储有该目标共享数据的第二客户端下载到所述第一客户端。

还有必要提供一种基于所述云端数据存储系统的数据存储与共享方法，该方法包括：获取步骤，获取每个客户端通过网络提供的共享数据的属性信息，并将各共享数据的属性信息存储在网络服务器组的服务器中；请求处理步骤，根据接收到第一客户端发送的访问一目标共享数据的数据访问请求，从所述网络服务器组中搜索存储有该目标共享数据的所有第二客户端，并将存储有该目标共享数据的所有第二客户端的位置信息返回给所述第一客户端；及共享连接步骤，通过所述网络建立所述第一客户端与一个或多个第二客户端之间的点对点下载连接，将所述目标共享数据从该一个或多个存储有该目标共享数据的第二客户端下载到所述第一客户端。

相较于现有技术，本发明云端数据存储系统及基于该系统的数据存储与共享方法，采用客户端与服务器架构技术，实现客户端之间的点对点数据传输和共享，减少服务器的存储开销以及带宽压力，使得数据的存储和共享更加便利，并同时解决了因服务器带宽压力导致的数据传输速率低下的问题。

附图说明

图1是本发明云端数据存储系统较佳实施例的运行环境示意图。

图2是图1中网络服务器组的架构图。

图3是图1中中间层设备的功能单元架构图。

图4是本发明基于所述云端数据存储系统的数据存储与共享方法较佳实施例的流程图。

主要元件符号说明

云端数据存储系统	100
		服务器	10
网络服务器组	20
		中间层设备	11
网络	200
		客户端	301、302、303
获取单元	110
		请求处理单元	111
共享连接单元	112
		信息更新单元	113
数据同步单元	114
		第一存储网络	201
第二存储网络	202
		第一存储区	2011
第二存储区	2012
		第三存储区	2021
第四存储区	2022

如下具体实施方式将结合上述附图进一步说明本发明。

具体实施方式

如图1所示，是本发明云端数据存储系统较佳实施例的运行环境示意图。在本实施例中，该云端数据存储系统100包括由多个服务器10组成的网络服务器组20以及一中间层设备11。该中间层设备11与网络服务器组20中的每个服务器通讯连接，以进行数据的交互。该中间层设备11接入一网络200，并与接入该网络200的多个客户端（如图1所示的客户端301、302、303等）进行数据通信。

请参考图2，所述网络服务器组20中的部分服务器10组成一第一存储网络201，剩余的其他服务器10组成第二存储网络202。本实施例中，该第一存储网络201为一种面向大众用户的公共网络，用于存储无需经过权限验证即可进行共享的各种数据的属性信息。该第二存储网络202为一种面向企业等特殊用户的私有存储网络，用于存储带有权限验证才能进行共享的各种私有数据的属性信息。

所述第一存储网络201以及第二存储网络202包括多个存储区，每个存储区用于存储不同类型数据的属性信息。例如，所述第一存储网络201至少包括一第一存储区2011和一第二存储区2012。所述第二存储网络202至少包括一第三存储区2021和一第四存储区2022。不同的存储区用于存储不同类型数据（如文字、图片、声音以及视频等）的属性信息。当需要在该在第一存储网络201或第二存储网络202中搜索数据时，可依据数据的类型在相应的存储区进行搜索，以减少数据的搜索时间。进一步地，存储有该共享数据的所有客户端的设备信息，也即该共享数据的位置信息，被存储在对应的存储区内。例如图3所示，客户端a和c均存储有文件一，那么该客户端a和c的设备信息，如IP地址和物理地址同该文件一的其它属性信息一起被存储在第一存储区2011中。

如图3所示，所述中间层设备11包括获取单元110、请求处理单元111、共享连接单元112、信息更新单元113以及数据同步单元114。此外，该中间层设备11还包括存储器（图未示）以及处理器（图未示）等基本的数据存储与处理元件。该中间层设备11可以是一具备数据存储以及数据传输和处理等能力的计算机设备。

所述获取单元110用于获取每个客户端通过网络200提供的共享数据的属性信息，例如共享数据的名称、大小、版本信息以及位置信息（该共享数据所在客户端的地址，如IP地址或物理地址）等，并将各共享数据的属性信息存储于网络服务器组20中的服务器10中。具体地，该获取单元110根据所述共享数据的类型，将各共享数据的属性信息存储在一相应存储区所对应的任意服务器10中。

任何客户端均可发送数据访问请求至所述中间层设备，请求共享其它客户端提供的共享数据。本实施方式中，发送该数据访问请求的客户端（如所述客户端a）被定义为第一客户端，存储有被请求的共享数据的其它客户端，如所述客户端b、客户端c或客户端d等被定义为第二客户端。

所述请求处理单元111用于当接收到第一客户端发送的数据访问请求以访问一目标共享数据时，从所述网络服务器组20中搜索存储有该目标共享数据的所有第二客户端，并将搜索到的结果返回给所述第一客户端。

具体地，该请求处理单元111首先根据所述第一客户端的类型（例如普通用户使用的客户端，或企业用户使用的客户端等）确定该目标共享数据的属性信息所在的一存储网络，如所述第一存储网络201或所述第二存储网络202。然后根据该目标共享数据的数据类型确定所述第一存储网络201或第二存储网络202中用于存储该目标共享数据的属性信息的一存储区。最后，从该确定的存储区中搜索存储有该目标共享数据的所有第二客户端。

所述共享连接单元112用于通过所述网络200建立所述第一客户端与一个或多个存储有目标共享数据的第二客户端之间的点对点（peer to peer）下载连接，将所述目标共享数据从该一个或多个第二客户端中下载到所述第一客户端中。具体地，当所述第一客户端与N（N>1）个第二客户端建立点对点下载连接时，该共享连接单元112还用于将下载所述目标共享数据的任务分为N个部分的下载任务，并向每个第二客户端分发一个部分的下载任务，以提高对该目标共享数据的下载速度。

所述信息更新单元113用于当所述目标共享数据下载到所述第一客户端之后，根据该第一客户端的设备信息更新所述网络服务器组20中该目标共享数据对应的属性信息。也即，将该第一客户端的设备信息新增至所述网络服务器组20中该目标共享数据对应属性信息的位置信息中，从而使得其它客户端能通过该第一客户端共享该目标共享数据。

所述数据同步单元114用于统计最近一预定时间内（如一天）下载频率较高（下载次数大于一预定值，如10次）的所有目标共享数据，并将该目标共享数据从存储有该目标共享数据的客户端同步至该中间层设备11的缓存空间中，然后将该中间层设备11作为一个新的客户端更新网络服务器组20中该目标共享数据对应的属性信息。本实施例中，该中间层设备的缓存空间是用于对一些热门数据进行临时存储，当存储有某些热门数据的客户端不在线时，可供其它客户端从该中间层设备11中共享该热门数据。此外，每隔一预定周期（如一周），该数据同步单元114还用于清除所述缓存空间中一预定时间段之前同步至该缓存空间中的数据，以释放出足够的空间存储新的热门数据。

如图4所示，是本发明基于所述云端数据存储系统的数据存储与共享方法较佳实施例的流程图。

步骤S01，所述获取单元110获取每个客户端通过网络200提供的共享数据的属性信息，并将各共享数据的属性信息存储在网络服务器组20的服务器10中。

步骤S02，一第一客户端发送数据访问请求至中间层设备11以请求访问一目标共享数据。

步骤S03，所述请求处理单元111从所述网络服务器组20中搜索存储有该目标共享数据的所有第二客户端，并将存储有该目标共享数据的所有第二客户端的位置信息返回给所述第一客户端。

步骤S04，所述共享连接单元112通过所述网络200建立所述第一客户端与一个或多个搜索到的存储有目标共享数据的第二客户端之间的点对点（peer to peer）下载连接，将所述目标共享数据从该一个或多个第二客户端中下载到所述第一客户端。

步骤S05，所述信息更新单元113根据该第一客户端的设备信息更新所述网络服务器组20中该目标共享数据对应的属性信息。

步骤S06，所述数据同步单元114统计最近一预定时间内下载频率较高的所有目标共享数据，并从存储有该等目标共享数据的客户端中将该目标共享数据同步至该中间层设备11的缓存空间中，然后将该中间层设备作为一个新的客户端更新网络服务器组20中该目标共享数据对应的属性信息。

步骤S07，所述数据同步单元114每隔一预定周期清除所述缓存空间中一预定时间段之前同步至该缓存空间中的目标共享数据。

以上实施例仅用以说明本发明的技术方案而非限制，尽管参照较佳实施例对本发明进行了详细说明，本领域的普通技术人员应当理解，可以对本发明的技术方案进行修改或等同替换，而不脱离本发明技术方案的精神和范围。

Claims (16)

1.一种云端数据存储系统，其特征在于，该系统包括：由多个服务器组成的网络服务器组以及一中间层设备，该中间层设备与网络服务器组中的每个服务器通讯连接，该中间层设备经由一网络与多个客户端进行数据通信，该多个客户端包括请求共享数据的一第一客户端及一个或多个存储有该共享数据的第二客户端；

该中间层设备包括：

获取单元，用于获取每个客户端通过网络提供的共享数据的属性信息，并将各共享数据的属性信息存储在网络服务器组的服务器中；

请求处理单元，用于根据接收到第一客户端发送的访问一目标共享数据的数据访问请求，从所述网络服务器组中搜索存储有该目标共享数据的所有第二客户端，并将存储有该目标共享数据的第二客户端的位置信息返回给所述第一客户端；及

共享连接单元，用于通过所述网络建立所述第一客户端与一个或多个第二客户端之间的点对点下载连接，将所述目标共享数据从该一个或多个存储有该目标共享数据的第二客户端下载到所述第一客户端。

2.如权利要求1所述的云端数据存储系统，其特征在于，所述共享数据的属性信息包括该共享数据的名称、大小、版本信息以及位置信息，该位置信息包括存储有该共享数据的每个客户端的IP地址和物理地址中的至少一个。

3.如权利要求2所述的云端数据存储系统，其特征在于，所述中间层设备还包括：

信息更新单元，用于当所述目标共享数据下载到所述第一客户端之后，根据该第一客户端的设备信息更新所述网络服务器组中该目标共享数据对应的位置信息。

4.如权利要求1所述的云端数据存储系统，其特征在于，所述中间层设备还包括：

数据同步单元，用于统计最近一预定段时间内下载频率较高的目标共享数据，并将该目标共享数据从存储有该目标共享数据的客户端同步至该中间层设备的缓存空间，然后将该中间层设备定义为一个新的客户端更新网络服务器组中该目标共享数据对应的位置信息；该数据同步单元还用于每隔一预定周期清除所述缓存空间中一预定时间段之前同步至该缓存空间中的数据。

5.如权利要求1所述的云端数据存储系统，其特征在于，当所述第一客户端与N个第二客户端建立点对点下载连接时，所述共享连接单元还用于将下载所述目标共享数据的任务分为N个部分的下载任务，并向每个第二客户端分发一个部分的下载任务，以提高对所述目标共享数据的下载速度，其中，N>1。

6.如权利要求1所述的云端数据存储系统，其特征在于，所述网络服务器组中的部分服务器组成一第一存储网络，剩余的其它服务器组成第二存储网络，该第一存储网络以及第二存储网络分别用于存储不同类型的客户端提供的共享数据的属性信息。

7.如权利要求6所述的云端数据存储系统，其特征在于，所述第一存储网络以及第二存储网络分别包括多个存储区，每个存储区用于存储不同类型数据的属性信息。

8.如权利要求7所述的云端数据存储系统，其特征在于，所述请求处理单元通过以下方法搜索存储有所述目标共享数据的所有第二客户端：

根据所述第一客户端的类型确定所述第一存储网络以及所述第二存储网络中用于存储该目标共享数据的属性信息的一个存储网络；

根据所述目标共享数据的数据类型确定该目标共享数据的属性信息在上述确定的存储网络上对应的存储区；及

从该确定的存储区中搜索存储有该目标共享数据的所有第二客户端。

9.一种基于云端数据存储系统的数据存储与共享方法，该系统包括：由多个服务器组成的网络服务器组以及一中间层设备，该中间层设备与网络服务器组中的每个服务器通讯连接，该中间层设备经由一网络与多个客户端进行数据通信，该多个客户端包括请求共享数据的一第一客户端及一个或多个存储有该共享数据的第二客户端，其特征在于，该方法包括：

获取步骤，获取每个客户端通过网络提供的共享数据的属性信息，并将各共享数据的属性信息存储在网络服务器组的服务器中；

请求处理步骤，根据接收到第一客户端发送的访问一目标共享数据的数据访问请求，从所述网络服务器组中搜索存储有该目标共享数据的所有第二客户端，并将存储有该目标共享数据的第二客户端的位置信息返回给所述第一客户端；及

共享连接步骤，通过所述网络建立所述第一客户端与一个或多个第二客户端之间的点对点下载连接，将所述目标共享数据从该一个或多个存储有该目标共享数据的第二客户端下载到所述第一客户端。

10.如权利要求9所述的数据存储与共享方法，其特征在于，所述共享数据的属性信息包括该共享数据的名称、大小、版本信息以及位置信息，该位置信息包括存储有该共享数据的每个客户端的IP地址和物理地址中的至少一个。

11.如权利要求10所述的数据存储与共享方法，其特征在于，该方法还包括：

信息更新步骤，当所述目标共享数据下载到所述第一客户端之后，根据该第一客户端的设备信息更新所述网络服务器组中该目标共享数据对应的位置信息。

12.如权利要求9所述的数据存储与共享方法，其特征在于，该方法还包括数据同步步骤，该步骤包括：

统计最近一预定段时间内下载频率较高的目标共享数据，并将该目标共享数据从存储有该目标共享数据的客户端同步至该中间层设备的缓存空间;

将该中间层设备定义为一个新的客户端更新网络服务器组中该目标共享数据对应的位置信息；及

每隔一预定周期清除所述缓存空间中一预定时间段之前同步至该缓存空间中的数据。

13.如权利要求9所述的数据存储与共享方法，其特征在于，所述共享连接步骤包括：当所述第一客户端与N个第二客户端建立点对点下载连接时，将下载所述目标共享数据的任务分为N个部分的下载任务，并向每个第二客户端分发一个部分的下载任务，以提高对所述目标共享数据的下载速度，其中，N>1。

14.如权利要求9所述的数据存储与共享方法，其特征在于，所述网络服务器组中的部分服务器组成一第一存储网络，剩余的其它服务器组成一第二存储网络，该第一存储网络以及第二存储网络分别用于存储不同类型的客户端提供的共享数据的属性信息。

15.如权利要求14所述的数据存储与共享方法，其特征在于，所述第一存储网络以及第二存储网络分别包括多个存储区，每个存储区用于存储不同类型数据的属性信息。

16.如权利要求15所述的数据存储与共享方法，其特征在于，所述请求处理步骤包括：

根据所述第一客户端的类型确定所述第一存储网络以及所述第二存储网络中用于存储该目标共享数据的属性信息的一个存储网络；

根据所述目标共享数据的数据类型确定该目标共享数据的属性信息在上述确定的存储网络上对应的存储区；及

从该确定的存储区中搜索存储有该目标共享数据的所有第二客户端。

Images