后台同步方案的设计就是数据存储结构的设计,如何快速体现“信息变化”,如何快速计算出“变化信息”。后台数据存储结构是由同步协议中同步契约决定的。
该方案的同步是按照业务粒度来划分,只需要同步sdk要求同步的数据。
- //用户信息
- UserInfo
- {
- int64 uid;
- int64 user_info_version; //个人信息版本号
- string nickname;
- int64 nickname_version; //昵称版本号
- string avatar;
- int64 avatar_version; //头像版本号
- string signature;
- int64 signature_version; //签名版本号
- }
- //群组信息
- GroupInfo
- {
- int64 gid;
- int64 group_info_version;//群组信息版本号
- string group_name;
- string group_desc;
- }
- //事件信息
- Event
- {
- int64 event_id;//事件id
- int32 event_type; //事件类型
- int64 from_uid; //事件发起者
- int64 gid;//群组id
- int64 to_uidlist; //事件当事人
- int64 event_version;//事件版本号
- }
- //群组成员
- GroupUser
- {
- int64 gid;
- int64 user_info_version=2; //群组的所有成员中,用户信息最新的成员,他的个人信息版本号
- int64 user_list_version=3; //群组成员列表版本号,只要user_list发生变化,该版本号也要发生变化
- list
user_list; //群组成员列表 - }
- //用户群组
- UserGroup
- {
- int64 uid;
- int64 group_info_version; //用户的所有群组中,群组信息最新的群组的版本号
- int64 group_list_version; //用户群组列表版本号,只要group_list发生变化,该版本号也要发生变化
- list
group_list; //用户群组列表 - }
- //好友
- UserFriend
- {
- int64 uid;
- int64 user_info_version;//用户的所有好友中,用户信息最新的好友,他的个人信息版本号
- int64 user_list_version;//好友列表版本号,只要user_list发生变化,该版本号也要发生变化
- list
user_list;//好友列表 - }
- //群组事件
- GroupEvent
- {
- list
event_list;//事件列表 - }
- // GroupMemberSync业务契约需要的请求信息
- GroupMemberSync
- {
- int64 gid;
- int64 user_info_version=2; //群组的所有成员中,用户信息最新的成员,他的个人信息版本号
- int64 user_list_version=3; //群组成员列表版本号
- }
- // GroupMemberSync业务契约需要返回的信息
- GroupMemberSyncRsp
- {
- GroupMemberSync group_member_sync;
- list
users; - list
events; - }
业务请求处理流程:业务请求->service模块->业务在改变信息本身的同时也要记录信息的变化。
->用户信息更新请求
->service模块
更新用户信息UserInfo中user_info_version版本号和相应属性nickname_version、signature_version等的版本号。
更新用户所属群组的GroupUser中user_info_version版本号和成员列表中该用户的user_info_version版本号。
更新用户所有好友的UserFriend中user_info_version版本号和成员列表中该用户的user_info_version版本号。
(复杂度为o(n),n表示数据库中操作元素的量级,key-value数据库以key为单位,sql数据库以行为单位)
->创建群组、退出群组、添加群组成员、删除群组成员请求
->service模块
更新用户所属的群组GroupUser中user_list_version版本号。
更新用户群组列表UserGroup中group_list_version版本号。
在群组事件列表GroupEvent中添加一条新记录。
给SDK下发一条业务契约的同步通知,让SDK决定是否要及时同步信息。
- // 同步通知
- SyncNotification
- {
- list
group_member_sync; - }
同步驱动处理流程:同步驱动->sync模块->业务契约需要的增量更新结果
->同步驱动
- // 同步驱动
- SyncRequest
- {
- list
group_member_sync; - }
->sync模块
比较GetGroupMemberList业务契约请求信息中group_list_version_1 和后台数据库中Group_User的 group_list_version_2,找出该群组的两个版本号之间的Event,得到群组中成员的增量变化。(复杂度为o(n))
比较GetGroupMemberList业务契约请求信息中user_info_version_1 和后台数据库中Group_User的 user_info_version_2,找出该群组两个版本号之间信息发生变化的用户,得到增量的用户信息变化。(复杂度为o(n))
->增量同步结果
- // 业务契约的同步结果
- message SyncResponse
- {
- list
group_member_sync_rsp; - }
按业务粒度划分会导致业务和业务之间的同步信息有交集,也就是说会产生某些元信息出现重复同步。
KEY-VALUE数据库需要提供批量操作KEY的接口。
需要一个可容灾的生成全局增量序列的服务。