// 下面做的工作就是为每个文件实例化一个相应的类 // 目录文件实例化为 OssDirObject int OssFS::load_files(vector<oss_object_desc_t>& objects, bool initial_load, size_t sync_flag) { std::vector<OssStats *> group_stats; vector<oss_object_desc_t>::iterator iter; OSS_FILE_META meta; OssObject *tmpObj = NULL; for (iter = objects.begin(); iter != objects.end(); iter++) { meta.clear(); convert_object_to_meta(&(*iter), meta); //先检查本该文件是否已经存在, 如果已经存在则不需要加载 //第一次的全量加载不进行本步骤的检查, 提高加载速度 if (!initial_load) { tmpObj = get_file(iter->name.c_str()); if (tmpObj != NULL) { //先判断该文件是否已经被打开读写, 如果已经被打开, 则保持该文件状态不变化 if (tmpObj->is_open()) { log_error("file [%s] is opened, ignore it", iter->name.c_str()); if (sync_flag != 0) { tmpObj->set_sync_flag(sync_flag); } continue; } /* obj可能是目录, 普通文件, 链接文件的任意一种 目录: 设置同步标识, 直接跳过 普通文件与链接文件: 如果文件文件大小不一致, 直接删除cloudfs中的对象, 重新创建一个新的对象 */ OssStats *pTmpStat = const_cast<OssStats *>(tmpObj->get_stats()); if (pTmpStat->type == OSS_DIR) { if (sync_flag != 0) { tmpObj->set_sync_flag(sync_flag); } continue; } else if ((pTmpStat->type == OSS_REGULAR) || (pTmpStat->type == OSS_LINK)) { //后台文件与前台文件一致, 直接continue if (pTmpStat->get_size() == iter->size) { if (sync_flag != 0) { tmpObj->set_sync_flag(sync_flag); } continue; } log_error("file [%s] in OSS size[%zd] is different from cloudfs size[%zd], updating ...", iter->name.c_str(), iter->size, pTmpStat->get_size()); //后台文件与前台文件不一致, 删除前台对象, 后面会重新创建该对象 //删除上层目录表中该对象的信息 OssDirObject * parent_dir = (OssDirObject *)get_parent(iter->name.c_str()); if (parent_dir != NULL) { parent_dir->remove_record(tmpObj->get_file_name()); } else { log_error("file [%s] get parent directory failed", iter->name.c_str()); } } else { log_error("file [%s] invalid object type %zd", iter->name.c_str(), pTmpStat->type); continue; } } } log_debug("file:[%s] need online sync", iter->name.c_str()); group_stats.clear(); OssStats stats = OssStats(meta); if (stats.type == OSS_REGULAR) { log_debug("stats.size:[%d]", stats.size); create_group_stats(stats.size, 0, group_stats); tmpObj = this->add_file(iter->name.c_str(), group_stats, stats.type); //subobject不再需要保存stats, 此处循环释放所有的stat delete_group_stats(group_stats); } //增加对LINK文件的初始化处理 else if (stats.type == OSS_DIR) { tmpObj = this->add_file(iter->name.c_str(), group_stats, stats.type); } else if (stats.type == OSS_LINK) { OssStats *pTmpStat = new OssStats(meta); group_stats.push_back(pTmpStat); tmpObj = this->add_file(iter->name.c_str(), group_stats, stats.type); } else { log_error("invalid stats.type %d", stats.type); } /* 检查add_file的结果, 并设置对应的sync_flag */ if (tmpObj != NULL) { if (sync_flag != 0) tmpObj->set_sync_flag(sync_flag); } } return 0; }