如何设计高扩展性的skill分类系统：从架构到实现

1次阅读

没有评论

共计 2594 个字符，预计需要花费 7 分钟才能阅读完成。

在传统的 skill 分类系统设计中，我们经常会遇到以下几个问题：

硬编码分类：分类逻辑直接写在代码中，每次新增或修改分类都需要重新部署服务。
扩展性差：只能支持单一维度的分类，无法灵活应对业务需求的变化。
查询性能瓶颈：随着分类数据的增长，查询性能急剧下降，尤其是在多维度查询时。
维护成本高：分类逻辑和业务逻辑高度耦合，导致代码难以维护和扩展。

这些痛点在业务快速发展的场景下尤为明显，因此我们需要一种更灵活、更高效的解决方案。

在设计 skill 分类系统时，我们对比了关系型数据库和文档数据库的优劣：

关系型数据库（如 MySQL）：
优点：支持 ACID 事务，适合复杂查询和强一致性的场景。
缺点：Schema 固定，扩展性较差，尤其是在需要动态添加字段的情况下。
文档数据库（如 MongoDB）：
优点：Schema 灵活，支持动态字段，适合快速迭代和多维分类场景。
缺点：事务支持较弱，查询性能在大数据量时可能不如关系型数据库。

考虑到 skill 分类系统需要高度灵活性和扩展性，我们最终选择了 MongoDB 作为底层存储，并结合微服务架构实现解耦。

我们采用了一种基于标签的动态分类模型，其核心数据结构如下：

classDiagram
    class Skill {
        +String id
        +String name
        +String description
        +List<Tag> tags
    }

    class Tag {
        +String key
        +String value
    }

在这个模型中，每个 Skill 可以关联多个 Tag，每个 Tag 由 key 和 value 组成。例如，一个 Skill 可以有 Tag(key=”category”, value=”backend”)和 Tag(key=”level”, value=”advanced”)。

以下是使用 Java 实现的 Skill 分类服务核心代码：

// Skill 实体类
@Data
@Document(collection = "skills")
public class Skill {
    @Id
    private String id;
    private String name;
    private String description;
    private List<Tag> tags;

    // 添加标签
    public void addTag(String key, String value) {if (tags == null) {tags = new ArrayList<>();
        }
        tags.add(new Tag(key, value));
    }
}

// Tag 值对象
@Data
@AllArgsConstructor
public class Tag {
    private String key;
    private String value;
}

// Skill 服务类
@Service
public class SkillService {
    @Autowired
    private MongoTemplate mongoTemplate;

    // 根据标签查询 Skill
    public List<Skill> findSkillsByTag(String key, String value) {Query query = new Query(Criteria.where("tags").elemMatch(Criteria.where("key").is(key).and("value").is(value))
        ));
        return mongoTemplate.find(query, Skill.class);
    }

    // 添加 Skill
    public Skill addSkill(Skill skill) {return mongoTemplate.save(skill);
    }
}

创建 Skill：通过 addSkill 方法可以创建一个新的 Skill，并关联多个标签。
查询 Skill：通过 findSkillsByTag 方法可以根据标签 key 和 value 查询符合条件的 Skill。
更新 Skill：可以直接更新 Skill 对象的 tags 列表，然后调用 save 方法。
删除 Skill：可以通过 mongoTemplate.remove 方法删除 Skill。

为了提高查询效率，我们在 tags.key 和 tags.value 字段上创建了复合索引：

// 创建索引
mongoTemplate.indexOps(Skill.class).ensureIndex(new Index().on("tags.key", Sort.Direction.ASC)
               .on("tags.value", Sort.Direction.ASC)
);

除了基本的标签索引外，我们还考虑了以下优化：