通过对数据的清洗，转换，过滤，再对数据的清洗、拆分、Join 等逻辑处理，例如大 Topic 的数据拆分、清洗，等处理后，再进行翻译，模型抽取等复杂操作后，对处理后的数据进行分割等，将数据划分写入kafka, es, mysql 等数据源中
评论