微选实习总结

微选实习总结
2个月前 (09-18) wang 个人日志 0评论 98℃ 浏览数:73

在微选实习两个月的样子,从七月十六到现在,收获了很多,成长了很多。转正答辩也做了PPT,所以想把这两个月的成长和收获写下来。整体大概分为四个部分。 一、工作概述 1、两次刷数据 线上动态配置佣金变更开关、编写发布文档、使用扫全库脚本刷数据、…Read more »

分布式多机扫库脚本

分布式多机扫库脚本
3个月前 (09-03) wang JAVA 0评论 93℃ 浏览数:75

需求背景 需要扫描全库的商品数据,然后根据不同的条件执行业务。比较麻烦的就是如何去扫库。现在的商品表比较少,大概四百万条数据。但是分了八个库,1024张表。每张表大概有4k的数据。 解决思路 有八台机器,所以八机并行,每个处理一部分的数据,…Read more »