【鱼皮的打工日记】20220624

周五的工作一般还是比较轻松的,因为大家都不想周末加班,所以尽量不会选择在周五上线发布新版本。


我今天也没有给自己安排有风险的工作,上午调试了一下大数据脚本,验证了一下前两天做的代码优化的效果。结果喜出望外,在 Spark 中用 broadcast join 代替 sum over partition by 计算之后,原本要执行 2 个半小时的任务竟然只用了 30 分钟就执行完了,每次运行直接节约了几千块钱的计算成本!


果然知识就是金钱,于是下午我就开始翻公司内网数据平台团队的知识库,学习他们的大数据排错和优化技巧,除了有一部分和网上视频教程中讲的一样外(我整理到星球知识库 spark 学习笔记上了),还学到了很多团队内部积累的经验,感觉真是受益匪浅。感觉在大公司还是有这点好处吧,看来以后每周都要挤点时间去看别人的文档,走出自己的边界。


由于下周就要正式复工了,每天都要去公司上班,所以我今天 7 点就溜了,回家去写视频稿子,就是刚刚发出来的那个哈哈:https://b23.tv/UUUKUDa(视频时间有限,更详细的学习路线和资源都在星球语雀知识库里),欢迎大家三连支持!


祝大家周末愉快,休息之余,也要适当学习哦,不要让自己丢掉学习的状态(像我每周一上午都会断片儿,得花时间复习下上周的工作)。继续加油!

0个评论
点击登录,快来和大家讨论吧~
表情
图片
暂无评论
下载 APP