netty内存泄露排查经验

一些有用的经验https://www.jianshu.com/p/49ec0eda1363https://blog.csdn.net/jiangguilong2000/article/detai...
  • 2020-5-29 19:24

高维shuffle

makedown不方便编辑表格,生成图片将就着看吧
  • 2020-3-9 17:52

Intellij IDEA调试SparkSQL在运行时生成的代码

插件下载地址:spark-debug-codegen.jar.zip安装步骤在plugin页面选择从本地磁盘安装插件,安装完后先不重启IDEA打开IDEA,在Help菜单编辑自定义属性(即IDE...
  • 2020-2-16 12:35

《不妥协:具有一致性、可用性和性能的分布式事务》部分翻译

第三节 编程模型和架构客户端开启线程时会作为事务的coordinator使用优化并发控制,修改是本地的,提交后才能被其他事务看到FaRM对成功提交的事务提供了严格的串行性保证对单个对象操作的原子...
  • 2019-9-8 10:58

Spark本地跑CoarseGrainedScheduler

背景众所周知,分布式环境是很难debug,但又是必须的。本文主要目的是说怎样在单机环境下模拟分布式环境去跑spark的代码。公司的spark是跑在yarn上的,Driver用的是YarnClus...