Spark Streaming处理流程中，遇到某些批次耗时长的问题，排查思路
分类：
其他好文 时间：
2020-11-18 13:12:54
阅读次数：
8
O记数据库内部开发人员人员吐槽代码乱！在ycombinator上看到O记码农吐槽O记数据库代码一团糟，个人认为有点意思。以下是O记数据库的情况。O记数据库12.2c接近2500万行C语言代码。随便改一行代码就让1000+测试用例fail。好几代的程序员都在这个代码库上工作，当然大家deadline不同，所以也都在这一大堆辣鸡上添一些新辣鸡。代码逻辑，内存管理，上下文切换非常复杂，由上千个flag控
分类：
数据库 时间：
2020-11-06 00:56:01
阅读次数：
23
1 AQS state AQS 的关键 CAS Compare And Swap 修改 state Unsafe 使用 LockSupport 的 park()、unpark() 挂起和唤醒线程 同步队列 sync queue 条件队列 condition queue 等待队列 还有什么阻塞队列，看 ...
分类：
其他好文 时间：
2020-11-04 17:34:20
阅读次数：
14
Receiver Direct offset注意点 ...
分类：
其他好文 时间：
2020-10-06 20:46:36
阅读次数：
26
PySpark基于Python的Spark企业级大数据分析，以实际数据分析为驱动讲解 ...
分类：
编程语言 时间：
2020-09-18 00:55:02
阅读次数：
44
一.图像数据源 图像数据源用于从目录加载图像文件，它可以通过ImageIO Java库将压缩图像（jpeg，png等）加载为原始图像表示形式。加载的DataFrame具有一StructType列：“ image”，其中包含存储为图像架构的图像数据。该image列的架构为： origin ：（Stri ...
分类：
其他好文 时间：
2020-09-17 17:38:02
阅读次数：
52
太阳射电图：Solar magnetograms, EUV images, GOES X-ray flux data. Magnetograms: http://solar-center.stanford.edu/solar-images/magnetograms.html (some sunspo ...
分类：
其他好文 时间：
2020-09-17 13:38:18
阅读次数：
26
面试官问到，阻塞线程有几种方法？ 你可以这么扩展的讲。 4种方法，从是否释放锁资源的角度来说，locksupport.park(),thread.sleep()不会是否锁资源， condition.await()/object.wait()会释放锁资源。接下来按照下图，讨论区别 ...
分类：
编程语言 时间：
2020-07-19 21:12:16
阅读次数：
60
参考：https://blog.csdn.net/u013332124/article/details/84647915 ...
分类：
其他好文 时间：
2020-07-18 22:05:16
阅读次数：
62
一、Reading Jack seldom gets together with his friends. He usually stays at home with his pet dog, Lucky. They sometimes go for long walks in the park. ...
分类：
其他好文 时间：
2020-07-17 14:08:23
阅读次数：
76
