
scala
文章平均质量分 88
鸿乃江边鸟
Apache Spark Contributor
专注于技术的dotaer
展开
-
Apache Hudi初探(六)(与spark的结合)
目前hudi的与spark的集合还是基于spark datasource V1来的,这一点可以查看。之前说到只有获取到分布式锁的线程才可以继续一下操作。后续发现也是基于Datasource V2的。原创 2023-05-19 00:22:26 · 493 阅读 · 0 评论 -
关于jvm范型和scala implicit隐式参数以及classTag[T] typeTag[T]的一点思考
T: Comparator],它主要做了两件事:第一,引入了一个参数类型 T;在上面说到对于java语言来说,会在编译器期间擦除掉类型,但是对于scala来说,我们在编译器阶段是可以保存类型T的,这就是接下来说的。看到我们居然把可以范型为T(也就是object)的类型的值,赋值给String类型的变量,这难道是编译器没有进行类型擦除么?,其中aaa是String类型的变量,这样编译器在编译的时候,就会做一层强制转换。这一行表明编译器确实进行了类型擦数,因为能偶看到调用的是object类型的方法。原创 2022-12-14 21:31:59 · 382 阅读 · 1 评论