- 博客(17)
- 收藏
- 关注
原创 在 ARM 环境下搭建原生 Hadoop 集群
文章内容是验证部署状态,后来正式上线后又遇到了各种奇奇怪怪的问题,然后重新解决的,但核心流程都如文章内所说。之前写的一篇文章,CSDN上直接贴个链接。
2024-01-29 20:56:30
676
原创 pgsql使用记录
pgsql跟mysql还是有一些语法上的不同的,支持的字段类型也更丰富,记录一点工作中用到的pgsql的语句。重置自增序列起始值(示例用id指代):alter sequence tableName_columnName_seq restart with 500alter sequence test_table_id_seq restart with 500...
2022-03-17 10:18:14
392
原创 Mybatis记录
今天想手写个批量插入,遇到了类型映射问题,查了挺久才查到,记录一下。用的是注解的方式实现。select的时候,可以使用@Result(column = ,property = , javaType = , typeHandler = )来实现结果集的类型映射,但是insert和update的时候不能使用,只能在sql语句中手动指定类型转换的类型。...
2021-03-29 20:58:15
206
原创 Git相关使用记录
工作中用到git比较多,对一些比较常规对操作做一个记录。分支相关若仓库里新建了分支,本地更新分支:git fetch 切换分支/新建分支:git checkout xx/git checkout -b xxxx 在现有分支上新建分支,是从现有分支延伸出去的分支,所以若多人开发同一项目,可以在切换到仓库的开发分支后在本地新切一个分支,避免在仓库分支上开发与别人造成冲突。 提交相关若直接在仓库的分支开发提交,则直接提交即可:git add . git commit -m "提交内...
2020-08-04 10:49:52
207
原创 Flink极客训练营Day4
初始状态改变状态分布式系统中的一致性:分布式系统中的因果性:逻辑时钟:向量时钟:示例变化很多,不好截图,就没截了。没理解,后续思考补充。连通图:强连通图:弱连通图:...
2020-07-17 16:55:17
252
原创 Flink极客训练营Day2
可以不写出,因为存在state状态。A连接外部系统,将外部数据读入flink。C连接外部系统,将数据写入。存在乱序时,通过插入watermark来使得数据看起来似乎正确,比如插入大小为3的watermark,就是判断认为不会再有比3小的数据传过来了。作业待完成。利用IDEA新建flink项目:前提:JAVA和maven已安装并配置完成。1、终端执行以下命令:2、输入groupId、artifactId,version和pa...
2020-07-15 15:58:50
256
原创 Flink极客训练营Day1
Flink-learning.org.cn,Flink中文学习网。Flink的原名是Stratosphere,目标是打造大数据流批一体的平台。Flink1.11版本的新功能:1:非对其检查点。新功能消除对其等待时间。2:水位线相关问题。3:接口统一,流批统一的建设之一。4:作业提交模式优化。5:用于数据迁移场景较多。6:增加对pandas的支持,提升对python对支持。谷歌三大马车对海量数据如何处理。Hadoop大多用于t+1的数据存储。流批本质就是快慢
2020-07-13 21:59:52
1680
3
原创 SQL学习记录
近期要先去公司实习,昨天跟公司导师聊了聊,他说最好JAVA、Python和SQL都会。找完工作后就再也没看过SQL了,之前写的也不太好,近期就三部分都学一点,仅作个人记录。查询SELECT * FROMSELECT * FROM WHERE (条件);(可跟AND OR NOT)SELECT 列1,列2 别名2,列3 FROM ; #投影查询,从列表中查找指定列内容,并可命名...
2020-04-04 17:30:03
153
原创 Plotly学习记录02
内容来源于《Python数据分析-基于Plotly的动态可视化绘图》,作为记录。3.30当折线图的数据出现部分缺失时,利用Scatter函数中的connectgaps属性来决定是否对缺口进行连接,True/False决定是否连接。具体代码和结果上一下。可以看到实际结果,有一个注意点是Scatter函数中是有mode参数的,就是决定是否需要保留点和线,但是数据缺失的时候不可以使用这个...
2020-03-30 17:11:35
400
原创 学习记录03(2020.3)
3.22-3.29这周主要学习了plotly库,包括画散点图、柱状图、柱状簇、条形图、气泡图、3D图,算是对plotly入门,明天开始打算把《Python数据分析-基于Plotly的动态可视化绘图》这本书看完。对内容的掌握和记录程度需要提高,代码现在很生疏,需要多敲。JAVA部分,刷了5道Leetcode的题,都是简单题,涉及的都是最基础的内容,字符串啊这些内容。下周计划刷20题,至少...
2020-03-29 22:45:22
98
原创 JAVA及Leetcode刷题记录
3.26新买的Plotly的书还在路上,昨天说要用JAVA刷leetcode结果直接被打击了,自暴自弃没有学习,今天努力学一下。JAVA之前学了一点但是感觉又全忘了,这里就记录一下刷题过程中学到的一些JAVA知识吧,可能会显得很低级,但是就当自己记录整理了。...
2020-03-26 14:17:37
373
原创 Plotly学习记录01
3.23今天先重温下之前学的一点plotly内容 来源是B站上的up主 正月点灯笼 个人而言很喜欢他的视频 就是plotly的内容很少。。
2020-03-23 14:41:22
2830
2
原创 秋招回顾
距离上一次写博客已经一年半多了 当时说后续会继续记录有关YOLO3训练相关内容 但后来其实没有特别多的修改 又加上自己比较懒也没有过多的记录 所以今天就对秋招和读研期间进行一个总结吧 答辩结束也意味着生活又要有新的开始了实习秋招的话严格来说还是先从实习讲起 本身在学校是做cv的 所以一开始的时候实习也是想尝试找找算法方面的 但现在回头看看自己那时候其实什么都不懂 就奔着找实习去了 所以后来我...
2020-03-20 15:52:48
355
原创 YOLOv3使用darknet训练部分问题记录
1.cfg文件里的batch就是batch_size,subdivisions只是在显存不足的情况下把batch分批放入训练。 ?现在怀疑batch_size = batch/subdivisions。昨天跑的一个训练如果batch = batch_size的话那大约有80个epoch,但还是明显欠拟合,loss很高。所以还在疑惑???2.epoch = max_batches/(i...
2018-07-17 14:52:21
11953
21
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人