- 博客(32)
- 问答 (1)
- 收藏
- 关注
原创 k8s的资源说明 cpu 内存 requests usage limits
在 Kubernetes 中,有三个非常重要的资源概念,分别是资源请求(Requests)、资源使用率(Usage) 和 资源限制(Limits)
2025-02-20 14:14:45
1259
原创 kibana es 语法记录 elaticsearch
正向索引就像mysql数据库,如果根据非索引字段查询数据,会逐行获取表中所有数据,然后判断是否满足规则例如:设置数据库中有title字段,为非索引字段流程如下:1)用户搜索数据,条件是title符合`"%手机%"`2)逐行获取数据,比如id为1的数据3)判断数据中的title是否符合用户搜索条件4)如果符合则放入结果集,不符合则丢弃。回到步骤1文档:就是用来搜索的数据,等同于mysql数据库中的一条记录。
2025-02-14 17:48:32
2068
原创 Hadoop yarn安装
将hadoop01中的hosts配置,hadoop01的ip修改为内网地址。#创建NameNode文件目录(只需在hadoop01上创建)#创建DataNode文件目录(3台均需创建)#一键关闭hdfs集群。#一键关闭yarn集群。
2024-12-19 17:31:44
988
原创 linux 搭建kafka集群
我这边没有用kafka自带的zookeeper而是单独安装的zookeeper,步骤可参考。编辑kafka目录下config/server.properties 文件。将安装包传到另外两台服务器上并解压,解压命令见上一行。
2024-04-02 14:06:03
878
原创 linux搭建zookeeper集群
设置集群信息,其中2888为follower和leader交换消息所使用的端口,3888为选举leader所使用的端口,这两个端口可自己设定。4、将该服务器的配置同步到另外两台上面,只需修改每台服务器的myid文件就行,我的分别为1.2.3。1、进入安装目录的conf目录下,复制zoo_sample.cfg为zoo.cfg。可以查看日志是否启动成功,日志在安装目录下的logs文件夹中的.out文件。3、通过客户端连接zookeeper集群,集群是一个整体,所以连接一台即可。
2024-04-01 16:36:33
1517
1
原创 shell 脚本输出mysql 查询结果到文件 加载文件到数据库
1、shell 脚本实现数据库导出查询结果到文件2、shell脚本实现批量结果导出到文件3、加载文件数据到mysql数据库
2022-10-21 15:27:37
3685
1
原创 No transaction aspect -managed TransactionStatus in scope 事务回滚报错
同类中方法调用导致事务失效
2022-04-20 17:00:45
3810
2
原创 hive新增表字段、修改表路径的几种方式
方案1:ALTER TABLE tbl_oper_in_flow add columns(less_recovery double,remark1 string,remark2 string,remark3 string);对于旧的分区的可正常查询,新加的字段值为空。但是旧的分区的数据无法插入或更新,新的分区可正产插入和查询。方案2:ALTER TABLEtbl_oper_in_flow add columns(less_recovery double,remark1 str...
2022-03-10 14:31:01
7929
原创 redis中bitmap 位图详解和使用场景说明 redis集群key指定节点
redis的特殊类型bitmap 的使用方式和使用场景。bitmap命令bitmap 求交集 并集
2022-03-03 16:14:03
3783
原创 redis 的数据类型和基础命令
redis的数据类型redis的数据类型包含5种自有类型和一种自定义类型。五种自有类型为:String类型(string)、哈希类型(hash)、列表类型(List)、集合类型(set) 和顺序集合类型(zset)。String类型
2022-03-02 16:44:18
512
原创 kafka常用命令 topic创建 删除 设置保存时间 消费情况 zookeeper 启动停止
kafka基础操作命令kafka 启动 停止 topic 创建,删除 ,设置日志存储时间命令
2022-02-22 15:56:51
3268
1
原创 mysql查询 日期类型为varchar date datatime 当日 昨日 一周内 一月内 本季度 本年 数据
开发过程中,我们经常需要查询查询数据库中符合指定日期条件的数据,如当日,昨日,一周内,一月内的数据,以下为mysql中查询指定日期的方式。字段说明:sign_date 为date类型rec_crt_ts 为datatime类型TO_DAYS() 函数用法为返回从年份0开始的天数 -- 查询当日的数据SELECT * FROM `tbl_task_sign_sub_acct` WHERE TO_DAYS(NOW()) = TO_DAYS(rec_crt_ts);SELECT * FROM
2022-02-19 09:12:17
1940
原创 Intellij IDEA 连接MySQL 数据库 可视化管理 generator生成Mybatis实体类
Intellij IDEA 连接mysql 可视化管理 并集成generator生成实体类及对应mapper文件
2022-02-17 15:20:14
1293
2
空空如也
fakfa分区数和消费者数量一致,分配不均衡,一个消费者消费多个分区
2022-02-22
TA创建的收藏夹 TA关注的收藏夹
TA关注的人