自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(11)
  • 收藏
  • 关注

原创 Ubuntu安装JetBrains全家桶之IntlliJ IDEA安装

主要以以ubuntu安装idea作为例子。

2024-10-19 17:07:40 733

原创 error while loading shared libraries: libtinfo.so.5: cannot open shared object file: No such

环境中没有libtinfo.so.5组件。

2024-09-05 12:37:19 757

原创 Hive之Hiveserver2 metastore环境部署

Hive:由Facebook开源用于解决海量结构化日志的数据统计。Hive是基于Hadoop的一个数据仓库工具,可以将,并提供类SQL查询功能。1)Hive处理的数据存储在HDFS2)Hive分析数据底层的实现是MapReduce3)执行程序运行在Yarn上。

2024-09-05 08:57:08 1705

原创 Hadoop-3.1.3伪分布式部署

以前hadoop 2.X 版本,访问web界面,hdfs端口号是50070,现在3.X版本,端口号是9870(最好自己指定端口号)配置好后,即可直接查看hadoop 版本号。前提:已完成免密登录,jdk配置。分发完后去副节点刷新环境变量。我们只用修改其中的6条。

2024-09-05 08:53:30 894

原创 Hadoop3.1.3部署汇总

1.1 Hadoop 是什么(1)Hadoop是一个由Apache基金会所开发的分布式系统基础架构(2)主要解决海量数据的存储和海量数据的分析计算问题(3)广义上来说,Hadoop通常是指一个更广泛的概念——Hadoop生态圈1.2 Hadoop 优势(1)高可靠性:Hadoop底层维护多个数据副本,所以即使Hadoop某个计算元素或存储出现故障,也不会导致数据的丢失。(2)高扩展性:在集群间分配任务数据,可方便的扩展数以千计的节点。(3)高效性:在MapReduce的思想下,Hadoop是并行工作的,以加

2024-09-05 08:52:10 891

原创 解决VSCode安装Go tools失败的问题

测试环境安装Go后,打开VS Code,按照提示安装了微软官方的GO插件。但在安装go tools时,出现了下面的一大堆错误(日志)。解决方案设置完成后重启VS Code,按照提示安装即可。参考https://l2m2.top/2020/05/26/2020-05-26-fix-golang-tools-failed-on-vscode/

2024-05-09 19:53:06 628 1

原创 Ubuntu基础配置+Docker配置和使用+容器化centos7大数据环境准备

大数据技术与应用赛项平台环境模拟,使用ubuntu,利用docker搭建大数据集群

2023-08-12 20:00:32 2173 1

原创 关闭笔记本自带键盘

戴尔G15关闭笔记本自带键盘(其他品牌的还没试过)

2023-08-10 10:49:36 195 1

原创 OpenSSH升级版本(7.4升级到8.9)

笔记(ssh版本升级)

2023-08-10 10:43:49 2271 1

原创 spark完全分布式部署

Ubuntu环境,利用docker容器搭建spark集群(个人笔记)

2023-08-01 18:22:25 324 1

原创 hadoop-3.1.3完全分布式保姆级搭建

Ubuntu环境,利用docker容器搭建hadoop完全分布式保姆级教程(个人笔记)

2023-03-21 13:26:17 1190

空空如也

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除