- 博客(6)
- 收藏
- 关注
RSS订阅原创 Python脚本实现创建aliyun ECS
本文介绍了一个使用Python脚本在阿里云上创建ECS实例的流程。首先，需要提前创建一个自定义镜像，并通过指定镜像名获取镜像ID。脚本通过读取配置文件（如ops.txt）获取实例类型、主机名、标签、子网ID、数据盘类型和大小等参数。接着，安装必要的依赖库，如alibabacloud-credentials和alibabacloud_ecs20140526。脚本的核心功能是通过阿里云SDK调用RunInstances API，根据配置参数创建ECS实例，并返回实例ID。脚本还支持自定义用户数据（user_da
2025-05-15 17:11:23
172
原创 Hadoop+Hive+Hue+Spark
本文详细介绍了如何部署和配置一个基于Hadoop 3.3.6的大数据平台，包括Hive 3.1.3、Hue 4.11.0、Spark 3.5.1、Flink 1.18.1等组件的安装与对接。首先，准备了JDK 1.8、MySQL 8.0.33等依赖环境，并配置了免密登录和Maven。接着，详细描述了Hadoop的单机安装、配置文件修改、NameNode格式化及启动过程。随后，介绍了Hive的安装、元数据库初始化及启动，以及Spark的安装与Hive的对接。此外，还涵盖了Flink的部署与作业提交，Hue的安
2025-05-14 14:52:31
465
原创 Hadoop集群配置
本文介绍了Hadoop集群的核心配置文件及其配置内容。主要包括core-site.xml、hdfs-site.xml、mapred-site.xml和yarn-site.xml四个核心配置文件，分别用于配置Hadoop的全局设置、HDFS、MapReduce和YARN的相关参数。例如，core-site.xml中指定了NameNode的地址和Hadoop数据存储目录，hdfs-site.xml配置了HDFS的Web访问地址，mapred-site.xml指定了MapReduce运行在Yarn上，yarn-s
2025-05-14 14:34:22
217
原创 virsh list报错解决：error: failed to connect to the hypervisor
KVM上安装了VDSM引发的一系列报错
2023-06-26 22:25:26
2736
1
原创 canal-adapter启动报错问题处理
Error starting ApplicationContext. To display the conditions report re-run your application with 'debug' enabled.2022-06-20 16:56:11.435 [main] ERROR o.s.boot.diagnostics.LoggingFailureAnalysisReporter -***************************APPLICATION FAILED TO.
2022-06-21 20:13:16
2353
3
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人