摆摆摆摆 2022-07-12 09:38 采纳率: 0%
浏览 68
已结题

minio对象存储同步单桶单目录4kw+文件

问题遇到的现象和发生背景

源端是minio对象存储，单桶单目录4kw+文件，在同步到ceph对象存储时，minio对象存储部署机器内存溢出

问题相关代码，请勿粘贴截图
运行结果及报错内容
我的解答思路和尝试过的方法

minio机器可能内存不够，我从16GB增加到32GB，还是会内存溢出

我想要达到的结果

是minio对象存储有极限嘛？

  • 写回答

0条回答 默认 最新

    报告相同问题？

    • minio实现本地和云端文件同步
      2023-02-26 18:49
      在本文中，我们将深入探讨如何利用Java来实现本地文件与MinIO云端存储的同步。 首先，我们需要理解MinIO的核心接口，包括上传、下载和删除文件。在Java中，MinIO提供了`MinioClient`类，这是与MinIO服务器进行交互...
    • docker minio 对象存储 基础镜像
      2024-10-17 08:54
      本知识点将围绕“Docker MinIO对象存储基础镜像”的相关知识展开，详细探讨如何在Docker环境下部署和使用MinIO对象存储服务。 首先，需要明确什么是MinIO以及它的作用。MinIO是一个开源的对象存储系统，提供了一个...
    • Java分布式文件对象存储Minio框架并发上传、下载、合并、删除等操作示例Demo完整版
      2022-08-01 17:35
      1. **对象存储**：Minio使用的是对象存储模型，与传统的文件系统不同，它不依赖于目录和文件层级结构，而是以对象（Object）的形式存储数据。每个对象由数据块和元数据组成，便于大规模的数据管理和访问。 2. **...
    • Minio对象存储及Springboot整合Minio分片上传文章-代码
      2023-02-23 09:57
      Minio是一款开源的对象存储服务，它致力于为开发者提供简单、高性能、高可用的云存储解决方案。Minio的设计灵感来源于Amazon S3，适用于存储大量的非结构化数据，如图片、视频、文档等。在本文中，我们将深入探讨...
    • 分布式Minio部署+测试文档
      2024-03-07 11:20
      - **对象存储功能测试**：包括但不限于单节点部署、多驱动器配置、对象操作等。 - **单节点单驱动部署**：适用于较小规模的数据存储需求，测试单一节点的性能和稳定性。 - **单节点多驱动部署**：提高单一节点的...
    • 基于Linux系统的minio分布式对象存储二进制文件包及启动脚本
      2022-12-02 09:01
      MinIO 是一款基于Go语言发开的高性能、分布式的对象存储系统。客户端支持Java,Net,Python,Javacript, Golang语言。
    • minio文件存储服务
      2021-08-16 00:09
      新建一个目录存放minio文件，如 D:\minioData，CMD进入刚刚下载的minio.exe所在目录，直接在cmd下运行:minio.exe server D:\minioData 启动成功以后如记住显示的access Key和Secret Key (默认全是minioadmin) ...
    • Linux环境MinIO单机安装、集群搭建，数据同步，策略示例。
      2022-09-19 16:32
      Linux环境下，MinIO是一款开源的对象存储服务，常用于大数据、云计算和边缘计算场景。本文将详细介绍如何在Ubuntu 20.04上进行MinIO的单机安装、集群搭建、数据同步以及设置策略。 首先，让我们看看单机安装的步骤...
    • 文件对象管理器（集成MinIO、阿里云OSS基本操作及临时token获取）
      2022-04-05 18:12
      文件对象存储（Object Storage Service，简称OSS），是云服务的一种，主要负责存储非结构化的数据，如文本、图片、音频、视频等。在IT领域，文件对象管理器是用于管理和操作这些对象的关键工具。本话题将聚焦于集成...
    • docs：MinIO对象存储文档
      2021-02-05 09:41
      MinIO文件 要求 python3（任何版本都可以，最好是最新版本） 建议创建一个虚拟环境以保持事物的简洁明了： 首先克隆存储库。 cd进入克隆的仓库。 您可能需要git fetch刷新存储库。 一旦进入存储库根目录，请运行...
    • Python与MinIO结合使用Flask上传与下载文件的完整指南
      2024-11-22 15:18
      内容概要：本文档详细介绍了如何在Python中使用MinIO对象存储服务进行文件的上传和下载操作，特别是在Flask Web应用中集成MinIO客户端的具体步骤和示例代码，包括环境搭建、模块引入、函数实现、异常处理以及安全性...
    • Minio对象存储服务介绍、单机和集群部署及其使用
      2023-04-19 01:04
      勤快的小蚂蚁的博客 常见的对象存储服务包括阿里云OSS对象存储、FastDFS分布式文件系统和公司私有云平台,方便数据存储和快速访问。但是,随着业务的快速发展,我们需要存储一些文件相关数据。我们选择使用兼容S3协议的Minio进行自建服务。...
    • springboot+minio文件服务器的demo
      2024-02-22 17:35
      springboot+minio文件服务器的demo,开箱即用 springboot+minio文件服务器的demo,开箱即用 springboot+minio文件服务器的demo,开箱即用 springboot+minio文件服务器的demo,开箱即用 springboot+minio文件服务器的demo...
    • minio对象存储服务
      2020-04-21 10:54
      minio 兼容Amason的S3分布式对象存储项目，采用Golang实现，客户端支持Java,Python,Javacript, Golang语言。 Minio可以做为云存储的解决方案用来保存海量的图片，视频，文档。由于采用Golang实现，服务端可以工作 ...
    • 没有解决我的问题, 去提问

    问题事件

    • 系统已结题 7月20日
    • 创建了问题 7月12日