问题遇到的现象和发生背景
Spark读取redis存储二进制数据，字节数组的数据丢失问题
用代码块功能插入代码，请勿粘贴截图
运行结果及报错内容
我的解答思路和尝试过的方法
redis中存储的二进制数据的数据类型为string，转为字节的时候存在丢失
我想要达到的结果
读取的字节为30的整数倍
Spark读取redis存储二进制数据，字节数组的数据丢失问题
- 写回答
- 好问题 0 提建议
- 关注问题
分享- 邀请回答
-
1条回答 默认 最新
- 2020-02-07 17:01你家宝宝的博客 Spark SQL 通过 DataFrame 接口支持操作各种数据源。一个 DataFrame 能够通过使用关系转换和创建临时视图来操作数据。当你使用临时视图注册一个 DataFrame 时，你可以在这数据上运行 SQL 查询。 注意，本文中的完整...
- 2022-07-26 19:18Andy_shenzl的博客 每个人家里都会有冰箱，冰箱是用来干什么的？冰箱是用来存放水果蔬菜等...数据库可以存放大量的数据，允许很多人同时使用里面的数据。前面讲的都是关系数据库原理方面的基本理论。那么到底什么是“云原生”呢？......
- 2024-12-02 00:00大模型大数据攻城狮的博客 HadoopHadoop 是一个开源的分布式计算平台，主要用于存储和处理大规模的数据。它的核心组件包括 HDFS 和 MapReduce。HDFS 是一种分布式文件系统，能够将海量的数据分割成多个数据块，并将这些数据块存储在集群中的...
- 2023-07-12 12:50Bigdata_shit的博客 如果是kafka channel 或者FileChannel不会丢失数据，数据存储可以存储在磁盘中。 如果是MemoryChannel有可能丢。 1.4.6 Flume如何提高吞吐量 调整taildir source的batchSize大小可以控制吞吐量，默认大小100个...
- 2022-06-26 21:03光看不点赞的博客 分配：为字典的另一个哈希表分配空间，这个分配的空间取决于存储元素的（键值对的数量即属性的值）②.迁移重新hash：将0号表的键值对全部rehash到1号表中，即重新计算哈希值和索引值 ③.迁移后：迁移迁移完成之后，0...
- 2023-01-31 15:05若馨数据的博客 我在车联网大数据的处理实践中不断沉淀,在公司产品的迭代升级中逐步升华,深有感触略有所得,分享出来抛砖引玉,希望能引起共鸣,共同进步.我把数据的生命周期分为如下几个阶段,而这么划分的标准是什么呢?我认为是"价值...
- 2024-10-16 20:39raiseup2的博客 Redis 的 Geo 数据类型允许用户存储和查询地理位置数据。通过使用 Geohash 编码和 Sorted Set (ZSET)，Redis 提供了高效的地理空间索引和查询功能。Redis 的 Geo 数据类型通过使用 Geohash 和 ZSET 提供了高效的地理...
- 2023-04-15 23:01small_to_large的博客 介绍总结redis6.0应用场景，安装、基本数据结构、发布订阅、事务、stream、Lua脚本等
- 2020-12-24 10:07风之涯角的博客 我好像嗅到了数据中台的调调，封装一个扩展性强的小架架把 hbase，mysql，redis各种数据源都整合一下，再用并发多线程，对象池之类的优化一下性能，再招一个3000块的小表哥，多么优秀的开源节流，是不是又可以找老板...
- 2020-09-09 16:16大数据学习与分享的博客 目前，redis的key是字符串类型的，但value支持多种数据类型：字符串（string）、哈希（hash）、列表（list）、集合（set）、有序集合（sortedset），通过提供多种键值数据类型来适应不同场景下的存储需求。...
- 没有解决我的问题, 去提问
问题事件
系统已结题
10月19日
创建了问题
10月11日