自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(73)
  • 收藏
  • 关注

原创 最新Java 反射机制快速入门及常见方法全归纳。_反射方法的类型,花2万块买的教程

▶ Class也是类,因此也继承Object类▶ Class类对象不是new出来的, 而是系统创建的▶ 对于某个类的Class类对象, 在内存中只有一份。因为类只加载一次▶ 每个类的实例都会记得自己是由哪个Class实例所生成▶ 通过Class对象可以完整地得到一个类的完整结构,通过一系列API▶ Class对象是存放在堆的▶ 类的字节码二进制数据, 是放在方法区的, 有的地方称为类的元数据(包括方法代码,变量名,方法名,访问权限等等)▶ 常见方法▶ 代码示例。

2024-05-16 06:16:10 1088

原创 最新Java SE 学习记录——进阶版12(1),卑微打工人

\*练习:自定义函数模型拼接[外链图片转存中...(img-wUvPCqWk-1715811315728)][外链图片转存中...(img-oVhbLiuG-1715811315728)][外链图片转存中...(img-7JZvd4fw-1715811315729)]**既有适合小白学习的零基础资料,也有适合3年以上经验的小伙伴深入学习提升的进阶课程,涵盖了95%以上大数据知识点,真正体系化!**

2024-05-16 06:15:37 694

原创 最新Impala-架构与设计_impala架构,熬夜整理最新大厂大数据开发高频面试题

Impala是一款基于Hive的大数据分析查询引擎,直接使用Hive的元数据Metastore,因此如果使用Impala需要先安装Hive并启动Metastore服务。Impala不依赖MapReduce而是将执行计划树进行并行计算,使用拉的方式获取结果数据,把结果数据按执行树流是传递汇集,减少中间结果落盘。

2024-05-16 06:15:04 1180

转载 最新HTML基础笔记(2),2024年最新大数据开发面试自我介绍

1.HTML的全称为超文本标记语言,是一种标记语言。它包括一系列标签.通过这些标签可以将网络上的文档格式统一,使分散的Internet资源连接为一个逻辑整体。HTML文本是由HTML命令组成的描述性文本,HTML命令可以说明文字,图形、动画、声音、表格、链接等。2.超文本是一种组织信息的方式,它通过超级链接方法将文本中的文字、图表与其他信息媒体相关联。这些相互关联的信息媒体可能在同一文本中,也可能是其他文件,或是地理位置相距遥远的某台计算机上的文件。

2024-05-16 06:14:31 951

原创 大数据最新跟着罗某人认识spark和scala带你上大分(2),这套Github上40K+star面试笔记

Spark Streaming:是Spark提供的对实时数据进行流式计算的组件。提供了用来操作数据流的API,并且与Spark Core中的 RDD API高度对应。Spark MLlib:提供常见的机器学习功能的程序库。包括分类、回归、聚类、协同过滤等,还提供了模型评估、数据 导入等额外的支持功能。Spark GraphX:主要用于图形并行计算和图挖掘系统的组件。集群管理器:Spark设计为可以高效地在一个计算节点到数千个计算节点之间伸缩计算。

2024-05-15 21:28:14 1245

原创 大数据最新贪吃蛇基础·框架版(简单)开头有原码_贪吃蛇小游戏框架图(1),京东面试真题解析

printf(“继续努力吧~你离最高分还差:%d”,highScore-sumScore);//分配内存空间,使用头插法(单链表),以设定的x,y位置开始插入。//分配内存空间,使用头插法(单链表),以设定的x,y位置开始插入。printf(“你的得分是:%d分”,sumScore);//1,撞墙 2,自己咬到自己了 3,主动退出。//将蛇头变成蛇尾,然后重复循环。//将蛇头变成蛇尾,然后重复循环。printf(“你输入的有误,请重新输入”);

2024-05-15 21:27:39 814

原创 大数据最新记一次阿里面试——第一面,电话面试_一面是电话面试(4),2024年最新全靠这套面试题

如jvm、类加载、jvm内存、垃圾回收、synchronized、lock、ThreadPoolExecutor、常用集合类(如hashmap、hashtable、concurrenthashmap、arraylist、linkedlist源码实现)、阻塞队列源码实现、设计模式、排序算法等。2.让我介绍下我最近的一个大数据项目数据情况,以及hbase、hive起的作用,数据量情况,怎么优化的。说了一个rabbitmq,说到了在连接并发比较多、消息比较多的场景下用到的情况。7.项目里面怎么用的redis。

2024-05-15 21:27:06 287

原创 大数据最新计算机视觉项目-文档扫描OCR识别(3),2024年最新大数据开发开发面试技能介绍

下载地址用到的是最后一个。或者。导入第三方库import cv2import os!!**网上学习资料一大堆,但如果学到的知识不成体系,遇到问题时只是浅尝辄止,不再深入研究,那么很难做到真正的技术提升。****[需要这份系统化资料的朋友,可以戳这里获取](https://bbs.csdn.net/topics/618545628)****一个人可以走的很快,但一群人才能走的更远!

2024-05-15 21:26:32 747

原创 大数据分布式计算工具Spark数据计算实战讲解(filter方法,distinct方法,sortby方法)(1)

功能:对rdd数据进行排序,基于你指定的排序依据。功能:对rdd数据进行去重,返回新rdd。功能:过滤想要的数据进行保留。

2024-05-15 10:41:07 406

原创 大数据入门系列 5:全网最全,Hadoop 实验——熟悉常用的 HDFS 目录操作和文件操作_hdfs目录操作

这里 /user/bailu 就是一个多级目录,因此必须使用参数 -p,否则会出错。

2024-05-15 10:40:31 592

原创 大数据入门系列 5:全网最全,Hadoop 实验——熟悉常用的 HDFS 目录操作和文件操作_hdfs目录操作(1)

该命令表示在 HDFS 中创建一个 /user/bailu 的目录。:这里 /user/bailu 就是一个多级目录,因此必须使用参数 -p,否则会出错。

2024-05-15 10:39:55 613

原创 大数据入门系列 4:全网最全,伪分布式 Hadoop 在 Ubuntu 上的安装流程完整步骤及易错点分析_ubuntu下安装hadop

输入javac。

2024-05-15 10:39:18 528

原创 【云高考】Docker 示例演示 高考学子,我想对你说_dockerfile apk add

高考真的会决定未来,不说进入顶级学府,不说进入985、211什么的,哪怕只是一个本科,就和大专或者是没有学历的人,就有很大的差别。举个最简单的例子,铁饭碗的报考门槛是本科学历,顶级学府出来的,参加统一笔试考试?那不存在,可以不用考。这么一说,有没有发现,差距很大?5、什么样的学生适合计算机专业?不断的求新,求知,能顶压力的人,有野心的人。(突然发现,我是来劝退的)6、在高考结束之后自学计算机,有什么好的学习方法?基础,先学基础,什么编程思想,设计模式,C,Java基础等等,学习,永远是基础最重要。

2024-05-15 02:02:38 683

原创 【云服务器 ECS 实战】专有网络 VPC、弹性网卡的概述与配置_vpc网卡

比如在一台 ECS 上同时部署了 nginx 与 MySQL 服务,由于二者差别明显,nginx 通常是要对外提供服务的,而 MySQL 仅是内网访问,这个时候就可以对二者进行两个网卡的绑定,并分别配置不同的安全组策略,以实现对不同服务的精细化管理。,比如说有两台 ECS 上部署着相同的服务,其中一台 ECS 出现了故障,我们便可以将故障 ECS 上的弹性网卡解绑,并将它绑定到另一台 ECS 上,这样下来该服务的访问是不会受影响的。弹性的意思也就是可用可不用,想用的时候添加它,不想用的时候随时取消。

2024-05-15 02:02:02 938

原创 【云服务器 ECS 实战】专有网络 VPC、弹性网卡的概述与配置_vpc网卡(1)

首先,传统经典网络是直接建立在网络层之上的,比如说若干个公司购买了各自的云产品,而这些产品之间是没有进行逻辑隔离的,只要掌握了阿里内部局域网的 IP 分配机制,进行局域网内部攻击便“不在话下”,安全性无保障。,比如说有两台 ECS 上部署着相同的服务,其中一台 ECS 出现了故障,我们便可以将故障 ECS 上的弹性网卡解绑,并将它绑定到另一台 ECS 上,这样下来该服务的访问是不会受影响的。阿里云在早期使用的是一种传统的网络模式,将所有的 ECS 云服务直接建立在传统网络层之上,这也就是。

2024-05-15 02:01:26 919

原创 【云服务器 ECS 实战】一文掌握负载均衡服务原理及配置方法_负载均衡到ecs

比如使用 Http 协议类型,用户想要在前端访问到负载均衡,我们就需要配置 Http 协议与 80 端口,负载均衡也是使用 Http 协议转发至后台服务器,那么后端启用的服务或者监听也需要使用 Http 协议来进行匹配。也就是说前端与后端的协议类型都是相对应的。

2024-05-15 02:00:50 894

原创 JavaScript 入门基础 - 变量 数据类型(二)_为什么javascript中最小值乘2为无穷小(1)

在计算机中,不同的数据类型所占用的数据空间是不同的,所以为了便于把数据分成所需内存大小不同的数据,使空间不被浪费,于是定义了不同的数据类型。简单说数据类型就是数据的类别型号。如:张三、19、age。数组是内存中保存一组数据的集合,其中每个数据称为元素,数组元素的个数称为数组大小,数组可以存放多个任意类型的元素。数组是将一组数据存储在单个变量名下的优雅方式。// 普通变量一次只能存储一个值// 数组一次可以存储多个值。

2024-05-14 16:40:07 801

原创 JavaScript 1000个判断条件难道要写了1000个 if 一文教你如何实现分支优化_js if太多了

(name) => name[0] === “李” && name!(name) => name[0] === “李” && name![(name) => name.length > 3, () => “名字太长”],[(name) => name.length < 2, () => “名字太短”],[(name) => name[0] === “陈”, () => “小陈”],} else if (name[0] === “陈”) {} else if (name[0] === “陈”) {

2024-05-14 16:39:31 757

原创 JavaScript 1000个判断条件难道要写了1000个 if 一文教你如何实现分支优化_js if太多了(3)

咋一看没感觉有什么异常,但如果有1000个判断条件,按照这种写法难不成要写1000个if分支?如果写了大量的if分支,并且可能还具有,可以想象到整个代码的可读性和可维护都会大大降低,这在实际开发中,确实是一个比较头疼的问题,那有没有什么办法能够即实现需求又能避免这些问题呢?

2024-05-14 16:38:56 299

原创 JavaScript 1000个判断条件难道要写了1000个 if 一文教你如何实现分支优化_js if太多了(2)

问题代码中的判断都是简单的,那么我们就可以将这些判断条件作为一个属性写到对象中去,这些属性对应的值就是条件成立后的处理函数。之后我们就只需通过函数接收到的参数去获取对象中对应的值,如果该值存在就运行该值(因为值是一个函数)。这样一来原本的if分支判断就转换成了简单的key value对应值,条件与处理函数一一对应,一目了然。

2024-05-14 16:38:20 332

原创 2024年最全职业院校大数据技术——数据挖掘1(3),阿里三面

既有适合小白学习的零基础资料,也有适合3年以上经验的小伙伴深入学习提升的进阶课程,涵盖了95%以上大数据知识点,真正体系化!由于文件比较多,这里只是将部分目录截图出来,全套包含大厂面经、学习笔记、源码讲义、实战项目、大纲路线、讲解视频,并且后续会持续更新需要这份系统化资料的朋友,可以戳这里获取4595)][外链图片转存中…(img-fW3sXLab-1715644904596)]既有适合小白学习的零基础资料,也有适合3年以上经验的小伙伴深入学习提升的进阶课程,涵盖了95%以上大数据知识点,真正体系化。

2024-05-14 08:02:06 691

原创 2024年最全耗时n年,38页《数据仓库知识体系(5),2024年最新大厂面试题汇总

事实表有三种类型 :事务事实表、周期快照事实表和累积快照事实表。1.1​维度是维度建模的基础和灵魂。在维度建模中,将度量称为“事实” , 将环境描述为“维度”。维度表包含了事实表中指定属性的相关详细信息,最常用的维度表有日期维度、城市维度等。num字段名字段中文名描述数据类型1date日期日期 yyyMMdd格式bigint2week星期,数字型星期,数字型 0-6bigint3week_cn星期中文名星期中文名 星期一……string4year_weeks。

2024-05-14 08:01:31 980

原创 2024年最全耗时n年,38页《数据仓库知识体系(3),2024年最新这些年我所经历的所有面试

​维度是维度建模的基础和灵魂。在维度建模中,将度量称为“事实” , 将环境描述为“维度”。维度表包含了事实表中指定属性的相关详细信息,最常用的维度表有日期维度、城市维度等。num字段名字段中文名描述数据类型1date日期日期 yyyMMdd格式bigint2week星期,数字型星期,数字型 0-6bigint3week_cn星期中文名星期中文名 星期一……string4year_weeks一年中的第几周一年中的第几周 1 2 3……bigint5。

2024-05-14 08:00:53 1021

原创 2024年最全网络编程面试题(2024最新版)_计算机网络面试题2024 csdn,2024年最新2024大数据开发春招面试真题

HTTP 是一个在计算机世界里专门在两点之间传输文字、图片、音频、视频等超文本数据的约定和规范区别HTTPHTTPS协议运行在 TCP 之上,明文传输,客户端与服务器端都无法验证对方的身份身披 SSL( Secure Socket Layer )外壳的 HTTP,运行于 SSL 上,SSL 运行于 TCP 之上,是添加了加密和认证机制的 HTTP。端口80443资源消耗较少由于加解密处理,会消耗更多的 CPU 和内存资源开销无需证书需要证书,而证书一般需要向认证机构购买加密机制。

2024-05-14 08:00:16 1163

原创 2024年大数据最新Rabbitmq入门与应用(三)-RabbitMQ开发流程(2),顺利收获Offer

在配置类中创建队列对象。

2024-05-13 23:13:54 313

原创 2024年大数据最新PyTorch ResNet 实现图片分类_return torch,2024年最新7年老大数据开发一次坑爹的面试经历

当网络深度从 0 增加到 20 的时候, 结果会随着网络的深度而变好. 但当网络超过 20 层的时候, 结果会随着网络深度的增加而下降. 网络的层数越深, 梯度之间的相关性会越来越差, 模型也更难优化.深度残差网络 ResNet (Deep residual network) 和 Alexnet 一样是深度学习的一个里程碑.残差网络 (ResNet) 通过增加映射 (Identity) 来解决网络退化问题.通过集合残差而不是恒等隐射, 保证了网络不会退化.百年风雨, 金戈铁马.看今朝, 灿烂辉煌.

2024-05-13 23:13:18 391

原创 2024年大数据最新PyTorch ResNet 实现图片分类_return torch(1),2024中级大数据开发开发面试解答

batch_size = 1024 # 一次训练的样本数目learning_rate = 0.0001 # 学习率iteration_num = 20 # 迭代次数optimizer = torch.optim.Adam(network.parameters(), lr=learning_rate) # 优化器。

2024-05-13 23:12:42 859

原创 2024年大数据最新python面试题总结(二)_给定2个字符串a=“abcdefg”,b=(2),2024年最新最新精心整理大数据开发面试题

协议是 http://域名是 www.example.com端⼝是 80(默认端⼝可以省略)

2024-05-13 23:12:06 919

原创 猿创征文|实战开发openGauss DataStudio的sql联想结构_datastudio的sql终端(3)

当servObj为TableMetaData的时候,我们需要将表自己的拥有的列数据通过该方法进行加载,还需要加载“all”的值,故需要执行found =将“all”对应的value值添加进去。

2024-05-12 20:17:08 1176

原创 猿创征文|实战开发openGauss DataStudio的sql联想结构_datastudio的sql终端(2)

表数据增、删、改、查操作等功能。为了使用人员在查询时更加方便,应该将 DataStudio 的功能进行改进,把 sql 输入联想功能进行优化,把当前字联想改为表结构联想,并且为了方便操作数据库时更加方便,添加选择“all”时自动填充所有表结构。增加一个“all”的选项,当我们选择该字段后,会将该数据库表中所有的列按照id大小将所有的列展示出来。通过输入的字符串进行切割,判断该值属于哪一范围,如果属于表并且以英文句号结尾的字符串或者以insert into 表名开头并以英文“(”结尾那么就会通过。

2024-05-12 20:16:32 794

原创 猿创征文|实战开发openGauss DataStudio的sql联想结构_datastudio的sql终端(1)

关于如何安装openGauss以及启动项目大家可以翻看我之前的博客内容。

2024-05-12 20:15:56 413

原创 猿创征文|如何使用 Element UI? 以登录框为例带你感受一下基础使用_element登录框

Element-ui,一套为开发者、设计师和产品经理准备的基于 Vue 2.0 的组件库,提供了配套设计资源,帮助你的网站快速成型。由饿了么公司前端团队开源。

2024-05-12 20:15:19 457

原创 大数据深度学习长短时记忆网络(LSTM):从理论到PyTorch实战演示(2)

LSTM的逻辑结构通过其独特的门控机制为处理具有复杂依赖关系的序列数据提供了强大的手段。其对信息流的精细控制和长期记忆的能力使其成为许多序列建模任务的理想选择。了解LSTM的这些逻辑概念有助于更好地理解其工作原理,并有效地将其应用于实际问题。我们首先定义一个LSTM类,该类使用PyTorch的nn.Module作为基类。out, _ = self.lstm(x) # LSTM层out = self.fc(out[:, -1, :]) # 全连接层return outinput_size。

2024-05-12 03:07:28 1155

原创 大数据深度学习长短时记忆网络(LSTM):从理论到PyTorch实战演示(1)

LSTM的逻辑结构通过其独特的门控机制为处理具有复杂依赖关系的序列数据提供了强大的手段。其对信息流的精细控制和长期记忆的能力使其成为许多序列建模任务的理想选择。了解LSTM的这些逻辑概念有助于更好地理解其工作原理,并有效地将其应用于实际问题。既有适合小白学习的零基础资料,也有适合3年以上经验的小伙伴深入学习提升的进阶课程,涵盖了95%以上大数据知识点,真正体系化!由于文件比较多,这里只是将部分目录截图出来,全套包含大厂面经、学习笔记、源码讲义、实战项目、大纲路线、讲解视频,并且后续会持续更新。

2024-05-12 03:06:52 587

原创 大数据测试学习笔记之hadoop家族_大数据测试技术与实践学习笔记(2)

面对hadoop复杂、多样的产品,如何才能有效的学习掌握呢?了解基于hadoop家族产品的具体大数据的应用场景深入学习HDFS和MapReduce工作原理尝试安装、部署hadoop家族系列产品,并试用与从事大数据开发的人员聊聊具体的技术落地过程对于大数据的技术体系中涉及的各种技术的学习是一个长期的过程,但光看书是不够的,还需要去实践。作为软件测试,更需要在实践的过程中结合测试理念,从细节做起,从解决小问题做起,逐步建立系一套符合企业需要的大数据测试体系和积累起自己的大数据相关的技术体系。

2024-05-12 03:06:16 629

原创 大数据测试学习笔记之hadoop家族_大数据测试技术与实践学习笔记(1)

面对hadoop复杂、多样的产品,如何才能有效的学习掌握呢?网上学习资料一大堆,但如果学到的知识不成体系,遇到问题时只是浅尝辄止,不再深入研究,那么很难做到真正的技术提升。需要这份系统化资料的朋友,可以戳这里获取一个人可以走的很快,但一群人才能走的更远!不论你是正从事IT行业的老鸟或是对IT行业感兴趣的新人,都欢迎加入我们的的圈子(技术交流、学习资源、职场吐槽、大厂内推、面试辅导),让我们一起学习成长!

2024-05-12 03:05:40 472

原创 大数据最全Spark-Scala语言实战(4)(1),2024年最新大数据开发开发岗还不会这些问题

运行成功,输出了我们赋予的东西。

2024-05-11 18:27:45 611

原创 大数据最全Spark Shuffle Tracking 原理分析,2024年最新90%的人看完都说好

现状是如果 Executor 没有 active 的 shuffle 数据,则可以被销毁。active shuffle 的定义:如果 Shuffle Map Stage 的 task 把 shuffle 数据输出到本地。如果依赖此 shuffle 的Stage 没有计算完毕,则称此 shuffle 为 active shuffle。因为依赖此 shuffle 的 Task 可能从 Driver 端获取了 MapStatus,但是还没有拉取完 shuffle 数据。

2024-05-11 18:27:09 572

原创 大数据最全Spark Shuffle Tracking 原理分析(1),轻松获得一线大厂面试offer

如果 Executor 执行了上游的 Shuffle Map Task 并且把 shuffle 数据些到本地。并且现在 Executor 没有 Task 运行,那么此 Executor 是否能销毁?现状是如果 Executor 没有 active 的 shuffle 数据,则可以被销毁。active shuffle 的定义:如果 Shuffle Map Stage 的 task 把 shuffle 数据输出到本地。

2024-05-11 18:26:33 783

原创 大数据最全ResNet实战:tensorflow2(1),2024年大数据开发面试题

思路:在while循环:初始化input_samples和input_labels,连个list分别用来存放image和image对应的标签。分别从file_pathList和labels,得到图片的路径和对应的label读取图片如果是训练就训练的transform,如果不是就执行验证的transform。resize图片将image转数组将图像和label分别放到input_samples和input_labels将list转numpy数组。

2024-05-11 18:25:56 765

空空如也

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除