- 博客(36)
- 资源 (11)
- 收藏
- 关注
转载 大数据架构师必读:常见的七种Hadoop和Spark项目案例
在“专业分析”项目的任何大型组织(讽刺的是,一个或两个“数据整理”项目)他们会不可避免地开始感觉“快乐”(即,疼痛)管理几个不同配置的Hadoop集群,有时从不同的供应商。在过去,这种专业的分析依赖于过时的,专有的软件包,无法扩大数据的规模经常遭受一个有限的功能集(大部分是因为软件厂商不可能像专业机构那样了解的那么多)。这是你的“数据湖”。在Hadoop和Spark的世界,看看这些系统大致相同的数据整合系统,但往往有更多的HBase,定制非SQL代码,和更少的数据来源(如果不是唯一的)。
2023-08-01 10:44:07
878
原创 字符编码(Unicode,UTF-8) 必须通俗易懂
近几年,每每遇到关于Unicode,UTF-8之类的问题,总是需要花费半个小时回顾一下它们之间的关系,因为我发现很多网上的资料都是通篇文字描述,我的想法很简单,希望一目了然,下一次,希望一分钟之内完成回顾,于是我使用的表格描述,算是对网上很多的资料的一个格式转化和汇总吧! 字符集 Unicode Unicode(统一码、万国码、单一码)是计算机科学领域里的一...
2019-08-08 18:01:27
1025
原创 我已经走出了腰肌劳损的阴影
经历了近两年和腰肌劳损的搏斗,现在终于可以回到足球场了,出于IT的分享精神,将自己的情况和药方公布如下:得病过程:2013年整个10月份的周六,周日连续踢球造成右侧腰肌劳损(右侧髂腰肌和腰骶部肌肉劳损),再加上工作的时候一直坐着,腰部无法得到休息,造成病情加重,最重的时候卧床休息了一周。治疗过程:因为以前踢球就经常受伤,所以得病的前半年没有特别在意只是停
2015-08-13 18:56:44
3110
1
转载 “大数据自动挖掘”才是大数据的真正意义
“大数据自动挖掘”才是现在这些大数据的真正意义 现在大数据火得不行,几乎人人都在说大数据,但到底什么是大数据,恐怕没有多少人知道,鱼目混珠的人太多。 大数据不是指很多很多数据。 所以不是存储了很多数据就是在搞大数据了,因为“大数据”只是个简称,说全一点应是“大数据挖掘”,没经过挖掘的大数据只是没有开采出来的原油,一点用处都没有。 大数据也不是指一般意义上
2014-09-28 23:59:32
1477
原创 shell调用dsjob--datastage job的注意事项
在真实项目中,有时我们不会在Designer Client或者Director Client直接运行datastage job, 而是通过shell调用,下面简单介绍一下注意事项。本机调用./dsjob -run -mode NORMAL -param SourceFile=DAD_DDDC_Multi-Date_Oct_2013_v1.csv ANALYZERPROJECT
2014-01-03 11:24:20
9566
转载 "error while loading shared libraries: xxx.so.x" 错误的原因和解决办法
一般我们在Linux下执行某些外部程序的时候可能会提示找不到共享库的错误, 比如:tmux: error while loading shared libraries: libevent-1.4.so.2: cannot open shared object file: No such file or directory原因一般有两个, 一个是操作系统里确实没有包含该共享库(l
2014-01-03 10:59:06
1440
转载 Redhat--This system is not registered with RHN
红帽中出现“This system is not registered with RHN”这个的原因是因为红帽中没有注册RHN。简单解决办法:更改yum的源(假定你已安装yum,且网络畅通),即更换/etc/yum.repos.d /rhel-debuginfo.repo 这个文件。进入/etc/yum.repos.d/目录,终端中输入wget http://docs.linu
2014-01-03 10:40:31
924
原创 IBM DB2 Catalog & Uncatalog使用
DB2 Catalog(中文翻译:编目)就是将远程的DB Server的信息“映射”到本地来,方便接下来的DB操作。 DB2 Catalog把远程的数据库信息加载到本地一般分为两步: 第一步, 为远程DB编目一个Node,命令如下:db2 catalog tcpip node db2node remote hostname server service_port
2013-12-25 19:30:20
25427
原创 Career Path(职业前景人生规划)的几点见解
最近参加了公司举办的Career Path(职业前景人生规划)系列培训,这是个非常大的话题,参加完培训后结合自己多年的工作经验,我对一些印象深刻的内容进行了一下总结:1,我们处在一个竞争非常激烈的社会,IT行业更是日新月异,要想有更好的发展,我们要学会“用多条腿走路”,换句话说需要掌握更多的技能,除了IT技术,还应该包括业务技能,交流沟通能力,甚至是演讲能力等等。这里特别要强调一下容易被忽
2013-12-14 11:29:53
4975
转载 DDL、DML和DCL的理解
1、DDL1)DDL的概述DDL(Data Definition Language 数据定义语言)用于操作对象和对象的属性,这种对象包括数据库本身,以及数据库对象,像:表、视图等等,DDL对这些对象和属性的管理和定义具体表现在Create、Drop和Alter上。特别注意:DDL操作的“对象”的概念,”对象“包括对象及对象的属性,而且对象最小也比记录大个层次。以表举例:Create
2013-07-03 22:31:09
1452
原创 Join and Where
JOIN & WHEREExplanationDetailsleft joinleft outer join(左联接) 返回包括左表中的所有记录和右表中联结字段相等的记录 左向外联接的结果集包括 LEFT OUTER 子句中指定的左表的所有行,而不仅仅是联接列所匹配的行。如果左表的某行在右表中没有匹配行,则在相关联的结
2013-03-25 16:51:24
1686
原创 你真的很幸运--因为你看到了我花6K+6天痛苦才换来的文章
在IT行业已经工作8年了,发现了一个特别明显的问题,与这个复杂的社会相比,我们IT人显得那么单纯而简单,也知道对于IT人,身体健康往往是一个大问题,经过自己惨痛的就医经历,我发现与健康相比,金钱、代码、技术都是浮云,所以就把自己的亲身经历写下来,供大家参考,亲爱的同行们,没有了健康,即使成为了乔布斯也没有任何意义,祝大家身体健康,也希望大家在寻求健康的道路上尽量少走些弯路,因为我们本来已经够辛苦的...
2012-11-08 19:28:07
34479
234
原创 飞科电动剃须刀的改良升级(图)
大概4、5年前,老婆给我买了一把飞科电动剃须刀,刚买的时候一切运转正常,但随着时间的流逝,我发现它的蓄电能力越来越差,刚开始时,充电8个小时(该剃须刀要求的充电时间),差不多能用2个星期(本人胡须不多),现在的话,充电8个小时,顶多能用3、4次。于是老婆建议给我买把新的,我仔细研究了一下这把剃须刀,发现它除了蓄电功能之外,其他部件保养的还是非常不错的,如果扔了的话实在有些可惜。今天有空,我
2012-10-09 10:43:11
21388
3
原创 Win7下.NET应用程序System.IO.FileNotFoundException问题
开发环境:WinXP开发工具:VS2005(C#.NET)运行环境:Win7背景:公司的电脑安装了Win7,禁止安装非工作软件,但是需要开发一个小工具,于是就在家里WinXP电脑上写了一个VS2005的小应用程序。在XP上调试运行,一切OK。但是把程序放到Win7运行,其中的一个功能就会报错:System.IO.FileNotFoundException。原因://
2012-09-26 23:05:49
9622
原创 变了
这个周末,参加了一位大学同学的婚礼。其实早在婚礼半个月前就听说会有不少来自全国各地的同学参加这场婚礼,光是想象一下大家相聚时的场景,心里都会感到激动,因为毕业后我们8年未见。开席前,大家又是寒暄又是拥抱,也拍下了许多张珍贵的合影,席间,大家有说有笑,推杯问盏。但我发现一桌子的同学不知不觉中竟分成了几个"派系",有顾家派,有从政派,还有博士派和沉默派。博士派似乎瞧不上从政派的高谈阔论,从政派
2012-07-02 02:52:20
2053
5
原创 有这样一家公司
从这家公司离职有8个多月了,在职期间和公司的几个要好的同事经常踢毽球,所以相处的非常不错,我们也时常保持联系。 几天前,公司同事说一年一度的毽球比赛又要拉开战幕了,让我去看看,因为特别想念那些一起战斗的XDJM,于是欣然前往。公司是一个封闭的大院,有食堂,食堂中午对外开放,我当天就在食堂吃了午饭,午饭后毽球比赛马上要开始了。就在我准备看精彩的比赛的时候,门口保安走了过来:“***,
2012-05-25 11:38:12
2434
4
原创 用什么来爱你,我们的民族品牌?
5年前的一天,姐姐说要买一部手机,让我陪她一起看看,我欣然前往,07年的手机市场已经非常火爆,可以挑选的品牌也非常多。姐姐的意思是想买个1000元钱左右,质量过得去的手机,我们挑选了半个多小时,她问我的意见。我说:支持民族品牌,买“波导”(后来证实,这是一个愚蠢的意见)。姐姐听了我的话,花了700多元买了部“波导”手机(型号不记得了)。说实话,当时简单测试,没有发现什么异常,我俩就回家了。几天后,
2012-05-08 11:07:15
2367
1
转载 Linux压缩与解压缩汇总
1 后缀名的含义在Linux中,文件的后缀名与文件的属性可能没有什么联系,很多时候是为了表征文件作者自身的命名习惯,或者反映文件的内容。但也有不少后缀在Linux是通用的表征文件属性的,如压缩文件和解压缩文件的后缀。 *.Z 是compress命令压缩的文件; *.bz2 是bzip2命令压缩的文件; *.gz 是gzip命令压缩的文件; *.tar 是t
2012-03-23 01:24:23
1924
转载 公钥,私钥,SSL(讲的很生动)
一,公钥和私钥1,公钥和私钥成对出现2,公开的密钥叫公钥,只有自己知道的叫私钥3,用公钥加密的数据只有对应的私钥可以解密4,用私钥加密的数据只有对应的公钥可以解密5,如果可以用公钥解密,则必然是对应的私钥加的密6,如果可以用私钥解密,则 必然是对应的公钥加的密明白了?假设一下,我找了两个数字,一个是1,一个是2。我喜欢2这个数字,就保留起来,不告诉你们,
2011-12-29 16:24:21
883
转载 Linux & Unix shell 编程指南之cron表达式
表达式举例说明一个cron表达式有至少6个(也可能7个,6个比7个少元素秒)由空格分隔的时间元素。 从左往右按顺序依次为 秒(0~59)---- 分(0~59) 时(0~23) 日(0~31,但是你需要考虑你月的天数) 月(0~11) 周(0~6 0=SUN 或 SUN,MON,TUE,WED,THU,FRI,SAT)年(1970-209
2011-11-07 20:08:53
2619
1
转载 Linux & Unix shell 编程指南之cron命令
1 后台执行命令cron :系统调度进程。可以使用它在每天的非高峰负荷时间段运行作业,或在一周或一月中的不同时段运行。At at :命令。使用它在一个特定的时间运行一些特殊的作业,或在晚一些的非负荷高峰时间段或高峰负荷时间段运行。& :使用它在后台运行一个占用时间不长的进程。Nohup :使用它在后台运行一个命令,即使在用户退出时也不受影响。2 cron和cront
2011-11-07 20:00:21
1570
原创 基于WinCE实现SNMP服务
开发需求• 基于WinCE实现SNMP服务经验教训net-snmp是Linux平台下著名的C语言SNMP开发包,公开源码,是最常用的开发Agent的软件包,曾花费一个月的时间实现了其应用功能,很遗憾最终发现:net-snmp几乎可以应用到非WinCE的所有平台(Lin
2011-09-26 11:24:19
2871
4
原创 30岁开始转型
记得以前看过一些前辈的文章说,作为IT技术人员转型方向大概有3个:做管理、做培训或者直接转到其他行业,而转型的年龄上限大概是35岁,如果不能够在35岁之前完成事业转型,未来就比较麻烦了。 感觉自己没有那么大的勇气去验证上述的“35岁”这道坎儿,所以考虑了好久之后终于下定决心准备提前转型,昨天我辞去了从事了7年的嵌入式开发工作----开始转型。 在大连这样的外
2011-08-11 08:05:20
1395
转载 中国IT为何能够领先强邻俄罗斯十五年?
<br />昨天晚上在CCTV4的“今日关注”节目中,听军事专家张召忠说:中国在IT方面大概领先强邻俄罗斯十五年左右,让我很困惑,因为不知道为何会有这么大的优势,今天很巧在CSDN上面看到了下面这篇文章,也许正是因为中国有许许多多个“徐家骏”的缘故吧!!<br /> <br />华为十年<br />徐家骏<br />2007年5月28日<br />(注:徐是华为数据中心的头,清华硕士,技术超级牛人,一级部门总监,华为副总裁,年收入过千万,数据中心是用火山岩建的深入地下的一个大型建筑。防辐射,可防卫星的电子,
2011-05-27 15:10:00
2556
3
原创 基于ARM-LINUX的PHP应用
软件环境• 操作系统:fedora9• PHP版本:php-5.2.16• PHP测试网页:http://download.csdn.net/source/3237445• 交叉编译器:arm-linux-gcc 3.4.1• WEB SERVER:boa• 开发板:YC2440 编译Ÿ 生成Makefile# cd php-5.2.16#
2011-05-19 08:25:00
3247
原创 跳槽还是不跳,你真的想好了吗?
开门见山,直奔主题,我在IT行业工作了6、7年后,总结了一个客观的跳槽量化方法(完全是个人想法,仅供参考)。该方法适合大部分行业中的大部分打工一族。 项:决定是否跳槽的6个主要因素,切记,这6个因素往往是一荣俱荣、一损俱损。简单说明:因为太简单、太直白了,所以不用说明什么。权值:按照重要程度进行先后排序(再次强调,这是我个人现在的看法,可根据自己的情况进行调整)
2011-04-23 09:07:00
1742
1
转载 单词记忆的方法
单词记忆的方法 jsfzdd:现在,在网上到处都能看到“某某神奇单词记忆法”的广告宣传,说实话,我觉得基本都属于虚假广告(严重夸大事实),那么到底如何能够更好的记忆单词呢?在我看来,唯一的途径就是“毅力+适合自己的方法(单词循环记忆法)”。 以下内容为转载(自己还是很认可以下内容的,也在努力捡起英语):1.单词不容易记忆,首先需要毅力,长期不懈。2.记忆句子,而不是光记
2011-04-14 10:24:00
971
原创 嵌入式Web服务器软件构成与工作原理(三)
CGI程序的应用1、源码编写我已将自己编写的CGI简单测试代码上传至csdn供大家下载,如有不足之处,望不吝赐教。地址:http://download.csdn.net/source/31312892、环境搭建将编译后生成的cgi文件、html文件、lib库和include文件夹拷贝至开发板的/var/www(boa.conf中配置的DocumentRoot)目录下。
2011-04-13 22:48:00
1265
原创 嵌入式Web服务器软件构成与工作原理(二)
boa服务的部署 1、解压# tar xzf boa-0.94.14rc21.tar.gz 2、编译# cd boa-0.94.14rc21# ./configure生成了boa-0.94.14rc21/src目录下makefile文件,修改makefile文件,把其中的CC CPP -E改为:CC = arm-linux-gccC
2011-04-05 10:03:00
1681
原创 新的开始
<br />中文:<br />星期三晴<br />公元2010年8月3日,我为之奋斗6年的CIFRA(公司名字)倒闭了,遗憾、无奈。走过3个多月的求职之路,我来到了UNT,有了一个新的开始,然而,值得欣慰的是,现在我所从事的工作是CIFRA工作的延续——嵌入式linux开发。<br /> <br />English:<br />Wednesday Sunny<br />AD August 3 2010, I had fought CIFRA(company name) for 6 years and it
2011-03-27 08:34:00
910
原创 嵌入式Web服务器软件构成与工作原理(一)
嵌入式Web服务器软件构成与工作原理(一) 嵌入式Web服务器的工作原理1、服务器软件(BOA)始终在HTTP端口守候客户端的连接请求,当客户端向服务器发起一个连接请求后,客户端和服务器之间经过“三步握手”建立起连接。2、在接收到客户端的HTTP请求消息后,服务器对消息进行解析,包括:读取请求URL、映射到对应的物理文件、区分客户端请求的资源是静态页面还是CGI应用
2011-03-21 14:25:00
7242
3
原创 只有走过的人,才知道求职道路的坎坷
中文: 只有走过的人,才知道求职道路的坎坷。有关求职过程的痛苦经历的帖子网上已经有很多了,所以我只想从以下4个方面讲讲自己是如何坚持下去的: 1、家人和朋友的支持。 2、因为长时间找不到合适的工作,人往往变得不自信了,所以我看了一些立志的书籍和帖子,其中包括:《马云是谁》和《男人的黄金时代》,n多的求职艰辛贴子,特别要指出某牛人的“失业七个月,面试六十家公司的深圳体验”。 3、学习,让自己变得充实,内容非常杂乱,包括:语言类——英语,IT技术类——BI&Data
2011-03-01 17:04:00
1696
转载 嵌入式 web 服务器 对比 报告
嵌入式web服务器对比报告现在在嵌入式设备中所使用的web服务器主要有:boa、thttpd、mini_httpd、shttpd、lighttpd、goaheand、appweb和apache等。
2011-02-12 09:11:00
3538
原创 嵌入式Linux固件升级
嵌入式Linux固件升级开发需求• 基于TCP/IP完成驱动模块和应用程序的更新、升级特殊声明该文档中驱动程序和应用程序统称为“固件”。 • 主 机:VMWare--Fedora 9• 开发板:yc2440--64MB Nandflash;Kernel:2.6.24.4• 编译器:arm-linux-gcc-4.0.0 设计原理图 说
2011-01-22 12:02:00
5605
2
原创 Fedora9 Samba 服务器的搭建
1 安装samba[root@localhost ~]# yum –y install samba ← 通过网络安装samba 2 添加samba用户(用户名称叫“samba”)[root@localhost ~]# adduser samba ← 添加用户samba(系统自动在/home下创建samba文件夹)[root@localhost ~]# smbpasswd -
2011-01-22 10:17:00
3408
原创 Sqlite3的应用
Sqlite3的应用软件环境● PC:Fedora9● 开发板:YC2440● 交叉编译器:arm-linux-gcc 3.3.2● 数据库:sqlite3.2.7● 源码:http://download.csdn.net/source/2984671 我已经上传了PC下基于sqlite3的“增删改查”的代码。所以对编译和应用不再赘述。在这里我将花更多的时间描述
2011-01-15 12:12:00
3569
4
6691_MP_Ver2162_All.exe
2015-01-02
chipgenius_setup.1402481460
2015-01-02
usboot-v1.70
2015-01-02
u-boot-1.3.1-tekkaman
2011-01-21
boa-0.94.14-0.15.rc21.fc12.x86_64 RPM
2010-11-19
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人