- 博客(12)
- 资源 (2)
- 收藏
- 关注
RSS订阅转载 BCP和BULK INSERT比较
经过比较bulk insert 效率更高BCP运行的SQL:insert bulk test.[dbo].tb1([ContractNumber] varchar(20) collate Chinese_PRC_CI_AS,[DeptType] int,[CategoryItemCode] varchar(4) collate Chinese_PRC_CI_AS,[DeptCo
2015-01-30 15:48:39
665
转载 Oozie-3.3.2安装配置运行实践
Oozie是一个开源的工作流调度系统，它能够管理逻辑复杂的多个Hadoop作业，按照指定的顺序将其协同运行起来。例如，我们可能有这样一个需求，某个业务系统每天产生20G原始数据，我们每天都要对其进行处理，处理步骤如下所示：通过Hadoop先将原始数据同步到HDFS上；借助MapReduce计算框架对原始数据进行转换，生成的数据以分区表的形式存储到多张Hive表中；需要对Hive
2015-01-08 09:02:05
451
转载 Oozie工作流程定义详解
Oozie工作流程定义详解 2014-03-04 19:21:02 YanjunOozie工作流程定义是一个DAG（Directed Acyclical Graphs）图，它由控制流节点（Control Flow Nodes）或动作节点（Action Nodes）组成，各个节点又是通过表征转移的箭线（transitionsarrows）互相连通。对于工作流一般对应存在流程
2015-01-08 09:00:08
567
翻译 SYBASE IQ LOAD DATA
LOAD TABLE 语句说明将数据从外部 ASCII 格式文件导入数据库表。语法LOAD [ INTO ] TABLE [ owner ].table-name... ( load-specification [, ...] )... FROM { 'filename-string' | filename-variable } [, ...]... [ CHECK CONSTRAINT
2015-01-06 10:09:19
612
原创 java md5 加密解密
import java.security.*; import java.security.spec.*; class MD5_test { public final static String MD5(String s) { char hexDigits[] = { '0', '1', '2', '3', '4', '5', '6', '7', '8', '9',
2014-12-31 13:47:14
381
转载 思科持续发展的绝招
思科上市后，两个创始人马上成了亿万富翁。思科今天的股价，是上市时的500倍。它早期的员工，只要在理财上不要太冒险，也都成了千万富翁或百万富翁。这些人在富有了以后很多会选择离开公司去创业或者干脆退休。事实上，思科的两个创始人自己也选择了这条路，他们离开了公司。一个成功的公司，早期员工是非常宝贵的财富。他们一般是一些非常爱冒险愿意承担风险的人，否则他们不会选择加入新开办升值还是没有收入盈利的小公司
2014-12-30 15:57:38
672
原创 猜字游戏 算法
需求。 随机给出 N 个 字符位 *******， 通过程序来猜正确的单词。算法基本思想step 1:获得需要猜的词 result : *****step 2:根据 ***** 从词库列表中正则匹配 result : 得出列表结果A step 3: 从结果A中统计出现次数最多的一个字母且排除猜过的词
2014-12-19 17:21:48
701
转载 Hadoop，HBase，Storm，Spark到底是什么？
Hadoop，HBase，Storm，Spark到底是什么？Hadoop=HDFS+Hive+Pig+...HDFS: 存储系统MapReduce：计算系统Hive：提供给SQL开发人员（通过HiveQL）的MapReduce，基于Hadoop的数据仓库框架Pig：基于Hadoop的语言开发的HBase:NoSQL数据库Flume：一个收集处理Hadoop数据的框架
2014-12-11 13:09:27
397
原创 JAVA 繁体 转 简体 简体转翻译 繁体简体互转
package chineseConvert;import java.util.Arrays;public class ChangeCode{ public final static String simpleChar = "丢并干夫布占畲来局俣系幸咱杰备效家雇当尽罗攒凶兑内册幂涂渎处别剥铲札胜绩匀汇奁椟恤咤吴唣念问衔岩尝恶苏回囱国垧埯采执阶尧报碱茔尘砖硗寿梦姗娱淫袅
2014-12-11 10:03:54
2169
原创 基于协同过滤思想的 道具推荐引擎 算法设计
道具推荐引擎算法设计 1. 统计每个用户的道具使用量数据格式如下 用户名: 道具A,消费量道具B,消费量道具C,消费量以此类推 2. 统计道具两两组和出现的概率ABCDEFGH主道具附道具
2014-12-10 09:35:16
428
原创 深入理解 spark api --- Aggregate
Deep understand Aggregate funcation of Spark API val z = sc.parallelize(List("a","b","c","d","e","f"), 3)println("result:"+z.aggregate("X")((x,y)=> "1"+x+y ,(x,y)=>"2"+ x+y)) step 1
2014-12-09 08:55:54
469
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人