博客虫资料分享第四期《DM推荐系统》

作者: blogchong | 分类: 原创-博客虫资料分享 | 评论:0人 | 浏览:

博客虫资料分享第四波来袭,主要是数据挖掘领域中占据很高地位的推荐系统相关资料。

博客虫资料分享主要是分享前沿IT领域的相关资料、高清PDF文档、书籍。站长收集,绝对精品!

More...

Quartz实例:quartz定时任务代码示例

作者: blogchong | 分类: 原创-其他技术类 | 评论:2人 | 浏览:

quartz定时任务调度框架,使用实例。

Job类://即实际调度任务实现

package net.csdn.edm.util.quartz;

import java.util.HashMap;
import java.util.Map;
import net.csdn.common.logging.CSLogger;
import net.csdn.common.logging.Loggers;
import org.quartz.Job;
import org.quartz.JobDataMap;
import org.quartz.JobExecutionContext;
import org.quartz.JobExecutionException;

/**
 * @author:blogchong
 * @blog: http://www.blogchong.com/
 * @Version:1.0
 * @CreateTime:2014年12月30日 下午3:27:02
 * @Description:定时进度job
 */

public class QuartzJob implements Job {

	protected CSLogger logger = Loggers.getLogger(QuartzJob.class);

	@SuppressWarnings("static-access")
	public void execute(JobExecutionContext arg0) throws JobExecutionException {

		// 接收参数
		JobDataMap jobDataMap = arg0.getJobDetail().getJobDataMap();
		
		//通过这种方式,传递参数
		String taskId = jobDataMap.getString("taskId");
		
		//具体的定时任务实现,在这里实现即可
                //具体实现略过
	}
}

添加Job类:

More...

mac os 配置 storm+kafka+zookeeper配置

作者: EXEC | 分类: 原创-Storm实时处理 | 评论:0人 | 浏览:

首先确定由jdk scala环境

JAVA_HOME=/System/Library/Frameworks/JavaVM.framework/Versions/CurrentJDK/Home
export PATH=${PATH}:${JAVA_HOME}/bin
SCALA_HOME=/Users/luping/develop/dev/scala-2.10.3
export PATH=${PATH}:${SCALA_HOME}/bin

zookeeper

More...

Hive UDF实例--过滤字符串首尾字符

作者: blogchong | 分类: 原创-Hadoop大数据 | 评论:0人 | 浏览:

Hive UDF实例--过滤字符串首尾字符.

源码如下:

package com.hive.udf;  
  
import org.apache.commons.lang.StringUtils;  
import org.apache.hadoop.hive.ql.exec.UDF;  
import org.apache.hadoop.io.Text;  
  
public class Trim extends UDF {  
    private Text res = new Text();  
  
    public Text evaluate(String str) {  
  
        if (str == null) {  
            return null;  
        }  
        res.set(StringUtils.strip(str.toString()));  
  
        return res;  
    }  
      
    public Text evaluate(Text str,String stripChars){  
        if (str == null) {  
            return null;  
        }  
          
        res.set(StringUtils.strip(str.toString(),stripChars));  
        return res;  
          
    }  
}

编写完代码之后,导出jar包。

More...

博客虫资料分享第三期《2013-2014BDTC》

作者: blogchong | 分类: 原创-博客虫资料分享 | 评论:0人 | 浏览:

博客虫资料分享第三波来袭,主要是前上两个星期前的2014BDTC(大数据大会)的PPT资料,此外顺便也把2013年的部分资料一起打包,需要的拿去~~

More...

Redis集群部署以及主从配置

作者: blogchong | 分类: 原创-NoSql | 评论:0人 | 浏览:

Redis简介

这里就直接略过了,可参Redis介绍以及安装部署配置

More...

项目需求分析出发点

作者: blogchong | 分类: 原创-经验之谈 | 评论:0人 | 浏览:

今天的话题是项目需求分析,不是广义上的项目需求分析,单纯从互联网项目开发需求来讲,只是针对技术开发,没有复杂的架构,只从思考点出发:

1、项目动手前,分析出核心功能点是什么?

More...