ITeye博客

rq2_79

rq2_79 · 共 119 篇文章

文本文件导入到Hbase中

创建表 sudo su - su - hadoop ./hbase shell create 'table1',{NAME => 'DF', VERSIONS => 5} 配置环境 1.修改hadoop环境 vi /opt/hadoop-1.0.0/conf/hadoop-env.sh 增加如下信息 export HBASE_HOME=/opt/hbase-0.92.0 export HADOOP_CLASSPATH=$HBASE_HOME/hbase-0.92.0.jar:$HBASE_HOME/hbase-0.92.0-test.jar:$HBASE_HOME/conf:${HBASE_…

2013-02-21 10:00 · Hbase · 评论(0)

spring security2

<?xml version="1.0" encoding="UTF-8" ?> - <beans:beans xmlns="http://www.springframework.org/schema/security" xmlns:beans="http://www.springframework.org/schema/beans" xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance" xsi:schemaLocation="http://www.springframework.org/schema/beans http://www.sp…

2012-07-15 09:44 · spring · 评论(0)

不选择使用Lucene的6大原因

Lucene是开放源代码的全文搜索引擎工具包,凭借着其强劲的搜索功能和简单易用的实现,在国内已经很普及,甚至一度出现了言搜索必称Lucene的盛 景。上个月Lucene的开发团队发布了 Java Lucene 2.3.1 ,相信很多朋友们都用上了。在国内对Lucene的介绍可以分为3块儿: 第一类是:以车东 的Lucene:基于Java的全文检索引擎简介 为代表的基础入门介绍; 第二类是Lucene倒排索引原理和Lucene软件包、实现类的介绍; 第三类是以中文分词为中心的介绍; 任何一个软件,包括所有伟大的软件都有这样或者那样的“缺点”和各自适用的领域,Lucene也不例外。在国内对Luc…

2012-06-27 09:51 · lucene · 评论(0)

Solr性能调优

Schema Design Considerations indexed fields indexed fields 的数量将会影响以下的一些性能: 索引时的时候的内存使用量 索引段的合并时间 优化时间 索引的大小 我们可以通过 将 omitNorms=“true” 来减少indexed fields数量增加所带来的影响。 stored fields Retrieving the stored fields 确实是一种开销。这个开销,受每个文档所存储的字节影响很大。每个文档的所占用的空间越大,文档就显的更稀疏,这样从硬盘中读取数据,就需要更多的i/o操作(通常,我们在存储比较大的域的时候,就…

2012-06-27 09:47 · lucene · 评论(0)

Java线程:线程状态的转换

http://lavasoft.blog.51cto.com/62575/27069 一、线程状态 线程的状态转换是线程控制的基础。线程状态总的可分为五大状态:分别是生、死、可运行、运行、等待/阻塞。用一个图来描述如下: 1、新状态:线程对象已经创建,还没有在其上调用start()方法。 2、可运行状态:当线程有资格运行,但调度程序还没有把它选定为运行线程时线程所处的状态。当start()方法调用时,线程首先进入可运行状态。在线程运行之后或者从阻塞、等待或睡眠状态回来后,也返回到可运行状态。 3、运行状态:线程调度程序从可运行池中选择一个线程作为当前线程时线程所处的状态。这也是线程进入运行状…

2012-03-14 19:45 · java · 评论(0)

GREENPLUM介绍之数据库管理(四)-创建数据库和用户管理

GREENPLUM与ORACLE一样有着完全独立于操作系统的用户 管理 系统,以及权限管理系统。首先我们介绍一下GP中的 数据库 。 在GP初始化系统后,GP会自动创建出三个数据库postgre,template0,template1. 其中postgre用作系统内部数据的存放,我们既不要删除它,也不要修改它。template1是系统默认的数据,我们创建数据库时可以以 template1为模板,创建新的数据库。所以,如果有不希望其它数据库继承的对象,就不要在数据库template1中进行创建。GP中创建数据库的 语法非常简单,句法如下 CREATE DATABASE newname USIN…

2012-02-20 17:57 · GREENPLUM · 评论(0)

GREENPLUM介绍之数据库管理---创建表

与其它关系型 数据库 一样,二维表同样是GP中最重要的存储数据对象。只不过为了更好的支持数据仓库海量数据的访问,GP在表这个层面为我们提供了更多更好的选项。 从数据存储方式上看,GP的表可以分成面向行存储的普通堆积表 和面向列存储的AOT表 (APPEND ONLY TABLE)(当然AOT表也可以是按行存储的,但是按列存储必须是AOT表)。 这样,我们在设计应用上可以获得相当的灵活性。比如经常需要更新的数据,或者较小的维度数据,应该使用普通堆积表存储 。下面是两个创建普通堆积表的例子。 例子一 CREATE TABLE SALES (PROD_ID numeric NOT NULL , C…

2012-02-20 17:28 · GREENPLUM · 评论(0)

深入探索 高效的Java异常处理框架

摘要:本文从Java异常最基本的概念、语法开始讲述了Java异常处理的基本知识,分析了Java异常体系结构,对比Spring的异常处理框 架,阐述了异常处理的基本原则。并且作者提出了自己处理一个大型应用系统异常的思想,并通过设计一个异常处理的框架来论述此思想。 一、 异常的概念和Java异常体系结构 异常是程序运行过程中出现的错误。本文主要讲授的是Java语言的异常处理。Java语言的异常处理框架,是Java语言健壮性的一个重要体现。 Java把异常当作对象来处理,并定义一个基类java.lang.Throwable作为所有异常的超类。在Java API中已经定义了许多异常类,这些异常类分为…

2012-02-16 18:04 · java · 评论(0)

spring ioc原理

最近,买了本Spring入门书:spring In Action 。大致浏览了下感觉还不错。就是入门了点。Manning的书还是不错的,我虽然不像哪些只看Manning书的人那样专注于Manning,但怀着崇敬 的心情和激情通览了一遍。又一次接受了IOC 、DI、AOP等Spring核心概念。 先就IOC和DI谈一点我的看法。 IOC(DI): 其实这个Spring架构核心的概念没有这么复杂,更不像有些书上描述的那样晦涩。java程序员都知道:java程序中的每个业务逻辑至少需要两个或以 上的对象来协作完成,通常,每个对象在使用他的合作对象时,自己均要使用像new object() 这样的语…

2012-02-05 21:24 · java · 评论(0)

JAVA IO 设计模式彻底分析

一。引子(概括地介绍Java的IO) 无论是哪种编程语言,输入跟输出都是重要的一部分,Java也不例外,而且Java将输入/输出的功能和使用范畴做了很大的扩充。它采用了流的 机制来实现输入/输出,所谓流,就是数据的有序排列,而流可以是从某个源(称为流源或Source of Stream)出来,到某个目的地(称为流汇或Sink of Stream)去的。由流的方向,可以分成输入流和输出流,一个程序从输入流读取数据向输出流写数据。 如,一个程序可以用FileInputStream类从一个磁盘文件读取数据,如下图所示: 像FileInputStream这样的处理器叫做流处理器,它就像流的管道一样,…

2012-02-05 15:15 · java · 评论(0)

JAVA集合小结

AVA集合小结 下面是我自己画的,关系画得没上面好,但我自己看着清楚些 还有一张下载来的: 有序否 允许元素重复否 Collection 否 是 List 是 是 Set AbstractSet 否 否 HashSet TreeSet 是(用二叉树排序) Map AbstractMap 否 使用 key-value 来映射和存储数据, Key 必须惟一, value 可以重复 HashMap TreeMap 是(用二叉树排序) 几个面试常见问题: 1.Q:ArrayList和Vector有什么区别?HashMap和HashTable有什么区别? A:Vector和HashTable是线程同步…

2012-02-05 15:03 · java · 评论(0)

JVM加载Class过程分析

我们知道, JVM是通过调用一个 Class类得 main方法来进入一个类得,这个 main方法必须是 public、 static、 void修饰的。但是在这之前, JVM还需要做一系列的准备工作。在这节里,我们分析一个 Java类是如何被 JVM加载运行的。 JVM要调用一个类里的方法需要经过以下几个步骤:类装载、链接、初始化。 1 类装载: JVM通过类得全限定名(包命 +类名)找到类的 .class文件。然后把这个 .class文件加载进来,这个过程需要通过 ClassLoader来实现。 JVM的类加载系统结构如下 (图 :1-1): Boostrap ClassLoader:启动…

2012-02-05 13:45 · java · 评论(1)

hadoop-0.23.0 安装

1.tar -zxvf hadoop-0.23.0.tar.gz 2.安装jdk: chmod 755 jdk-6u27-linux-x64-rpm.bin ./jdk-6u27-linux-x64-rpm.bin 3.配置: vi hadoop-0.23.0/config/yarn-env.sh 增加 export JAVA_HOME=/usr/java/jdk1.6.0_27/ export HADOOP_DEV_HOME=/opt/hadoop-0.23.0 export HADOOP_MAPRED_HOME=${HADOOP_DEV_HOME} export HADOOP_COMMO…

2011-12-13 09:33 · Hadoop · 评论(0)

交房文件

1、 住宅交付使用许可证 2、 注销抵押证明(宝201011003675)和(宝201011012363)两份抵押 3、 缴纳物业维修基金的凭证 4、 新建住宅质量保证书(带走) 5、 新建住宅使用说明书(带走) 6、 上海市房屋建筑面积测绘报告

2011-11-25 12:57 · 评论(0)

在实践中使用Jstat监控gc情况

性能测试过程中,我们该如何监控java虚拟机内存的使用情况,用以判断JVM是否存在内存问题呢?如何判断JVM垃圾回收是否正常?一般的top指令基本上满足不了这样的需求,因为它主要监控的是总体的系统资源,很难定位到java应用程序。 在项目实践过程中,我们探索和使用了一款新工具--Jstat。 先秀一下。Jstat是JDK自带的一个轻量级小工具。全称“Java Virtual Machine statistics monitoring tool”,它位于java的bin目录下,主要利用JVM内建的指令对Java应用程序的资源和性能进行实时的命令行的监控,包括了对Heap size和垃圾回收状况…

2011-11-10 15:49 · java · 评论(0)