51CTO博客开发
mvn dependency:copy-dependencies -DoutputDirectory=lib
1.官方文档：https://cwiki.apache.org/confluence/display/Hive/LanguageManual2.分区，桶：http://blog.csdn.net/wisgood/article/details/171861073.基本命令：http://hi.baidu.com/7636553/item/61d3ee1b5c27e0663f87ce373.shel
1.SequenceFile用于合并大量小文件，CombineFileInputFormat把多个文件打包到一个split,来处理大量小文件。2.避免切分：修改最小切片大小，达到需要处理的文件；或者使用FileInputFormat子类，并且覆盖isSplitable()方法。3.处理xml文档：采用避免切片的方式。用StreamXmlRecordReader来进行处理。
原文地址：http://www.cnblogs.com/ggjucheng/archive/2012/04/22/2465580.htmlhadoop对于压缩文件的支持hadoop对于压缩格式的是透明识别,我们的MapReduce任务的执行是透明的，hadoop能够自动为我们 将压缩的文件解压，而不用我们去关心。 如果我们压缩的文件有相应压缩格式的扩展名（比如lzo，gz，bzip2等），hado
原文地址：http://hadoop.apache.org/docs/r1.0.4/cn/commands_manual.html概述所有的hadoop命令均由bin/hadoop脚本引发。不指定参数运行hadoop脚本会打印所有命令的描述。用法：hadoop [--config confdir] [COMMAND] [GENERIC_OPTIONS] [COMMAND_OPTIONS]Hadoo
原文地址：http://hadoop.apache.org/docs/r1.0.4/cn/hdfs_shell.htmlFS Shell调用文件系统(FS)Shell命令应使用 bin/hadoop fs <args>的形式。 所有的的FS shell命令使用URI路径作为参数。URI格式是scheme://authority/path。对HDFS文件系统，scheme是hdfs，对本
1.计算指定日期的前一天： date -d "20110228 1 days" "+%Y%m%d"
settings.xml<?xml version="1.0" encoding="UTF-8"?> <settings xmlns="http://maven.apache.org/SETTINGS/1.0.0" xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance" xsi:schem
1.svn工程直接导出2.命令行运行mvn eclipse:myeclipse3.修改.project文件:在<buildSpec>标签增加<buildCommand> <name>org.maven.ide.eclipse.maven2Builder</name> <arguments></arguments> </b
报错原因： vmware里面的网卡设置，高级当中的mac地址与系统中默认的mac地址不同。 解决方法： 查看网卡设置当中的mac地址，找到对应/etc/udev/rules.d/70-persistent-net.rules中的第几个mac地址 &nb
记不住各种语言的语法，做个记录吧
Copyright © 2005-2025 51CTO.COM 版权所有 京ICP证060544号
