数据仓库的基本概念 数据仓库概念: 英文名称为Data Warehouse，可简写为DW或DWH。数据仓库的目的是*构建面向分析的集成化数据环境，为企业提供决策支持*（Decision Support）。它出于分析性报告和决策支持目的而创建。 数据仓库本身并不“生产”任何数据，同时自身也不需要“消费”任何的数据，数据来源于外部，并且开放给外部应用，这也是为什么叫“仓库”，而不叫“工厂”的原因。 基本特征: 数据仓库是*面向主题的*、*集成的*、*非易失的*和*时变的*数据集合，用以支持管理决策。 ...

本文首发于公众号：五分钟学大数据 小文件产生原因 hive 中的小文件肯定是向 hive 表中导入数据时产生，所以先看下向 hive 中导入数据的几种方式 1. 直接向表中插入数据 insert into table A values (1,'zhangsan',88),(2,'lisi',61); 这种方式每次插入时都会产生一个文件，多次插入少量数据就会出现多个小文件，但是这种方式生产环境很少使用，可以说基本没有使用的 通过load方式加载数据 load data local inpath...