-- 查询具体表的分区目录 select t1.NAME, t2.TBL_NAME,t4.PART_NAME, t3.LOCATION from DBS t1, TBLS t2 , SDS t3 ,PARTITIONSt4 where t1.DB_ID=t2.DB_IDand t4.SD_ID = t3.SD_ID AND t2.TBL_ID = t4.TBL_ID and t1.NAME` =‘数据库名‘AND t2.TBL_NAME like‘表名‘UNION-- 查询具体表的目录select t1.NAME, t2.TBL_NAME,‘null‘, t3.LOCATION from DBS t1, TBLS t2 , SDS t3 where t1.DB_ID=t2.DB_IDand t2.SD_ID = t3.SD_ID...
合并元数据 如同ProtocolBuffer，Avro，Thrift一样，Parquet也是支持元数据合并的。用户可以在一开始就定义一个简单的元数据，然后随着业务需要，逐渐往元数据中添加更多的列。在这种情况下，用户可能会创建多个Parquet文件，有着多个不同的但是却互相兼容的元数据。Parquet数据源支持自动推断出这种情况，并且进行多个Parquet文件的元数据的合并。 因为元数据合并是一种相对耗时的操作，而且在大多数情况下不是一种必要的特性，从...
ResultSet. 1.2 可滚动的ResultSet类型 1.3 可更新的ResultSet 1.4 可保持的ResultSet 2:PrepareStatement 2.1: 基本操作 2.2 复用pststemetn 2.3 性能分析 3:执行批量SQL 3.1: statemet 方式 3.2: preparedstatement 方式 4: 事物transaction 4.1 基本处理 4.2 断点事物处理 6 元数据类型 6.1 DatabaseMetaData 数据库元数据 在表中列出列 getColumS() 主键信息 6.2 ParameterMetaData 参数元数据类型 6.3 ResultSetMetaData 结果...
深蓝的blog：http://blog.csdn.net/huangyanlong/article/details/46117065 【目标】 利用kettle中的资源库功能，把ktr文件统一存储到数据库中，方便本地进行版本管理 ktr：使用kettle编辑的转换，被称为ktr； 转换：添加功能模块，实现ETL的项目称为转换。 一路确定后，点击ok完成资源库的创建，如下：创建完成后，先进资源库看一眼效果，如下图：可以对资源库进行设置及创建目录，如下：下面往资源库里添加一个ktr，如下：设计...
客户端写操作1）客户端请求上传数据到服务器 2）服务器接收到这个请求，然后到自己的元数据里面去查询，元数据中是否记录了该文件的存在 3）NN响应客户端是否可以上传 4）服务器会发送再次请求，需要上传多大的数据文件 5）服务器会检查DataNode的信息 6）服务器会根据上传文件大小进行调度，调度出最合适的DataNode队列返回给客户端 【每隔3秒钟，DataNode都会向NN发送一个数据，DN的状态和可用空间】 7）告诉DN需要上传数据 8）客...