TestFileStatus.java
上传用户:quxuerui
上传日期:2018-01-08
资源大小:41811k
文件大小:5k
源码类别:

网格计算

开发平台:

Java

  1. /**
  2.  * Licensed to the Apache Software Foundation (ASF) under one
  3.  * or more contributor license agreements.  See the NOTICE file
  4.  * distributed with this work for additional information
  5.  * regarding copyright ownership.  The ASF licenses this file
  6.  * to you under the Apache License, Version 2.0 (the
  7.  * "License"); you may not use this file except in compliance
  8.  * with the License.  You may obtain a copy of the License at
  9.  *
  10.  *     http://www.apache.org/licenses/LICENSE-2.0
  11.  *
  12.  * Unless required by applicable law or agreed to in writing, software
  13.  * distributed under the License is distributed on an "AS IS" BASIS,
  14.  * WITHOUT WARRANTIES OR CONDITIONS OF ANY KIND, either express or implied.
  15.  * See the License for the specific language governing permissions and
  16.  * limitations under the License.
  17.  */
  18. package org.apache.hadoop.hdfs;
  19. import junit.framework.TestCase;
  20. import java.io.*;
  21. import java.util.Random;
  22. import org.apache.hadoop.conf.Configuration;
  23. import org.apache.hadoop.fs.FileStatus;
  24. import org.apache.hadoop.fs.FileSystem;
  25. import org.apache.hadoop.fs.Path;
  26. import org.apache.hadoop.fs.FSDataOutputStream;
  27. /**
  28.  * This class tests the FileStatus API.
  29.  */
  30. public class TestFileStatus extends TestCase {
  31.   static final long seed = 0xDEADBEEFL;
  32.   static final int blockSize = 8192;
  33.   static final int fileSize = 16384;
  34.   private static String TEST_ROOT_DIR =
  35.     new Path(System.getProperty("test.build.data","/tmp"))
  36.     .toString().replace(' ', '+');
  37.   
  38.   private void writeFile(FileSystem fileSys, Path name, int repl,
  39.                          int fileSize, int blockSize)
  40.     throws IOException {
  41.     // create and write a file that contains three blocks of data
  42.     FSDataOutputStream stm = fileSys.create(name, true,
  43.                                             fileSys.getConf().getInt("io.file.buffer.size", 4096),
  44.                                             (short)repl, (long)blockSize);
  45.     byte[] buffer = new byte[fileSize];
  46.     Random rand = new Random(seed);
  47.     rand.nextBytes(buffer);
  48.     stm.write(buffer);
  49.     stm.close();
  50.   }
  51.   private void checkFile(FileSystem fileSys, Path name, int repl)
  52.     throws IOException {
  53.     DFSTestUtil.waitReplication(fileSys, name, (short) repl);
  54.   }
  55.   /**
  56.    * Tests various options of DFSShell.
  57.    */
  58.   public void testFileStatus() throws IOException {
  59.     Configuration conf = new Configuration();
  60.     MiniDFSCluster cluster = new MiniDFSCluster(conf, 1, true, null);
  61.     FileSystem fs = cluster.getFileSystem();
  62.     DFSClient dfsClient = new DFSClient(conf);
  63.     try {
  64.       //
  65.       // check that / exists
  66.       //
  67.       Path path = new Path("/");
  68.       System.out.println("Path : "" + path.toString() + """);
  69.       System.out.println(fs.isDirectory(path));
  70.       System.out.println(fs.getFileStatus(path).isDir()); 
  71.       assertTrue("/ should be a directory", 
  72.                  fs.getFileStatus(path).isDir() == true);
  73.       
  74.       // make sure getFileInfo returns null for files which do not exist
  75.       FileStatus fileInfo = dfsClient.getFileInfo("/noSuchFile");
  76.       assertTrue(fileInfo == null);
  77.       // create a file in home directory
  78.       //
  79.       Path file1 = new Path("filestatus.dat");
  80.       writeFile(fs, file1, 1, fileSize, blockSize);
  81.       System.out.println("Created file filestatus.dat with one "
  82.                          + " replicas.");
  83.       checkFile(fs, file1, 1);
  84.       assertTrue(file1 + " should be a file", 
  85.                   fs.getFileStatus(file1).isDir() == false);
  86.       assertTrue(fs.getFileStatus(file1).getBlockSize() == blockSize);
  87.       assertTrue(fs.getFileStatus(file1).getReplication() == 1);
  88.       assertTrue(fs.getFileStatus(file1).getLen() == fileSize);
  89.       System.out.println("Path : "" + file1 + """);
  90.       // create an empty directory
  91.       //
  92.       Path parentDir = new Path("/test");
  93.       Path dir = new Path("/test/mkdirs");
  94.       assertTrue(fs.mkdirs(dir));
  95.       assertTrue(fs.exists(dir));
  96.       assertTrue(dir + " should be a directory", 
  97.                  fs.getFileStatus(path).isDir() == true);
  98.       assertTrue(dir + " should be zero size ",
  99.                  fs.getContentSummary(dir).getLength() == 0);
  100.       assertTrue(dir + " should be zero size ",
  101.                  fs.getFileStatus(dir).getLen() == 0);
  102.       System.out.println("Dir : "" + dir + """);
  103.       // create another file that is smaller than a block.
  104.       //
  105.       Path file2 = new Path("/test/mkdirs/filestatus2.dat");
  106.       writeFile(fs, file2, 1, blockSize/4, blockSize);
  107.       System.out.println("Created file filestatus2.dat with one "
  108.                          + " replicas.");
  109.       checkFile(fs, file2, 1);
  110.       System.out.println("Path : "" + file2 + """);
  111.       // verify file attributes
  112.       assertTrue(fs.getFileStatus(file2).getBlockSize() == blockSize);
  113.       assertTrue(fs.getFileStatus(file2).getReplication() == 1);
  114.       // create another file in the same directory
  115.       Path file3 = new Path("/test/mkdirs/filestatus3.dat");
  116.       writeFile(fs, file3, 1, blockSize/4, blockSize);
  117.       System.out.println("Created file filestatus3.dat with one "
  118.                          + " replicas.");
  119.       checkFile(fs, file3, 1);
  120.       // verify that the size of the directory increased by the size 
  121.       // of the two files
  122.       assertTrue(dir + " size should be " + (blockSize/2), 
  123.                  blockSize/2 == fs.getContentSummary(dir).getLength());
  124.     } finally {
  125.       fs.close();
  126.       cluster.shutdown();
  127.     }
  128.   }
  129. }