FileSplit.java
上传用户:quxuerui
上传日期:2018-01-08
资源大小:41811k
文件大小:3k
源码类别:

网格计算

开发平台:

Java

  1. /**
  2.  * Licensed to the Apache Software Foundation (ASF) under one
  3.  * or more contributor license agreements.  See the NOTICE file
  4.  * distributed with this work for additional information
  5.  * regarding copyright ownership.  The ASF licenses this file
  6.  * to you under the Apache License, Version 2.0 (the
  7.  * "License"); you may not use this file except in compliance
  8.  * with the License.  You may obtain a copy of the License at
  9.  *
  10.  *     http://www.apache.org/licenses/LICENSE-2.0
  11.  *
  12.  * Unless required by applicable law or agreed to in writing, software
  13.  * distributed under the License is distributed on an "AS IS" BASIS,
  14.  * WITHOUT WARRANTIES OR CONDITIONS OF ANY KIND, either express or implied.
  15.  * See the License for the specific language governing permissions and
  16.  * limitations under the License.
  17.  */
  18. package org.apache.hadoop.mapred;
  19. import java.io.IOException;
  20. import java.io.DataInput;
  21. import java.io.DataOutput;
  22. import org.apache.hadoop.io.UTF8;
  23. import org.apache.hadoop.fs.Path;
  24. /** A section of an input file.  Returned by {@link
  25.  * InputFormat#getSplits(JobConf, int)} and passed to
  26.  * {@link InputFormat#getRecordReader(InputSplit,JobConf,Reporter)}. 
  27.  * @deprecated Use {@link org.apache.hadoop.mapreduce.lib.input.FileSplit}
  28.  *  instead.
  29.  */
  30. @Deprecated
  31. public class FileSplit extends org.apache.hadoop.mapreduce.InputSplit 
  32.                        implements InputSplit {
  33.   private Path file;
  34.   private long start;
  35.   private long length;
  36.   private String[] hosts;
  37.   
  38.   FileSplit() {}
  39.   /** Constructs a split.
  40.    * @deprecated
  41.    * @param file the file name
  42.    * @param start the position of the first byte in the file to process
  43.    * @param length the number of bytes in the file to process
  44.    */
  45.   @Deprecated
  46.   public FileSplit(Path file, long start, long length, JobConf conf) {
  47.     this(file, start, length, (String[])null);
  48.   }
  49.   /** Constructs a split with host information
  50.    *
  51.    * @param file the file name
  52.    * @param start the position of the first byte in the file to process
  53.    * @param length the number of bytes in the file to process
  54.    * @param hosts the list of hosts containing the block, possibly null
  55.    */
  56.   public FileSplit(Path file, long start, long length, String[] hosts) {
  57.     this.file = file;
  58.     this.start = start;
  59.     this.length = length;
  60.     this.hosts = hosts;
  61.   }
  62.   /** The file containing this split's data. */
  63.   public Path getPath() { return file; }
  64.   
  65.   /** The position of the first byte in the file to process. */
  66.   public long getStart() { return start; }
  67.   
  68.   /** The number of bytes in the file to process. */
  69.   public long getLength() { return length; }
  70.   public String toString() { return file + ":" + start + "+" + length; }
  71.   ////////////////////////////////////////////
  72.   // Writable methods
  73.   ////////////////////////////////////////////
  74.   public void write(DataOutput out) throws IOException {
  75.     UTF8.writeString(out, file.toString());
  76.     out.writeLong(start);
  77.     out.writeLong(length);
  78.   }
  79.   public void readFields(DataInput in) throws IOException {
  80.     file = new Path(UTF8.readString(in));
  81.     start = in.readLong();
  82.     length = in.readLong();
  83.     hosts = null;
  84.   }
  85.   public String[] getLocations() throws IOException {
  86.     if (this.hosts == null) {
  87.       return new String[]{};
  88.     } else {
  89.       return this.hosts;
  90.     }
  91.   }
  92.   
  93. }