hadoop-daemon.sh
上传用户:quxuerui
上传日期:2018-01-08
资源大小:41811k
文件大小:4k
源码类别:

网格计算

开发平台:

Java

  1. #!/usr/bin/env bash
  2. # Licensed to the Apache Software Foundation (ASF) under one or more
  3. # contributor license agreements.  See the NOTICE file distributed with
  4. # this work for additional information regarding copyright ownership.
  5. # The ASF licenses this file to You under the Apache License, Version 2.0
  6. # (the "License"); you may not use this file except in compliance with
  7. # the License.  You may obtain a copy of the License at
  8. #
  9. #     http://www.apache.org/licenses/LICENSE-2.0
  10. #
  11. # Unless required by applicable law or agreed to in writing, software
  12. # distributed under the License is distributed on an "AS IS" BASIS,
  13. # WITHOUT WARRANTIES OR CONDITIONS OF ANY KIND, either express or implied.
  14. # See the License for the specific language governing permissions and
  15. # limitations under the License.
  16. # Runs a Hadoop command as a daemon.
  17. #
  18. # Environment Variables
  19. #
  20. #   HADOOP_CONF_DIR  Alternate conf dir. Default is ${HADOOP_HOME}/conf.
  21. #   HADOOP_LOG_DIR   Where log files are stored.  PWD by default.
  22. #   HADOOP_MASTER    host:path where hadoop code should be rsync'd from
  23. #   HADOOP_PID_DIR   The pid files are stored. /tmp by default.
  24. #   HADOOP_IDENT_STRING   A string representing this instance of hadoop. $USER by default
  25. #   HADOOP_NICENESS The scheduling priority for daemons. Defaults to 0.
  26. ##
  27. usage="Usage: hadoop-daemon.sh [--config <conf-dir>] [--hosts hostlistfile] (start|stop) <hadoop-command> <args...>"
  28. # if no args specified, show usage
  29. if [ $# -le 1 ]; then
  30.   echo $usage
  31.   exit 1
  32. fi
  33. bin=`dirname "$0"`
  34. bin=`cd "$bin"; pwd`
  35. . "$bin"/hadoop-config.sh
  36. # get arguments
  37. startStop=$1
  38. shift
  39. command=$1
  40. shift
  41. hadoop_rotate_log ()
  42. {
  43.     log=$1;
  44.     num=5;
  45.     if [ -n "$2" ]; then
  46. num=$2
  47.     fi
  48.     if [ -f "$log" ]; then # rotate logs
  49. while [ $num -gt 1 ]; do
  50.     prev=`expr $num - 1`
  51.     [ -f "$log.$prev" ] && mv "$log.$prev" "$log.$num"
  52.     num=$prev
  53. done
  54. mv "$log" "$log.$num";
  55.     fi
  56. }
  57. if [ -f "${HADOOP_CONF_DIR}/hadoop-env.sh" ]; then
  58.   . "${HADOOP_CONF_DIR}/hadoop-env.sh"
  59. fi
  60. # get log directory
  61. if [ "$HADOOP_LOG_DIR" = "" ]; then
  62.   export HADOOP_LOG_DIR="$HADOOP_HOME/logs"
  63. fi
  64. mkdir -p "$HADOOP_LOG_DIR"
  65. if [ "$HADOOP_PID_DIR" = "" ]; then
  66.   HADOOP_PID_DIR=/tmp
  67. fi
  68. if [ "$HADOOP_IDENT_STRING" = "" ]; then
  69.   export HADOOP_IDENT_STRING="$USER"
  70. fi
  71. # some variables
  72. export HADOOP_LOGFILE=hadoop-$HADOOP_IDENT_STRING-$command-$HOSTNAME.log
  73. export HADOOP_ROOT_LOGGER="INFO,DRFA"
  74. log=$HADOOP_LOG_DIR/hadoop-$HADOOP_IDENT_STRING-$command-$HOSTNAME.out
  75. pid=$HADOOP_PID_DIR/hadoop-$HADOOP_IDENT_STRING-$command.pid
  76. # Set default scheduling priority
  77. if [ "$HADOOP_NICENESS" = "" ]; then
  78.     export HADOOP_NICENESS=0
  79. fi
  80. case $startStop in
  81.   (start)
  82.     mkdir -p "$HADOOP_PID_DIR"
  83.     if [ -f $pid ]; then
  84.       if kill -0 `cat $pid` > /dev/null 2>&1; then
  85.         echo $command running as process `cat $pid`.  Stop it first.
  86.         exit 1
  87.       fi
  88.     fi
  89.     if [ "$HADOOP_MASTER" != "" ]; then
  90.       echo rsync from $HADOOP_MASTER
  91.       rsync -a -e ssh --delete --exclude=.svn --exclude='logs/*' --exclude='contrib/hod/logs/*' $HADOOP_MASTER/ "$HADOOP_HOME"
  92.     fi
  93.     hadoop_rotate_log $log
  94.     echo starting $command, logging to $log
  95.     cd "$HADOOP_HOME"
  96.     nohup nice -n $HADOOP_NICENESS "$HADOOP_HOME"/bin/hadoop --config $HADOOP_CONF_DIR $command "$@" > "$log" 2>&1 < /dev/null &
  97.     echo $! > $pid
  98.     sleep 1; head "$log"
  99.     ;;
  100.           
  101.   (stop)
  102.     if [ -f $pid ]; then
  103.       if kill -0 `cat $pid` > /dev/null 2>&1; then
  104.         echo stopping $command
  105.         kill `cat $pid`
  106.       else
  107.         echo no $command to stop
  108.       fi
  109.     else
  110.       echo no $command to stop
  111.     fi
  112.     ;;
  113.   (*)
  114.     echo $usage
  115.     exit 1
  116.     ;;
  117. esac