Tools/EWSTools/start-queue.sh

   1 #!/bin/sh
   2 # Copyright (c) 2013 Google Inc. All rights reserved.
   3 #
   4 # Redistribution and use in source and binary forms, with or without
   5 # modification, are permitted provided that the following conditions are
   6 # met:
   7 #
   8 #     * Redistributions of source code must retain the above copyright
   9 # notice, this list of conditions and the following disclaimer.
  10 #     * Redistributions in binary form must reproduce the above
  11 # copyright notice, this list of conditions and the following disclaimer
  12 # in the documentation and/or other materials provided with the
  13 # distribution.
  14 #
  15 # THIS SOFTWARE IS PROVIDED BY THE COPYRIGHT HOLDERS AND CONTRIBUTORS
  16 # "AS IS" AND ANY EXPRESS OR IMPLIED WARRANTIES, INCLUDING, BUT NOT
  17 # LIMITED TO, THE IMPLIED WARRANTIES OF MERCHANTABILITY AND FITNESS FOR
  18 # A PARTICULAR PURPOSE ARE DISCLAIMED. IN NO EVENT SHALL THE COPYRIGHT
  19 # OWNER OR CONTRIBUTORS BE LIABLE FOR ANY DIRECT, INDIRECT, INCIDENTAL,
  20 # SPECIAL, EXEMPLARY, OR CONSEQUENTIAL DAMAGES (INCLUDING, BUT NOT
  21 # LIMITED TO, PROCUREMENT OF SUBSTITUTE GOODS OR SERVICES; LOSS OF USE,
  22 # DATA, OR PROFITS; OR BUSINESS INTERRUPTION) HOWEVER CAUSED AND ON ANY
  23 # THEORY OF LIABILITY, WHETHER IN CONTRACT, STRICT LIABILITY, OR TORT
  24 # (INCLUDING NEGLIGENCE OR OTHERWISE) ARISING IN ANY WAY OUT OF THE USE
  25 # OF THIS SOFTWARE, EVEN IF ADVISED OF THE POSSIBILITY OF SUCH DAMAGE.
  26
  27 USAGE="Usage: start-queue-loop.sh [OPTIONS] QUEUE_NAME BOT_ID RESET_AFTER_ITERATION
  28        -r RESET_SCRIPT    A bash script to be run every cycle just before the queue starts up again.
  29        -p QUEUE_PARAMS    Additional parameters to be given to the queue's execution command."
  30
  31 while getopts "r:p:" FLAG
  32 do
  33     case $FLAG in
  34     r) RESET_SCRIPT=$OPTARG;;
  35     p) QUEUE_PARAMS=$OPTARG;;
  36     esac
  37 done
  38
  39 shift $((OPTIND-1))
  40
  41 if [[ "$#" -ne 3 ]]; then
  42     echo "$USAGE"
  43     exit 1
  44 fi
  45
  46 QUEUE_NAME=$1
  47 BOT_ID=$2
  48 RESET_AFTER_ITERATION=$3
  49
  50 cd /mnt/git/webkit-$QUEUE_NAME
  51 while :
  52 do
  53     # This clears any temporary file leaks after running tests.
  54     # Not the nicest solution but it will keep the queues running instead of
  55     # filling up all remaining disk space.
  56     # NOTE: This will clear any Chromium browser temporary files running on the
  57     # machine as well. Not advised to run this while using Chrome.
  58     find /tmp -name ".org.chromium.Chromium.*" | xargs rm -rf
  59
  60     # This somewhat quirky sequence of steps seems to clear up all the broken
  61     # git situations we've gotten ourself into in the past.
  62     git clean -f -d # Remove any left-over layout test results, added files, etc.
  63     git rebase --abort # If we got killed during a git rebase, we need to clean up.
  64     git fetch origin # Avoid updating the working copy to a stale revision.
  65     git checkout origin/master -f
  66     git branch -D master
  67     git checkout origin/master -b master
  68
  69     # Most queues auto-update as part of their normal operation, but updating
  70     # here makes sure that we get the latest version of the master process.
  71     ./Tools/Scripts/update-webkit
  72
  73     # test-webkitpy has code to remove orphaned .pyc files, so we
  74     # run it before running webkit-patch to avoid stale .pyc files
  75     # preventing webkit-patch from launching.
  76     ./Tools/Scripts/test-webkitpy
  77
  78     # Run the given reset script.
  79     if [[ -n "$RESET_SCRIPT" ]]; then
  80         bash "$RESET_SCRIPT"
  81     fi
  82
  83     # We use --exit-after-iteration to pick up any changes to webkit-patch, including
  84     # changes to the committers.py file.
  85     ./Tools/Scripts/webkit-patch $QUEUE_NAME --bot-id=$BOT_ID --no-confirm --exit-after-iteration $RESET_AFTER_ITERATION $QUEUE_PARAMS
  86 done