modules/roles/files/static-mirroring/staticsync-ssh-wrap

   1 #!/bin/bash
   2
   3 # Copyright (c) 2009, 2010, 2012 Peter Palfrader
   4 #
   5 # Permission is hereby granted, free of charge, to any person obtaining
   6 # a copy of this software and associated documentation files (the
   7 # "Software"), to deal in the Software without restriction, including
   8 # without limitation the rights to use, copy, modify, merge, publish,
   9 # distribute, sublicense, and/or sell copies of the Software, and to
  10 # permit persons to whom the Software is furnished to do so, subject to
  11 # the following conditions:
  12 #
  13 # The above copyright notice and this permission notice shall be
  14 # included in all copies or substantial portions of the Software.
  15 #
  16 # THE SOFTWARE IS PROVIDED "AS IS", WITHOUT WARRANTY OF ANY KIND,
  17 # EXPRESS OR IMPLIED, INCLUDING BUT NOT LIMITED TO THE WARRANTIES OF
  18 # MERCHANTABILITY, FITNESS FOR A PARTICULAR PURPOSE AND
  19 # NONINFRINGEMENT. IN NO EVENT SHALL THE AUTHORS OR COPYRIGHT HOLDERS BE
  20 # LIABLE FOR ANY CLAIM, DAMAGES OR OTHER LIABILITY, WHETHER IN AN ACTION
  21 # OF CONTRACT, TORT OR OTHERWISE, ARISING FROM, OUT OF OR IN CONNECTION
  22 # WITH THE SOFTWARE OR THE USE OR OTHER DEALINGS IN THE SOFTWARE.
  23
  24 set -e
  25 set -u
  26
  27 MYLOGNAME="`basename "$0"`[$$]"
  28 BASEDIR="/srv/static.debian.org"
  29 COMPONENTLIST=/etc/static-components.conf
  30
  31 usage() {
  32         echo "local Usage: $0 <host>"
  33         echo "via ssh orig command:"
  34         echo "                      mirror <component> <serial>"
  35         echo "                      rsync <stuff>"
  36         echo "                      static-master-update-component <component>"
  37 }
  38
  39 one_more_arg() {
  40         if [ "$#" -lt 1 ]; then
  41                 usage >&2
  42                 exit 1
  43         fi
  44 }
  45
  46 info() {
  47         logger -p daemon.info -t "$MYLOGNAME" "$1"
  48 }
  49
  50 croak() {
  51         logger -s -p daemon.warn -t "$MYLOGNAME" "$1"
  52         exit 1
  53 }
  54
  55 do_mirror() {
  56         local remote_host="$1"; shift
  57         one_more_arg "$@"
  58         local component="$1"; shift
  59         one_more_arg "$@"
  60         local serial="$1"; shift
  61
  62         masterhost="$(awk -v component="$component" '!/^ *(#|$)/ && $2 == component {print $1; exit}' "$COMPONENTLIST")"
  63         if [ -z "$masterhost" ]; then
  64                 croak "Did not find master for component $component."
  65         elif [ "$masterhost" != "$remote_host" ]; then
  66                 croak "$remote_host is not master for $component."
  67         else
  68                 info "Host $remote_host triggered a mirror run for $component, serial $serial"
  69                 exec /usr/local/bin/static-mirror-run "$BASEDIR/mirrors/$component" "$remote_host:$component/-new-" "$serial"
  70                 echo >&2 "Exec failed"
  71                 croak "exec failed"
  72         fi
  73 }
  74
  75 do_rsync_on_master() {
  76         local remote_host="$1"; shift
  77         local args="--server --sender -vlHtrze.iLsf --safe-links ."
  78
  79         for component in $(awk -v this_host="$(hostname -f)" '!/^ *(#|$)/ && $1 == this_host {print $2}' $COMPONENTLIST); do
  80                 if [ "$*" = "$args $component/-new-/" ] || [ "$*" = "$args ./$component/-new-/" ] ; then
  81                         local path="$BASEDIR/master/$component-current-push"
  82                         info "serving $remote_host with $path"
  83                         exec rsync $args "$path/."
  84                         croak "Exec failed"
  85                 elif [ "$*" = "$args $component/-live-/" ] || [ "$*" = "$args ./$component/-live-/" ] ; then
  86                         local path="$BASEDIR/master/$component-current-live"
  87                         info "host $remote_host wants $path, acquiring lock"
  88                         exec 200< "$path"
  89                         if ! flock -s -w 0 200; then
  90                         echo >&2 "Cannot acquire shared lock on $path - this should mean an update is already underway anyway."
  91                         exit 1
  92                         fi
  93                         exec rsync $args "$path/."
  94                         croak "Exec failed"
  95                 fi
  96         done
  97 }
  98
  99 do_rsync_on_source() {
 100         local remote_host="$1"
 101         shift
 102
 103         local allowed_rsyncs
 104         allowed_rsyncs=()
 105
 106         if [ -e "$COMPONENTLIST" ]; then
 107                 for path in $(awk -v host="$(hostname -f)" '!/^ *(#|$)/ && $3 == host {print $4}' $COMPONENTLIST); do
 108                         allowed_rsyncs+=("--server --sender -lHtrze.iLsf --safe-links . $path/.") # wheezy
 109                         allowed_rsyncs+=("--server --sender -lHtrze.iLsfx --safe-links . $path/.") # jessie
 110                 done
 111         fi
 112         for cmd_idx in ${!allowed_rsyncs[*]}; do
 113                 allowed="${allowed_rsyncs[$cmd_idx]}"
 114                 if [ "$*" = "$allowed" ]; then
 115                         info "Running for host $remote_host: rsync $*"
 116                         exec rsync "$@"
 117                         croak "Exec failed"
 118                 fi
 119         done
 120 }
 121
 122 do_rsync() {
 123         do_rsync_on_master "$@"
 124         do_rsync_on_source "$@"
 125
 126         info "NOT allowed for $remote_host: rsync $*"
 127         echo >&2 "This rsync command ($@) not allowed."
 128         exit 1
 129 }
 130
 131 do_update_component() {
 132         local remote_host="$1"; shift
 133
 134         one_more_arg "$@"
 135         component="$1"
 136         shift
 137
 138         hit="$(
 139                 awk -v this_host="$(hostname -f)" -v component="$component" -v host="$remote_host" '
 140                         !/^ *(#|$)/ && $1 == this_host && $2 == component {
 141                                 if ($3 == host) {
 142                                         print $4
 143                                         exit
 144                                 }
 145                                 split($5,extra,",")
 146                                 for (i in extra) {
 147                                         if (host == extra[i]) {
 148                                                 printf "%s:%s\n", $3, $4
 149                                                 exit
 150                                         }
 151                                 }
 152                                 exit
 153                         }' "$COMPONENTLIST"
 154                 )"
 155         if [ -n "$hit" ]; then
 156                 exec static-master-update-component "$component"
 157                 echo >&2 "Exec failed"
 158                 croak "exec failed"
 159         else
 160                 info "Not whitelisted: $remote_host update $component"
 161                 echo >&2 "Not whitelisted: $remote_host update $component"
 162                 exit 1
 163         fi
 164 }
 165
 166
 167 if [ "${1:-}" = "-h" ] || [ "${1:-}" = "--help" ]; then
 168         usage
 169         exit 0
 170 fi
 171
 172 one_more_arg "$@"
 173 remote_host="$1"
 174 shift
 175
 176
 177 # check/parse remote command line
 178 if [ -z "${SSH_ORIGINAL_COMMAND:-}" ] ; then
 179         croak "Did not find SSH_ORIGINAL_COMMAND"
 180 fi
 181 set "dummy" ${SSH_ORIGINAL_COMMAND}
 182 shift
 183
 184 info "host $remote_host called with $*"
 185
 186 one_more_arg "$@"
 187 action="$1"
 188 shift
 189
 190 case "$action" in
 191         # on a static mirror, update a component from its master
 192         mirror)
 193                 do_mirror "$remote_host" "$@"
 194                 ;;
 195         # on a static source, allow fetching from the master,
 196         # on a master, allow fetching from a component's mirrors
 197         rsync)
 198                 do_rsync "$remote_host" "$@"
 199                 ;;
 200         # on a master, initiate an update of a component
 201         static-master-update-component)
 202                 do_update_component "$remote_host" "$@"
 203                 ;;
 204         *)
 205                 croak "Invalid operation '$action'"
 206                 ;;
 207 esac