deployment/heat/onap-oom/scripts/deploy.sh

   1 #!/bin/bash
   2 #
   3 # Copyright 2018 Huawei Technologies Co., Ltd.
   4 #
   5 # Licensed under the Apache License, Version 2.0 (the "License");
   6 # you may not use this file except in compliance with the License.
   7 # You may obtain a copy of the License at
   8 #
   9 #     http://www.apache.org/licenses/LICENSE-2.0
  10 #
  11
  12 stack_name="oom"
  13 portal_hostname="portal.api.simpledemo.onap.org"
  14 full_deletion=false
  15
  16 if [ -z "$WORKSPACE" ]; then
  17     export WORKSPACE=`git rev-parse --show-toplevel`
  18 fi
  19
  20 usage() {
  21     echo "Usage: $0 [ -n <number of VMs {2-15}> ][ -s <stack name> ][ -m <manifest> ][ -d <domain> ][ -r ][ -q ] <env>" 1>&2;
  22
  23     echo "n:    Set the number of VM's that will be installed. This number must be between 2 and 15" 1>&2;
  24     echo "s:    Set the name to be used for stack. This name will be used for naming of resources" 1>&2;
  25     echo "d:    Set the base domain name to be used in portal UI URLs" 1>&2;
  26     echo "m:    The docker manifest to apply; must be either \"docker-manifest-staging.csv\" or \"docker-manifest.csv\"." 1>&2;
  27     echo "r:    Delete all resources relating to ONAP within enviroment." 1>&2;
  28     echo "q:    Quiet Delete of all ONAP resources." 1>&2;
  29
  30     exit 1;
  31 }
  32
  33
  34 while getopts ":n:s:d:m:rq" o; do
  35     case "${o}" in
  36         n)
  37             if [[ ${OPTARG} =~ ^[0-9]+$ ]];then
  38                 if [ ${OPTARG} -ge 2 -a ${OPTARG} -le 15 ]; then
  39                     vm_num=${OPTARG}
  40                 else
  41                     usage
  42                 fi
  43             else
  44                 usage
  45             fi
  46             ;;
  47         s)
  48             if [[ ! ${OPTARG} =~ ^[0-9]+$ ]];then
  49                 stack_name=${OPTARG}
  50             else
  51                 usage
  52             fi
  53             ;;
  54         d)
  55             if [[ ! ${OPTARG} =~ ^[0-9]+$ ]];then
  56                 portal_hostname=${OPTARG}
  57             else
  58                 usage
  59             fi
  60             ;;
  61         m)
  62             if [ -f $WORKSPACE/version-manifest/src/main/resources/${OPTARG} ]; then
  63                 docker_manifest=${OPTARG}
  64             else
  65                 usage
  66             fi
  67             ;;
  68         r)
  69             echo "The following command will delete all information relating to onap within your enviroment"
  70             read -p "Are you certain this is what you want? (type y to confirm):" answer
  71
  72             if [ $answer = "y" ] || [ $answer = "Y" ] || [ $answer = "yes" ] || [ $answer = "Yes"]; then
  73                 echo "This may delete the work of other colleages within the same enviroment"
  74                 read -p "Are you certain this is what you want? (type y to confirm):" answer2
  75
  76                 if [ $answer2 = "y" ] || [ $answer2 = "Y" ] || [ $answer2 = "yes" ] || [ $answer2 = "Yes"]; then
  77                     full_deletion=true
  78                 else
  79                     echo "Ending program"
  80                     exit 1
  81                 fi
  82             else
  83                 echo "Ending program"
  84                 exit 1
  85             fi
  86             ;;
  87         q)
  88             full_deletion=true
  89             ;;
  90         *)
  91             usage
  92             ;;
  93     esac
  94 done
  95 shift $((OPTIND-1))
  96
  97 if [ "$#" -ne 1 ]; then
  98    usage
  99 fi
 100
 101 ENV_FILE=$1
 102
 103 if [ ! -f $ENV_FILE ];then
 104     echo ENV file does not exist or was not given
 105     exit 1
 106 fi
 107
 108 set -x
 109
 110 SSH_KEY=~/.ssh/onap_key
 111
 112 source $WORKSPACE/test/ete/scripts/install_openstack_cli.sh
 113
 114 #SO_ENCRYPTION_KEY=aa3871669d893c7fb8abbcda31b88b4f
 115 #export OS_PASSWORD_ENCRYPTED=$(echo -n "$OS_PASSWORD" | openssl aes-128-ecb -e -K "$SO_ENCRYPTION_KEY" -nosalt | xxd -c 256 -p)
 116
 117 #Use new encryption method
 118 pushd $WORKSPACE/deployment/heat/onap-oom/scripts
 119 javac Crypto.java
 120 SO_ENCRYPTION_KEY=aa3871669d893c7fb8abbcda31b88b4f
 121 export OS_PASSWORD_ENCRYPTED=$(java Crypto "$OS_PASSWORD" "$SO_ENCRYPTION_KEY")
 122 popd
 123
 124 for n in $(seq 1 5); do
 125     if [ $full_deletion = true ] ; then
 126         $WORKSPACE/test/ete/scripts/teardown-onap.sh -n $stack_name -q
 127     else
 128         $WORKSPACE/test/ete/scripts/teardown-onap.sh -n $stack_name
 129     fi
 130
 131     cd $WORKSPACE/deployment/heat/onap-oom
 132     envsubst < $ENV_FILE > $ENV_FILE~
 133     if [ -z "$vm_num" ]; then
 134         cp onap-oom.yaml onap-oom.yaml~
 135     else
 136         ./scripts/gen-onap-oom-yaml.sh $vm_num > onap-oom.yaml~
 137     fi
 138
 139     if ! openstack stack create -t ./onap-oom.yaml~ -e $ENV_FILE~ $stack_name --parameter docker_manifest=$docker_manifest --parameter portal_hostname=$portal_hostname; then
 140         break
 141     fi
 142
 143     while [ "CREATE_IN_PROGRESS" == "$(openstack stack show -c stack_status -f value $stack_name)" ]; do
 144         sleep 20
 145     done
 146
 147     STATUS=$(openstack stack show -c stack_status -f value $stack_name)
 148     echo $STATUS
 149     if [ "CREATE_COMPLETE" != "$STATUS" ]; then
 150         break
 151     fi
 152
 153     for i in $(seq 1 30); do
 154         sleep 30
 155         RANCHER_IP=$(openstack stack output show $stack_name rancher_vm_ip -c output_value -f value)
 156         K8S_IP=$(openstack stack output show $stack_name k8s_01_vm_ip -c output_value -f value)
 157         timeout 1 ping -c 1 "$RANCHER_IP" && break
 158     done
 159
 160     timeout 1 ping -c 1 "$RANCHER_IP" && break
 161
 162     echo Error: OpenStack infrastructure issue: unable to reach rancher "$RANCHER_IP"
 163     sleep 10
 164 done
 165
 166 if ! timeout 1 ping -c 1 "$RANCHER_IP"; then
 167     exit 2
 168 fi
 169
 170 ssh-keygen -R $RANCHER_IP
 171
 172 sleep 2m
 173 ssh -o StrictHostKeychecking=no -i $SSH_KEY ubuntu@$RANCHER_IP "sed -u '/Cloud-init.*finished/q' <(tail -n+0 -f /var/log/cloud-init-output.log)"
 174
 175 PREV_RESULT=0
 176 for n in $(seq 1 20); do
 177   RESULT=$(ssh -i $SSH_KEY ubuntu@$RANCHER_IP 'sudo su -c "kubectl -n onap get pods"' | grep -vE 'Running|Complete|NAME' | wc -l)
 178   if [[ $? -eq 0 && ( $RESULT -eq 0 || $RESULT -eq $PREV_RESULT ) ]]; then
 179     break
 180   fi
 181   sleep 15m
 182   PREV_RESULT=$RESULT
 183 done
 184
 185 PREV_RESULT=0
 186 for n in $(seq 1 20); do
 187   echo "Wait for HEALTHCHECK count $n of 10"
 188   ROBOT_POD=$(ssh -i $SSH_KEY ubuntu@$RANCHER_IP 'sudo su -c "kubectl --namespace onap get pods"' | grep robot | sed 's/ .*//')
 189   ssh -i $SSH_KEY ubuntu@$RANCHER_IP  'sudo su -l root -c "/root/oom/kubernetes/robot/ete-k8s.sh onap health"'
 190   RESULT=$?
 191   if [[ $RESULT -lt 10 && ( $RESULT -eq 0 || $RESULT -eq $PREV_RESULT ) ]]; then
 192     break
 193   fi
 194   sleep 15m
 195   PREV_RESULT=$RESULT
 196 done
 197 if [ "$ROBOT_POD" == "" ]; then
 198   exit 1
 199 fi
 200
 201 LOG_DIR=$(echo "kubectl exec -n onap $ROBOT_POD -- ls -1t /share/logs | grep health | head -1" | ssh -i $SSH_KEY ubuntu@$RANCHER_IP sudo su)
 202 echo "kubectl cp -n onap $ROBOT_POD:share/logs/$LOG_DIR /tmp/robot/logs/$LOG_DIR" | ssh -i $SSH_KEY ubuntu@$RANCHER_IP sudo su
 203 echo "Browse Robot results at http://$K8S_IP:30209/logs/$LOG_DIR/"
 204 mkdir -p $WORKSPACE/archives/healthcheck
 205 rsync -e "ssh -i $SSH_KEY" -avtz ubuntu@$RANCHER_IP:/tmp/robot/logs/$LOG_DIR/ $WORKSPACE/archives/healthcheck
 206
 207 exit 0