Bug fix on OOM deploy script
[integration.git] / deployment / heat / onap-oom / scripts / deploy.sh
1 #!/bin/bash -x
2
3 if [ -z "$WORKSPACE" ]; then
4     export WORKSPACE=`git rev-parse --show-toplevel`
5 fi
6
7 if [ "$#" -ne 1 ]; then
8     echo "Usage: $0 <env-name>"
9     exit 1
10 fi
11 ENV_FILE=$1
12
13 SSH_KEY=~/.ssh/onap_key
14
15 source $WORKSPACE/test/ete/scripts/install_openstack_cli.sh
16
17 SO_ENCRYPTION_KEY=aa3871669d893c7fb8abbcda31b88b4f
18 export OS_PASSWORD_ENCRYPTED=$(echo -n "$OS_PASSWORD" | openssl aes-128-ecb -e -K "$SO_ENCRYPTION_KEY" -nosalt | xxd -c 256 -p)
19
20 for n in $(seq 1 5); do
21     $WORKSPACE/test/ete/scripts/teardown-onap.sh
22
23     cd $WORKSPACE/deployment/heat/onap-oom
24     envsubst < $ENV_FILE > $ENV_FILE~
25
26     if ! openstack stack create -t ./onap-oom.yaml -e $ENV_FILE~ onap-oom; then
27         break
28     fi
29
30     while [ "CREATE_IN_PROGRESS" == "$(openstack stack show -c stack_status -f value onap-oom)" ]; do
31         sleep 20
32     done
33
34     STATUS=$(openstack stack show -c stack_status -f value onap-oom)
35     echo $STATUS
36     if [ "CREATE_COMPLETE" != "$STATUS" ]; then
37         break
38     fi
39
40     for i in $(seq 1 30); do
41         sleep 30
42         RANCHER_IP=$(openstack stack output show onap-oom rancher_vm_ip -c output_value -f value)
43         K8S_IP=$(openstack stack output show onap-oom k8s_1_vm_ip -c output_value -f value)
44         timeout 1 ping -c 1 "$RANCHER_IP" && break
45     done
46
47     timeout 1 ping -c 1 "$RANCHER_IP" && break
48
49     echo Error: OpenStack infrastructure issue: unable to reach rancher "$RANCHER_IP"
50     sleep 10
51 done
52
53 if ! timeout 1 ping -c 1 "$RANCHER_IP"; then
54     exit 2
55 fi
56
57 ssh-keygen -R $RANCHER_IP
58
59 ssh -o StrictHostKeychecking=no -i $SSH_KEY ubuntu@$RANCHER_IP "sed -u '/Cloud-init.*finished/q' <(tail -n+0 -f /var/log/cloud-init-output.log)"
60
61 for n in $(seq 1 6); do
62     timeout 15m ssh -i $SSH_KEY ubuntu@$RANCHER_IP  'sudo su -l root -c "/root/oom/kubernetes/robot/ete-k8s.sh onap health"'
63     RESULT=$?
64     if [ $RESULT -eq 0 ]; then
65         break
66     fi
67     sleep 15m
68 done
69 ROBOT_POD=$(ssh -i $SSH_KEY ubuntu@$RANCHER_IP 'sudo su -c "kubectl --namespace onap get pods"' | grep robot | sed 's/ .*//')
70 if [ "$ROBOT_POD" == "" ]; then
71     exit 1
72 fi
73
74 LOG_DIR=$(echo "kubectl exec -n onap $ROBOT_POD -- ls -1t /share/logs | grep health | head -1" | ssh -i $SSH_KEY ubuntu@$RANCHER_IP sudo su)
75 if [ "$LOG_DIR" == "" ]; then
76     exit 1
77 fi
78
79 echo "kubectl cp -n onap $ROBOT_POD:share/logs/$LOG_DIR /tmp/robot/logs/$LOG_DIR" | ssh -i $SSH_KEY ubuntu@$RANCHER_IP sudo su
80 rsync -e "ssh -i $SSH_KEY" -avtz ubuntu@$RANCHER_IP:/tmp/robot/logs/$LOG_DIR/ $WORKSPACE/archives/
81
82 echo "Browse Robot results at http://$K8S_IP:30209/logs/$LOG_DIR/"
83
84 exit 0