test/mocks/datafilecollector-testharness/simulator-group/simulators-start.sh

   1 #!/bin/bash
   2 #
   3 # Modifications copyright (C) 2021 Nokia. All rights reserved.
   4 #
   5 # Licensed under the Apache License, Version 2.0 (the "License");
   6 # you may not use this file except in compliance with the License.
   7 # You may obtain a copy of the License at
   8 #
   9 #     http://www.apache.org/licenses/LICENSE-2.0
  10 #
  11 set -x
  12 server_check() {
  13         for i in {1..10}; do
  14                 res=$(curl  -s -o /dev/null -w "%{http_code}" localhost:$2$3)
  15                 if [ $res -gt 199 ] && [ $res -lt 300 ]; then
  16                         echo "Simulator " $1 " on localhost:$2$3 responded ok"
  17                         return
  18                 fi
  19                 sleep 1
  20         done
  21         echo "Simulator " $1 " on localhost:$2$3 - no response"
  22 }
  23
  24 http_https_basic_server_check() {
  25         for i in {1..10}; do
  26                 res=$(curl $4 -s -o /dev/null -w "%{http_code}" "$3"://"$BASIC_AUTH_LOGIN":"$BASIC_AUTH_PASSWORD"@localhost:"$2")
  27                 if [ $res -gt 199 ] && [ $res -lt 300 ]; then
  28                         echo "Simulator " "$1" " on localhost: ""$2"" responded ok"
  29                         return
  30                 fi
  31                 sleep 1
  32         done
  33         echo "Simulator " "$1" " on localhost:""$2"" - no response"
  34 }
  35
  36 http_https_server_check() {
  37         for i in {1..10}; do
  38                 res=$(curl $4 -s -o /dev/null -w "%{http_code}" $3://localhost:$2)
  39                 if [ $res -gt 199 ] && [ $res -lt 300 ]; then
  40                         echo "Simulator " $1 " on localhost:$2 responded ok"
  41                         return
  42                 fi
  43                 sleep 1
  44         done
  45         echo "Simulator " $1 " on localhost:$2 - no response"
  46 }
  47
  48 server_check_https() {
  49         for i in {1..10}; do
  50                 res=$(curl  -k -s -o /dev/null -w "%{http_code}" https://localhost:$2$3)
  51                 if [ $res -gt 199 ] && [ $res -lt 300 ]; then
  52                         echo "Simulator " $1 " on https://localhost:$2$3 responded ok"
  53                         return
  54                 fi
  55                 sleep 1
  56         done
  57         echo "Simulator " $1 " on https://localhost:$2$3 - no response"
  58 }
  59
  60 ftpes_server_check() {
  61         for i in {1..10}; do
  62                 res=$(curl --silent --max-time 3 ftp://localhost:$2 --ftp-ssl -v -k 2>&1 | grep vsFTPd)
  63                 if ! [ -z "$res" ]; then
  64                         echo "Simulator " $1 " on localhost:$2 responded ok"
  65                         return
  66                 fi
  67                 sleep 1
  68         done
  69         echo "Simulator " $1 " on localhost:$2 - no response"
  70 }
  71
  72 sftp_server_check() {
  73         for i in {1..10}; do
  74                 res=$(curl --silent --max-time 3 sftp://localhost:$2 -v -k 2>&1 | grep Connected)
  75                 if ! [ -z "$res" ]; then
  76                         echo "Simulator " $1 " on localhost:"$2" responded ok"
  77                         return
  78                 fi
  79                 sleep 1
  80         done
  81         echo "Simulator " $1 " on localhost:"$2" - no response"
  82 }
  83
  84 # Starts all simulators with the test settings
  85 # Intended for CSIT test and auto test. For manual start, use the docker-compose-setup.sh
  86
  87 DOCKER_SIM_NWNAME="dfcnet"
  88 echo "Creating docker network $DOCKER_SIM_NWNAME, if needed"
  89 docker network ls| grep $DOCKER_SIM_NWNAME > /dev/null || docker network create $DOCKER_SIM_NWNAME
  90
  91 if [ -z "$SIM_GROUP" ]
  92  then
  93  export SIM_GROUP="$( cd "$( dirname "${BASH_SOURCE[0]}" )" >/dev/null 2>&1 && pwd )"
  94 fi
  95
  96 if [ -z "$NUM_FTP_SERVERS" ]
  97  then
  98  export NUM_FTP_SERVERS=1
  99 fi
 100
 101 if [ -z "$NUM_HTTP_SERVERS" ]
 102  then
 103  export NUM_HTTP_SERVERS=1
 104 fi
 105
 106 docker-compose -f docker-compose-template.yml config > docker-compose.yml
 107
 108 docker-compose up -d
 109
 110 sudo chown $(id -u):$(id -g) consul
 111 sudo chown $(id -u):$(id -g) consul/consul/
 112
 113 declare -a SFTP_SIM
 114 declare -a FTPES_SIM
 115 declare -a HTTP_SIM
 116
 117 DR_SIM="$(docker ps -q --filter='name=dfc_dr-sim')"
 118 DR_RD_SIM="$(docker ps -q --filter='name=dfc_dr-redir-sim')"
 119 MR_SIM="$(docker ps -q --filter='name=dfc_mr-sim')"
 120 SFTP_SIM[0]="$(docker ps -q --filter='name=dfc_sftp-server0')"
 121 SFTP_SIM[1]="$(docker ps -q --filter='name=dfc_sftp-server1')"
 122 SFTP_SIM[2]="$(docker ps -q --filter='name=dfc_sftp-server2')"
 123 SFTP_SIM[3]="$(docker ps -q --filter='name=dfc_sftp-server3')"
 124 SFTP_SIM[4]="$(docker ps -q --filter='name=dfc_sftp-server4')"
 125 FTPES_SIM[0]="$(docker ps -q --filter='name=dfc_ftpes-server-vsftpd0')"
 126 FTPES_SIM[1]="$(docker ps -q --filter='name=dfc_ftpes-server-vsftpd1')"
 127 FTPES_SIM[2]="$(docker ps -q --filter='name=dfc_ftpes-server-vsftpd2')"
 128 FTPES_SIM[3]="$(docker ps -q --filter='name=dfc_ftpes-server-vsftpd3')"
 129 FTPES_SIM[4]="$(docker ps -q --filter='name=dfc_ftpes-server-vsftpd4')"
 130 HTTP_SIM[0]="$(docker ps -q --filter='name=dfc_http-https-server0')"
 131 HTTP_SIM[1]="$(docker ps -q --filter='name=dfc_http-https-server1')"
 132 HTTP_SIM[2]="$(docker ps -q --filter='name=dfc_http-https-server2')"
 133 HTTP_SIM[3]="$(docker ps -q --filter='name=dfc_http-https-server3')"
 134 HTTP_SIM[4]="$(docker ps -q --filter='name=dfc_http-https-server4')"
 135 CBS_SIM="$(docker ps -q --filter='name=dfc_cbs')"
 136 CONSUL_SIM="$(docker ps -q --filter='name=dfc_consul')"
 137
 138 #Wait for initialization of docker containers for all simulators
 139 for i in {1..10}; do
 140 if [ $(docker inspect --format '{{ .State.Running }}' $DR_SIM) ] && \
 141 [ $(docker inspect --format '{{ .State.Running }}' $DR_RD_SIM) ] && \
 142 [ $(docker inspect --format '{{ .State.Running }}' $MR_SIM) ] && \
 143 [ $(docker inspect --format '{{ .State.Running }}' ${SFTP_SIM[0]}) ] && \
 144 [ $(docker inspect --format '{{ .State.Running }}' ${SFTP_SIM[1]}) ] && \
 145 [ $(docker inspect --format '{{ .State.Running }}' ${SFTP_SIM[2]}) ] && \
 146 [ $(docker inspect --format '{{ .State.Running }}' ${SFTP_SIM[3]}) ] && \
 147 [ $(docker inspect --format '{{ .State.Running }}' ${SFTP_SIM[4]}) ] && \
 148 [ $(docker inspect --format '{{ .State.Running }}' ${FTPES_SIM[0]}) ] && \
 149 [ $(docker inspect --format '{{ .State.Running }}' ${FTPES_SIM[1]}) ] && \
 150 [ $(docker inspect --format '{{ .State.Running }}' ${FTPES_SIM[2]}) ] && \
 151 [ $(docker inspect --format '{{ .State.Running }}' ${FTPES_SIM[3]}) ] && \
 152 [ $(docker inspect --format '{{ .State.Running }}' ${FTPES_SIM[4]}) ] && \
 153 [ $(docker inspect --format '{{ .State.Running }}' ${HTTP_SIM[0]}) ] && \
 154 [ $(docker inspect --format '{{ .State.Running }}' ${HTTP_SIM[1]}) ] && \
 155 [ $(docker inspect --format '{{ .State.Running }}' ${HTTP_SIM[2]}) ] && \
 156 [ $(docker inspect --format '{{ .State.Running }}' ${HTTP_SIM[3]}) ] && \
 157 [ $(docker inspect --format '{{ .State.Running }}' ${HTTP_SIM[4]}) ] && \
 158 [ $(docker inspect --format '{{ .State.Running }}' $CBS_SIM) ] && \
 159 [ $(docker inspect --format '{{ .State.Running }}' $CONSUL_SIM) ]
 160  then
 161    echo "All simulators Started"
 162    break
 163  else
 164    echo sleep $i
 165    sleep $i
 166  fi
 167 done
 168
 169 if [ -z "$BASIC_AUTH_LOGIN" ]
 170  then
 171  BASIC_AUTH_LOGIN=demo
 172 fi
 173
 174 if [ -z "$BASIC_AUTH_PASSWORD" ]
 175  then
 176  BASIC_AUTH_PASSWORD=demo123456!
 177 fi
 178
 179 server_check      "cbs          " 10000 "/healthcheck"
 180 server_check      "consul       " 8500 "/v1/catalog/service/agent"
 181 server_check      "DR sim       " 3906 "/"
 182 server_check      "DR redir sim " 3908 "/"
 183 server_check      "MR sim       " 2222 "/"
 184 server_check_https "DR sim https      " 3907 "/"
 185 server_check_https "DR redir sim https" 3909 "/"
 186 server_check_https "MR sim https      " 2223 "/"
 187 ftpes_server_check "FTPES server 0" 1032
 188 ftpes_server_check "FTPES server 1" 1033
 189 ftpes_server_check "FTPES server 2" 1034
 190 ftpes_server_check "FTPES server 3" 1035
 191 ftpes_server_check "FTPES server 4" 1036
 192 sftp_server_check "SFTP server 0" 1022
 193 sftp_server_check "SFTP server 1" 1023
 194 sftp_server_check "SFTP server 2" 1024
 195 sftp_server_check "SFTP server 3" 1025
 196 sftp_server_check "SFTP server 4" 1026
 197 http_https_basic_server_check "HTTP basic auth server 0" 81 http
 198 http_https_basic_server_check "HTTP basic auth server 1" 82 http
 199 http_https_basic_server_check "HTTP basic auth server 2" 83 http
 200 http_https_basic_server_check "HTTP basic auth server 3" 84 http
 201 http_https_basic_server_check "HTTP basic auth server 4" 85 http
 202 http_https_basic_server_check "HTTPS basic auth server 0" 444 https -k
 203 http_https_basic_server_check "HTTPS basic auth server 1" 445 https -k
 204 http_https_basic_server_check "HTTPS basic auth server 2" 446 https -k
 205 http_https_basic_server_check "HTTPS basic auth server 3" 447 https -k
 206 http_https_basic_server_check "HTTPS basic auth server 4" 448 https -k
 207 http_https_server_check "HTTPS client certificate authentication server 0" 444 https "-k --cert ../certservice/generated-certs/apache-pem/keystore.pem --key ../certservice/generated-certs/apache-pem/key.pem"
 208 http_https_server_check "HTTPS client certificate authentication server 1" 445 https "-k --cert ../certservice/generated-certs/apache-pem/keystore.pem --key ../certservice/generated-certs/apache-pem/key.pem"
 209 http_https_server_check "HTTPS client certificate authentication server 2" 446 https "-k --cert ../certservice/generated-certs/apache-pem/keystore.pem --key ../certservice/generated-certs/apache-pem/key.pem"
 210 http_https_server_check "HTTPS client certificate authentication server 3" 447 https "-k --cert ../certservice/generated-certs/apache-pem/keystore.pem --key ../certservice/generated-certs/apache-pem/key.pem"
 211 http_https_server_check "HTTPS client certificate authentication server 4" 448 https "-k --cert ../certservice/generated-certs/apache-pem/keystore.pem --key ../certservice/generated-certs/apache-pem/key.pem"
 212 http_https_server_check "HTTPS no auth server 0" 8081 https -k
 213 http_https_server_check "HTTPS no auth server 1" 8082 https -k
 214 http_https_server_check "HTTPS no auth server 2" 8083 https -k
 215 http_https_server_check "HTTPS no auth server 3" 8084 https -k
 216 http_https_server_check "HTTPS no auth server 4" 8085 https -k
 217
 218 echo ""
 219
 220 #Populate the ftp server with files
 221 if [ -z "$NUM_FTPFILES" ]
 222  then
 223  NUM_FTPFILES=200
 224 fi
 225 if [ -z "$NUM_PNFS" ]
 226  then
 227  NUM_PNFS=1
 228 fi
 229 if [ -z "$FILE_SIZE" ]
 230  then
 231  FILE_SIZE="ALL"
 232 fi
 233 if [ -z "$FTP_TYPE" ]
 234  then
 235  FTP_TYPE="ALL"
 236 fi
 237 if [ -z "$FTP_FILE_PREFIXES" ]
 238  then
 239  FTP_FILE_PREFIXES="A"
 240 fi
 241
 242
 243
 244 if [ $FTP_TYPE = "ALL" ] || [ $FTP_TYPE = "SFTP" ]; then
 245         echo "Creating files for SFTP server, may take time...."
 246         p=0
 247         while [ $p -lt $NUM_FTP_SERVERS ]; do
 248                 docker cp setup-ftp-files-for-image.sh ${SFTP_SIM[$p]}:/tmp/
 249                 #Double slash needed for docker on win...
 250                 docker exec -w //home/onap/ ${SFTP_SIM[$p]} //tmp/setup-ftp-files-for-image.sh $NUM_FTPFILES $NUM_PNFS $FILE_SIZE $FTP_FILE_PREFIXES $NUM_FTP_SERVERS $p #>/dev/null 2>&1
 251                 let p=p+1
 252         done
 253 fi
 254 if [ $FTP_TYPE = "ALL" ] || [ $FTP_TYPE = "FTPES" ]; then
 255         echo "Creating files for FTPES server, may take time...."
 256         p=0
 257         while [ $p -lt $NUM_FTP_SERVERS ]; do
 258                 docker cp setup-ftp-files-for-image.sh ${FTPES_SIM[$p]}:/tmp/setup-ftp-files-for-image.sh
 259                 #Double slash needed for docker on win...
 260                 docker exec -w //srv ${FTPES_SIM[$p]} //tmp/setup-ftp-files-for-image.sh $NUM_FTPFILES $NUM_PNFS $FILE_SIZE $FTP_FILE_PREFIXES $NUM_FTP_SERVERS $p #>/dev/null 2>&1
 261                 let p=p+1
 262         done
 263 fi
 264
 265 #Populate the http server with files. Note some common variables with ftp files!
 266 if [ -z "$NUM_HTTPFILES" ]
 267  then
 268  NUM_HTTPFILES=200
 269 fi
 270 if [ -z "$HTTP_TYPE" ]
 271  then
 272  HTTP_TYPE="ALL"
 273 fi
 274 if [ -z "$HTTP_FILE_PREFIXES" ]
 275  then
 276  HTTP_FILE_PREFIXES="A"
 277 fi
 278
 279 if [ $HTTP_TYPE = "ALL" ] || [ $HTTP_TYPE = "HTTP" ] || [ $HTTP_TYPE = "HTTPS" ]; then
 280         echo "Creating files for HTTP server, may take time...."
 281         p=0
 282         while [ $p -lt $NUM_HTTP_SERVERS ]; do
 283                 docker cp setup-http-files-for-image.sh ${HTTP_SIM[$p]}:/tmp/setup-http-files-for-image.sh
 284                 #Double slash needed for docker on win...
 285                 docker exec -w //usr//local//apache2//htdocs ${HTTP_SIM[$p]} //tmp/setup-http-files-for-image.sh $NUM_HTTPFILES $NUM_PNFS $FILE_SIZE $HTTP_FILE_PREFIXES $NUM_HTTP_SERVERS $p #>/dev/null 2>&1
 286                 let p=p+1
 287         done
 288 fi
 289 echo "Done: All simulators started and configured"