docs/docs_scaleout.rst

   1 .. _docs_scaleout:
   2
   3 VF Module Scale Out Use Case
   4 ----------------------------
   5
   6 Source files
   7 ~~~~~~~~~~~~
   8
   9 - Base VNF template file: https://git.onap.org/demo/plain/heat/vLBMS/base_vlb.yaml
  10 - Base VNF environment file: https://git.onap.org/demo/plain/heat/vLBMS/base_vlb.env
  11
  12 - VF module scaling template file: https://git.onap.org/demo/plain/heat/vLBMS/dnsscaling.yaml
  13 - VF module scaling environment file: https://git.onap.org/demo/plain/heat/vLBMS/dnsscaling.env
  14
  15 Description
  16 ~~~~~~~~~~~
  17 The Scale Out use case shows how users/network operators can add Virtual Network Function Components (VNFCs) as part of a VF Module that has been instantiated in the Service model to an existing VNF, in order to increase capacity of the network. ONAP Casablanca release supports scale out with manual trigger from VID and closed-loop enabled automation from Policy. This is demonstrated against the vLB/vDNS VNFs developed for ONAP. For Casablanca, both APPC and SDNC controllers are used to demonstrate accepting request from SO to execute the Scale Out operation. APPC is the main controller used for this use case and it can be used to scale different VNF types. SDNC is experimental for now and it can scale only the vDNS VNF developed for ONAP.
  18
  19 The Casablanca Scaling Use Case Wiki Page can be found here: https://wiki.onap.org/display/DW/Scaling+Use+Case+Extension
  20
  21 How to Use
  22 ~~~~~~~~~~
  23 Scaling VF modules manually requires the user/network operator to trigger the scale out operation from the VID portal. VID translates the operation into a call to SO. Scaling VF modules in an automated manner instead requires the user/network operator to design and deploy a closed loop for scale out that includes policies (e.g. threshold-crossing conditions), guard policies that determine when it's safe to scale out, and microservices that analyze events coming from the network in order to discover situations.
  24
  25 Both manual and automated scale out activate the scale out workflow in the Service Orchestrator (SO). The workflow runs as follows:
  26
  27 - SO sends a request to APPC to run health check against the VNF;
  28 - If the VNF is healthy, SO instantiates a new VF module and sends a request to APPC to reconfigure the VNF;
  29 - APPC reconfigures the VNF, without interrupting the service;
  30 - SO sends a request to APPC to run health check against the VNF again, to validate that the scale out operation didn't impact the running VNF.
  31
  32 The vLB has a Northbound API that allows an upstream system (e.g. ONAP) to change the internal configuration by updating the list of active vDNS instances (i.e. VNF reconfiguration). The Northbound API framework has been built using FD.io-based Honeycomb 1707, and supports both RESTconf and NETCONF protocols. Below is an example of vDNS instances contained in the vLB, in JSON format:
  33 ::
  34
  35     {
  36     "vlb-business-vnf-onap-plugin": {
  37         "vdns-instances": {
  38             "vdns-instance": [
  39                 {
  40                    "ip-addr": "192.168.10.211",
  41                    "oam-ip-addr": "10.0.150.2",
  42                    "enabled": true
  43                 }
  44              ]
  45          }
  46      }
  47   }
  48
  49 The parameters required for VNF reconfiguration (i.e. "ip-addr", "oam-ip-addr", and "enabled" in case of vLB/vDNS) can be specified in the VID GUI when triggering the workflow manually or in CLAMP when designing a closed loop for the automated case. In both cases, the format used for specifying the parameters and their values is a JSON path. SO will use the provided paths to access parameters' name and value in the VF module preload received from SDNC before instantiating a new VF module.
  50
  51 VID accepts a JSON array in the "Configuration Parameter" box (see later), for example:
  52 ::
  53
  54 [{"ip-addr":"$.vf-module-topology.vf-module-parameters.param[10].value","oam-ip-addr":"$.vf-module-topology.vf-module-parameters.param[15].value","enabled":"$.vf-module-topology.vf-module-parameters.param[22].value"}]
  55
  56 CLAMP, instead, accepts a YAML file in the "Payload" box in the Policy Creation form, for example:
  57 ::
  58
  59   requestParameters: '{"usePreload":true,"userParams":[]}'
  60   configurationParameters: '[{"ip-addr":"$.vf-module-topology.vf-module-parameters.param[10].value","oam-ip-addr":"$.vf-module-topology.vf-module-parameters.param[15].value","enabled":"$.vf-module-topology.vf-module-parameters.param[22].value"}]'
  61
  62 Note that Policy requires an additional object, called "requestParameters" in which "usePreload" should be set to true and the "userParams" array should be left empty.
  63
  64 The JSON path to the parameters used for VNF reconfiguration, including array locations, should be set as described above. Finally, although the VNF supports to update multiple vDNS records in the same call, for Casablanca release APPC updates a single vDNS instance at a time.
  65
  66 When using APPC, before running scale out, the user needs to create a VNF template using the Controller Design Tool (CDT), a design-time tool that allows users to create and on-board VNF templates into the APPC. The template describes which control operation can be executed against the VNF (e.g. scale out, health check, modify configuration, etc.), the protocols that the VNF supports, port numbers, VNF APIs, and credentials for authentication. Being VNF agnostic, APPC uses these templates to "learn" about specific VNFs and the supported operations.
  67 CDT requires two input:
  68
  69 1) the list of parameters that APPC will receive (ip-addr, oam-ip-addr, enabled in the example above);
  70
  71 2) the VNF API that APPC will use to reconfigure the VNF.
  72
  73 Below is an example of the parameters file (yaml format), which we call parameters.yaml:
  74 ::
  75
  76     version: V1
  77     vnf-parameter-list:
  78     - name: ip-addr
  79       type: null
  80       description: null
  81       required: "true"
  82       default: null
  83       source: Manual
  84       rule-type: null
  85       request-keys: null
  86       response-keys: null
  87     - name: oam-ip-addr
  88       type: null
  89       description: null
  90       required: "true"
  91       default: null
  92       source: Manual
  93       rule-type: null
  94       request-keys: null
  95       response-keys: null
  96     - name: enabled
  97       type: null
  98       description: null
  99       required: "true"
 100       default: null
 101       source: Manual
 102       rule-type: null
 103       request-keys: null
 104       response-keys: null
 105
 106 Here is an example of API for the vLB VNF used for this use case. We name the file after the vnf-type contained in SDNC (i.e. Vloadbalancerms..dnsscaling..module-1):
 107 ::
 108
 109     <vlb-business-vnf-onap-plugin xmlns="urn:opendaylight:params:xml:ns:yang:vlb-business-vnf-onap-plugin">
 110         <vdns-instances>
 111             <vdns-instance>
 112                 <ip-addr>${ip-addr}</ip-addr>
 113                 <oam-ip-addr>${oam-ip-addr}</oam-ip-addr>
 114                 <enabled>${enabled}</enabled>
 115             </vdns-instance>
 116         </vdns-instances>
 117     </vlb-business-vnf-onap-plugin>
 118
 119 To create the VNF template in CDT, the following steps are required:
 120
 121 - Connect to the CDT GUI: http://APPC-IP:8080 (in Heat-based ONAP deployments) or http://ANY-K8S-IP:30289 (in OOM/K8S-based ONAP deployments)
 122 - Click "My VNF" Tab. Create your user ID, if necessary
 123 - Click "Create new VNF" entering the VNF type as reported in VID or AAI, e.g. vLoadBalancerMS/vLoadBalancerMS 0
 124 - Select "ConfigScaleOut" action
 125 - Create a new template identifier using the vnf-type name in SDNC as template name, e.g. Vloadbalancerms..dnsscaling..module-1
 126 - Select protocol (Netconf-XML), VNF username (admin), and VNF port number (2831 for NETCONF)
 127 - Click "Parameter Definition" Tab and upload the parameters (.yaml) file
 128 - Click "Template Tab" and upload API template (.yaml) file
 129 - Click "Reference Data" Tab
 130 - Click "Save All to APPC"
 131
 132 For health check operation, we just need to specify the protocol, the port number and username of the VNF (REST, 8183, and "admin" respectively, in the case of vLB/vDNS) and the API. For the vLB/vDNS, the API is:
 133 ::
 134
 135   restconf/operational/health-vnf-onap-plugin:health-vnf-onap-plugin-state/health-check
 136
 137 Note that we don't need to create a VNF template for health check, so the "Template" flag can be set to "N". Again, the user has to click "Save All to APPC" to update the APPC database.
 138 At this time, CDT doesn't allow users to provide VNF password from the GUI. To update the VNF password we need to log into the APPC Maria DB container and change the password manually:
 139 ::
 140
 141   mysql -u sdnctl -p (type "gamma" when password is prompted)
 142   use sdnctl;
 143   UPDATE DEVICE_AUTHENTICATION SET PASSWORD='admin' WHERE
 144   VNF_TYPE='vLoadBalancerMS/vLoadBalancerMS 0'; (use your VNF type)
 145
 146 To trigger the scale out workflow manually, the user/network operator can log into VID from the ONAP Portal (demo/demo123456! as username/password), select "VNF Changes" and then the "New (+)" button. The user/network operator needs to fill in the "VNF Change Form" by selecting Subscriber, Service Type, NF Role, Model Version, VNF, Scale Out from the Workflow dropdown window, and insert the JSON path array described above in the "Configuration Parameter" box. After clicking "Next", in the following window the user/network operator has to select the VF Module to scale by clicking on the VNF and then on the appropriate VF Module checkbox. Finally, by clicking on the "Schedule" button, the scale out use case will run as described above.
 147
 148 Automated scale out requires the user to onboard a DCAE blueprint in SDC when creating the service. To design a closed loop for scale out, the user needs to access the CLAMP GUI (https://clamp.api.simpledemo.onap.org:30258/designer/index.html) and execute the following operations:
 149
 150 - Click the "Closed loop" dropdown window and select "Open CL"
 151 - Select the closed loop model and click "OK"
 152 - In the next screen, click the "Policy" box to create a policy for closed loop, including guard policies
 153 - After creating the policies, click "TCA" and review the blueprint uploaded during service creation and distributed by SDC to CLAMP
 154 - Click the "Manage" dropdown and then "Submit" to push the policies to the Policy Engine
 155 - From the same "Manage" dropdown, click "Deploy" to deploy the TCA blueprint to DCAE
 156
 157 The vLB/vDNS VNF generates traffic and reports metrics to the VES collector in the DCAE platform. The number of incoming packets to the vLB is used to evaluate the policy defined for closed loop. If the provided threshold is crossed, DCAE generates an event that reaches the Policy Engine, which in turn activates the scale out closed loop described above.
 158
 159 For more information about scale out, videos, and material used for running the use case, please look at the wiki page: https://wiki.onap.org/display/DW/Running+Scale+Out+Use+Case+for+Casablanca
 160
 161 Test Status and Plans
 162 ~~~~~~~~~~~~~~~~~~~~~
 163 Casablanca Scale Out completed all tests as found here: https://wiki.onap.org/pages/viewpage.action?pageId=36964241#UseCaseTracking(CasablancaScaling)-Testing
 164
 165 Known Issues and Resolutions
 166 ~~~~~~~~~~~~~~~~~~~~~~~~~~~~
 167 1) When running closed loop-enabled scale out, the closed loop designed in CLAMP conflicts with the default closed loop defined for the old vLB/vDNS use case
 168
 169 Resolution: Change TCA configuration for the old vLB/vDNS use case
 170
 171 - Connect to Consul: http://<ANY K8S VM IP ADDRESS>:30270 and click on "Key/Value" → "dcae-tca-analytics"
 172 - Change "eventName" in the vLB default policy to something different, for example "vLB" instead of the default value "vLoadBalancer"
 173 - Change "subscriberConsumerGroup" in the TCA configuration to something different, for example "OpenDCAE-c13" instead of the default value "OpenDCAE-c12"
 174 - Click "UPDATE" to upload the new TCA configuration
 175
 176 2) When running closed loop-enabled scale out, the permitAll guard policy conflicts with the scale out guard policy
 177
 178 Resolution: Undeploy the permitAll guard policy
 179
 180 - Connect to the Policy GUI, either through the ONAP Portal (https://portal.api.simpledemo.onap.org:30225/ONAPPORTAL/login.htm) or directly (https://policy.api.simpledemo.onap.org:30219/onap/login.htm)
 181 - If using the ONAP Portal, use demo/demo123456! as credentials, otherwise, if accessing Policy GUI directly, use demo/demo
 182 - Click "Policy" → "Push" on the left panel
 183 - Click the pencil symbol next to "default" in the PDP Groups table
 184 - Select "Decision_AllPermitGuard"
 185 - Click "Remove"