VNFRQTS - Header fix for table of contents
[vnfrqts/requirements.git] / docs / Chapter7.rst
1 .. This work is licensed under a Creative Commons Attribution 4.0 International License.
2 .. http://creativecommons.org/licenses/by/4.0
3 .. Copyright 2017 AT&T Intellectual Property.  All rights reserved.
4
5
6 **ONAP Management Requirements**
7 =====================================
8
9 The ONAP platform is the part of the larger Network Function Virtualization/Software Defined Network (NFV/SDN) ecosystem that is responsible for the efficient control, operation and management of Virtual Network Function (VNF) capabilities and functions. It specifies standardized abstractions and interfaces that enable efficient interoperation of the NVF/SDN ecosystem components. It enables product/service independent capabilities for design, creation and runtime lifecycle management (includes all aspects of installation, change management, assurance, and retirement) of resources in NFV/SDN environment (see ECOMP white paper ). These capabilities are provided using two major architectural frameworks: (1) a Design Time Framework to design, define and program the platform (uniform onboarding), and (2) a Runtime Execution Framework to execute the logic programmed in the design environment (uniform delivery and runtime lifecycle management). The platform delivers an integrated information model based on the VNF package to express the characteristics and behavior of these resources in the Design Time Framework. The information model is utilized by Runtime Execution Framework to manage the runtime lifecycle of the VNFs. The management processes are orchestrated across various modules of ONAP to instantiate, configure, scale, monitor, and reconfigure the VNFs using a set of standard APIs provided by the VNF developers.
10
11 Although the guidelines and requirements specified in this document were originally driven by the need to standardize and automate the management of the virtualized environments (with VNFs) operated by Service Providers, we believe that most of the requirements are equally applicable to the operation of the physical network functions (PNFs), those network functions provided by traditional physical network elements (e.g. whitebox switches) or customized peripherals (e.g. a video rendering engine for augmented reality). The primary area of difference will be in how the network function is orchestrated into place – VNFs can be much more dynamically created & placed by ONAP to support varying geographic, availability and scalability needs, whereas the PNFs have to be deployed a priori in specific locations based on planning and engineering – their availability and scalability will be determined by the capabilities offered by the PNFs.
12
13 **PNF** is a vendor-provided Network Function(s) implemented using a bundled set of hardware and software while VNFs utilize cloud resources to provide Network Functions through virtualized software modules.  PNF can be supplied by a vendor as a Black BOX (provides no knowledge of its internal characteristics, logic, and software design/architecture) or as a White Box (provides detailed knowledge and access of its internal components and logic) or as a Grey Box (provides limited knowledge and access to its internal components).
14
15 * Requirements that equally apply to both VNFs and PNFs are defined as "The xNF MUST/SHOULD/..."
16 * Requirements that only apply to VNFs are defined as "The VNF MUST/SHOULD/..."
17 * Requirements that only apply to PNFs are defined as "The PNF MUST/SHOULD/..."
18
19
20 Service Design
21 ------------------------------------
22
23 This section, Service Design, has been left intentionally blank. It is out-of-scope for the VNF Requirements project for the Amsterdam release and no numbered requirements are expected. Content may be added in future updates of this document.
24
25 VNF On-boarding and package management
26 -----------------------------------------------------------------------------
27
28 Design Definition
29 ^^^^^^^^^^^^^^^^^^
30
31 The ONAP Design Time Framework provides the ability to design NFV
32 resources including VNFs, Services, and products. The VNF provider must
33 provide VNF packages that include a rich set of recipes, management and
34 functional interfaces, policies, configuration parameters, and
35 infrastructure requirements that can be utilized by the ONAP Design
36 module to onboard and catalog these resources. Initially this
37 information may be provided in documents, but in the near future a
38 method will be developed to automate as much of the transfer of data as
39 possible to satisfy its long term requirements.
40
41 The current VNF Package Requirement is based on a subset of the
42 Requirements contained in the ETSI Document: ETSI GS NFV-MAN 001 v1.1.1
43 and GS NFV IFA011 V0.3.0 (2015-10) - Network Functions Virtualization
44 (NFV), Management and Orchestration, VNF Packaging Specification.
45
46 Resource Description
47 ^^^^^^^^^^^^^^^^^^^^^^
48
49 * R-77707 The VNF provider **MUST** include a Manifest File that contains a list of all the components in the VNF package.
50 * R-66070 The xNF Package **MUST** include xNF Identification Data to uniquely identify the resource for a given xNF provider. The identification data must include: an identifier for the xNF, the name of the xNF as was given by the xNF provider, xNF description, xNF provider, and version.
51 * R-69565 The xNF Package **MUST** include documentation describing xNF Management APIs. The document must include information and tools for:
52
53  - ONAP to deploy and configure (initially and ongoing) the xNF application(s) (e.g., NETCONF APIs). Includes description of configurable parameters for the xNF and whether the parameters can be configured after xNF instantiation.
54  - ONAP to monitor the health of the xNF (conditions that require healing and/or scaling responses). Includes a description of:
55
56   - Parameters that can be monitored for the xNF and event records (status, fault, flow, session, call, control plane, etc.) generated by the xNF after instantiation.
57   - Runtime lifecycle events and related actions (e.g., control responses, tests) which can be performed for the xNF.
58
59 * R-84366 The xNF Package **MUST** include documentation describing xNF Functional APIs that are utilized to build network and application services. This document describes the externally exposed functional inputs and outputs for the xNF, including interface format and protocols supported.
60 * R-36280 The xNF provider **MUST** provide documentation describing xNF Functional Capabilities that are utilized to operationalize the xNF and compose complex services.
61 * R-98617 The xNF provider **MUST** provide information regarding any dependency (e.g., affinity, anti-affinity) with other xNFs and resources.
62
63 Resource Configuration
64 ^^^^^^^^^^^^^^^^^^^^^^^
65
66 * R-89571 The xNF **MUST** support and provide artifacts for configuration management using at least one of the following technologies:
67
68  - Netconf/YANG
69  - Chef
70  - Ansible
71
72  Note: The requirements for Netconf/YANG, Chef, and Ansible protocols are provided separately and must be supported only if the corresponding protocol option is provided by the xNF providor.
73
74 Configuration Management via Netconf/YANG
75 ~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~
76
77  * R-30278 The xNF provider **MUST** provide a Resource/Device YANG model as a foundation for creating the YANG model for configuration. This will include xNF attributes/parameters and valid values/attributes configurable by policy.
78
79 Configuration Management via Chef
80 ~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~
81
82  * R-13390 The xNF provider **MUST** provide cookbooks to be loaded on the appropriate Chef Server.
83  * R-18525 The xNF provider **MUST** provide a JSON file for each supported action for the xNF.  The JSON file must contain key value pairs with all relevant values populated with sample data that illustrates its usage. The fields and their description are defined in Appendix A.
84
85  Note: Chef support in ONAP is not currently available and planned for 4Q 2017.
86
87 Configuration Management via Ansible
88 ~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~
89
90  * R-75608 The xNF provider **MUST** provide playbooks to be loaded on the appropriate Ansible Server.
91  * R-16777 The xNF provider **MUST** provide a JSON file for each supported action for the xNF.  The JSON file must contain key value pairs with all relevant values populated with sample data that illustrates its usage. The fields and their description are defined in Appendix B.
92
93 * R-46567 The xNF Package **MUST** include configuration scripts for boot sequence and configuration.
94 * R-16065 The xNF provider **MUST** provide configurable parameters (if unable to conform to YANG model) including xNF attributes/parameters and valid values, dynamic attributes and cross parameter dependencies (e.g., customer provisioning data).
95
96 Resource Control Loop
97 ^^^^^^^^^^^^^^^^^^^^^^^
98
99 * R-22888 The xNF provider **MUST** provide documentation for the xNF Policy Description to manage the xNF runtime lifecycle. The document must include a description of how the policies (conditions and actions) are implemented in the xNF.
100 * R-01556 The xNF Package **MUST** include documentation describing the fault, performance, capacity events/alarms and other event records that are made available by the xNF. The document must include:
101
102  - A unique identification string for the specific xNF, a description of the problem that caused the error, and steps or procedures to perform Root Cause Analysis and resolve the issue.
103  - All events, severity level (e.g., informational, warning, error) and descriptions including causes/fixes if applicable for the event.
104  - All events (fault, measurement for xNF Scaling, Syslogs, State Change and Mobile Flow), that need to be collected at each VM, VNFC (defined in `VNF Guidelines <http://onap.readthedocs.io/en/latest/submodules/vnfrqts/guidelines.git/docs/vnf_guidelines/vnf_guidelines.html#a-glossary>`__ ) and for the overall xNF.
105
106 * R-27711 The xNF provider **MUST** provide an XML file that contains a list of xNF error codes, descriptions of the error, and possible causes/corrective action.
107 * R-01478 The xNF Package **MUST** include documentation describing all parameters that are available to monitor the xNF after instantiation (includes all counters, OIDs, PM data, KPIs, etc.) that must be collected for reporting purposes. The documentation must include a list of:
108
109  - Monitoring parameters/counters exposed for virtual resource management and xNF application management.
110  - KPIs and metrics that need to be collected at each VM for capacity planning and performance management purposes.
111  - The monitoring parameters must include latencies, success rates, retry rates, load and quality (e.g., DPM) for the key transactions/functions supported by the xNF and those that must be exercised by the xNF in order to perform its function.
112  - For each KPI, provide lower and upper limits.
113  - When relevant, provide a threshold crossing alert point for each KPI and describe the significance of the threshold crossing.
114  - For each KPI, identify the suggested actions that need to be performed when a threshold crossing alert event is recorded.
115  - Describe any requirements for the monitoring component of tools for Network Cloud automation and management to provide these records to components of the xNF.
116  - When applicable, provide calculators needed to convert raw data into appropriate reporting artifacts.
117
118 * R-56815 The xNF Package **MUST** include documentation describing supported xNF scaling capabilities and capacity limits (e.g., number of users, bandwidth, throughput, concurrent calls).
119 * R-48596 The xNF Package **MUST** include documentation describing the characteristics for the xNF reliability and high availability.
120 * R-74763 The xNF provider **MUST** provide an artifact per xNF that contains all of the xNF Event Records supported. The artifact should include reference to the specific release of the xNF Event Stream Common Event Data Model document it is based on. (e.g., `VES Event Listener <https://github.com/att/evel-test-collector/tree/master/docs/att_interface_definition>`__)
121
122 Compute, Network, and Storage Requirements
123 ^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^
124
125 * R-35851 The xNF Package **MUST** include xNF topology that describes basic network and application connectivity internal and external to the xNF including Link type, KPIs, Bandwidth, latency, jitter, QoS (if applicable) for each interface.
126 * R-97102 The VNF Package **MUST** include VM requirements via a Heat template that provides the necessary data for:
127
128  - VM specifications for all VNF components - for hypervisor, CPU, memory, storage.
129  - Network connections, interface connections, internal and external to VNF.
130  - High availability redundancy model.
131  - Scaling/growth VM specifications.
132
133  Note: Must comply with the *Heat requirements in 5.b*.
134
135 * R-26881 The xNF provider **MUST** provide the binaries and images needed to instantiate the xNF (xNF and VNFC images).
136 * R-96634 The VNF provider **MUST** describe scaling capabilities to manage scaling characteristics of the VNF.
137
138
139 Testing
140 ^^^^^^^^^^
141
142 * R-43958 The xNF Package **MUST** include documentation describing the tests that were conducted by the xNF providor and the test results.
143 * R-04298 The xNF provider **MUST** provide their testing scripts to support testing.
144 * R-58775 The xNF provider **MUST** provide software components that can be packaged with/near the xNF, if needed, to simulate any functions or systems that connect to the xNF system under test. This component is necessary only if the existing testing environment does not have the necessary simulators.
145
146 Licensing Requirements
147 ^^^^^^^^^^^^^^^^^^^^^^^
148
149 * R-85653 The xNF **MUST** provide metrics (e.g., number of sessions, number of subscribers, number of seats, etc.) to ONAP for tracking every license.
150 * R-44125 The xNF provider **MUST** agree to the process that can be met by Service Provider reporting infrastructure. The Contract shall define the reporting process and the available reporting tools.
151 * R-40827 The xNF provider **MUST** enumerate all of the open source licenses their xNF(s) incorporate.
152 * R-97293 The xNF provider **MUST NOT** require audits of Service Provider’s business.
153 * R-44569 The xNF provider **MUST NOT** require additional infrastructure such as a xNF provider license server for xNF provider functions and metrics.
154 * R-13613 The VNF **MUST** provide clear measurements for licensing purposes to allow automated scale up/down by the management system.
155 * R-27511 The VNF provider **MUST** provide the ability to scale up a VNF provider supplied product during growth and scale down a VNF provider supplied product during decline without “real-time” restrictions based upon VNF provider permissions.
156 * R-85991 The xNF provider **MUST** provide a universal license key per xNF to be used as needed by services (i.e., not tied to a VM instance) as the recommended solution. The xNF provider may provide pools of Unique xNF License Keys, where there is a unique key for each xNF instance as an alternate solution. Licensing issues should be resolved without interrupting in-service xNFs.
157 * R-47849 The xNF provider **MUST** support the metadata about licenses (and their applicable entitlements) as defined in this document for xNF software, and any license keys required to authorize use of the xNF software.  This metadata will be used to facilitate onboarding the xNF into the ONAP environment and automating processes for putting the licenses into use and managing the full lifecycle of the licenses. The details of this license model are described in Appendix C. Note: License metadata support in ONAP is not currently available and planned for 1Q 2018.
158
159 Configuration Management
160 ---------------------------------------------------
161
162 ONAP interacts directly with VNFs through its Network and Application
163 Adapters to perform configuration activities within NFV environment.
164 These activities include service and resource
165 configuration/reconfiguration, automated scaling of resources, service
166 and resource removal to support runtime lifecycle management of VNFs and
167 services. The Adapters employ a model driven approach along with
168 standardized APIs provided by the VNF developers to configure resources
169 and manage their runtime lifecycle.
170
171 Additional details can be found in the `ONAP Application Controller (APPC) API Guide <http://onap.readthedocs.io/en/latest/submodules/appc.git/docs/APPC%20API%20Guide/APPC%20API%20Guide.html>`_, `ONAP VF-C project <http://onap.readthedocs.io/en/latest/submodules/vfc/nfvo/lcm.git/docs/index.html>`_ and the `ONAP SDNC project <http://onap.readthedocs.io/en/latest/submodules/sdnc/northbound.git/docs/index.html>`_.
172
173 NETCONF Standards and Capabilities
174 ^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^
175
176 ONAP Controllers and their Adapters utilize device YANG model and
177 NETCONF APIs to make the required changes in the VNF state and
178 configuration. The VNF providers must provide the Device YANG model and
179 NETCONF server supporting NETCONF APIs to comply with target ONAP and
180 industry standards.
181
182 VNF Configuration via NETCONF Requirements
183 ~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~
184
185 Configuration Management
186 +++++++++++++++++++++++++++
187
188 * R-88026 The xNF **MUST** include a NETCONF server enabling runtime configuration and lifecycle management capabilities.
189 * R-95950 The xNF **MUST** provide a NETCONF interface fully defined by supplied YANG models for the embedded NETCONF server.
190
191 NETCONF Server Requirements
192 ++++++++++++++++++++++++++++++
193
194 * R-73468 The xNF **MUST** allow the NETCONF server connection parameters to be configurable during virtual machine instantiation through Heat templates where SSH keys, usernames, passwords, SSH service and SSH port numbers are Heat template parameters.
195 * R-90007 The xNF **MUST** implement the protocol operation: **close-session()**- Gracefully close the current session.
196 * R-70496 The xNF **MUST** implement the protocol operation: **commit(confirmed, confirm-timeout)** - Commit candidate configuration datastore to the running configuration.
197 * R-18733 The xNF **MUST** implement the protocol operation: **discard-changes()** - Revert the candidate configuration datastore to the running configuration.
198 * R-44281 The xNF **MUST** implement the protocol operation: **edit-config(target, default-operation, test-option, error-option, config)** - Edit the target configuration datastore by merging, replacing, creating, or deleting new config elements.
199 * R-60106 The xNF **MUST** implement the protocol operation: **get(filter)** - Retrieve (a filtered subset of) the running configuration and device state information. This should include the list of xNF supported schemas.
200 * R-29488 The xNF **MUST** implement the protocol operation: **get-config(source, filter)** - Retrieve a (filtered subset of a) configuration from the configuration datastore source.
201 * R-11235 The xNF **MUST** implement the protocol operation: **kill-session(session)** - Force the termination of **session**.
202 * R-02597 The xNF **MUST** implement the protocol operation: **lock(target)** - Lock the configuration datastore target.
203 * R-96554 The xNF **MUST** implement the protocol operation: **unlock(target)** - Unlock the configuration datastore target.
204 * R-29324 The xNF **SHOULD** implement the protocol operation: **copy-config(target, source) -** Copy the content of the configuration datastore source to the configuration datastore target.
205 * R-88031 The xNF **SHOULD** implement the protocol operation: **delete-config(target) -** Delete the named configuration datastore target.
206 * R-97529 The xNF **SHOULD** implement the protocol operation: **get-schema(identifier, version, format) -** Retrieve the YANG schema.
207 * R-62468 The xNF **MUST** allow all configuration data to be edited through a NETCONF <edit-config> operation. Proprietary NETCONF RPCs that make configuration changes are not sufficient.
208 * R-01382 The xNF **MUST** allow the entire configuration of the xNF to be retrieved via NETCONF's <get-config> and <edit-config>, independently of whether it was configured via NETCONF or other mechanisms.
209 * R-28756 The xNF **MUST** support **:partial-lock** and **:partial-unlock** capabilities, defined in RFC 5717. This allows multiple independent clients to each write to a different part of the <running> configuration at the same time.
210 * R-83873 The xNF **MUST** support **:rollback-on-error** value for the <error-option> parameter to the <edit-config> operation. If any error occurs during the requested edit operation, then the target database (usually the running configuration) will be left unaffected. This provides an 'all-or-nothing' edit mode for a single <edit-config> request.
211 * R-68990 The xNF **MUST** support the **:startup** capability. It will allow the running configuration to be copied to this special database. It can also be locked and unlocked.
212 * R-68200 The xNF **MUST** support the **:url** value to specify protocol operation source and target parameters. The capability URI for this feature will indicate which schemes (e.g., file, https, sftp) that the server supports within a particular URL value. The 'file' scheme allows for editable local configuration databases. The other schemes allow for remote storage of configuration databases.
213 * R-20353 The xNF **MUST** implement at least one of the capabilities **:candidate** or **:writable-running**. If both **:candidate** and **:writable-running** are provided then two locks should be supported.
214 * R-11499 The xNF **MUST** fully support the XPath 1.0 specification for filtered retrieval of configuration and other database contents. The 'type' attribute within the <filter> parameter for <get> and <get-config> operations may be set to 'xpath'. The 'select' attribute (which contains the XPath expression) will also be supported by the server. A server may support partial XPath retrieval filtering, but it cannot advertise the **:xpath** capability unless the entire XPath 1.0 specification is supported.
215 * R-83790 The xNF **MUST** implement the **:validate** capability
216 * R-49145 The xNF **MUST** implement **:confirmed-commit** If **:candidate** is supported.
217 * R-58358 The xNF **MUST** implement the **:with-defaults** capability [RFC6243].
218 * R-59610 The xNF **MUST** implement the data model discovery and download as defined in [RFC6022].
219 * R-87662 The xNF **SHOULD** implement the NETCONF Event Notifications [RFC5277].
220 * R-93443 The xNF **MUST** define all data models in YANG [RFC6020], and the mapping to NETCONF shall follow the rules defined in this RFC.
221 * R-26115 The xNF **MUST** follow the data model upgrade rules defined in [RFC6020] section 10. All deviations from section 10 rules shall be handled by a built-in automatic upgrade mechanism.
222 * R-10716 The xNF **MUST** support parallel and simultaneous configuration of separate objects within itself.
223 * R-29495 The xNF **MUST** support locking if a common object is being manipulated by two simultaneous NETCONF configuration operations on the same xNF within the context of the same writable running data store (e.g., if an interface parameter is being configured then it should be locked out for configuration by a simultaneous configuration operation on that same interface parameter).
224 * R-53015 The xNF **MUST** apply locking based on the sequence of NETCONF operations, with the first configuration operation locking out all others until completed.
225 * R-02616 The xNF **MUST** permit locking at the finest granularity if a xNF needs to lock an object for configuration to avoid blocking simultaneous configuration operations on unrelated objects (e.g., BGP configuration should not be locked out if an interface is being configured or entire Interface configuration should not be locked out if a non-overlapping parameter on the interface is being configured).
226 * R-41829 The xNF **MUST** be able to specify the granularity of the lock via a restricted or full XPath expression.
227 * R-66793 The xNF **MUST** guarantee the xNF configuration integrity for all simultaneous configuration operations (e.g., if a change is attempted to the BUM filter rate from multiple interfaces on the same EVC, then they need to be sequenced in the xNF without locking either configuration method out).
228 * R-54190 The xNF **MUST** release locks to prevent permanent lock-outs when/if a session applying the lock is terminated (e.g., SSH session is terminated).
229 * R-03465 The xNF **MUST** release locks to prevent permanent lock-outs when the corresponding <partial-unlock> operation succeeds.
230 * R-63935 The xNF **MUST** release locks to prevent permanent lock-outs when a user configured timer has expired forcing the NETCONF SSH Session termination (i.e., product must expose a configuration knob for a user setting of a lock expiration timer)
231 * R-10173 The xNF **MUST** allow another NETCONF session to be able to initiate the release of the lock by killing the session owning the lock, using the <kill-session> operation to guard against hung NETCONF sessions.
232 * R-88899 The xNF **MUST** support simultaneous <commit> operations within the context of this locking requirements framework.
233 * R-07545 The xNF **MUST** support all operations, administration and management (OAM) functions available from the supplier for xNFs using the supplied YANG code and associated NETCONF servers.
234 * R-60656 The xNF **MUST** support sub tree filtering.
235 * R-80898 The xNF **MUST** support heartbeat via a <get> with null filter.
236 * R-06617 The xNF **MUST** support get-schema (ietf-netconf-monitoring) to pull YANG model over session.
237 * R-25238 The xNF PACKAGE **MUST** validated YANG code using the open source pyang [1]_ program using the following commands:
238
239 .. code-block:: python
240
241  $ pyang --verbose --strict <YANG-file-name(s)>
242  $ echo $!
243
244 * R-63953 The xNF **MUST** have the echo command return a zero value otherwise the validation has failed
245 * R-26508 The xNF **MUST** support NETCONF server that can be mounted on OpenDaylight (client) and perform the following operations:
246
247 - Modify, update, change, rollback configurations using each configuration data element.
248 - Query each state (non-configuration) data element.
249 - Execute each YANG RPC.
250 - Receive data through each notification statement.
251
252
253
254 The following requirements provides the Yang models that suppliers must
255 conform, and those where applicable, that suppliers need to use.
256
257 * R-28545 The xNF **MUST** conform its YANG model to RFC 6060, “YANG - A Data Modeling Language for the Network Configuration Protocol (NETCONF)”
258 * R-29967 The xNF **MUST** conform its YANG model to RFC 6022, “YANG module for NETCONF monitoring”.
259 * R-22700 The xNF **MUST** conform its YANG model to RFC 6470, “NETCONF Base Notifications”.
260 * R-10353 The xNF **MUST** conform its YANG model to RFC 6244, “An Architecture for Network Management Using NETCONF and YANG”.
261 * R-53317 The xNF **MUST** conform its YANG model to RFC 6087, “Guidelines for Authors and Reviewers of YANG Data Model Documents”.
262 * R-33955 The xNF **SHOULD** conform its YANG model to RFC 6991, “Common YANG Data Types”.
263 * R-22946 The xNF **SHOULD** conform its YANG model to RFC 6536, “NETCONF Access Control Model”.
264 * R-10129 The xNF **SHOULD** conform its YANG model to RFC 7223, “A YANG Data Model for Interface Management”.
265 * R-12271 The xNF **SHOULD** conform its YANG model to RFC 7223, “IANA Interface Type YANG Module”.
266 * R-49036 The xNF **SHOULD** conform its YANG model to RFC 7277, “A YANG Data Model for IP Management”.
267 * R-87564 The xNF **SHOULD** conform its YANG model to RFC 7317, “A YANG Data Model for System Management”.
268 * R-24269 The xNF **SHOULD** conform its YANG model to RFC 7407, “A YANG Data Model for SNMP Configuration”.
269
270 The NETCONF server interface shall fully conform to the following
271 NETCONF RFCs.
272
273 * R-33946 The xNF **MUST** conform to the NETCONF RFC 4741, “NETCONF Configuration Protocol”.
274 * R-04158 The xNF **MUST** conform to the NETCONF RFC 4742, “Using the NETCONF Configuration Protocol over Secure Shell (SSH)”.
275 * R-13800 The xNF **MUST** conform to the NETCONF RFC 5277, “NETCONF Event Notification”.
276 * R-01334 The xNF **MUST** conform to the NETCONF RFC 5717, “Partial Lock Remote Procedure Call”.
277 * R-08134 The xNF **MUST** conform to the NETCONF RFC 6241, “NETCONF Configuration Protocol”.
278 * R-78282 The xNF **MUST** conform to the NETCONF RFC 6242, “Using the Network Configuration Protocol over Secure Shell”.
279
280 VNF REST APIs
281 ^^^^^^^^^^^^^^^
282
283 Healthcheck is a command for which no NETCONF support exists. Therefore, this must be supported using a RESTful interface (defined in this section) or
284 with a Chef cookbook/Ansible playbook (defined in sections `Chef Standards and Capabilities`_ and `Ansible Standards and Capabilities`_).
285
286 HealthCheck Definition: The VNF level HealthCheck is a check over the entire scope of the VNF.
287 The VNF must be 100% healthy, ready to take requests and provide services, with all VNF required
288 capabilities ready to provide services and with all active and standby resources fully ready with
289 no open MINOR, MAJOR or CRITICAL alarms.  NOTE: A switch may need to be turned on, but the VNF
290 should be ready to take service requests or be already processing service requests successfully.
291
292 The VNF must provide a REST formatted GET RPCs to support Healthcheck queries via the GET method
293 over HTTP(s).
294
295 The port number, url, and other authentication information is provided
296 by the VNF provider.
297
298 REST APIs
299 ~~~~~~~~~
300
301 * R-31809 The xNF **MUST** support the HealthCheck RPC. The HealthCheck RPC executes a xNF Provider-defined xNF Healthcheck over the scope of the entire xNF (e.g., if there are multiple VNFCs, then run a health check, as appropriate, for all VNFCs). It returns a 200 OK if the test completes. A JSON object is returned indicating state (healthy, unhealthy), scope identifier, time-stamp and one or more blocks containing info and fault information. If the xNF is unable to run the HealthCheck, return a standard http error code and message.
302
303 Examples:
304
305 .. code-block:: java
306
307  200
308  {
309    "identifier": "scope represented",
310    "state": "healthy",
311    "time": "01-01-1000:0000"
312  }
313
314  200
315  {
316    "identifier": "scope represented",
317    "state": "unhealthy",
318     {[
319    "info": "System threshold exceeded details",
320    "fault":
321      {
322        "cpuOverall": 0.80,
323        "cpuThreshold": 0.45
324      }
325      ]},
326    "time": "01-01-1000:0000"
327  }
328
329
330 Chef Standards and Capabilities
331 ^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^
332
333 ONAP will support configuration of VNFs via Chef subject to the
334 requirements and guidelines defined in this section.
335
336 The Chef configuration management mechanism follows a client-server
337 model. It requires the presence of a Chef-Client on the VNF that will be
338 directly managed by a Chef Server. The Chef-client will register with
339 the appropriate Chef Server and are managed via ‘cookbooks’ and
340 configuration attributes loaded on the Chef Server which contain all
341 necessary information to execute the appropriate actions on the VNF via
342 the Chef-client.
343
344 ONAP will utilize the open source Chef Server, invoke the documented
345 Chef REST APIs to manage the VNF and requires the use of open source
346 Chef-Client and Push Jobs Client on the VNF
347 (https://downloads.chef.io/).
348
349 VNF Configuration via Chef Requirements
350 ~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~
351
352 Chef Client Requirements
353 +++++++++++++++++++++++++
354
355 * R-79224 The xNF **MUST** have the chef-client be preloaded with validator keys and configuration to register with the designated Chef Server as part of the installation process.
356 * R-72184 The xNF **MUST** have routable FQDNs for all the endpoints (VMs) of a xNF that contain chef-clients which are used to register with the Chef Server.  As part of invoking xNF actions, ONAP will trigger push jobs against FQDNs of endpoints for a xNF, if required.
357 * R-47068 The xNF **MAY** expose a single endpoint that is responsible for all functionality.
358 * R-67114 The xNF **MUST** be installed with:
359
360  -  Chef-Client >= 12.0
361  -  Chef push jobs client >= 2.0
362
363 Chef Roles/Requirements
364 ++++++++++++++++++++++++++
365
366 * R-27310 The xNF Package **MUST** include all relevant Chef artifacts (roles/cookbooks/recipes) required to execute xNF actions requested by ONAP for loading on appropriate Chef Server.
367 * R-26567 The xNF Package **MUST** include a run list of roles/cookbooks/recipes, for each supported xNF action, that will perform the desired xNF action in its entirety as specified by ONAP (see Section 7.c, ONAP Controller APIs and Behavior, for list of xNF actions and requirements), when triggered by a chef-client run list in JSON file.
368 * R-98911 The xNF **MUST NOT** use any instance specific parameters for the xNF in roles/cookbooks/recipes invoked for a xNF action.
369 * R-37929 The xNF **MUST** accept all necessary instance specific data from the environment or node object attributes for the xNF in roles/cookbooks/recipes invoked for a xNF action.
370 * R-62170 The xNF **MUST** over-ride any default values for configurable parameters that can be set by ONAP in the roles, cookbooks and recipes.
371 * R-78116 The xNF **MUST** update status on the Chef Server appropriately (e.g., via a fail or raise an exception) if the chef-client run encounters any critical errors/failures when executing a xNF action.
372 * R-44013 The xNF **MUST** populate an attribute, defined as node[‘PushJobOutput’] with the desired output on all nodes in the push job that execute chef-client run if the xNF action requires the output of a chef-client run be made available (e.g., get running configuration).
373 * R-30654 The xNF Package **MUST** have appropriate cookbooks that are designed to automatically ‘rollback’ to the original state in case of any errors for actions that change state of the xNF (e.g., configure).
374 * R-65755 The xNF **SHOULD** support callback URLs to return information to ONAP upon completion of the chef-client run for any chef-client run associated with a xNF action.
375
376 -  As part of the push job, ONAP will provide two parameters in the environment of the push job JSON object:
377     -  ‘RequestId’ a unique Id to be used to identify the request,
378     -  ‘CallbackUrl’, the URL to post response back.
379
380 -  If the CallbackUrl field is empty or missing in the push job, then the chef-client run need not post the results back via callback.
381
382 * R-15885 The xNF **MUST** Upon completion of the chef-client run, POST back on the callback URL, a JSON object as described in Table A2 if the chef-client run list includes a cookbook/recipe that is callback capable. Failure to POST on the Callback Url should not be considered a critical error. That is, if the chef-client successfully completes the xNF action, it should reflect this status on the Chef Server regardless of whether the Callback succeeded or not.
383
384 ONAP Chef API Usage
385 ~~~~~~~~~~~~~~~~~~~
386
387 This section outlines the workflow that ONAP invokes when it receives an
388 action request against a Chef managed VNF.
389
390 1. When ONAP receives a request for an action for a Chef Managed VNF, it
391    retrieves the corresponding template (based on **action** and
392    **VNF)** from its database and sets necessary values in the
393    “Environment”, “Node” and “NodeList” keys (if present) from either
394    the payload of the received action or internal data.
395
396 2. If “Environment” key is present in the updated template, it posts the
397    corresponding JSON dictionary to the appropriate Environment object
398    REST endpoint on the Chef Server thus updating the Environment
399    attributes on the Chef Server.
400
401 3. Next, it creates a Node Object from the “Node” JSON dictionary for
402    all elements listed in the NodeList (using the FQDN to construct the
403    endpoint) by replicating it  [2]_. As part of this process, it will
404    set the name field in each Node Object to the corresponding FQDN.
405    These node objects are then posted on the Chef Server to
406    corresponding Node Object REST endpoints to update the corresponding
407    node attributes.
408
409 4. If PushJobFlag is set to “True” in the template, ONAP requests a push
410    job against all the nodes in the NodeList to trigger
411    chef-client\ **.** It will not invoke any other command via the push
412    job. ONAP will include a callback URL in the push job request and a
413    unique Request Id. An example push job posted by ONAP is listed
414    below:
415
416 .. code-block:: java
417
418    {
419      "command": "chef-client",
420      "run\_timeout": 300,
421      "nodes”: [“node1.vnf\_a.onap.com”, “node2.vnf\_a.onap.com”],
422        "env": {
423                 “RequestId”:”8279-abcd-aksdj-19231”,
424                 “CallbackUrl”:”<callback>”
425               },
426    }
427
428 5. If CallbackCapable field in the template is not present or set to
429    “False” ONAP will poll the Chef Server to check completion status of
430    the push job.
431
432 6. If “GetOutputFlag” is set to “True” in the template and
433    CallbackCapable is not set to “True”, ONAP will retrieve any output
434    from each node where the push job has finished by accessing the Node
435    Object attribute node[‘PushJobOutput’].
436
437 Ansible Standards and Capabilities
438 ^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^
439
440 ONAP will support configuration of VNFs via Ansible subject to the
441 requirements and guidelines defined in this section.
442
443 Ansible allows agentless management of VNFs/VMs/VNFCs via execution of ‘playbooks’
444 over ssh. The ‘playbooks’ are a structured set of tasks which contain all the necessary
445 data and execution capabilities to take the necessary action on one or more target VMs
446 (and/or VNFCs) of the VNF. ONAP will utilize the framework of an Ansible Server that
447 will host and run playbooks to manage VNFs that support Ansible.
448
449 VNF Configuration via Ansible Requirements
450 ~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~
451
452 Ansible Client Requirements
453 +++++++++++++++++++++++++++++
454
455 * R-32217 The xNF **MUST** have routable FQDNs that are reachable via the Ansible Server for the endpoints (VMs) of a xNF on which playbooks will be executed. ONAP will initiate requests to the Ansible Server for invocation of playbooks against these end points [3]_.
456 * R-54373 The xNF **MUST** have Python >= 2.7 on the endpoint VM(s) of a xNF on which an Ansible playbook will be executed.
457 * R-35401 The xNF **MUST** support SSH and allow SSH access to the Ansible server for the endpoint VM(s) and comply with the  Network Cloud Service Provider guidelines for authentication and access.
458 * R-82018 The VNF **SHOULD** load the SSH key onto VNF VM(s) as part of instantiation. This will allow the Ansible Server to authenticate to perform post-instantiation configuration without manual intervention and without requiring specific VNF login IDs and passwords.
459
460  CAUTION: For VNFs configured using Ansible, to eliminate the need for manual steps, post-instantiation and pre-configuration, to upload of SSH keys, SSH keys loaded during (heat) instantiation shall be preserved and not removed by (heat) embedded scripts.
461
462 * R-92866 The VNF **MUST** include as part of post-instantiation configuration done by Ansible Playbooks the removal/update of SSH keys loaded through instantiation to support Ansible. This may include download and install of new SSH keys.
463 * R-91745 The VNF **MUST** update the Ansible Server and other entities storing and using the SSH key for authentication when the SSH key used by Ansible is regenerated/updated.
464
465 Ansible Playbook Requirements
466 +++++++++++++++++++++++++++++++
467
468 An Ansible playbook is a collection of tasks that is executed on the Ansible server (local host) and/or the target VM (s) in order to complete the desired action.
469
470 * R-40293 The xNF **MUST** make available playbooks that conform to the ONAP requirement.
471 * R-49396 The xNF **MUST** support each xNF action by invocation of **one** playbook [4]_. The playbook will be responsible for executing all necessary tasks (as well as calling other playbooks) to complete the request.
472 * R-33280 The xNF **MUST NOT** use any instance specific parameters in a playbook.
473 * R-48698 The xNF **MUST** utilize information from key value pairs that will be provided by the Ansible Server as extra-vars during invocation to execute the desired xNF action. If the playbook requires files, they must also be supplied using the methodology detailed in the Ansible Server API.
474
475 The Ansible Server will determine if a playbook invoked to execute a xNF action finished successfully or not using the “PLAY_RECAP” summary in Ansible log.  The playbook will be considered to successfully finish only if the “PLAY RECAP” section at the end of playbook execution output has no unreachable hosts and no failed tasks. Otherwise, the playbook will be considered to have failed.
476
477 * R-43253 The xNF **MUST** use playbooks designed to allow Ansible Server to infer failure or success based on the “PLAY_RECAP” capability.
478 * R-50252 The xNF **MUST** write to a specific set of text files that will be retrieved and made available by the Ansible Server if, as part of a xNF action (e.g., audit), a playbook is required to return any xNF information. The text files must be written in the same directory as the one from which the playbook is being executed. A text file must be created for each host the playbook run targets/affects, with the name ‘<hostname>_results.txt’ into which any desired output from each respective VM/xNF must be written.
479 * R-51442 The xNF **SHOULD** use playbooks that are designed to automatically ‘rollback’ to the original state in case of any errors for actions that change state of the xNF (e.g., configure).
480
481  NOTE: In case rollback at the playbook level is not supported or possible, the xNF provider shall provide alternative locking mechanism (e.g., for a small xNF the rollback mechanism may rely on workflow to terminate and re-instantiate VNF VMs and then re-run playbook(s)). Backing up updated files also recommended to support rollback when soft rollback is feasible.
482
483 * R-58301 The VNF **SHOULD NOT** use playbooks that make requests to Cloud resources e.g. Openstack (nova, neutron, glance, heat, etc.); therefore, there is no use for Cloud specific variables like Openstack UUIDs in Ansible Playbooks.
484
485  Rationale: Flows that require interactions with Cloud services e.g. Openstack shall rely on workflows run by an Orchestrator or other capability (such as a control loop or Operations GUI) outside Ansible Server which can be executed by a Controller such as APPC.  There are policies, as part of Control Loop models, that send remediation action requests to APPC; these are triggered as a response to an event or correlated events published to Event Bus.
486
487 * R-02651 The VNF **SHOULD** use the Ansible backup feature to save a copy of configuration files before implementing changes to support operations such as backing out of software upgrades, configuration changes or other work as this will help backing out of configuration changes when needed.
488 * R-43353 The VNF **MUST** return control from Ansible Playbooks only after tasks are fully complete, signaling that the playbook completed all tasks. When starting services, return control only after all services are up. This is critical for workflows where the next steps are dependent on prior tasks being fully completed.
489
490  Detailed examples:
491
492  StopApplication Playbook – StopApplication Playbook shall return control and a completion status only after VNF application is fully stopped, all processes/services stopped.
493  StartApplication Playbook – StartApplication Playbook shall return control and a completion status only after all VNF application services are fully up, all processes/services started and ready to provide services. NOTE: Start Playbook should not be declared complete/done after starting one or several processes that start the other processes.
494
495  HealthCheck Playbook:
496
497  SUCCESS – HealthCheck success shall be returned (return code 0) by a Playbook or Cookbook only when VNF is 100% healthy, ready to take requests and provide services, with all VNF required capabilities ready to provide services and with all active and standby resources fully ready with no open MINOR, MAJOR or CRITICAL alarms.
498
499  NOTE: In some cases, a switch may need to be turned on, but a VNF reported as healthy, should be ready to take service requests or be already processing service requests successfully.
500
501  A successful execution of a health-check playbook shall also create one file per VNF VM, named using IP address or VM name followed by “_results.txt (<hostname>_results.txt) to indicate health-check was executed and completed successfully, example: 1xx.2yy.zzz.105_results.txt, with the following contents:
502
503  "status”:"healthy”
504
505  Example:
506
507  $ cat 1xx.2yy.zzz.105_results.txt
508
509  "status”:"healthy”
510
511  FAILURE – A health check playbook shall return a non-zero return code in case VNF is not 100% healthy because one or more VNF application processes are stopped or not ready to take service requests or because critical or non-critical resources are not ready or because there are open MINOR, MAJOR or CRITICAL traps/alarms or because there are issues with the VNF that need attention even if they do not impact services provided by the VNF.
512
513  A failed health-check playbook shall also create one file per VNF VM, named using Playbook Name plus IP address or VM name, followed by “_results.txt to indicate health-check was executed and found issues in the health of the VNF. This is to differentiate from failure to run health-check playbook or tasks to verify the health of the VNF, example: 1xx.2yy.zzz.105_results.txt, with the following contents:
514
515  "status”:"unhealthy”
516
517  Example:
518
519  $ cat 1xx.2yy.zzz.105_results.txt
520
521  "status”:"unhealthy”
522
523  See `VNF REST APIs`_ for additional details on HealthCheck.
524
525 ONAP Controller / Ansible API Usage
526 ~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~
527
528 This section outlines the workflow that ONAP Controller invokes when it receives an action request against an Ansible managed VNF.
529
530  #. When ONAP Controller receives a request for an action for an AnsibleManaged VNF, it retrieves the corresponding template (based on **action** and **VNF**) from its database and sets necessary values (such as an Id, NodeList, and EnvParameters) from either information in the request or data obtained from other sources.   This is referred to as the payload that is sent as a JSON object to the Ansible server.
531  #. The ONAP Controller sends a request to the Ansible server to execute the action.
532  #. The ONAP Controller polls the Ansible Server for result (success or failure).  The ONAP Controllers has a timeout value which is contained in the template.   If the result is not available when the timeout is reached, the ONAP Controller stops polling and returns a timeout error to the requester.   The Ansible Server continues to process the request.
533
534
535 ONAP Controller APIs and Behavior
536 ^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^
537
538 ONAP Controllers such as APPC expose a northbound API to clients which offer a set of commands. The following commands are expected to be supported
539 on all VNF’s if applicable, either directly (via the Netconf interface) or indirectly (via a Chef or Ansible server). There are additional commands
540 offered to northbound clients that are not listed here, as these commands either act internally on the Controller itself or depend upon network cloud
541 components for implementation (thus, these actions do not put any special requirement on the VNF provider).
542
543 The following table summarizes how the VNF must act in response to
544 commands from ONAP.
545
546 Table 8. ONAP Controller APIs and NETCONF Commands
547
548 +---------------------+----------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------+-------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------+
549 | **Action**          | **Description**                                                                                                                                                                                                                                                                  | **NETCONF Commands**                                                                                                                                                                                                          |
550 +=====================+==================================================================================================================================================================================================================================================================================+===============================================================================================================================================================================================================================+
551 | Action              | Queries ONAP Controller for the current state of a previously submitted runtime LCM (Lifecycle Management) action.                                                                                                                                                               | There is currently no way to check the request status in NETCONF so action status is managed internally by the ONAP controller.                                                                                               |
552 |                     |                                                                                                                                                                                                                                                                                  |                                                                                                                                                                                                                               |
553 | Status              |                                                                                                                                                                                                                                                                                  |                                                                                                                                                                                                                               |
554 +---------------------+----------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------+-------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------+
555 | Audit, Sync         | Compare active (uploaded) configuration against the current configuration in the ONAP controller. Audit returns failure if different. Sync considers the active (uploaded) configuration as the current configuration.                                                           | The <get-config> operation is used to retrieve the running configuration from the VNF.                                                                                                                                        |
556 +---------------------+----------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------+-------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------+
557 | Lock,               | Returns true when the given VNF has been locked.                                                                                                                                                                                                                                 | There is currently no way to query lock state in NETCONF so VNF locking and unlocking is managed internally by the ONAP controller.                                                                                           |
558 |                     |                                                                                                                                                                                                                                                                                  |                                                                                                                                                                                                                               |
559 | Unlock,             |                                                                                                                                                                                                                                                                                  |                                                                                                                                                                                                                               |
560 |                     |                                                                                                                                                                                                                                                                                  |                                                                                                                                                                                                                               |
561 | CheckLock           |                                                                                                                                                                                                                                                                                  |                                                                                                                                                                                                                               |
562 +---------------------+----------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------+-------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------+
563 | Configure,          | Configure applies a post-instantiation configuration the target VNF or VNFC. ConfigModify updates only a subset of the total configuration parameters of a VNF.                                                                                                                  | The <edit-config> operation loads all or part of a specified configuration data set to the specified target database. If there is no <candidate/> database, then the target is the <running/> database. A <commit> follows.   |
564 |                     |                                                                                                                                                                                                                                                                                  |                                                                                                                                                                                                                               |
565 | ConfigModify        |                                                                                                                                                                                                                                                                                  |                                                                                                                                                                                                                               |
566 +---------------------+----------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------+-------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------+
567 | Health              | Executes a VNF health check and returns the result. A health check is VNF-specific.                                                                                                                                                                                              | This command has no existing NETCONF RPC action.  It must be supported either by REST (see `VNF REST APIs`_) or using Ansible or Chef.                                                                                        |
568 |                     |                                                                                                                                                                                                                                                                                  |                                                                                                                                                                                                                               |
569 | Check               |                                                                                                                                                                                                                                                                                  |                                                                                                                                                                                                                               |
570 +---------------------+----------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------+-------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------+
571 | StartApplication,   | ONAP requests application to be started or stopped on the VNF. These actions do not need to be supported if (1) the application starts automatically after Configure or if the VM’s are started and (2) the application gracefully shuts down if the VM’s are stopped.           | These commands have no specific NETCONF RPC action.                                                                                                                                                                           |
572 |                     |                                                                                                                                                                                                                                                                                  |                                                                                                                                                                                                                               |
573 | StopApplication     |                                                                                                                                                                                                                                                                                  | If applicable, these commands must be supported using Ansible or Chef (see Table 9 below).                                                                                                                                    |
574 +---------------------+----------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------+-------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------+
575 | ConfigBackup,       | ONAP requests the VNF configuration parameters to be backed up or restored (replacing existing configuration parameters on the VNF).                                                                                                                                             | These commands have no specific NETCONF RPC action.                                                                                                                                                                           |
576 |                     |                                                                                                                                                                                                                                                                                  |                                                                                                                                                                                                                               |
577 | ConfigRestore       |                                                                                                                                                                                                                                                                                  | They can be supported using Ansible or Chef (see Table 9 below).                                                                                                                                                              |
578 +---------------------+----------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------+-------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------+
579
580 Table 9 lists the required Chef and Ansible support for commands from
581 ONAP.
582
583 Table 9. ONAP Controller APIs and Chef/Ansible Support
584
585 +---------------------+--------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------+---------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------+
586 | **Action**          | **Chef**                                                                                                                                                                                                                                                                                         | **Ansible**                                                                                                                                                                                                                                                                                 |
587 +=====================+==================================================================================================================================================================================================================================================================================================+=============================================================================================================================================================================================================================================================================================+
588 | Action              | Not needed. ActionStatus is managed internally by the ONAP controller.                                                                                                                                                                                                                           | Not needed. ActionStatus is managed internally by the ONAP controller.                                                                                                                                                                                                                      |
589 |                     |                                                                                                                                                                                                                                                                                                  |                                                                                                                                                                                                                                                                                             |
590 | Status              |                                                                                                                                                                                                                                                                                                  |                                                                                                                                                                                                                                                                                             |
591 +---------------------+--------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------+---------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------+
592 | Audit, Sync         | VNF provider must provide any necessary roles, cookbooks, recipes to retrieve the running configuration from a VNF and place it in the respective Node Objects ‘PushJobOutput’ attribute of all nodes in NodeList when triggered by a chef-client run.                                           | VNF provider must provide an Ansible playbook to retrieve the running configuration from a VNF and place the output on the Ansible server in a manner aligned with playbook requirements listed in this document.                                                                           |
593 |                     |                                                                                                                                                                                                                                                                                                  |                                                                                                                                                                                                                                                                                             |
594 |                     | The JSON file for this VNF action is required to set “PushJobFlag” to “True” and “GetOutputFlag” to “True”. The “Node” JSON dictionary must have the run list populated with the necessary sequence of roles, cookbooks, recipes.                                                                | The PlaybookName must be provided in the JSON file.                                                                                                                                                                                                                                         |
595 |                     |                                                                                                                                                                                                                                                                                                  |                                                                                                                                                                                                                                                                                             |
596 |                     | The Environment and Node values should contain all appropriate configuration attributes.                                                                                                                                                                                                         | NodeList must list FQDNs of an example VNF on which to execute playbook.                                                                                                                                                                                                                    |
597 |                     |                                                                                                                                                                                                                                                                                                  |                                                                                                                                                                                                                                                                                             |
598 |                     | NodeList must list sample FQDNs that are required to conduct a chef-client run for this VNF Action.                                                                                                                                                                                              |                                                                                                                                                                                                                                                                                             |
599 +---------------------+--------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------+---------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------+
600 | Lock,               | Not needed. VNF locking and unlocking is managed internally by the ONAP controller.                                                                                                                                                                                                              | Not needed. VNF locking and unlocking is managed internally by the ONAP controller.                                                                                                                                                                                                         |
601 |                     |                                                                                                                                                                                                                                                                                                  |                                                                                                                                                                                                                                                                                             |
602 | Unlock,             |                                                                                                                                                                                                                                                                                                  |                                                                                                                                                                                                                                                                                             |
603 |                     |                                                                                                                                                                                                                                                                                                  |                                                                                                                                                                                                                                                                                             |
604 | CheckLock           |                                                                                                                                                                                                                                                                                                  |                                                                                                                                                                                                                                                                                             |
605 +---------------------+--------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------+---------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------+
606 | Configure,          | VNF provider must provide any necessary roles, cookbooks, recipes to apply configuration attributes to the VNF when triggered by a chef-client run. All configurable attributes must be obtained from the Environment and Node objects on the Chef Server.                                       | VNF provider must provide an Ansible playbook that can configure the VNF with parameters supplied by the Ansible Server.                                                                                                                                                                    |
607 |                     |                                                                                                                                                                                                                                                                                                  |                                                                                                                                                                                                                                                                                             |
608 | ConfigModify        | The JSON file for this VNF action should include all configurable attributes in the Environment and/or Node JSON dictionary.                                                                                                                                                                     | The PlaybookName must be provided in the JSON file.                                                                                                                                                                                                                                         |
609 |                     |                                                                                                                                                                                                                                                                                                  |                                                                                                                                                                                                                                                                                             |
610 |                     | The “PushJobFlag” must be set to “True”.                                                                                                                                                                                                                                                         | The “EnvParameters” and/or “FileParameters” field values should be provided and contain all configurable parameters for the VNF.                                                                                                                                                            |
611 |                     |                                                                                                                                                                                                                                                                                                  |                                                                                                                                                                                                                                                                                             |
612 |                     | The “Node” JSON dictionary must have the run list populated with necessary sequence of roles, cookbooks, recipes. This action is not expected to return an output.                                                                                                                               | NodeList must list FQDNs of an example VNF on which to execute playbook.                                                                                                                                                                                                                    |
613 |                     |                                                                                                                                                                                                                                                                                                  |                                                                                                                                                                                                                                                                                             |
614 |                     | “GetOutputFlag” must be set to “False”.                                                                                                                                                                                                                                                          |                                                                                                                                                                                                                                                                                             |
615 |                     |                                                                                                                                                                                                                                                                                                  |                                                                                                                                                                                                                                                                                             |
616 |                     | NodeList must list sample FQDNs that are required to conduct a chef-client run for this VNF Action.                                                                                                                                                                                              |                                                                                                                                                                                                                                                                                             |
617 +---------------------+--------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------+---------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------+
618 | Health              | The VNF level HealthCheck run a check over the entire scope of the VNF (for more details, see `VNF REST APIs`_).  It can be supported either via a REST interface or with Chef roles, cookbooks, and recipes.                                                                                    | The VNF level HealthCheck run a check over the entire scope of the VNF (for more details, see `VNF REST APIs`_).  It can be supported either via a REST interface or with an Ansible playbook.                                                                                              |
619 |                     |                                                                                                                                                                                                                                                                                                  |                                                                                                                                                                                                                                                                                             |
620 | Check               |                                                                                                                                                                                                                                                                                                  |                                                                                                                                                                                                                                                                                             |
621 +---------------------+--------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------+---------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------+
622 | StartApplication,   | VNF provider must provide roles, cookbooks, recipes to start an application on the VNF when triggered by a chef-client run. If application does not start, the run must fail or raise an exception. If application is already started, or starts successfully, the run must finish successfully. | VNF provider must provide an Ansible playbook to start the application on the VNF. If application does not start, the playbook must indicate failure. If application is already started, or starts successfully, the playbook must finish successfully.                                     |
623 |                     |                                                                                                                                                                                                                                                                                                  |                                                                                                                                                                                                                                                                                             |
624 | StopApplication     | For StopApplication, the application must be stopped gracefully (no loss of traffic).                                                                                                                                                                                                            | For StopApplication, the application must be stopped gracefully (no loss of traffic).                                                                                                                                                                                                       |
625 +---------------------+--------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------+---------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------+
626 | ConfigBackup,       | VNF provider must provide roles, cookbooks, recipes to backup or restore the configuration parameters on the VNF when triggered by an ECOMP request.                                                                                                                                             | VNF provider must provide an Ansible playbook to backup or restore the configuration parameters on the VNF when triggered by an ECOMP request.                                                                                                                                              |
627 |                     |                                                                                                                                                                                                                                                                                                  |                                                                                                                                                                                                                                                                                             |
628 |                     | When the ConfigBackup command is executed, the current VNF configuration parameters are copied over to the Ansible or Chef server (if there is an existing set of backed up parameters, they are overwritten). When the ConfigRestore command is executed, the VNF configuration parameters      | When the ConfigBackup command is executed, the current VNF configuration parameters are copied over to the Ansible or Chef server (if there is an existing set of backed up parameters, they are overwritten). When the ConfigRestore command is executed, the VNF configuration parameters |
629 | ConfigRestore       | which are backed up on the Ansible or Chef server are applied to the VNF (replacing existing parameters). It can be assumed that the VNF is not in service when a ConfigRestore command is executed.                                                                                             | which are backed up on the Ansible or Chef server are applied to the VNF (replacing existing parameters). It can be assumed that the VNF is not in service when a ConfigRestore command is executed.                                                                                        |
630 |                     |                                                                                                                                                                                                                                                                                                  |                                                                                                                                                                                                                                                                                             |
631 |                     | If either command fails, the run must fail or raise an exception.                                                                                                                                                                                                                                | If either command fails, the run must fail or raise an exception.                                                                                                                                                                                                                           |
632 +---------------------+--------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------+---------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------+
633
634 For information purposes, the following ONAP controller functions are
635 planned in the future:
636
637 Table 10. Planned ONAP Controller Functions
638
639 +------------------+---------------------------------------------------------------------------------------------------------------------------------------------------------------------------------+
640 | Action           | Description                                                                                                                                                                     |
641 +==================+=================================================================================================================================================================================+
642 | UpgradeSoftware  | Upgrades the target VNF to a new software version.                                                                                                                              |
643 +------------------+---------------------------------------------------------------------------------------------------------------------------------------------------------------------------------+
644 | QuiesceTraffic,  | Quiesces traffic (stops traffic gracefully) and resume traffic on the VNF.   These commands do not stop the application processes (which is done using StopApplication).        |
645 | ResumeTraffic    |                                                                                                                                                                                 |
646 +------------------+---------------------------------------------------------------------------------------------------------------------------------------------------------------------------------+
647
648
649 Monitoring & Management
650 --------------------------------------------------
651
652 This section addresses data collection and event processing functionality that is directly
653 dependent on the interfaces provided by the VNFs’ APIs. These can be in the form of asynchronous
654 interfaces for event, fault notifications, and autonomous data streams. They can also be
655 synchronous interfaces for on-demand requests to retrieve various performance, usage,
656 and other event information.
657
658 The target direction for VNF interfaces is to employ APIs that are implemented
659 utilizing standardized messaging and modeling protocols over standardized transports.
660 Migrating to a virtualized environment presents a tremendous opportunity to eliminate
661 the need for proprietary interfaces for VNF provider equipment while removing the traditional
662 boundaries between Network Management Systems and Element Management Systems. Additionally,
663 VNFs provide the ability to instrument the networking applications by creating event
664 records to test and monitor end-to-end data flow through the network, similar to what
665 physical or virtual probes provide without the need to insert probes at various points
666 in the network. The VNF providers must be able to provide the aforementioned set of required
667 data directly to the ONAP collection layer using standardized interfaces.
668
669 Data Model for Event Records
670 ^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^
671
672 This section describes the data model for the collection of telemetry data from VNFs
673 by Service Providers (SPs) to manage VNF health and runtime lifecycle. This data
674 model is referred to as the VNF Event Streaming (VES) specifications. While this
675 document is focused on specifying some of the records from the ONAP perspective,
676 there may be other external bodies using the same framework to specify additional
677 records. For example, OPNFV has a VES project  that is looking to specify records
678 for OpenStack’s internal telemetry to manage Application (VNFs), physical and
679 virtual infrastructure (compute, storage, network devices), and virtual infrastructure
680 managers (cloud controllers, SDN controllers). Note that any configurable parameters
681 for these data records (e.g., frequency, granularity, policy-based configuration)
682 will be managed using the “Configuration” framework described in the prior sections
683 of this document.
684
685 The Data Model consists of:
686
687 -  Common Header Record: This data structure precedes each of the
688    Technology Independent and Technology Specific records sections of
689    the data model.
690
691 -  Technology Independent Records: This version of the document specifies
692    the model for Fault, Heartbeat, State Change, Syslog, Threshold Crossing
693    Alerts, and VNF Scaling* (short for measurementForVfScalingFields – actual
694    name used in JSON specification) records. In the future, these may be
695    extended to support other types of technology independent records. Each
696    of these records allows additional fields (name/ value pairs) for extensibility.
697    The VNF provider can use these VNF Provider-specific additional fields to provide
698    additional information that may be relevant to the managing systems.
699
700 -  Technology Specific Records: This version of the document specifies the model
701    for Mobile Flow records, Signaling and Voice Quality records. In the future,
702    these may be extended to support other types of records (e.g. Network Fabric,
703    Security records, etc.). Each of these records allows additional fields
704    (name/value pairs) for extensibility. The VNF providers can use these VNF-specific
705    additional fields to provide additional information that may be relevant to the
706    managing systems. A placeholder for additional technology specific areas of
707    interest to be defined in the future documents has been depicted.
708
709 |image0|
710
711 Figure 1. Data Model for Event Records
712
713 Event Records - Data Structure Description
714 ^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^
715
716 The data structure for event records consists of:
717
718 -  a Common Event Header block;
719
720 -  zero or more technology independent domain blocks; and
721
722    -  e.g., Fault domain, State Change domain, Syslog domain, etc.
723
724 -  zero or more technology specific domain blocks.
725
726    -  e.g., Mobile Flow domain, Signaling domain, Voice Quality domain,
727       etc.
728
729 Common Event Header
730 ~~~~~~~~~~~~~~~~~~~~~
731
732 The common header that precedes any of the domain-specific records contains
733 information identifying the type of record to follow, information about
734 the sender and other identifying characteristics related to timestamp,
735 sequence number, etc.
736
737 Technology Independent Records – Fault Fields
738 ~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~
739
740 The Fault Record, describing a condition in the Fault domain, contains
741 information about the fault such as the entity under fault, the
742 severity, resulting status, etc.
743
744 Technology Independent Records – Heartbeat Fields
745 ~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~
746
747 The Heartbeat Record provides an optional structure for communicating
748 information about heartbeat or watchdog signaling events.  It can
749 contain information about service intervals, status information etc.
750 as required by the heartbeat implementation.
751
752 Note: Heartbeat records would only have the Common Event Header block.
753 An optional heartbeat domain is available if required by the heartbeat
754 implementation.
755
756 Technology Independent Records – State Change Fields
757 ~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~
758
759 The State Change Record provides a structure for communicating information
760 about data flow through the VNF. It can contain information about state
761 change related to physical device that is reported by VNF. As an example,
762 when cards or port name of the entity that has changed state.
763
764 Technology Independent Records – Syslog Fields
765 ~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~
766
767 The Syslog Record provides a structure for communicating any type of
768 information that may be logged by the VNF. It can contain information
769 about system internal events, status, errors, etc.
770
771 Technology Independent Records – Threshold Crossing Alert Fields
772 ~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~
773
774 The Threshold Crossing Alert (TCA) Record provides a structure for
775 communicating information about threshold crossing alerts. It can
776 contain alert definitions and types, actions, events, timestamps
777 and physical or logical details.
778
779 Technology Independent Records - VNF Scaling Fields
780 ~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~
781
782 The VNF Scaling\* (short for measurementForVfScalingFields –
783 actual name used in JSON specification) Record contains information
784 about VNF and VNF resource structure and its condition to help in
785 the management of the resources for purposes of elastic scaling.
786
787 Technology Independent Records – otherFields
788 ~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~
789
790 The otherFields Record defines fields for events belonging to the
791 otherFields domain of the Technology Independent domain enumeration.
792 This record provides a mechanism to convey a complex set of fields
793 (possibly nested or opaque) and is purely intended to address
794 miscellaneous needs such as addressing time-to-market considerations
795 or other proof-of-concept evaluations. Hence, use of this record
796 type is discouraged and should be minimized.
797
798 Technology Specific Records – Mobile Flow Fields
799 ~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~
800
801 The Mobile Flow Record provides a structure for communicating
802 information about data flow through the VNF. It can contain
803 information about connectivity and data flows between serving
804 elements for mobile service, such as between LTE reference points, etc.
805
806 Technology Specific Records – Signaling Fields
807 ~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~
808
809 The Signaling Record provides a structure for communicating information
810 about signaling messages, parameters and signaling state.  It can
811 contain information about data flows for signaling and controlling
812 multimedia communication sessions such as voice and video calls.
813
814 Technology Specific Records – Voice Quality Fields
815 ~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~
816 The Voice Quality Record provides a structure for communicating information
817 about voice quality statistics including media connection information,
818 such as transmitted octet and packet counts, packet loss, packet delay
819 variation, round-trip delay, QoS parameters and codec selection.
820
821 Technology Specific Records – Future Domains
822 ~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~
823
824 The futureDomains Record is a placeholder for additional technology
825 specific areas of interest that will be defined and described
826 in the future documents.
827
828 Data Structure Specification of the Event Record
829 ^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^
830
831 For additional information on the event record formats of the data
832 structures mentioned above, please refer to `VES Event
833 Listener <https://github.com/att/evel-test-collector/tree/master/docs/att_interface_definition>`__.
834
835 Transports and Protocols Supporting Resource Interfaces
836 ^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^
837
838 Delivery of data from VNFs to ONAP must use the common transport mechanisms and protocols
839 for all VNFs as defined in this document. Transport mechanisms and protocols have been
840 selected to enable both high volume and moderate volume datasets, as well as asynchronous
841 and synchronous communications over secure connections. The specified encoding provides
842 self-documenting content, so data fields can be changed as needs evolve, while minimizing
843 changes to data delivery.
844
845 The term ‘Event Record’ is used throughout this document to represent various forms of
846 telemetry or instrumentation made available by the VNF including, faults, status events,
847 various other types of VNF measurements and logs. Headers received by themselves must be
848 used as heartbeat indicators. Common structures and delivery protocols for other types of
849 data will be given in future versions of this document as we get more insight into data
850 volumes and required processing.
851
852 In the following sections, we provide options for encoding, serialization and data
853 delivery. Agreements between Service Providers and VNF providers shall determine which
854 encoding, serialization and delivery method to use for particular data sets. The selected
855 methods must be agreed to prior to the on-boarding of the VNF into ONAP design studio.
856
857 VNF Telemetry using VES/JSON Model
858 ~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~
859
860 The preferred model for data delivery from a VNF to ONAP DCAE is the JSON driven model as depicted in Figure 2.
861
862 |image1|
863
864 Figure 2. VES/JSON Driven Model
865
866 VNF providers will provide a YAML artifact to the Service Provider that describes:
867
868 * standard VES/JSON model information elements (key/values) that the VNF provides
869 * any additional non-standard (custom) VES/JSON model information elements (key/values) that the VNF provides
870
871 Using the semantics and syntax supported by YAML, VNF providers will indicate specific conditions that may
872 arise, and recommend actions that should be taken at specific thresholds, or if specific conditions
873 repeat within a specified time interval.
874
875 Based on the VNF provider's recommendations, the Service Provider may create additional YAML artifacts
876 (using ONAP design Studio), which finalizes Service Provider engineering rules for the processing of
877 the VNF events.  The Service Provider may alter the threshold levels recommended by the VNF providor,
878 and may modify and more clearly specify actions that should be taken when specified conditions arise.
879 The Service Provider-created version of the YAML artifact will be distributed to ONAP applications
880 by the Design framework.
881
882 VNF Telemetry using YANG Model
883 ~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~
884
885 In addition to the JSON driven model described above, a YANG driven model can also be
886 supported, as depicted in Figure 3.
887
888 |image2|
889
890 Figure 3. YANG Driven Model
891
892 VNF providers will provide to the Service Provider the following YANG model artifacts:
893
894 * common IETF YANG modules that support the VNF
895 * native (VNF provider-supplied) YANG modules that support the VNF
896 * open (OpenConfig) YANG modules and the following configuration-related information, including:
897
898   * telemetry configuration and operational state data; such as:
899
900     * sensor paths
901     * subscription bindings
902     * path destinations
903     * delivery frequency
904     * transport mechanisms
905     * data encodings
906
907 * a YAML artifact that provides all necessary mapping relationships between YANG model data types to VES/JSON information elements
908 * YANG helper or decoder functions that automate the conversion between YANG model data types to VES/JSON information elements
909 * OPTIONAL: YANG Telemetry modules in JSON format per RFC 7951
910
911 Using the semantics and syntax supported by YANG, VNF providers will indicate specific conditions that may
912 arise, and recommend actions that should be taken at specific thresholds, or if specific conditions
913 repeat within a specified time interval.
914
915 Based on the VNF provider's recommendations, the Service Provider may create additional YAML artifacts
916 (using ONAP design Studio), which finalizes Service Provider engineering rules for the processing
917 of the VNF events.  The Service Provider may alter the threshold levels recommended by the
918 VNF provider, and may modify and more clearly specify actions that should be taken when specified
919 conditions arise.  The Service Provided-created version of the YAML will be distributed to ONAP
920 applications by the Design framework.
921
922 Note: While supporting the YANG model described above, we are still leveraging the VES JSON
923 based model in DCAE.  The purpose of the diagram above is to illustrate the concept only and
924 not to imply a specific implementation.
925
926 VNF Telemetry using Google Protocol Buffers
927 ~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~
928
929 In addition to the data delivery models described above, support for delivery of VNF telemetry
930 using Google Protocol Buffers (GPB) can also be supported, as depicted in Figure 4.
931
932 VNF providers will provide to the Service Provider the additional following artifacts to
933 support the delivery of VNF telemetry to DCAE via the open-source gRPC mechanism using
934 Google's Protocol Buffers:
935
936 * the YANG model artifacts described in support of the "VNF Telemetry using YANG Model"
937 * valid definition file(s) for all GPB / KV-GPB encoded messages
938 * valid definition file(s) for all gRPC services
939 * gRPC method parameters and return types specified as Protocol Buffers messages
940
941 |image3|
942
943 Figure 4. Protocol Buffers Driven Model
944
945 Note: if Google Protocol Buffers are employed for delivery of VNF telemetry, Key-Value
946 Google Protocol Buffers (KV-GPB) is the preferred serialization method.  Details of
947 specifications and versioning corresponding to a release can be found
948 at: `VES Event Listener <https://github.com/att/evel-test-collector/tree/master/docs/att_interface_definition>`__.
949
950 Note: While supporting the VNF telemetry delivery approach described above, we are
951 still leveraging the VES JSON based model in DCAE.  The purpose of the diagram above
952 is to illustrate the concept only and not to imply a specific implementation.
953
954 Monitoring & Management Requirements
955 ^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^
956
957 VNF telemetry via standardized interface
958 ~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~
959
960 * R-51910 The xNF **MUST** provide all telemetry (e.g., fault event records, syslog records, performance records etc.) to ONAP using the model, format and mechanisms described in this section.
961
962 Encoding and Serialization
963 ~~~~~~~~~~~~~~~~~~~~~~~~~~~
964
965 Content delivered from VNFs to ONAP is to be encoded and serialized using JSON:
966
967 JSON
968 ~~~~~~~~~~~~~~~~~~
969
970 * R-19624 The xNF **MUST** encode and serialize content delivered to ONAP using JSON (RFC 7159) plain text format. High-volume data
971   is to be encoded and serialized using `Avro <http://avro.apache.org/>`_, where the Avro [5]_ data format are described using JSON.
972
973  -  JSON plain text format is preferred for moderate volume data sets (option 1), as JSON has the advantage of having well-understood simple processing and being human-readable without additional decoding. Examples of moderate volume data sets include the fault alarms and performance alerts, heartbeat messages, measurements used for xNF scaling and syslogs.
974  -  Binary format using Avro is preferred for high volume data sets (option 2) such as mobility flow measurements and other high-volume streaming events (such as mobility signaling events or SIP signaling) or bulk data, as this will significantly reduce the volume of data to be transmitted. As of the date of this document, all events are reported using plain text JSON and REST.
975  -  Avro content is self-documented, using a JSON schema. The JSON schema is delivered along with the data content (http://avro.apache.org/docs/current/ ). This means the presence and position of data fields can be recognized automatically, as well as the data format, definition and other attributes. Avro content can be serialized as JSON tagged text or as binary. In binary format, the JSON schema is included as a separate data block, so the content is not tagged, further compressing the volume. For streaming data, Avro will read the schema when the stream is established and apply the schema to the received content.
976
977 In addition to the preferred method (JSON), content can be delivered from xNFs to ONAP can be encoded and serialized using Google Protocol Buffers (GPB).
978
979 KV-GPB/GPB
980 ~~~~~~~~~~~~~~~~~~
981
982 Telemetry data delivered using Google Protocol Buffers v3 (proto3) can be serialized in one of the following methods:
983
984 * Key-value Google Protocol Buffers (KV-GPB) is also known as self-describing GPB:
985
986   * keys are strings that correspond to the path of the system resources for the VNF being monitored.
987   * values correspond to integers or strings that identify the operational state of the VNF resource, such a statistics counters and the state of a VNF resource.
988
989 * VNF providers must supply valid KV-GPB definition file(s) to allow for the decoding of all KV-GPB encoded telemetry messages.
990
991 * Native Google Protocol Buffers (GPB) is also known as compact GPB:
992
993   * keys are represented as integers pointing to the system resources for the VNF being monitored.
994   * values correspond to integers or strings that identify the operational state of the VNF resource, such a statistics counters and the state of a VNF resource.
995
996 * Google Protocol Buffers (GPB) requires metadata in the form of .proto files. VNF providers must supply the necessary GPB .proto files such that GPB telemetry messages can be encoded and decoded.
997
998 * In the future, we may consider support for other types of encoding & serialization methods based on industry demand
999
1000
1001 Reporting Frequency
1002 ~~~~~~~~~~~~~~~~~~~~~
1003
1004 * R-98191 The xNF **MUST** vary the frequency that asynchronous data is delivered based on the content and how data may be aggregated or grouped together. For example, alarms and alerts are expected to be delivered as soon as they appear. In contrast, other content, such as performance measurements, KPIs or reported network signaling may have various ways of packaging and delivering content. Some content should be streamed immediately; or content may be monitored over a time interval, then packaged as collection of records and delivered as block; or data may be collected until a package of a certain size has been collected; or content may be summarized statistically over a time interval, or computed as a KPI, with the summary or KPI being delivered.
1005
1006   -  We expect the reporting frequency to be configurable depending on the virtual network function’s needs for management. For example, Service Provider may choose to vary the frequency of collection between normal and trouble-shooting scenarios.
1007   -  Decisions about the frequency of data reporting will affect the size of delivered data sets, recommended delivery method, and how the data will be interpreted by ONAP. These considerations should not affect deserialization and decoding of the data, which will be guided by the accompanying JSON schema or GPB definition files.
1008
1009 Addressing and Delivery Protocol
1010 ~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~
1011
1012 ONAP destinations can be addressed by URLs for RESTful data PUT. Future data sets may also be addressed by host name and port number for TCP streaming, or by host name and landing zone directory for SFTP transfer of bulk files.
1013
1014 * R-88482 The xNF **SHOULD** use REST using HTTPS delivery of plain text JSON for moderate sized asynchronous data sets, and for high volume data sets when feasible.
1015 * R-84879 The xNF **MUST** have the capability of maintaining a primary and backup DNS name (URL) for connecting to ONAP collectors, with the ability to switch between addresses based on conditions defined by policy such as time-outs, and buffering to store messages until they can be delivered. At its discretion, the service provider may choose to populate only one collector address for a xNF. In this case, the network will promptly resolve connectivity problems caused by a collector or network failure transparently to the xNF.
1016 * R-81777 The VNF **MUST** be configured with initial address(es) to use at deployment time. Subsequently, address(es) may be changed through ONAP-defined policies delivered from ONAP to the VNF using PUTs to a RESTful API, in the same manner that other controls over data reporting will be controlled by policy.
1017 * R-08312 The xNF **MAY** use other options which are expected to include
1018
1019  -  REST delivery of binary encoded data sets.
1020  -  TCP for high volume streaming asynchronous data sets and for other high volume data sets. TCP delivery can be used for either JSON or binary encoded data sets.
1021  -  SFTP for asynchronous bulk files, such as bulk files that contain large volumes of data collected over a long time interval or data collected across many xNFs. This is not preferred. Preferred is to reorganize the data into more frequent or more focused data sets, and deliver these by REST or TCP as appropriate.
1022  -  REST for synchronous data, using RESTCONF (e.g., for xNF state polling).
1023
1024 * R-03070 The xNF **MUST**, by ONAP Policy, provide the ONAP addresses as data destinations for each xNF, and may be changed by Policy while the xNF is in operation. We expect the xNF to be capable of redirecting traffic to changed destinations with no loss of data, for example from one REST URL to another, or from one TCP host and port to another.
1025
1026 Asynchronous and Synchronous Data Delivery
1027 ~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~
1028
1029 * R-06924 The xNF **MUST** deliver asynchronous data as data becomes available, or according to the configured frequency.
1030 * R-73285 The xNF **MUST** must encode, address and deliver the data as described in the previous paragraphs.
1031 * R-42140 The xNF **MUST** respond to data requests from ONAP as soon as those requests are received, as a synchronous response.
1032 * R-34660 The xNF **MUST** use the RESTCONF/NETCONF framework used by the ONAP configuration subsystem for synchronous communication.
1033 * R-86585 The VNF **MUST** use the YANG configuration models and RESTCONF  [RFC8040] (https://tools.ietf.org/html/rfc8040).
1034 * R-11240 The xNF **MUST** respond with content encoded in JSON, as described in the RESTCONF specification. This way the encoding of a synchronous communication will be consistent with Avro.
1035 * R-70266 The xNF **MUST** respond to an ONAP request to deliver the current data for any of the record types defined in `Event Records - Data Structure Description`_ by returning the requested record, populated with the current field values. (Currently the defined record types include fault fields, mobile flow fields, measurements for xNF scaling fields, and syslog fields. Other record types will be added in the future as they become standardized and are made available.)
1036 * R-46290 The xNF **MUST** respond to an ONAP request to deliver granular data on device or subsystem status or performance, referencing the YANG configuration model for the xNF by returning the requested data elements.
1037 * R-43327 The xNF **SHOULD** use `Modeling JSON text with YANG <https://tools.ietf.org/html/rfc7951>`_, If YANG models need to be translated to and from JSON{RFC7951]. YANG configuration and content can be represented via JSON, consistent with Avro, as described in “Encoding and Serialization” section.
1038
1039 Security
1040 ~~~~~~~~~~
1041
1042 * R-42366 The xNF **MUST** support secure connections and transports such as Transport Layer Security (TLS) protocol [`RFC5246 <https://tools.ietf.org/html/rfc5246>`_] and should adhere to the best current practices outlined in `RFC7525 <https://tools.ietf.org/html/rfc7525>`_.
1043 * R-44290 The xNF **MUST** control access to ONAP and to xNFs, and creation of connections, through secure credentials, log-on and exchange mechanisms.
1044 * R-47597 The xNF **MUST** carry data in motion only over secure connections.
1045 * R-68165 The xNF **MUST** encrypt any content containing Sensitive Personal Information (SPI) or certain proprietary data, in addition to applying the regular procedures for securing access and delivery.
1046
1047
1048 .. [1]
1049    https://github.com/mbj4668/pyang
1050
1051 .. [2]
1052    Recall that the Node Object **is required** to be identical across
1053    all VMs of a VNF invoked as part of the action except for the “name”.
1054
1055 .. [3]
1056    Upstream elements must provide the appropriate FQDN in the request to
1057    ONAP for the desired action.
1058
1059 .. [4]
1060    Multiple ONAP actions may map to one playbook.
1061
1062 .. [5]
1063    This option is not currently supported in ONAP and it is currently
1064    under consideration.
1065
1066 .. [6]
1067    https://wiki.opnfv.org/display/PROJ/VNF+Event+Stream
1068
1069 .. |image0| image:: Data_Model_For_Event_Records.png
1070       :width: 7in
1071       :height: 8in
1072
1073
1074 .. |image1| image:: VES_JSON_Driven_Model.png
1075       :width: 5in
1076       :height: 3in
1077
1078 .. |image2| image:: YANG_Driven_Model.png
1079       :width: 5in
1080       :height: 3in
1081
1082 .. |image3| image:: Protocol_Buffers_Driven_Model.png
1083       :width: 4.74in
1084       :height: 3.3in