restore previous template behavior
[ccsdk/sli/plugins.git] / restapi-call-node / provider / src / main / java / org / onap / ccsdk / sli / plugins / restapicall / RestapiCallNode.java
1 /*-
2  * ============LICENSE_START=======================================================
3  * openECOMP : SDN-C
4  * ================================================================================
5  * Copyright (C) 2017 AT&T Intellectual Property. All rights
6  *                      reserved.
7  * ================================================================================
8  * Licensed under the Apache License, Version 2.0 (the "License");
9  * you may not use this file except in compliance with the License.
10  * You may obtain a copy of the License at
11  *
12  *      http://www.apache.org/licenses/LICENSE-2.0
13  *
14  * Unless required by applicable law or agreed to in writing, software
15  * distributed under the License is distributed on an "AS IS" BASIS,
16  * WITHOUT WARRANTIES OR CONDITIONS OF ANY KIND, either express or implied.
17  * See the License for the specific language governing permissions and
18  * limitations under the License.
19  * ============LICENSE_END=========================================================
20  */
21
22 package org.onap.ccsdk.sli.plugins.restapicall;
23
24 import com.sun.jersey.api.client.ClientHandlerException;
25 import com.sun.jersey.api.client.UniformInterfaceException;
26 import java.io.FileInputStream;
27 import java.io.IOException;
28 import java.net.SocketException;
29 import java.net.URI;
30 import java.nio.file.Files;
31 import java.nio.file.Paths;
32 import java.security.KeyStore;
33 import java.util.ArrayList;
34 import java.util.Collections;
35 import java.util.HashMap;
36 import java.util.HashSet;
37 import java.util.List;
38 import java.util.Map;
39 import java.util.Map.Entry;
40 import java.util.Set;
41
42 import javax.net.ssl.HostnameVerifier;
43 import javax.net.ssl.HttpsURLConnection;
44 import javax.net.ssl.KeyManagerFactory;
45 import javax.net.ssl.SSLContext;
46 import javax.net.ssl.SSLSession;
47 import javax.ws.rs.core.EntityTag;
48 import javax.ws.rs.core.MultivaluedMap;
49 import javax.ws.rs.core.UriBuilder;
50
51 import org.apache.commons.lang3.StringUtils;
52 import org.codehaus.jettison.json.JSONException;
53 import org.onap.ccsdk.sli.core.sli.SvcLogicContext;
54 import org.onap.ccsdk.sli.core.sli.SvcLogicException;
55 import org.onap.ccsdk.sli.core.sli.SvcLogicJavaPlugin;
56 import org.slf4j.Logger;
57 import org.slf4j.LoggerFactory;
58
59 import com.sun.jersey.api.client.Client;
60 import com.sun.jersey.api.client.ClientResponse;
61 import com.sun.jersey.api.client.WebResource;
62 import com.sun.jersey.api.client.config.ClientConfig;
63 import com.sun.jersey.api.client.config.DefaultClientConfig;
64 import com.sun.jersey.api.client.filter.HTTPBasicAuthFilter;
65 import com.sun.jersey.client.urlconnection.HTTPSProperties;
66
67 public class RestapiCallNode implements SvcLogicJavaPlugin {
68
69     private static final Logger log = LoggerFactory.getLogger(RestapiCallNode.class);
70
71     private String uebServers;
72     private String defaultUebTemplateFileName = "/opt/bvc/restapi/templates/default-ueb-message.json";
73     protected RetryPolicyStore retryPolicyStore;
74
75     protected RetryPolicyStore getRetryPolicyStore() {
76         return retryPolicyStore;
77     }
78
79     public void setRetryPolicyStore(RetryPolicyStore retryPolicyStore) {
80         this.retryPolicyStore = retryPolicyStore;
81     }
82
83     public RestapiCallNode() {
84
85     }
86
87      /**
88      * Allows Directed Graphs  the ability to interact with REST APIs.
89      * @param parameters HashMap<String,String> of parameters passed by the DG to this function
90      * <table border="1">
91      *  <thead><th>parameter</th><th>Mandatory/Optional</th><th>description</th><th>example values</th></thead>
92      *  <tbody>
93      *      <tr><td>templateFileName</td><td>Optional</td><td>full path to template file that can be used to build a request</td><td>/sdncopt/bvc/restapi/templates/vnf_service-configuration-operation_minimal.json</td></tr>
94      *      <tr><td>restapiUrl</td><td>Mandatory</td><td>url to send the request to</td><td>https://sdncodl:8543/restconf/operations/L3VNF-API:create-update-vnf-request</td></tr>
95      *      <tr><td>restapiUser</td><td>Optional</td><td>user name to use for http basic authentication</td><td>sdnc_ws</td></tr>
96      *      <tr><td>restapiPassword</td><td>Optional</td><td>unencrypted password to use for http basic authentication</td><td>plain_password</td></tr>
97      *      <tr><td>contentType</td><td>Optional</td><td>http content type to set in the http header</td><td>usually application/json or application/xml</td></tr>
98      *      <tr><td>format</td><td>Optional</td><td>should match request body format</td><td>json or xml</td></tr>
99      *      <tr><td>httpMethod</td><td>Optional</td><td>http method to use when sending the request</td><td>get post put delete patch</td></tr>
100      *      <tr><td>responsePrefix</td><td>Optional</td><td>location the response will be written to in context memory</td><td>tmp.restapi.result</td></tr>
101      *      <tr><td>listName[i]</td><td>Optional</td><td>Used for processing XML responses with repeating elements.</td>vpn-information.vrf-details<td></td></tr>
102      *      <tr><td>skipSending</td><td>Optional</td><td></td><td>true or false</td></tr>
103      *      <tr><td>convertResponse </td><td>Optional</td><td>whether the response should be converted</td><td>true or false</td></tr>
104      *      <tr><td>customHttpHeaders</td><td>Optional</td><td>a list additional http headers to be passed in, follow the format in the example</td><td>X-CSI-MessageId=messageId,headerFieldName=headerFieldValue</td></tr>
105      *      <tr><td>dumpHeaders</td><td>Optional</td><td>when true writes http header content to context memory</td><td>true or false</td></tr>
106      *      <tr><td>partner</td><td>Optional</td><td>needed for DME2 calls</td><td>dme2proxy</td></tr>
107      *  </tbody>
108      * </table>
109      * @param ctx Reference to context memory
110      * @throws SvcLogicException
111      * @since 11.0.2
112      * @see String#split(String, int)
113      */
114     public void sendRequest(Map<String, String> paramMap, SvcLogicContext ctx) throws SvcLogicException {
115         sendRequest(paramMap, ctx, null);
116     }
117
118     public void sendRequest(Map<String, String> paramMap, SvcLogicContext ctx, Integer retryCount)
119             throws SvcLogicException {
120
121         RetryPolicy retryPolicy = null;
122         HttpResponse r = new HttpResponse();
123         try {
124             Parameters p = getParameters(paramMap);
125             if (p.partner != null) {
126                 retryPolicy = retryPolicyStore.getRetryPolicy(p.partner);
127             }
128             String pp = p.responsePrefix != null ? p.responsePrefix + '.' : "";
129
130             String req = null;
131             if (p.templateFileName != null) {
132                 String reqTemplate = readFile(p.templateFileName);
133                 req = buildXmlJsonRequest(ctx, reqTemplate, p.format);
134             }
135             r = sendHttpRequest(req, p);
136             setResponseStatus(ctx, p.responsePrefix, r);
137
138             if (p.dumpHeaders && r.headers != null) {
139                 for (Entry<String, List<String>> a : r.headers.entrySet()) {
140                     ctx.setAttribute(pp + "header." + a.getKey(), StringUtils.join(a.getValue(), ","));
141                 }
142             }
143
144             if (r.body != null && r.body.trim().length() > 0) {
145                 ctx.setAttribute(pp + "httpResponse", r.body);
146
147                 if (p.convertResponse) {
148                     Map<String, String> mm = null;
149                     if (p.format == Format.XML)
150                         mm = XmlParser.convertToProperties(r.body, p.listNameList);
151                     else if (p.format == Format.JSON)
152                         mm = JsonParser.convertToProperties(r.body);
153
154                     if (mm != null)
155                         for (Map.Entry<String,String> entry : mm.entrySet())
156                             ctx.setAttribute(pp + entry.getKey(), entry.getValue());
157                 }
158             }
159         } catch (SvcLogicException e) {
160             boolean shouldRetry = false;
161             if (e.getCause().getCause() instanceof SocketException) {
162                 shouldRetry = true;
163             }
164
165             log.error("Error sending the request: " + e.getMessage(), e);
166             String prefix = parseParam(paramMap, "responsePrefix", false, null);
167             if (retryPolicy == null || shouldRetry == false) {
168                 setFailureResponseStatus(ctx, prefix, e.getMessage(), r);
169             } else {
170                 if (retryCount == null) {
171                     retryCount = 0;
172                 }
173                 String retryMessage = retryCount + " attempts were made out of " + retryPolicy.getMaximumRetries() +
174                         " maximum retries.";
175                 log.debug(retryMessage);
176                 try {
177                     retryCount = retryCount + 1;
178                     if (retryCount < retryPolicy.getMaximumRetries() + 1) {
179                         URI uri = new URI(paramMap.get("restapiUrl"));
180                         String hostname = uri.getHost();
181                         String retryString = retryPolicy.getNextHostName(uri.toString());
182                         URI uriTwo = new URI(retryString);
183                         URI retryUri = UriBuilder.fromUri(uri).host(uriTwo.getHost()).port(uriTwo.getPort()).scheme(
184                                 uriTwo.getScheme()).build();
185                         paramMap.put("restapiUrl", retryUri.toString());
186                         log.debug("URL was set to {}", retryUri.toString());
187                         log.debug("Failed to communicate with host {}. Request will be re-attempted using the host {}.",
188                             hostname, retryString);
189                         log.debug("This is retry attempt {} out of {}", retryCount, retryPolicy.getMaximumRetries());
190                         sendRequest(paramMap, ctx, retryCount);
191                     } else {
192                         log.debug("Maximum retries reached, calling setFailureResponseStatus.");
193                         setFailureResponseStatus(ctx, prefix, e.getMessage(), r);
194                     }
195                 } catch (Exception ex) {
196                     log.error("Could not attempt retry.", ex);
197                     String retryErrorMessage =
198                             "Retry attempt has failed. No further retry shall be attempted, calling " +
199                                 "setFailureResponseStatus.";
200                     setFailureResponseStatus(ctx, prefix, retryErrorMessage, r);
201                 }
202             }
203         }
204
205         if (r != null && r.code >= 300)
206             throw new SvcLogicException(String.valueOf(r.code) + ": " + r.message);
207     }
208
209     protected Parameters getParameters(Map<String, String> paramMap) throws SvcLogicException {
210         Parameters p = new Parameters();
211         p.templateFileName = parseParam(paramMap, "templateFileName", false, null);
212         p.restapiUrl = parseParam(paramMap, "restapiUrl", true, null);
213         validateUrl(p.restapiUrl);
214         p.restapiUser = parseParam(paramMap, "restapiUser", false, null);
215         p.restapiPassword = parseParam(paramMap, "restapiPassword", false, null);
216         p.contentType = parseParam(paramMap, "contentType", false, null);
217         p.format = Format.fromString(parseParam(paramMap, "format", false, "json"));
218         p.httpMethod = HttpMethod.fromString(parseParam(paramMap, "httpMethod", false, "post"));
219         p.responsePrefix = parseParam(paramMap, "responsePrefix", false, null);
220         p.listNameList = getListNameList(paramMap);
221         String skipSendingStr = paramMap.get("skipSending");
222         p.skipSending = "true".equalsIgnoreCase(skipSendingStr);
223         p.convertResponse = Boolean.valueOf(parseParam(paramMap, "convertResponse", false, "true"));
224         p.trustStoreFileName = parseParam(paramMap, "trustStoreFileName", false, null);
225         p.trustStorePassword = parseParam(paramMap, "trustStorePassword", false, null);
226         p.keyStoreFileName = parseParam(paramMap, "keyStoreFileName", false, null);
227         p.keyStorePassword = parseParam(paramMap, "keyStorePassword", false, null);
228         p.ssl = p.trustStoreFileName != null && p.trustStorePassword != null && p.keyStoreFileName != null &&
229                 p.keyStorePassword != null;
230         p.customHttpHeaders = parseParam(paramMap, "customHttpHeaders", false, null);
231         p.partner = parseParam(paramMap, "partner", false, null);
232         p.dumpHeaders = Boolean.valueOf(parseParam(paramMap, "dumpHeaders", false, null));
233         return p;
234     }
235
236     private void validateUrl(String restapiUrl) throws SvcLogicException {
237         try {
238             URI.create(restapiUrl);
239         } catch (IllegalArgumentException e) {
240             throw new SvcLogicException("Invalid input of url " + e.getLocalizedMessage(), e);
241         }
242     }
243
244     protected Set<String> getListNameList(Map<String, String> paramMap) {
245         Set<String> ll = new HashSet<>();
246         for (Map.Entry<String,String> entry : paramMap.entrySet())
247             if (entry.getKey().startsWith("listName"))
248                 ll.add(entry.getValue());
249         return ll;
250     }
251
252     protected String parseParam(Map<String, String> paramMap, String name, boolean required, String def)
253             throws SvcLogicException {
254         String s = paramMap.get(name);
255
256         if (s == null || s.trim().length() == 0) {
257             if (!required)
258                 return def;
259             throw new SvcLogicException("Parameter " + name + " is required in RestapiCallNode");
260         }
261
262         s = s.trim();
263         StringBuilder value = new StringBuilder();
264         int i = 0;
265         int i1 = s.indexOf('%');
266         while (i1 >= 0) {
267             int i2 = s.indexOf('%', i1 + 1);
268             if (i2 < 0)
269                 break;
270
271             String varName = s.substring(i1 + 1, i2);
272             String varValue = System.getenv(varName);
273             if (varValue == null)
274                 varValue = "%" + varName + "%";
275
276             value.append(s.substring(i, i1));
277             value.append(varValue);
278
279             i = i2 + 1;
280             i1 = s.indexOf('%', i);
281         }
282         value.append(s.substring(i));
283
284         log.info("Parameter {}: [{}]", name, value);
285         return value.toString();
286     }
287
288     protected String buildXmlJsonRequest(SvcLogicContext ctx, String template, Format format)
289         throws SvcLogicException {
290         log.info("Building {} started", format);
291         long t1 = System.currentTimeMillis();
292
293         template = expandRepeats(ctx, template, 1);
294
295         Map<String, String> mm = new HashMap<>();
296         for (String s : ctx.getAttributeKeySet())
297             mm.put(s, ctx.getAttribute(s));
298
299         StringBuilder ss = new StringBuilder();
300         int i = 0;
301         while (i < template.length()) {
302             int i1 = template.indexOf("${", i);
303             if (i1 < 0) {
304                 ss.append(template.substring(i));
305                 break;
306             }
307
308             int i2 = template.indexOf('}', i1 + 2);
309             if (i2 < 0)
310                 throw new SvcLogicException("Template error: Matching } not found");
311
312             String var1 = template.substring(i1 + 2, i2);
313             String value1 = format == Format.XML ? XmlJsonUtil.getXml(mm, var1) : XmlJsonUtil.getJson(mm, var1);
314             // log.info(" " + var1 + ": " + value1);
315             if (value1 == null || value1.trim().length() == 0) {
316                 // delete the whole element (line)
317                 int i3 = template.lastIndexOf('\n', i1);
318                 if (i3 < 0)
319                     i3 = 0;
320                 int i4 = template.indexOf('\n', i1);
321                 if (i4 < 0)
322                     i4 = template.length();
323
324                 if (i < i3)
325                     ss.append(template.substring(i, i3));
326                 i = i4;
327             } else {
328                 ss.append(template.substring(i, i1)).append(value1);
329                 i = i2 + 1;
330             }
331         }
332
333         String req = format == Format.XML
334                 ? XmlJsonUtil.removeEmptyStructXml(ss.toString()) : XmlJsonUtil.removeEmptyStructJson(ss.toString());
335
336         if (format == Format.JSON)
337             req = XmlJsonUtil.removeLastCommaJson(req);
338
339         long t2 = System.currentTimeMillis();
340         log.info("Building {} completed. Time: {}", format, (t2 - t1));
341
342         return req;
343     }
344
345     protected String expandRepeats(SvcLogicContext ctx, String template, int level) throws SvcLogicException {
346         StringBuilder newTemplate = new StringBuilder();
347         int k = 0;
348         while (k < template.length()) {
349             int i1 = template.indexOf("${repeat:", k);
350             if (i1 < 0) {
351                 newTemplate.append(template.substring(k));
352                 break;
353             }
354
355             int i2 = template.indexOf(':', i1 + 9);
356             if (i2 < 0)
357                 throw new SvcLogicException(
358                         "Template error: Context variable name followed by : is required after repeat");
359
360             // Find the closing }, store in i3
361             int nn = 1;
362             int i3 = -1;
363             int i = i2;
364             while (nn > 0 && i < template.length()) {
365                 i3 = template.indexOf('}', i);
366                 if (i3 < 0)
367                     throw new SvcLogicException("Template error: Matching } not found");
368                 int i32 = template.indexOf('{', i);
369                 if (i32 >= 0 && i32 < i3) {
370                     nn++;
371                     i = i32 + 1;
372                 } else {
373                     nn--;
374                     i = i3 + 1;
375                 }
376             }
377
378             String var1 = template.substring(i1 + 9, i2);
379             String value1 = ctx.getAttribute(var1);
380             log.info("     {}:{}", var1, value1);
381             int n = 0;
382             try {
383                 n = Integer.parseInt(value1);
384             } catch (NumberFormatException e) {
385                 log.info("value1 not set or not a number, n will remain set at zero");
386             }
387
388             newTemplate.append(template.substring(k, i1));
389
390             String rpt = template.substring(i2 + 1, i3);
391
392             for (int ii = 0; ii < n; ii++) {
393                 String ss = rpt.replaceAll("\\[\\$\\{" + level + "\\}\\]", "[" + ii + "]");
394                 if (ii == n - 1 && ss.trim().endsWith(",")) {
395                     int i4 = ss.lastIndexOf(',');
396                     if (i4 > 0)
397                         ss = ss.substring(0, i4) + ss.substring(i4 + 1);
398                 }
399                 newTemplate.append(ss);
400             }
401
402             k = i3 + 1;
403         }
404
405         if (k == 0)
406             return newTemplate.toString();
407
408         return expandRepeats(ctx, newTemplate.toString(), level + 1);
409     }
410
411     protected String readFile(String fileName) throws SvcLogicException {
412         try {
413             byte[] encoded = Files.readAllBytes(Paths.get(fileName));
414             return new String(encoded, "UTF-8");
415         } catch (IOException | SecurityException e) {
416             throw new SvcLogicException("Unable to read file " + fileName + e.getLocalizedMessage(), e);
417         }
418     }
419
420     protected HttpResponse sendHttpRequest(String request, Parameters p) throws SvcLogicException {
421
422         ClientConfig config = new DefaultClientConfig();
423         SSLContext ssl = null;
424         if (p.ssl && p.restapiUrl.startsWith("https"))
425             ssl = createSSLContext(p);
426         if (ssl != null) {
427             HostnameVerifier hostnameVerifier = (hostname, session) -> true;
428
429             config.getProperties().put(HTTPSProperties.PROPERTY_HTTPS_PROPERTIES,
430                     new HTTPSProperties(hostnameVerifier, ssl));
431         }
432
433         logProperties(config.getProperties());
434
435         Client client = Client.create(config);
436         client.setConnectTimeout(5000);
437         if (p.restapiUser != null)
438             client.addFilter(new HTTPBasicAuthFilter(p.restapiUser, p.restapiPassword));
439         WebResource webResource = client.resource(p.restapiUrl);
440
441         log.info("Sending request:");
442         log.info(request);
443         long t1 = System.currentTimeMillis();
444
445         HttpResponse r = new HttpResponse();
446         r.code = 200;
447
448         if (!p.skipSending) {
449             String tt = p.format == Format.XML ? "application/xml" : "application/json";
450             String tt1 = tt + ";charset=UTF-8";
451             if (p.contentType != null) {
452                 tt = p.contentType;
453                 tt1 = p.contentType;
454             }
455
456             WebResource.Builder webResourceBuilder = webResource.accept(tt).type(tt1);
457
458             if (p.customHttpHeaders != null && p.customHttpHeaders.length() > 0) {
459                 String[] keyValuePairs = p.customHttpHeaders.split(",");
460                 for (String singlePair : keyValuePairs) {
461                     int equalPosition = singlePair.indexOf('=');
462                     webResourceBuilder.header(singlePair.substring(0, equalPosition),
463                             singlePair.substring(equalPosition + 1, singlePair.length()));
464                 }
465             }
466
467             webResourceBuilder.header("X-ECOMP-RequestID",org.slf4j.MDC.get("X-ECOMP-RequestID"));
468
469             ClientResponse response;
470
471             try {
472                 response = webResourceBuilder.method(p.httpMethod.toString(), ClientResponse.class, request);
473             } catch (UniformInterfaceException | ClientHandlerException e) {
474                 throw new SvcLogicException("Exception while sending http request to client "
475                     + e.getLocalizedMessage(), e);
476             }
477
478             r.code = response.getStatus();
479             r.headers = response.getHeaders();
480             EntityTag etag = response.getEntityTag();
481             if (etag != null)
482                 r.message = etag.getValue();
483             if (response.hasEntity() && r.code != 204)
484                 r.body = response.getEntity(String.class);
485         }
486
487         long t2 = System.currentTimeMillis();
488         log.info("Response received. Time: {}", (t2 - t1));
489         log.info("HTTP response code: {}", r.code);
490         log.info("HTTP response message: {}", r.message);
491         logHeaders(r.headers);
492         log.info("HTTP response: {}", r.body);
493
494         return r;
495     }
496
497     protected SSLContext createSSLContext(Parameters p) {
498         try (FileInputStream in = new FileInputStream(p.keyStoreFileName)) {
499             System.setProperty("jsse.enableSNIExtension", "false");
500             System.setProperty("javax.net.ssl.trustStore", p.trustStoreFileName);
501             System.setProperty("javax.net.ssl.trustStorePassword", p.trustStorePassword);
502
503             HttpsURLConnection.setDefaultHostnameVerifier((string, ssls) -> true);
504
505             KeyManagerFactory kmf = KeyManagerFactory.getInstance(KeyManagerFactory.getDefaultAlgorithm());
506             KeyStore ks = KeyStore.getInstance("PKCS12");
507             char[] pwd = p.keyStorePassword.toCharArray();
508             ks.load(in, pwd);
509             kmf.init(ks, pwd);
510
511             SSLContext ctx = SSLContext.getInstance("TLS");
512             ctx.init(kmf.getKeyManagers(), null, null);
513             return ctx;
514         } catch (Exception e) {
515             log.error("Error creating SSLContext: {}", e.getMessage(), e);
516         }
517         return null;
518     }
519
520     protected void setFailureResponseStatus(SvcLogicContext ctx, String prefix, String errorMessage,
521         HttpResponse resp) {
522         resp.code = 500;
523         resp.message = errorMessage;
524         String pp = prefix != null ? prefix + '.' : "";
525         ctx.setAttribute(pp + "response-code", String.valueOf(resp.code));
526         ctx.setAttribute(pp + "response-message", resp.message);
527     }
528
529     protected void setResponseStatus(SvcLogicContext ctx, String prefix, HttpResponse r) {
530         String pp = prefix != null ? prefix + '.' : "";
531         ctx.setAttribute(pp + "response-code", String.valueOf(r.code));
532         ctx.setAttribute(pp + "response-message", r.message);
533     }
534
535     public void sendFile(Map<String, String> paramMap, SvcLogicContext ctx) throws SvcLogicException {
536         HttpResponse r = null;
537         try {
538             FileParam p = getFileParameters(paramMap);
539             byte[] data = Files.readAllBytes(Paths.get(p.fileName));
540
541             r = sendHttpData(data, p);
542             setResponseStatus(ctx, p.responsePrefix, r);
543
544         } catch (SvcLogicException | IOException e) {
545             log.error("Error sending the request: {}", e.getMessage(), e);
546
547             r = new HttpResponse();
548             r.code = 500;
549             r.message = e.getMessage();
550             String prefix = parseParam(paramMap, "responsePrefix", false, null);
551             setResponseStatus(ctx, prefix, r);
552         }
553
554         if (r != null && r.code >= 300)
555             throw new SvcLogicException(String.valueOf(r.code) + ": " + r.message);
556     }
557
558     private static class FileParam {
559
560         public String fileName;
561         public String url;
562         public String user;
563         public String password;
564         public HttpMethod httpMethod;
565         public String responsePrefix;
566         public boolean skipSending;
567     }
568
569     private FileParam getFileParameters(Map<String, String> paramMap) throws SvcLogicException {
570         FileParam p = new FileParam();
571         p.fileName = parseParam(paramMap, "fileName", true, null);
572         p.url = parseParam(paramMap, "url", true, null);
573         p.user = parseParam(paramMap, "user", false, null);
574         p.password = parseParam(paramMap, "password", false, null);
575         p.httpMethod = HttpMethod.fromString(parseParam(paramMap, "httpMethod", false, "post"));
576         p.responsePrefix = parseParam(paramMap, "responsePrefix", false, null);
577         String skipSendingStr = paramMap.get("skipSending");
578         p.skipSending = "true".equalsIgnoreCase(skipSendingStr);
579         return p;
580     }
581
582     protected HttpResponse sendHttpData(byte[] data, FileParam p) throws SvcLogicException {
583         Client client = Client.create();
584         client.setConnectTimeout(5000);
585         client.setFollowRedirects(true);
586         if (p.user != null)
587             client.addFilter(new HTTPBasicAuthFilter(p.user, p.password));
588         WebResource webResource = client.resource(p.url);
589
590         log.info("Sending file");
591         long t1 = System.currentTimeMillis();
592
593         HttpResponse r = new HttpResponse();
594         r.code = 200;
595
596         if (!p.skipSending) {
597             String tt = "application/octet-stream";
598
599             ClientResponse response;
600             try {
601                 if (p.httpMethod == HttpMethod.POST)
602                     response = webResource.accept(tt).type(tt).post(ClientResponse.class, data);
603                 else if (p.httpMethod == HttpMethod.PUT)
604                     response = webResource.accept(tt).type(tt).put(ClientResponse.class, data);
605                 else
606                     throw new SvcLogicException("Http operation" + p.httpMethod + "not supported");
607             } catch (UniformInterfaceException | ClientHandlerException e) {
608                 throw new SvcLogicException("Exception while sending http request to client " +
609                     e.getLocalizedMessage(), e);
610             }
611
612             r.code = response.getStatus();
613             r.headers = response.getHeaders();
614             EntityTag etag = response.getEntityTag();
615             if (etag != null)
616                 r.message = etag.getValue();
617             if (response.hasEntity() && r.code != 204)
618                 r.body = response.getEntity(String.class);
619
620             if (r.code == 301) {
621                 String newUrl = response.getHeaders().getFirst("Location");
622
623                 log.info("Got response code 301. Sending same request to URL: {}", newUrl);
624
625                 webResource = client.resource(newUrl);
626
627                 try {
628                     if (p.httpMethod == HttpMethod.POST)
629                         response = webResource.accept(tt).type(tt).post(ClientResponse.class, data);
630                     else if (p.httpMethod == HttpMethod.PUT)
631                         response = webResource.accept(tt).type(tt).put(ClientResponse.class, data);
632                     else
633                         throw new SvcLogicException("Http operation" + p.httpMethod + "not supported");
634                 } catch (UniformInterfaceException | ClientHandlerException e) {
635                     throw new SvcLogicException("Exception while sending http request to client " +
636                         e.getLocalizedMessage(), e);
637                 }
638
639                 r.code = response.getStatus();
640                 etag = response.getEntityTag();
641                 if (etag != null)
642                     r.message = etag.getValue();
643                 if (response.hasEntity() && r.code != 204)
644                     r.body = response.getEntity(String.class);
645             }
646         }
647
648         long t2 = System.currentTimeMillis();
649         log.info("Response received. Time: {}", (t2 - t1));
650         log.info("HTTP response code: {}", r.code);
651         log.info("HTTP response message: {}", r.message);
652         logHeaders(r.headers);
653         log.info("HTTP response: {}", r.body);
654
655         return r;
656     }
657
658     public void postMessageOnUeb(Map<String, String> paramMap, SvcLogicContext ctx) throws SvcLogicException {
659         HttpResponse r;
660         try {
661             UebParam p = getUebParameters(paramMap);
662
663             String pp = p.responsePrefix != null ? p.responsePrefix + '.' : "";
664
665             String req;
666
667             if (p.templateFileName == null) {
668                 log.info("No template file name specified. Using default UEB template: {}", defaultUebTemplateFileName);
669                 p.templateFileName = defaultUebTemplateFileName;
670             }
671
672             String reqTemplate = readFile(p.templateFileName);
673             reqTemplate = reqTemplate.replaceAll("rootVarName", p.rootVarName);
674             req = buildXmlJsonRequest(ctx, reqTemplate, Format.JSON);
675
676             r = postOnUeb(req, p);
677             setResponseStatus(ctx, p.responsePrefix, r);
678             if (r.body != null)
679                 ctx.setAttribute(pp + "httpResponse", r.body);
680
681         } catch (SvcLogicException e) {
682             log.error("Error sending the request: {}", e.getMessage(), e);
683
684             r = new HttpResponse();
685             r.code = 500;
686             r.message = e.getMessage();
687             String prefix = parseParam(paramMap, "responsePrefix", false, null);
688             setResponseStatus(ctx, prefix, r);
689         }
690
691         if (r.code >= 300)
692             throw new SvcLogicException(String.valueOf(r.code) + ": " + r.message);
693     }
694
695     private static class UebParam {
696
697         public String topic;
698         public String templateFileName;
699         public String rootVarName;
700         public String responsePrefix;
701         public boolean skipSending;
702     }
703
704     private UebParam getUebParameters(Map<String, String> paramMap) throws SvcLogicException {
705         UebParam p = new UebParam();
706         p.topic = parseParam(paramMap, "topic", true, null);
707         p.templateFileName = parseParam(paramMap, "templateFileName", false, null);
708         p.rootVarName = parseParam(paramMap, "rootVarName", false, null);
709         p.responsePrefix = parseParam(paramMap, "responsePrefix", false, null);
710         String skipSendingStr = paramMap.get("skipSending");
711         p.skipSending = "true".equalsIgnoreCase(skipSendingStr);
712         return p;
713     }
714
715     protected HttpResponse postOnUeb(String request, UebParam p) throws SvcLogicException {
716         String[] urls = uebServers.split(" ");
717         for (int i = 0; i < urls.length; i++) {
718             if (!urls[i].endsWith("/"))
719                 urls[i] += "/";
720             urls[i] += "events/" + p.topic;
721         }
722
723         Client client = Client.create();
724         client.setConnectTimeout(5000);
725         WebResource webResource = client.resource(urls[0]);
726
727         log.info("UEB URL: {}", urls[0]);
728         log.info("Sending request:");
729         log.info(request);
730         long t1 = System.currentTimeMillis();
731
732         HttpResponse r = new HttpResponse();
733         r.code = 200;
734
735         if (!p.skipSending) {
736             String tt = "application/json";
737             String tt1 = tt + ";charset=UTF-8";
738
739             ClientResponse response;
740
741             try {
742                 response = webResource.accept(tt).type(tt1).post(ClientResponse.class, request);
743             } catch (UniformInterfaceException | ClientHandlerException e) {
744                 throw new SvcLogicException("Exception while posting http request to client " +
745                     e.getLocalizedMessage(), e);
746             }
747
748             r.code = response.getStatus();
749             r.headers = response.getHeaders();
750             if (response.hasEntity())
751                 r.body = response.getEntity(String.class);
752         }
753
754         long t2 = System.currentTimeMillis();
755         log.info("Response received. Time: {}", (t2 - t1));
756         log.info("HTTP response code: {}", r.code);
757         logHeaders(r.headers);
758         log.info("HTTP response:\n {}", r.body);
759
760         return r;
761     }
762
763     protected void logProperties(Map<String, Object> mm) {
764         List<String> ll = new ArrayList<>();
765         for (Object o : mm.keySet())
766             ll.add((String) o);
767         Collections.sort(ll);
768
769         log.info("Properties:");
770         for (String name : ll)
771             log.info("--- {}:{}", name, String.valueOf(mm.get(name)));
772     }
773
774     protected void logHeaders(MultivaluedMap<String, String> mm) {
775         log.info("HTTP response headers:");
776
777         if (mm == null)
778             return;
779
780         List<String> ll = new ArrayList<>();
781         for (Object o : mm.keySet())
782             ll.add((String) o);
783         Collections.sort(ll);
784
785         for (String name : ll)
786             log.info("--- {}:{}", name, String.valueOf(mm.get(name)));
787     }
788
789     public void setUebServers(String uebServers) {
790         this.uebServers = uebServers;
791     }
792
793     public void setDefaultUebTemplateFileName(String defaultUebTemplateFileName) {
794         this.defaultUebTemplateFileName = defaultUebTemplateFileName;
795     }
796 }