Merge "Implement test case for Fabric Discovery Plugin"
[ccsdk/sli/plugins.git] / restapi-call-node / provider / src / main / java / org / onap / ccsdk / sli / plugins / restapicall / RestapiCallNode.java
1 /*-
2  * ============LICENSE_START=======================================================
3  * openECOMP : SDN-C
4  * ================================================================================
5  * Copyright (C) 2017 AT&T Intellectual Property. All rights
6  *                      reserved.
7  * ================================================================================
8  * Licensed under the Apache License, Version 2.0 (the "License");
9  * you may not use this file except in compliance with the License.
10  * You may obtain a copy of the License at
11  * 
12  *      http://www.apache.org/licenses/LICENSE-2.0
13  * 
14  * Unless required by applicable law or agreed to in writing, software
15  * distributed under the License is distributed on an "AS IS" BASIS,
16  * WITHOUT WARRANTIES OR CONDITIONS OF ANY KIND, either express or implied.
17  * See the License for the specific language governing permissions and
18  * limitations under the License.
19  * ============LICENSE_END=========================================================
20  */
21
22 package org.onap.ccsdk.sli.plugins.restapicall;
23
24 import com.sun.jersey.api.client.ClientHandlerException;
25 import com.sun.jersey.api.client.UniformInterfaceException;
26 import java.io.FileInputStream;
27 import java.io.IOException;
28 import java.net.SocketException;
29 import java.net.URI;
30 import java.nio.file.Files;
31 import java.nio.file.Paths;
32 import java.security.KeyStore;
33 import java.util.ArrayList;
34 import java.util.Collections;
35 import java.util.HashMap;
36 import java.util.HashSet;
37 import java.util.List;
38 import java.util.Map;
39 import java.util.Map.Entry;
40 import java.util.Set;
41
42 import javax.net.ssl.HostnameVerifier;
43 import javax.net.ssl.HttpsURLConnection;
44 import javax.net.ssl.KeyManagerFactory;
45 import javax.net.ssl.SSLContext;
46 import javax.net.ssl.SSLSession;
47 import javax.ws.rs.core.EntityTag;
48 import javax.ws.rs.core.MultivaluedMap;
49 import javax.ws.rs.core.UriBuilder;
50
51 import org.apache.commons.lang3.StringUtils;
52 import org.codehaus.jettison.json.JSONException;
53 import org.onap.ccsdk.sli.core.sli.SvcLogicContext;
54 import org.onap.ccsdk.sli.core.sli.SvcLogicException;
55 import org.onap.ccsdk.sli.core.sli.SvcLogicJavaPlugin;
56 import org.slf4j.Logger;
57 import org.slf4j.LoggerFactory;
58
59 import com.sun.jersey.api.client.Client;
60 import com.sun.jersey.api.client.ClientResponse;
61 import com.sun.jersey.api.client.WebResource;
62 import com.sun.jersey.api.client.config.ClientConfig;
63 import com.sun.jersey.api.client.config.DefaultClientConfig;
64 import com.sun.jersey.api.client.filter.HTTPBasicAuthFilter;
65 import com.sun.jersey.client.urlconnection.HTTPSProperties;
66
67 public class RestapiCallNode implements SvcLogicJavaPlugin {
68
69     private static final Logger log = LoggerFactory.getLogger(RestapiCallNode.class);
70
71     private String uebServers;
72     private String defaultUebTemplateFileName = "/opt/bvc/restapi/templates/default-ueb-message.json";
73     protected RetryPolicyStore retryPolicyStore;
74
75     protected RetryPolicyStore getRetryPolicyStore() {
76         return retryPolicyStore;
77     }
78
79     public void setRetryPolicyStore(RetryPolicyStore retryPolicyStore) {
80         this.retryPolicyStore = retryPolicyStore;
81     }
82
83     public RestapiCallNode() {
84
85     }
86
87      /**
88      * Allows Directed Graphs  the ability to interact with REST APIs.
89      * @param parameters HashMap<String,String> of parameters passed by the DG to this function
90      * <table border="1">
91      *  <thead><th>parameter</th><th>Mandatory/Optional</th><th>description</th><th>example values</th></thead>
92      *  <tbody>
93      *      <tr><td>templateFileName</td><td>Optional</td><td>full path to template file that can be used to build a request</td><td>/sdncopt/bvc/restapi/templates/vnf_service-configuration-operation_minimal.json</td></tr>
94      *      <tr><td>restapiUrl</td><td>Mandatory</td><td>url to send the request to</td><td>https://sdncodl:8543/restconf/operations/L3VNF-API:create-update-vnf-request</td></tr>
95      *      <tr><td>restapiUser</td><td>Optional</td><td>user name to use for http basic authentication</td><td>sdnc_ws</td></tr>
96      *      <tr><td>restapiPassword</td><td>Optional</td><td>unencrypted password to use for http basic authentication</td><td>plain_password</td></tr>
97      *      <tr><td>contentType</td><td>Optional</td><td>http content type to set in the http header</td><td>usually application/json or application/xml</td></tr>
98      *      <tr><td>format</td><td>Optional</td><td>should match request body format</td><td>json or xml</td></tr>
99      *      <tr><td>httpMethod</td><td>Optional</td><td>http method to use when sending the request</td><td>get post put delete patch</td></tr>
100      *      <tr><td>responsePrefix</td><td>Optional</td><td>location the response will be written to in context memory</td><td>tmp.restapi.result</td></tr>
101      *      <tr><td>listName[i]</td><td>Optional</td><td>Used for processing XML responses with repeating elements.</td>vpn-information.vrf-details<td></td></tr>
102      *      <tr><td>skipSending</td><td>Optional</td><td></td><td>true or false</td></tr>
103      *      <tr><td>convertResponse </td><td>Optional</td><td>whether the response should be converted</td><td>true or false</td></tr>
104      *      <tr><td>customHttpHeaders</td><td>Optional</td><td>a list additional http headers to be passed in, follow the format in the example</td><td>X-CSI-MessageId=messageId,headerFieldName=headerFieldValue</td></tr>
105      *      <tr><td>dumpHeaders</td><td>Optional</td><td>when true writes http header content to context memory</td><td>true or false</td></tr>
106      *      <tr><td>partner</td><td>Optional</td><td>needed for DME2 calls</td><td>dme2proxy</td></tr>
107      *  </tbody>
108      * </table>
109      * @param ctx Reference to context memory
110      * @throws SvcLogicException
111      * @since 11.0.2
112      * @see String#split(String, int)
113      */
114     public void sendRequest(Map<String, String> paramMap, SvcLogicContext ctx) throws SvcLogicException {
115         sendRequest(paramMap, ctx, null);
116     }
117
118     public void sendRequest(Map<String, String> paramMap, SvcLogicContext ctx, Integer retryCount)
119             throws SvcLogicException {
120
121         RetryPolicy retryPolicy = null;
122         HttpResponse r = new HttpResponse();
123         try {
124             Parameters p = getParameters(paramMap);
125             if (p.partner != null) {
126                 retryPolicy = retryPolicyStore.getRetryPolicy(p.partner);
127             }
128             String pp = p.responsePrefix != null ? p.responsePrefix + '.' : "";
129
130             String req = null;
131             if (p.templateFileName != null) {
132                 String reqTemplate = readFile(p.templateFileName);
133                 req = buildXmlJsonRequest(ctx, reqTemplate, p.format);
134             }
135             r = sendHttpRequest(req, p);
136             setResponseStatus(ctx, p.responsePrefix, r);
137
138             if (p.dumpHeaders && r.headers != null) {
139                 for (Entry<String, List<String>> a : r.headers.entrySet()) {
140                     ctx.setAttribute(pp + "header." + a.getKey(), StringUtils.join(a.getValue(), ","));
141                 }
142             }
143
144             if (r.body != null && r.body.trim().length() > 0) {
145                 ctx.setAttribute(pp + "httpResponse", r.body);
146
147                 if (p.convertResponse) {
148                     Map<String, String> mm = null;
149                     if (p.format == Format.XML)
150                         mm = XmlParser.convertToProperties(r.body, p.listNameList);
151                     else if (p.format == Format.JSON)
152                         mm = JsonParser.convertToProperties(r.body);
153
154                     if (mm != null)
155                         for (Map.Entry<String,String> entry : mm.entrySet())
156                             ctx.setAttribute(pp + entry.getKey(), entry.getValue());
157                 }
158             }
159         } catch (SvcLogicException | JSONException e) {
160             boolean shouldRetry = false;
161             if (e.getCause().getCause() instanceof SocketException) {
162                 shouldRetry = true;
163             }
164
165             log.error("Error sending the request: " + e.getMessage(), e);
166             String prefix = parseParam(paramMap, "responsePrefix", false, null);
167             if (retryPolicy == null || shouldRetry == false) {
168                 setFailureResponseStatus(ctx, prefix, e.getMessage(), r);
169             } else {
170                 if (retryCount == null) {
171                     retryCount = 0;
172                 }
173                 String retryMessage = retryCount + " attempts were made out of " + retryPolicy.getMaximumRetries() +
174                         " maximum retries.";
175                 log.debug(retryMessage);
176                 try {
177                     retryCount = retryCount + 1;
178                     if (retryCount < retryPolicy.getMaximumRetries() + 1) {
179                         URI uri = new URI(paramMap.get("restapiUrl"));
180                         String hostname = uri.getHost();
181                         String retryString = retryPolicy.getNextHostName(uri.toString());
182                         URI uriTwo = new URI(retryString);
183                         URI retryUri = UriBuilder.fromUri(uri).host(uriTwo.getHost()).port(uriTwo.getPort()).scheme(
184                                 uriTwo.getScheme()).build();
185                         paramMap.put("restapiUrl", retryUri.toString());
186                         log.debug("URL was set to " + retryUri.toString());
187                         log.debug("Failed to communicate with host " + hostname +
188                                 ". Request will be re-attempted using the host " + retryString + ".");
189                         log.debug("This is retry attempt " + retryCount + " out of " + retryPolicy.getMaximumRetries());
190                         sendRequest(paramMap, ctx, retryCount);
191                     } else {
192                         log.debug("Maximum retries reached, calling setFailureResponseStatus.");
193                         setFailureResponseStatus(ctx, prefix, e.getMessage(), r);
194                     }
195                 } catch (Exception ex) {
196                     log.error("Could not attempt retry.", ex);
197                     String retryErrorMessage =
198                             "Retry attempt has failed. No further retry shall be attempted, calling " +
199                                 "setFailureResponseStatus.";
200                     setFailureResponseStatus(ctx, prefix, retryErrorMessage, r);
201                 }
202             }
203         }
204
205         if (r != null && r.code >= 300)
206             throw new SvcLogicException(String.valueOf(r.code) + ": " + r.message);
207     }
208
209     protected Parameters getParameters(Map<String, String> paramMap) throws SvcLogicException {
210         Parameters p = new Parameters();
211         p.templateFileName = parseParam(paramMap, "templateFileName", false, null);
212         p.restapiUrl = parseParam(paramMap, "restapiUrl", true, null);
213         p.restapiUser = parseParam(paramMap, "restapiUser", false, null);
214         p.restapiPassword = parseParam(paramMap, "restapiPassword", false, null);
215         p.contentType = parseParam(paramMap, "contentType", false, null);
216         p.format = Format.fromString(parseParam(paramMap, "format", false, "json"));
217         p.httpMethod = HttpMethod.fromString(parseParam(paramMap, "httpMethod", false, "post"));
218         p.responsePrefix = parseParam(paramMap, "responsePrefix", false, null);
219         p.listNameList = getListNameList(paramMap);
220         String skipSendingStr = paramMap.get("skipSending");
221         p.skipSending = "true".equalsIgnoreCase(skipSendingStr);
222         p.convertResponse = Boolean.valueOf(parseParam(paramMap, "convertResponse", false, "true"));
223         p.trustStoreFileName = parseParam(paramMap, "trustStoreFileName", false, null);
224         p.trustStorePassword = parseParam(paramMap, "trustStorePassword", false, null);
225         p.keyStoreFileName = parseParam(paramMap, "keyStoreFileName", false, null);
226         p.keyStorePassword = parseParam(paramMap, "keyStorePassword", false, null);
227         p.ssl = p.trustStoreFileName != null && p.trustStorePassword != null && p.keyStoreFileName != null &&
228                 p.keyStorePassword != null;
229         p.customHttpHeaders = parseParam(paramMap, "customHttpHeaders", false, null);
230         p.partner = parseParam(paramMap, "partner", false, null);
231         p.dumpHeaders = Boolean.valueOf(parseParam(paramMap, "dumpHeaders", false, null));
232         return p;
233     }
234
235     protected Set<String> getListNameList(Map<String, String> paramMap) {
236         Set<String> ll = new HashSet<>();
237         for (Map.Entry<String,String> entry : paramMap.entrySet())
238             if (entry.getKey().startsWith("listName"))
239                 ll.add(entry.getValue());
240         return ll;
241     }
242
243     protected String parseParam(Map<String, String> paramMap, String name, boolean required, String def)
244             throws SvcLogicException {
245         String s = paramMap.get(name);
246
247         if (s == null || s.trim().length() == 0) {
248             if (!required)
249                 return def;
250             throw new SvcLogicException("Parameter " + name + " is required in RestapiCallNode");
251         }
252
253         s = s.trim();
254         String value = "";
255         int i = 0;
256         int i1 = s.indexOf('%');
257         while (i1 >= 0) {
258             int i2 = s.indexOf('%', i1 + 1);
259             if (i2 < 0)
260                 break;
261
262             String varName = s.substring(i1 + 1, i2);
263             String varValue = System.getenv(varName);
264             if (varValue == null)
265                 varValue = "%" + varName + "%";
266
267             value += s.substring(i, i1);
268             value += varValue;
269
270             i = i2 + 1;
271             i1 = s.indexOf('%', i);
272         }
273         value += s.substring(i);
274
275         log.info("Parameter " + name + ": [" + value + "]");
276         return value;
277     }
278
279     protected String buildXmlJsonRequest(SvcLogicContext ctx, String template, Format format)
280         throws SvcLogicException {
281         log.info("Building " + format + " started");
282         long t1 = System.currentTimeMillis();
283
284         template = expandRepeats(ctx, template, 1);
285
286         Map<String, String> mm = new HashMap<>();
287         for (String s : ctx.getAttributeKeySet())
288             mm.put(s, ctx.getAttribute(s));
289
290         StringBuilder ss = new StringBuilder();
291         int i = 0;
292         while (i < template.length()) {
293             int i1 = template.indexOf("${", i);
294             if (i1 < 0) {
295                 ss.append(template.substring(i));
296                 break;
297             }
298
299             int i2 = template.indexOf('}', i1 + 2);
300             if (i2 < 0)
301                 throw new SvcLogicException("Template error: Matching } not found");
302
303             String var1 = template.substring(i1 + 2, i2);
304             String value1 = format == Format.XML ? XmlJsonUtil.getXml(mm, var1) : XmlJsonUtil.getJson(mm, var1);
305             // log.info(" " + var1 + ": " + value1);
306             if (value1 == null || value1.trim().length() == 0) {
307                 // delete the whole element (line)
308                 int i3 = template.lastIndexOf('\n', i1);
309                 if (i3 < 0)
310                     i3 = 0;
311                 int i4 = template.indexOf('\n', i1);
312                 if (i4 < 0)
313                     i4 = template.length();
314
315                 if (i < i3)
316                     ss.append(template.substring(i, i3));
317                 i = i4;
318             } else {
319                 ss.append(template.substring(i, i1)).append(value1);
320                 i = i2 + 1;
321             }
322         }
323
324         String req = format == Format.XML
325                 ? XmlJsonUtil.removeEmptyStructXml(ss.toString()) : XmlJsonUtil.removeEmptyStructJson(ss.toString());
326
327         if (format == Format.JSON)
328             req = XmlJsonUtil.removeLastCommaJson(req);
329
330         long t2 = System.currentTimeMillis();
331         log.info("Building " + format + " completed. Time: " + (t2 - t1));
332
333         return req;
334     }
335
336     protected String expandRepeats(SvcLogicContext ctx, String template, int level) throws SvcLogicException {
337         StringBuilder newTemplate = new StringBuilder();
338         int k = 0;
339         while (k < template.length()) {
340             int i1 = template.indexOf("${repeat:", k);
341             if (i1 < 0) {
342                 newTemplate.append(template.substring(k));
343                 break;
344             }
345
346             int i2 = template.indexOf(':', i1 + 9);
347             if (i2 < 0)
348                 throw new SvcLogicException(
349                         "Template error: Context variable name followed by : is required after repeat");
350
351             // Find the closing }, store in i3
352             int nn = 1;
353             int i3 = -1;
354             int i = i2;
355             while (nn > 0 && i < template.length()) {
356                 i3 = template.indexOf('}', i);
357                 if (i3 < 0)
358                     throw new SvcLogicException("Template error: Matching } not found");
359                 int i32 = template.indexOf('{', i);
360                 if (i32 >= 0 && i32 < i3) {
361                     nn++;
362                     i = i32 + 1;
363                 } else {
364                     nn--;
365                     i = i3 + 1;
366                 }
367             }
368
369             String var1 = template.substring(i1 + 9, i2);
370             String value1 = ctx.getAttribute(var1);
371             log.info("     " + var1 + ": " + value1);
372             int n = 0;
373             try {
374                 n = Integer.parseInt(value1);
375             } catch (NumberFormatException e) {
376                 throw new SvcLogicException("Invalid input of repeat interval, should be an integer value " +
377                     e.getLocalizedMessage(), e);
378             }
379
380             newTemplate.append(template.substring(k, i1));
381
382             String rpt = template.substring(i2 + 1, i3);
383
384             for (int ii = 0; ii < n; ii++) {
385                 String ss = rpt.replaceAll("\\[\\$\\{" + level + "\\}\\]", "[" + ii + "]");
386                 if (ii == n - 1 && ss.trim().endsWith(",")) {
387                     int i4 = ss.lastIndexOf(',');
388                     if (i4 > 0)
389                         ss = ss.substring(0, i4) + ss.substring(i4 + 1);
390                 }
391                 newTemplate.append(ss);
392             }
393
394             k = i3 + 1;
395         }
396
397         if (k == 0)
398             return newTemplate.toString();
399
400         return expandRepeats(ctx, newTemplate.toString(), level + 1);
401     }
402
403     protected String readFile(String fileName) throws SvcLogicException {
404         try {
405             byte[] encoded = Files.readAllBytes(Paths.get(fileName));
406             return new String(encoded, "UTF-8");
407         } catch (IOException | SecurityException e) {
408             throw new SvcLogicException("Unable to read file " + fileName + e.getLocalizedMessage(), e);
409         }
410     }
411
412     protected HttpResponse sendHttpRequest(String request, Parameters p) throws SvcLogicException {
413
414         ClientConfig config = new DefaultClientConfig();
415         SSLContext ssl = null;
416         if (p.ssl && p.restapiUrl.startsWith("https"))
417             ssl = createSSLContext(p);
418         if (ssl != null) {
419             HostnameVerifier hostnameVerifier = (hostname, session) -> true;
420
421             config.getProperties().put(HTTPSProperties.PROPERTY_HTTPS_PROPERTIES,
422                     new HTTPSProperties(hostnameVerifier, ssl));
423         }
424
425         logProperties(config.getProperties());
426
427         Client client = Client.create(config);
428         client.setConnectTimeout(5000);
429         if (p.restapiUser != null)
430             client.addFilter(new HTTPBasicAuthFilter(p.restapiUser, p.restapiPassword));
431         WebResource webResource = client.resource(p.restapiUrl);
432
433         log.info("Sending request:");
434         log.info(request);
435         long t1 = System.currentTimeMillis();
436
437         HttpResponse r = new HttpResponse();
438         r.code = 200;
439
440         if (!p.skipSending) {
441             String tt = p.format == Format.XML ? "application/xml" : "application/json";
442             String tt1 = tt + ";charset=UTF-8";
443             if (p.contentType != null) {
444                 tt = p.contentType;
445                 tt1 = p.contentType;
446             }
447
448             WebResource.Builder webResourceBuilder = webResource.accept(tt).type(tt1);
449
450             if (p.customHttpHeaders != null && p.customHttpHeaders.length() > 0) {
451                 String[] keyValuePairs = p.customHttpHeaders.split(",");
452                 for (String singlePair : keyValuePairs) {
453                     int equalPosition = singlePair.indexOf('=');
454                     webResourceBuilder.header(singlePair.substring(0, equalPosition),
455                             singlePair.substring(equalPosition + 1, singlePair.length()));
456                 }
457             }
458
459             webResourceBuilder.header("X-ECOMP-RequestID",org.slf4j.MDC.get("X-ECOMP-RequestID"));
460
461             ClientResponse response;
462
463             try {
464                 response = webResourceBuilder.method(p.httpMethod.toString(), ClientResponse.class, request);
465             } catch (UniformInterfaceException | ClientHandlerException e) {
466                 throw new SvcLogicException("Exception while sending http request to client "
467                     + e.getLocalizedMessage(), e);
468             }
469
470             r.code = response.getStatus();
471             r.headers = response.getHeaders();
472             EntityTag etag = response.getEntityTag();
473             if (etag != null)
474                 r.message = etag.getValue();
475             if (response.hasEntity() && r.code != 204)
476                 r.body = response.getEntity(String.class);
477         }
478
479         long t2 = System.currentTimeMillis();
480         log.info("Response received. Time: " + (t2 - t1));
481         log.info("HTTP response code: " + r.code);
482         log.info("HTTP response message: " + r.message);
483         logHeaders(r.headers);
484         log.info("HTTP response: " + r.body);
485
486         return r;
487     }
488
489     protected SSLContext createSSLContext(Parameters p) {
490         try (FileInputStream in = new FileInputStream(p.keyStoreFileName)) {
491             System.setProperty("jsse.enableSNIExtension", "false");
492             System.setProperty("javax.net.ssl.trustStore", p.trustStoreFileName);
493             System.setProperty("javax.net.ssl.trustStorePassword", p.trustStorePassword);
494
495             HttpsURLConnection.setDefaultHostnameVerifier((string, ssls) -> true);
496
497             KeyManagerFactory kmf = KeyManagerFactory.getInstance(KeyManagerFactory.getDefaultAlgorithm());
498             KeyStore ks = KeyStore.getInstance("PKCS12");
499             char[] pwd = p.keyStorePassword.toCharArray();
500             ks.load(in, pwd);
501             kmf.init(ks, pwd);
502
503             SSLContext ctx = SSLContext.getInstance("TLS");
504             ctx.init(kmf.getKeyManagers(), null, null);
505             return ctx;
506         } catch (Exception e) {
507             log.error("Error creating SSLContext: " + e.getMessage(), e);
508         }
509         return null;
510     }
511
512     protected void setFailureResponseStatus(SvcLogicContext ctx, String prefix, String errorMessage,
513         HttpResponse resp) {
514         resp.code = 500;
515         resp.message = errorMessage;
516         String pp = prefix != null ? prefix + '.' : "";
517         ctx.setAttribute(pp + "response-code", String.valueOf(resp.code));
518         ctx.setAttribute(pp + "response-message", resp.message);
519     }
520
521     protected void setResponseStatus(SvcLogicContext ctx, String prefix, HttpResponse r) {
522         String pp = prefix != null ? prefix + '.' : "";
523         ctx.setAttribute(pp + "response-code", String.valueOf(r.code));
524         ctx.setAttribute(pp + "response-message", r.message);
525     }
526
527     public void sendFile(Map<String, String> paramMap, SvcLogicContext ctx) throws SvcLogicException {
528         HttpResponse r = null;
529         try {
530             FileParam p = getFileParameters(paramMap);
531             byte[] data = Files.readAllBytes(Paths.get(p.fileName));
532
533             r = sendHttpData(data, p);
534             setResponseStatus(ctx, p.responsePrefix, r);
535
536         } catch (SvcLogicException | IOException e) {
537             log.error("Error sending the request: " + e.getMessage(), e);
538
539             r = new HttpResponse();
540             r.code = 500;
541             r.message = e.getMessage();
542             String prefix = parseParam(paramMap, "responsePrefix", false, null);
543             setResponseStatus(ctx, prefix, r);
544         }
545
546         if (r != null && r.code >= 300)
547             throw new SvcLogicException(String.valueOf(r.code) + ": " + r.message);
548     }
549
550     private static class FileParam {
551
552         public String fileName;
553         public String url;
554         public String user;
555         public String password;
556         public HttpMethod httpMethod;
557         public String responsePrefix;
558         public boolean skipSending;
559     }
560
561     private FileParam getFileParameters(Map<String, String> paramMap) throws SvcLogicException {
562         FileParam p = new FileParam();
563         p.fileName = parseParam(paramMap, "fileName", true, null);
564         p.url = parseParam(paramMap, "url", true, null);
565         p.user = parseParam(paramMap, "user", false, null);
566         p.password = parseParam(paramMap, "password", false, null);
567         p.httpMethod = HttpMethod.fromString(parseParam(paramMap, "httpMethod", false, "post"));
568         p.responsePrefix = parseParam(paramMap, "responsePrefix", false, null);
569         String skipSendingStr = paramMap.get("skipSending");
570         p.skipSending = "true".equalsIgnoreCase(skipSendingStr);
571         return p;
572     }
573
574     protected HttpResponse sendHttpData(byte[] data, FileParam p) throws SvcLogicException {
575         Client client = Client.create();
576         client.setConnectTimeout(5000);
577         client.setFollowRedirects(true);
578         if (p.user != null)
579             client.addFilter(new HTTPBasicAuthFilter(p.user, p.password));
580         WebResource webResource = client.resource(p.url);
581
582         log.info("Sending file");
583         long t1 = System.currentTimeMillis();
584
585         HttpResponse r = new HttpResponse();
586         r.code = 200;
587
588         if (!p.skipSending) {
589             String tt = "application/octet-stream";
590
591             ClientResponse response;
592             try {
593                 if (p.httpMethod == HttpMethod.POST)
594                     response = webResource.accept(tt).type(tt).post(ClientResponse.class, data);
595                 else if (p.httpMethod == HttpMethod.PUT)
596                     response = webResource.accept(tt).type(tt).put(ClientResponse.class, data);
597                 else
598                     throw new SvcLogicException("Http operation" + p.httpMethod + "not supported");
599             } catch (UniformInterfaceException | ClientHandlerException e) {
600                 throw new SvcLogicException("Exception while sending http request to client " +
601                     e.getLocalizedMessage(), e);
602             }
603
604             r.code = response.getStatus();
605             r.headers = response.getHeaders();
606             EntityTag etag = response.getEntityTag();
607             if (etag != null)
608                 r.message = etag.getValue();
609             if (response.hasEntity() && r.code != 204)
610                 r.body = response.getEntity(String.class);
611
612             if (r.code == 301) {
613                 String newUrl = response.getHeaders().getFirst("Location");
614
615                 log.info("Got response code 301. Sending same request to URL: " + newUrl);
616
617                 webResource = client.resource(newUrl);
618
619                 try {
620                     if (p.httpMethod == HttpMethod.POST)
621                         response = webResource.accept(tt).type(tt).post(ClientResponse.class, data);
622                     else if (p.httpMethod == HttpMethod.PUT)
623                         response = webResource.accept(tt).type(tt).put(ClientResponse.class, data);
624                     else
625                         throw new SvcLogicException("Http operation" + p.httpMethod + "not supported");
626                 } catch (UniformInterfaceException | ClientHandlerException e) {
627                     throw new SvcLogicException("Exception while sending http request to client " +
628                         e.getLocalizedMessage(), e);
629                 }
630
631                 r.code = response.getStatus();
632                 etag = response.getEntityTag();
633                 if (etag != null)
634                     r.message = etag.getValue();
635                 if (response.hasEntity() && r.code != 204)
636                     r.body = response.getEntity(String.class);
637             }
638         }
639
640         long t2 = System.currentTimeMillis();
641         log.info("Response received. Time: " + (t2 - t1));
642         log.info("HTTP response code: " + r.code);
643         log.info("HTTP response message: " + r.message);
644         logHeaders(r.headers);
645         log.info("HTTP response: " + r.body);
646
647         return r;
648     }
649
650     public void postMessageOnUeb(Map<String, String> paramMap, SvcLogicContext ctx) throws SvcLogicException {
651         HttpResponse r;
652         try {
653             UebParam p = getUebParameters(paramMap);
654
655             String pp = p.responsePrefix != null ? p.responsePrefix + '.' : "";
656
657             String req;
658
659             if (p.templateFileName == null) {
660                 log.info("No template file name specified. Using default UEB template: " + defaultUebTemplateFileName);
661                 p.templateFileName = defaultUebTemplateFileName;
662             }
663
664             String reqTemplate = readFile(p.templateFileName);
665             reqTemplate = reqTemplate.replaceAll("rootVarName", p.rootVarName);
666             req = buildXmlJsonRequest(ctx, reqTemplate, Format.JSON);
667
668             r = postOnUeb(req, p);
669             setResponseStatus(ctx, p.responsePrefix, r);
670             if (r.body != null)
671                 ctx.setAttribute(pp + "httpResponse", r.body);
672
673         } catch (SvcLogicException e) {
674             log.error("Error sending the request: " + e.getMessage(), e);
675
676             r = new HttpResponse();
677             r.code = 500;
678             r.message = e.getMessage();
679             String prefix = parseParam(paramMap, "responsePrefix", false, null);
680             setResponseStatus(ctx, prefix, r);
681         }
682
683         if (r.code >= 300)
684             throw new SvcLogicException(String.valueOf(r.code) + ": " + r.message);
685     }
686
687     private static class UebParam {
688
689         public String topic;
690         public String templateFileName;
691         public String rootVarName;
692         public String responsePrefix;
693         public boolean skipSending;
694     }
695
696     private UebParam getUebParameters(Map<String, String> paramMap) throws SvcLogicException {
697         UebParam p = new UebParam();
698         p.topic = parseParam(paramMap, "topic", true, null);
699         p.templateFileName = parseParam(paramMap, "templateFileName", false, null);
700         p.rootVarName = parseParam(paramMap, "rootVarName", false, null);
701         p.responsePrefix = parseParam(paramMap, "responsePrefix", false, null);
702         String skipSendingStr = paramMap.get("skipSending");
703         p.skipSending = "true".equalsIgnoreCase(skipSendingStr);
704         return p;
705     }
706
707     protected HttpResponse postOnUeb(String request, UebParam p) throws SvcLogicException {
708         String[] urls = uebServers.split(" ");
709         for (int i = 0; i < urls.length; i++) {
710             if (!urls[i].endsWith("/"))
711                 urls[i] += "/";
712             urls[i] += "events/" + p.topic;
713         }
714
715         Client client = Client.create();
716         client.setConnectTimeout(5000);
717         WebResource webResource = client.resource(urls[0]);
718
719         log.info("UEB URL: " + urls[0]);
720         log.info("Sending request:");
721         log.info(request);
722         long t1 = System.currentTimeMillis();
723
724         HttpResponse r = new HttpResponse();
725         r.code = 200;
726
727         if (!p.skipSending) {
728             String tt = "application/json";
729             String tt1 = tt + ";charset=UTF-8";
730
731             ClientResponse response;
732
733             try {
734                 response = webResource.accept(tt).type(tt1).post(ClientResponse.class, request);
735             } catch (UniformInterfaceException | ClientHandlerException e) {
736                 throw new SvcLogicException("Exception while posting http request to client " +
737                     e.getLocalizedMessage(), e);
738             }
739
740             r.code = response.getStatus();
741             r.headers = response.getHeaders();
742             if (response.hasEntity())
743                 r.body = response.getEntity(String.class);
744         }
745
746         long t2 = System.currentTimeMillis();
747         log.info("Response received. Time: " + (t2 - t1));
748         log.info("HTTP response code: " + r.code);
749         logHeaders(r.headers);
750         log.info("HTTP response:\n" + r.body);
751
752         return r;
753     }
754
755     protected void logProperties(Map<String, Object> mm) {
756         List<String> ll = new ArrayList<>();
757         for (Object o : mm.keySet())
758             ll.add((String) o);
759         Collections.sort(ll);
760
761         log.info("Properties:");
762         for (String name : ll)
763             log.info("--- " + name + ": " + String.valueOf(mm.get(name)));
764     }
765
766     protected void logHeaders(MultivaluedMap<String, String> mm) {
767         log.info("HTTP response headers:");
768
769         if (mm == null)
770             return;
771
772         List<String> ll = new ArrayList<>();
773         for (Object o : mm.keySet())
774             ll.add((String) o);
775         Collections.sort(ll);
776
777         for (String name : ll)
778             log.info("--- " + name + ": " + String.valueOf(mm.get(name)));
779     }
780
781     public void setUebServers(String uebServers) {
782         this.uebServers = uebServers;
783     }
784
785     public void setDefaultUebTemplateFileName(String defaultUebTemplateFileName) {
786         this.defaultUebTemplateFileName = defaultUebTemplateFileName;
787     }
788 }