src/main/java/org/onap/dcae/common/publishing/DMaaPEventPublisher.java

   1 /*-
   2  * ============LICENSE_START=======================================================
   3  * org.onap.dcaegen2.collectors.ves
   4  * ================================================================================
   5  * Copyright (C) 2017,2020 AT&T Intellectual Property. All rights reserved.
   6  * Copyright (C) 2018,2020 Nokia. All rights reserved.
   7  * ================================================================================
   8  * Licensed under the Apache License, Version 2.0 (the "License");
   9  * you may not use this file except in compliance with the License.
  10  * You may obtain a copy of the License at
  11  *
  12  *      http://www.apache.org/licenses/LICENSE-2.0
  13  *
  14  * Unless required by applicable law or agreed to in writing, software
  15  * distributed under the License is distributed on an "AS IS" BASIS,
  16  * WITHOUT WARRANTIES OR CONDITIONS OF ANY KIND, either express or implied.
  17  * See the License for the specific language governing permissions and
  18  * limitations under the License.
  19  * ============LICENSE_END=========================================================
  20  */
  21
  22 package org.onap.dcae.common.publishing;
  23
  24 import com.att.nsa.cambria.client.CambriaBatchingPublisher;
  25 import com.att.nsa.clock.SaClock;
  26 import com.att.nsa.logging.LoggingContext;
  27 import com.att.nsa.logging.log4j.EcompFields;
  28 import io.vavr.collection.Map;
  29 import io.vavr.control.Try;
  30 import org.json.JSONObject;
  31 import org.onap.dcae.common.VESLogger;
  32 import org.slf4j.Logger;
  33 import org.slf4j.LoggerFactory;
  34
  35 import java.io.IOException;
  36
  37 import static org.onap.dcae.common.publishing.VavrUtils.f;
  38
  39 /**
  40  * @author Pawel Szalapski (pawel.szalapski@nokia.com)
  41  */
  42 public class DMaaPEventPublisher {
  43     private static final int PENDING_MESSAGE_LOG_THRESHOLD = 100;
  44     private static final String VES_UNIQUE_ID = "VESuniqueId";
  45     private static final String EVENT = "event";
  46     private static final String COMMON_EVENT_HEADER = "commonEventHeader";
  47     private static final String PARTITION_KEY = "sourceName";
  48     private static final Logger log = LoggerFactory.getLogger(DMaaPEventPublisher.class);
  49     private final DMaaPPublishersCache publishersCache;
  50     private final Logger outputLogger = LoggerFactory.getLogger("org.onap.dcae.common.output");
  51
  52     DMaaPEventPublisher(DMaaPPublishersCache publishersCache) {
  53         this.publishersCache = publishersCache;
  54     }
  55
  56     public DMaaPEventPublisher(Map<String, PublisherConfig> dMaaPConfig) {
  57         this(new DMaaPPublishersCache(dMaaPConfig));
  58     }
  59
  60     public void sendEvent(JSONObject event, String domain) {
  61         clearVesUniqueIdFromEvent(event);
  62         publishersCache.getPublisher(domain)
  63                 .onEmpty(() ->
  64                         log.warn(f("Could not find event publisher for domain: '%s', dropping message: '%s'", domain, event)))
  65                 .forEach(publisher -> sendEvent(event, domain, publisher));
  66     }
  67
  68     private void sendEvent(JSONObject event, String domain, CambriaBatchingPublisher publisher) {
  69         Try.run(() -> uncheckedSendEvent(event, domain, publisher))
  70                 .onFailure(exc -> closePublisher(event, domain, exc));
  71     }
  72
  73     private void uncheckedSendEvent(JSONObject event, String domain, CambriaBatchingPublisher publisher)
  74             throws IOException {
  75
  76         String pk = event.getJSONObject(EVENT).getJSONObject(COMMON_EVENT_HEADER).get(PARTITION_KEY).toString();
  77         int pendingMsgs = publisher.send(pk, event.toString());
  78         if (pendingMsgs > PENDING_MESSAGE_LOG_THRESHOLD) {
  79             log.info("Pending messages count: " + pendingMsgs);
  80         }
  81         String infoMsg = f("Event: '%s' scheduled to be send asynchronously on domain: '%s'", event, domain);
  82         log.info(infoMsg);
  83         outputLogger.info(infoMsg);
  84     }
  85
  86     private void closePublisher(JSONObject event, String domain, Throwable e) {
  87         log.error(f("Unable to schedule event: '%s' on domain: '%s'. Closing publisher and dropping message.",
  88                 event, domain), e);
  89         publishersCache.closePublisherFor(domain);
  90     }
  91
  92     private void clearVesUniqueIdFromEvent(JSONObject event) {
  93         if (event.has(VES_UNIQUE_ID)) {
  94             String uuid = event.get(VES_UNIQUE_ID).toString();
  95             LoggingContext localLC = VESLogger.getLoggingContextForThread(uuid);
  96             localLC.put(EcompFields.kBeginTimestampMs, SaClock.now());
  97             log.debug("Removing VESuniqueid object from event");
  98             event.remove(VES_UNIQUE_ID);
  99         }
 100     }
 101 }