TCA: Support for VES/A&AI enrichment
[dcaegen2/analytics/tca.git] / dcae-analytics-cdap-plugins / src / main / java / org / openecomp / dcae / apod / analytics / cdap / plugins / batch / sink / dmaap / DMaaPMROutputFormatProvider.java
index a78d42f..bec04b3 100644 (file)
-/*
- * ===============================LICENSE_START======================================
- *  dcae-analytics
- * ================================================================================
- *    Copyright © 2017 AT&T Intellectual Property. All rights reserved.
- * ================================================================================
- *  Licensed under the Apache License, Version 2.0 (the "License");
- *  you may not use this file except in compliance with the License.
- *   You may obtain a copy of the License at
- *
- *          http://www.apache.org/licenses/LICENSE-2.0
- *
- *  Unless required by applicable law or agreed to in writing, software
- *  distributed under the License is distributed on an "AS IS" BASIS,
- *  WITHOUT WARRANTIES OR CONDITIONS OF ANY KIND, either express or implied.
- *  See the License for the specific language governing permissions and
- *  limitations under the License.
- *  ============================LICENSE_END===========================================
- */
-
-package org.openecomp.dcae.apod.analytics.cdap.plugins.batch.sink.dmaap;
-
-import co.cask.cdap.api.data.batch.OutputFormatProvider;
-import org.openecomp.dcae.apod.analytics.cdap.common.CDAPPluginConstants.DMaaPMRSinkHadoopConfigFields;
-import org.openecomp.dcae.apod.analytics.cdap.common.utils.ValidationUtils;
-import org.openecomp.dcae.apod.analytics.cdap.plugins.domain.config.dmaap.DMaaPMRSinkPluginConfig;
-import org.openecomp.dcae.apod.analytics.common.AnalyticsConstants;
-
-import java.util.LinkedHashMap;
-import java.util.Map;
-
-/**
- * DMaaP MR Output Format Provider used to create Batch Sink Plugin
- * <p>
- * @author Rajiv Singla . Creation Date: 1/27/2017.
- */
-public class DMaaPMROutputFormatProvider implements OutputFormatProvider {
-
-    private final Map<String, String> sinkConfig;
-
-
-    public DMaaPMROutputFormatProvider(DMaaPMRSinkPluginConfig sinkPluginConfig) {
-
-        // initialize Sink Config - with DMaaP MR Publisher config values
-        sinkConfig = new LinkedHashMap<>();
-
-        // Required fields for sink config
-        sinkConfig.put(DMaaPMRSinkHadoopConfigFields.HOST_NAME, sinkPluginConfig.getHostName());
-        sinkConfig.put(DMaaPMRSinkHadoopConfigFields.TOPIC_NAME, sinkPluginConfig.getTopicName());
-
-        final Integer configPortNumber = sinkPluginConfig.getPortNumber();
-        if (configPortNumber != null) {
-            sinkConfig.put(DMaaPMRSinkHadoopConfigFields.PORT_NUMBER, configPortNumber.toString());
-        } else {
-            sinkConfig.put(DMaaPMRSinkHadoopConfigFields.PORT_NUMBER,
-                    AnalyticsConstants.DEFAULT_PORT_NUMBER.toString());
-        }
-
-        final String configProtocol = sinkPluginConfig.getProtocol();
-        if (ValidationUtils.isPresent(configProtocol)) {
-            sinkConfig.put(DMaaPMRSinkHadoopConfigFields.PROTOCOL, configProtocol);
-        } else {
-            sinkConfig.put(DMaaPMRSinkHadoopConfigFields.PROTOCOL, AnalyticsConstants.DEFAULT_PROTOCOL);
-        }
-
-
-        final String configUserName = sinkPluginConfig.getUserName();
-        if (ValidationUtils.isPresent(configUserName)) {
-            sinkConfig.put(DMaaPMRSinkHadoopConfigFields.USER_NAME, configUserName);
-        } else {
-            sinkConfig.put(DMaaPMRSinkHadoopConfigFields.USER_NAME, AnalyticsConstants.DEFAULT_USER_NAME);
-        }
-
-        final String configUserPass = sinkPluginConfig.getUserPassword();
-        if (ValidationUtils.isPresent(configUserPass)) {
-            sinkConfig.put(DMaaPMRSinkHadoopConfigFields.USER_PASS, configUserPass);
-        } else {
-            sinkConfig.put(DMaaPMRSinkHadoopConfigFields.USER_PASS, AnalyticsConstants.DEFAULT_USER_PASSWORD);
-        }
-
-        final String configContentType = sinkPluginConfig.getContentType();
-        if (ValidationUtils.isPresent(configContentType)) {
-            sinkConfig.put(DMaaPMRSinkHadoopConfigFields.CONTENT_TYPE, configContentType);
-        } else {
-            sinkConfig.put(DMaaPMRSinkHadoopConfigFields.CONTENT_TYPE, AnalyticsConstants.DEFAULT_CONTENT_TYPE);
-        }
-
-
-        final Integer configMaxBatchSize = sinkPluginConfig.getMaxBatchSize();
-        if (configMaxBatchSize != null) {
-            sinkConfig.put(DMaaPMRSinkHadoopConfigFields.MAX_BATCH_SIZE, configMaxBatchSize.toString());
-        } else {
-            sinkConfig.put(DMaaPMRSinkHadoopConfigFields.MAX_BATCH_SIZE,
-                    String.valueOf(AnalyticsConstants.DEFAULT_PUBLISHER_MAX_BATCH_SIZE));
-        }
-
-        final Integer configMaxRecoveryQueueSize = sinkPluginConfig.getMaxRecoveryQueueSize();
-        if (configMaxRecoveryQueueSize != null) {
-            sinkConfig.put(DMaaPMRSinkHadoopConfigFields.MAX_RECOVER_QUEUE_SIZE, configMaxRecoveryQueueSize.toString());
-        } else {
-            sinkConfig.put(DMaaPMRSinkHadoopConfigFields.MAX_RECOVER_QUEUE_SIZE,
-                    String.valueOf(AnalyticsConstants.DEFAULT_PUBLISHER_MAX_RECOVERY_QUEUE_SIZE));
-        }
-
-    }
-
-    @Override
-    public String getOutputFormatClassName() {
-        return DMaaPMROutputFormat.class.getName();
-    }
-
-    @Override
-    public Map<String, String> getOutputFormatConfiguration() {
-        return sinkConfig;
-    }
-}
+/*\r
+ * ===============================LICENSE_START======================================\r
+ *  dcae-analytics\r
+ * ================================================================================\r
+ *    Copyright © 2017 AT&T Intellectual Property. All rights reserved.\r
+ * ================================================================================\r
+ *  Licensed under the Apache License, Version 2.0 (the "License");\r
+ *  you may not use this file except in compliance with the License.\r
+ *   You may obtain a copy of the License at\r
+ *\r
+ *          http://www.apache.org/licenses/LICENSE-2.0\r
+ *\r
+ *  Unless required by applicable law or agreed to in writing, software\r
+ *  distributed under the License is distributed on an "AS IS" BASIS,\r
+ *  WITHOUT WARRANTIES OR CONDITIONS OF ANY KIND, either express or implied.\r
+ *  See the License for the specific language governing permissions and\r
+ *  limitations under the License.\r
+ *  ============================LICENSE_END===========================================\r
+ */\r
+\r
+package org.openecomp.dcae.apod.analytics.cdap.plugins.batch.sink.dmaap;\r
+\r
+import co.cask.cdap.api.data.batch.OutputFormatProvider;\r
+import org.openecomp.dcae.apod.analytics.cdap.common.CDAPPluginConstants.DMaaPMRSinkHadoopConfigFields;\r
+import org.openecomp.dcae.apod.analytics.cdap.common.utils.ValidationUtils;\r
+import org.openecomp.dcae.apod.analytics.cdap.plugins.domain.config.dmaap.DMaaPMRSinkPluginConfig;\r
+import org.openecomp.dcae.apod.analytics.common.AnalyticsConstants;\r
+\r
+import java.util.LinkedHashMap;\r
+import java.util.Map;\r
+\r
+/**\r
+ * DMaaP MR Output Format Provider used to create Batch Sink Plugin\r
+ * <p>\r
+ * @author Rajiv Singla . Creation Date: 1/27/2017.\r
+ */\r
+public class DMaaPMROutputFormatProvider implements OutputFormatProvider {\r
+\r
+    private final Map<String, String> sinkConfig;\r
+\r
+\r
+    public DMaaPMROutputFormatProvider(DMaaPMRSinkPluginConfig sinkPluginConfig) {\r
+\r
+        // initialize Sink Config - with DMaaP MR Publisher config values\r
+        sinkConfig = new LinkedHashMap<>();\r
+\r
+        // Required fields for sink config\r
+        sinkConfig.put(DMaaPMRSinkHadoopConfigFields.HOST_NAME, sinkPluginConfig.getHostName());\r
+        sinkConfig.put(DMaaPMRSinkHadoopConfigFields.TOPIC_NAME, sinkPluginConfig.getTopicName());\r
+\r
+        final Integer configPortNumber = sinkPluginConfig.getPortNumber();\r
+        if (configPortNumber != null) {\r
+            sinkConfig.put(DMaaPMRSinkHadoopConfigFields.PORT_NUMBER, configPortNumber.toString());\r
+        } else {\r
+            sinkConfig.put(DMaaPMRSinkHadoopConfigFields.PORT_NUMBER,\r
+                    AnalyticsConstants.DEFAULT_PORT_NUMBER.toString());\r
+        }\r
+\r
+        final String configProtocol = sinkPluginConfig.getProtocol();\r
+        if (ValidationUtils.isPresent(configProtocol)) {\r
+            sinkConfig.put(DMaaPMRSinkHadoopConfigFields.PROTOCOL, configProtocol);\r
+        } else {\r
+            sinkConfig.put(DMaaPMRSinkHadoopConfigFields.PROTOCOL, AnalyticsConstants.DEFAULT_PROTOCOL);\r
+        }\r
+\r
+\r
+        final String configUserName = sinkPluginConfig.getUserName();\r
+        if (ValidationUtils.isPresent(configUserName)) {\r
+            sinkConfig.put(DMaaPMRSinkHadoopConfigFields.USER_NAME, configUserName);\r
+        } else {\r
+            sinkConfig.put(DMaaPMRSinkHadoopConfigFields.USER_NAME, AnalyticsConstants.DEFAULT_USER_NAME);\r
+        }\r
+\r
+        final String configUserPass = sinkPluginConfig.getUserPassword();\r
+        if (ValidationUtils.isPresent(configUserPass)) {\r
+            sinkConfig.put(DMaaPMRSinkHadoopConfigFields.USER_PASS, configUserPass);\r
+        } else {\r
+            sinkConfig.put(DMaaPMRSinkHadoopConfigFields.USER_PASS, AnalyticsConstants.DEFAULT_USER_PASSWORD);\r
+        }\r
+\r
+        final String configContentType = sinkPluginConfig.getContentType();\r
+        if (ValidationUtils.isPresent(configContentType)) {\r
+            sinkConfig.put(DMaaPMRSinkHadoopConfigFields.CONTENT_TYPE, configContentType);\r
+        } else {\r
+            sinkConfig.put(DMaaPMRSinkHadoopConfigFields.CONTENT_TYPE, AnalyticsConstants.DEFAULT_CONTENT_TYPE);\r
+        }\r
+\r
+\r
+        final Integer configMaxBatchSize = sinkPluginConfig.getMaxBatchSize();\r
+        if (configMaxBatchSize != null) {\r
+            sinkConfig.put(DMaaPMRSinkHadoopConfigFields.MAX_BATCH_SIZE, configMaxBatchSize.toString());\r
+        } else {\r
+            sinkConfig.put(DMaaPMRSinkHadoopConfigFields.MAX_BATCH_SIZE,\r
+                    String.valueOf(AnalyticsConstants.DEFAULT_PUBLISHER_MAX_BATCH_SIZE));\r
+        }\r
+\r
+        final Integer configMaxRecoveryQueueSize = sinkPluginConfig.getMaxRecoveryQueueSize();\r
+        if (configMaxRecoveryQueueSize != null) {\r
+            sinkConfig.put(DMaaPMRSinkHadoopConfigFields.MAX_RECOVER_QUEUE_SIZE, configMaxRecoveryQueueSize.toString());\r
+        } else {\r
+            sinkConfig.put(DMaaPMRSinkHadoopConfigFields.MAX_RECOVER_QUEUE_SIZE,\r
+                    String.valueOf(AnalyticsConstants.DEFAULT_PUBLISHER_MAX_RECOVERY_QUEUE_SIZE));\r
+        }\r
+\r
+    }\r
+\r
+    @Override\r
+    public String getOutputFormatClassName() {\r
+        return DMaaPMROutputFormat.class.getName();\r
+    }\r
+\r
+    @Override\r
+    public Map<String, String> getOutputFormatConfiguration() {\r
+        return sinkConfig;\r
+    }\r
+}\r