aai-core/src/test/java/org/onap/aai/stress/IndexStressTest.java

   1 /**
   2  * ============LICENSE_START=======================================================
   3  * org.onap.aai
   4  * ================================================================================
   5  * Copyright © 2017-2018 AT&T Intellectual Property. All rights reserved.
   6  * ================================================================================
   7  * Licensed under the Apache License, Version 2.0 (the "License");
   8  * you may not use this file except in compliance with the License.
   9  * You may obtain a copy of the License at
  10  *
  11  *    http://www.apache.org/licenses/LICENSE-2.0
  12  *
  13  * Unless required by applicable law or agreed to in writing, software
  14  * distributed under the License is distributed on an "AS IS" BASIS,
  15  * WITHOUT WARRANTIES OR CONDITIONS OF ANY KIND, either express or implied.
  16  * See the License for the specific language governing permissions and
  17  * limitations under the License.
  18  * ============LICENSE_END=========================================================
  19  */
  20
  21 package org.onap.aai.stress;
  22
  23 import java.util.HashSet;
  24 import java.util.Set;
  25
  26 import org.apache.commons.lang3.RandomStringUtils;
  27 import org.apache.tinkerpop.gremlin.process.traversal.dsl.graph.GraphTraversalSource;
  28 import org.apache.tinkerpop.gremlin.structure.Vertex;
  29 import org.janusgraph.core.JanusGraphTransaction;
  30 import org.junit.Before;
  31 import org.junit.Ignore;
  32 import org.junit.Test;
  33 import org.onap.aai.AAISetup;
  34 import org.onap.aai.dbmap.AAIGraph;
  35 import org.slf4j.Logger;
  36 import org.slf4j.LoggerFactory;
  37 import org.springframework.test.annotation.DirtiesContext;
  38
  39 @Ignore("Run this only to test indexes limit")
  40 @DirtiesContext(classMode = DirtiesContext.ClassMode.BEFORE_CLASS)
  41 public class IndexStressTest extends AAISetup {
  42
  43     private static final Logger LOGGER = LoggerFactory.getLogger(IndexStressTest.class);
  44
  45     @Before
  46     public void setup(){
  47         AAIGraph.getInstance().getGraph();
  48     }
  49
  50     @Test
  51     public void testIndexStress(){
  52         JanusGraphTransaction tx = AAIGraph.getInstance().getGraph().newTransaction();
  53
  54         GraphTraversalSource g = tx.traversal();
  55
  56         Set<String> linkNameSet = new HashSet<>();
  57         Set<String> aaiUriSet = new HashSet<>();
  58
  59         int TOTAL_LINKS = 101000;
  60
  61         for(int i = 0; i <TOTAL_LINKS; i++){
  62
  63             String linkName = generateName(linkNameSet);
  64             aaiUriSet.add("/network/logical-links/logical-link/" + linkName);
  65
  66             Vertex v = g.addV()
  67                 .property("aai-node-type", "logical-link")
  68                 .property("link-name", linkName)
  69                 .property("aai-uri", "/network/logical-links/logical-link/" + linkName)
  70                 .next();
  71
  72             if(i % 1000 == 0){
  73                 LOGGER.debug("Committing up to index {}", i);
  74                 tx.commit();
  75                 tx = AAIGraph.getInstance().getGraph().newTransaction();
  76                 g = tx.traversal();
  77             }
  78         }
  79
  80         tx.commit();
  81
  82         tx = AAIGraph.getInstance().getGraph().newTransaction();
  83         g = tx.traversal();
  84
  85         int totalLinks= 0;
  86         int totalLinksWithNodeType = 0;
  87         int totalLinksUsingUri = 0;
  88
  89         int index = 0;
  90         for (String linkName : linkNameSet) {
  91
  92             if(g.V().has("aai-node-type", "logical-link").has("link-name", linkName).hasNext()){
  93                totalLinksWithNodeType++;
  94             }
  95
  96             if(g.V().has("link-name", linkName).hasNext()){
  97                 totalLinks++;
  98             }
  99
 100             if(g.V().has("aai-uri", "/network/logical-links/logical-link/" + linkName).hasNext()){
 101                 totalLinksUsingUri++;
 102             }
 103
 104             index++;
 105
 106             if(index%1000 == 0){
 107                 LOGGER.debug("Processed {} many queries and has {} many to go", index, (TOTAL_LINKS-index));
 108                 LOGGER.debug("Total links using linkname found: {}", totalLinks);
 109                 LOGGER.debug("Total links using nodetype and linkname found: {}", totalLinksWithNodeType);
 110                 LOGGER.debug("Total links using uri found: {}", totalLinksUsingUri);
 111             }
 112         }
 113
 114         tx.rollback();
 115
 116         LOGGER.debug("Total links using linkname found: {}", totalLinks);
 117         LOGGER.debug("Total links using nodetype and linkname found: {}", totalLinksWithNodeType);
 118         LOGGER.debug("Total links using uri found: {}", totalLinksUsingUri);
 119     }
 120
 121     String generateName(Set<String> uniqueKeys){
 122
 123         while(true) {
 124             String data = RandomStringUtils.randomAlphabetic(20);
 125             if (!uniqueKeys.contains(data)){
 126                 uniqueKeys.add(data);
 127                 return data;
 128             }
 129         }
 130     }
 131 }