datarouter-prov/src/main/java/org/onap/dmaap/datarouter/provisioning/StatisticsServlet.java

   1 /*******************************************************************************\r
   2  * ============LICENSE_START==================================================\r
   3  * * org.onap.dmaap\r
   4  * * ===========================================================================\r
   5  * * Copyright © 2017 AT&T Intellectual Property. All rights reserved.\r
   6  * * ===========================================================================\r
   7  * * Licensed under the Apache License, Version 2.0 (the "License");\r
   8  * * you may not use this file except in compliance with the License.\r
   9  * * You may obtain a copy of the License at\r
  10  * *\r
  11  *  *      http://www.apache.org/licenses/LICENSE-2.0\r
  12  * *\r
  13  *  * Unless required by applicable law or agreed to in writing, software\r
  14  * * distributed under the License is distributed on an "AS IS" BASIS,\r
  15  * * WITHOUT WARRANTIES OR CONDITIONS OF ANY KIND, either express or implied.\r
  16  * * See the License for the specific language governing permissions and\r
  17  * * limitations under the License.\r
  18  * * ============LICENSE_END====================================================\r
  19  * *\r
  20  * * ECOMP is a trademark and service mark of AT&T Intellectual Property.\r
  21  * *\r
  22  ******************************************************************************/\r
  23 \r
  24 package org.onap.dmaap.datarouter.provisioning;\r
  25 \r
  26 import java.io.IOException;\r
  27 import java.sql.Connection;\r
  28 import java.sql.PreparedStatement;\r
  29 import java.sql.ResultSet;\r
  30 import java.sql.SQLException;\r
  31 import java.sql.Statement;\r
  32 import java.text.ParseException;\r
  33 import java.text.SimpleDateFormat;\r
  34 import java.util.Calendar;\r
  35 import java.util.Date;\r
  36 import java.util.HashMap;\r
  37 import java.util.Map;\r
  38 import java.util.TimeZone;\r
  39 import javax.servlet.ServletOutputStream;\r
  40 import javax.servlet.http.HttpServletRequest;\r
  41 import javax.servlet.http.HttpServletResponse;\r
  42 import org.json.JSONException;\r
  43 import org.onap.dmaap.datarouter.provisioning.beans.EventLogRecord;\r
  44 import org.onap.dmaap.datarouter.provisioning.utils.DB;\r
  45 import org.onap.dmaap.datarouter.provisioning.utils.LOGJSONObject;\r
  46 \r
  47 /**\r
  48  * This Servlet handles requests to the &lt;Statistics API&gt; and  &lt;Statistics consilidated\r
  49  * resultset&gt;,\r
  50  *\r
  51  * @author Manish Singh\r
  52  * @version $Id: StatisticsServlet.java,v 1.11 2016/08/10 17:27:02 Manish Exp $\r
  53  */\r
  54 @SuppressWarnings("serial")\r
  55 \r
  56 public class StatisticsServlet extends BaseServlet {\r
  57 \r
  58   private static final long TWENTYFOUR_HOURS = (24 * 60 * 60 * 1000L);\r
  59   private static final String fmt1 = "yyyy-MM-dd'T'HH:mm:ss'Z'";\r
  60   private static final String fmt2 = "yyyy-MM-dd'T'HH:mm:ss.SSS'Z'";\r
  61 \r
  62 \r
  63   /**\r
  64    * DELETE a logging URL -- not supported.\r
  65    */\r
  66   @Override\r
  67   public void doDelete(HttpServletRequest req, HttpServletResponse resp) throws IOException {\r
  68     String message = "DELETE not allowed for the logURL.";\r
  69     EventLogRecord elr = new EventLogRecord(req);\r
  70     elr.setMessage(message);\r
  71     elr.setResult(HttpServletResponse.SC_METHOD_NOT_ALLOWED);\r
  72     eventlogger.info(elr);\r
  73     resp.sendError(HttpServletResponse.SC_METHOD_NOT_ALLOWED, message);\r
  74   }\r
  75 \r
  76   /**\r
  77    * GET a Statistics URL -- retrieve Statistics data for a feed or subscription. See the\r
  78    * <b>Statistics API</b> document for details on how this     method should be invoked.\r
  79    */\r
  80   @Override\r
  81   public void doGet(HttpServletRequest req, HttpServletResponse resp) throws IOException {\r
  82 \r
  83     Map<String, String> map = buildMapFromRequest(req);\r
  84     if (map.get("err") != null) {\r
  85       resp.sendError(HttpServletResponse.SC_BAD_REQUEST, "Invalid arguments: " + map.get("err"));\r
  86       return;\r
  87     }\r
  88     // check Accept: header??\r
  89 \r
  90     resp.setStatus(HttpServletResponse.SC_OK);\r
  91     resp.setContentType(LOGLIST_CONTENT_TYPE);\r
  92     ServletOutputStream out = resp.getOutputStream();\r
  93 \r
  94     String outputType = "json";\r
  95     String feedids = null;\r
  96 \r
  97     if (req.getParameter("feedid") == null && req.getParameter("groupid") == null) {\r
  98       out.print("Invalid request, Feedid or Group ID is required.");\r
  99     }\r
 100 \r
 101     if (req.getParameter("feedid") != null && req.getParameter("groupid") == null) {\r
 102       map.put("feedids", req.getParameter("feedid").replace("|", ",").toString());\r
 103     }\r
 104 \r
 105     if (req.getParameter("groupid") != null && req.getParameter("feedid") == null) {\r
 106       StringBuffer groupid1 = new StringBuffer();\r
 107 \r
 108       try {\r
 109         System.out.println("feeedidsssssssss");\r
 110         groupid1 = this.getFeedIdsByGroupId(Integer.parseInt(req.getParameter("groupid")));\r
 111         System.out.println("feeedids" + req.getParameter("groupid"));\r
 112 \r
 113         map.put("feedids", groupid1.toString());\r
 114         System.out.println("groupid1" + groupid1.toString());\r
 115 \r
 116 \r
 117       } catch (NumberFormatException e) {\r
 118         e.printStackTrace();\r
 119       } catch (SQLException e) {\r
 120         e.printStackTrace();\r
 121       }\r
 122     }\r
 123     if (req.getParameter("groupid") != null && req.getParameter("feedid") != null) {\r
 124       StringBuffer groupid1 = new StringBuffer();\r
 125 \r
 126       try {\r
 127         System.out.println("both r not null");\r
 128         groupid1 = this.getFeedIdsByGroupId(Integer.parseInt(req.getParameter("groupid")));\r
 129         System.out.println("feeedids" + req.getParameter("groupid"));\r
 130         groupid1.append(",");\r
 131         groupid1.append(req.getParameter("feedid").replace("|", ",").toString());\r
 132 \r
 133         map.put("feedids", groupid1.toString());\r
 134 \r
 135         System.out.println("groupid1" + groupid1.toString());\r
 136 \r
 137 \r
 138       } catch (NumberFormatException e) {\r
 139         e.printStackTrace();\r
 140       } catch (SQLException e) {\r
 141         e.printStackTrace();\r
 142       }\r
 143     }\r
 144 \r
 145     if (req.getParameter("subid") != null && req.getParameter("feedid") != null) {\r
 146       StringBuffer subidstr = new StringBuffer();\r
 147       subidstr.append("and e.DELIVERY_SUBID in(");\r
 148 \r
 149       subidstr.append(req.getParameter("subid").replace("|", ",").toString());\r
 150       subidstr.append(")");\r
 151       map.put("subid", subidstr.toString());\r
 152     }\r
 153     if (req.getParameter("subid") != null && req.getParameter("groupid") != null) {\r
 154       StringBuffer subidstr = new StringBuffer();\r
 155       subidstr.append("and e.DELIVERY_SUBID in(");\r
 156 \r
 157       subidstr.append(req.getParameter("subid").replace("|", ",").toString());\r
 158       subidstr.append(")");\r
 159       map.put("subid", subidstr.toString());\r
 160     }\r
 161     if (req.getParameter("type") != null) {\r
 162       map.put("eventType", req.getParameter("type").replace("|", ",").toString());\r
 163     }\r
 164     if (req.getParameter("output_type") != null) {\r
 165       map.put("output_type", req.getParameter("output_type").toString());\r
 166     }\r
 167     if (req.getParameter("start_time") != null) {\r
 168       map.put("start_time", req.getParameter("start_time").toString());\r
 169     }\r
 170     if (req.getParameter("end_time") != null) {\r
 171       map.put("end_time", req.getParameter("end_time").toString());\r
 172     }\r
 173 \r
 174     if (req.getParameter("time") != null) {\r
 175       map.put("start_time", req.getParameter("time").toString());\r
 176       map.put("end_time", null);\r
 177     }\r
 178 \r
 179     if (req.getParameter("output_type") != null) {\r
 180       outputType = req.getParameter("output_type");\r
 181     }\r
 182 \r
 183     try {\r
 184 \r
 185       String filterQuery = this.queryGeneretor(map);\r
 186       eventlogger.debug("SQL Query for Statistics resultset. " + filterQuery);\r
 187 \r
 188       ResultSet rs = this.getRecordsForSQL(filterQuery);\r
 189 \r
 190       if (outputType.equals("csv")) {\r
 191         resp.setContentType("application/octet-stream");\r
 192         Date date = new Date();\r
 193         SimpleDateFormat dateFormat = new SimpleDateFormat("dd-MM-YYYY HH:mm:ss");\r
 194         resp.setHeader("Content-Disposition",\r
 195             "attachment; filename=\"result:" + dateFormat.format(date) + ".csv\"");\r
 196         eventlogger.info("Generating CSV file from Statistics resultset");\r
 197 \r
 198         rsToCSV(rs, out);\r
 199       } else {\r
 200         eventlogger.info("Generating JSON for Statistics resultset");\r
 201         this.rsToJson(rs, out);\r
 202       }\r
 203     } catch (IOException e) {\r
 204       eventlogger.error("IOException - Generating JSON/CSV:" + e);\r
 205       e.printStackTrace();\r
 206     } catch (JSONException e) {\r
 207       eventlogger.error("JSONException - executing SQL query:" + e);\r
 208       e.printStackTrace();\r
 209     } catch (SQLException e) {\r
 210       eventlogger.error("SQLException - executing SQL query:" + e);\r
 211       e.printStackTrace();\r
 212     } catch (ParseException e) {\r
 213       eventlogger.error("ParseException - executing SQL query:" + e);\r
 214       e.printStackTrace();\r
 215     }\r
 216   }\r
 217 \r
 218 \r
 219   /**\r
 220    * rsToJson - Converting RS to JSON object\r
 221    *\r
 222    * @param out ServletOutputStream, rs as ResultSet\r
 223    * @throws IOException, SQLException\r
 224    */\r
 225   public void rsToCSV(ResultSet rs, ServletOutputStream out) throws IOException, SQLException {\r
 226     String header = "FEEDNAME,FEEDID,FILES_PUBLISHED,PUBLISH_LENGTH, FILES_DELIVERED, DELIVERED_LENGTH, SUBSCRIBER_URL, SUBID, PUBLISH_TIME,DELIVERY_TIME, AverageDelay\n";\r
 227 \r
 228     out.write(header.getBytes());\r
 229 \r
 230     while (rs.next()) {\r
 231       StringBuffer line = new StringBuffer();\r
 232       line.append(rs.getString("FEEDNAME"));\r
 233       line.append(",");\r
 234       line.append(rs.getString("FEEDID"));\r
 235       line.append(",");\r
 236       line.append(rs.getString("FILES_PUBLISHED"));\r
 237       line.append(",");\r
 238       line.append(rs.getString("PUBLISH_LENGTH"));\r
 239       line.append(",");\r
 240       line.append(rs.getString("FILES_DELIVERED"));\r
 241       line.append(",");\r
 242       line.append(rs.getString("DELIVERED_LENGTH"));\r
 243       line.append(",");\r
 244       line.append(rs.getString("SUBSCRIBER_URL"));\r
 245       line.append(",");\r
 246       line.append(rs.getString("SUBID"));\r
 247       line.append(",");\r
 248       line.append(rs.getString("PUBLISH_TIME"));\r
 249       line.append(",");\r
 250       line.append(rs.getString("DELIVERY_TIME"));\r
 251       line.append(",");\r
 252       line.append(rs.getString("AverageDelay"));\r
 253       line.append(",");\r
 254 \r
 255       line.append("\n");\r
 256       out.write(line.toString().getBytes());\r
 257       out.flush();\r
 258     }\r
 259   }\r
 260 \r
 261   /**\r
 262    * rsToJson - Converting RS to JSON object\r
 263    *\r
 264    * @param out ServletOutputStream, rs as ResultSet\r
 265    * @throws IOException, SQLException\r
 266    */\r
 267   public void rsToJson(ResultSet rs, ServletOutputStream out) throws IOException, SQLException {\r
 268 \r
 269     String fields[] = {"FEEDNAME", "FEEDID", "FILES_PUBLISHED", "PUBLISH_LENGTH", "FILES_DELIVERED",\r
 270         "DELIVERED_LENGTH", "SUBSCRIBER_URL", "SUBID", "PUBLISH_TIME", "DELIVERY_TIME",\r
 271         "AverageDelay"};\r
 272     StringBuffer line = new StringBuffer();\r
 273 \r
 274     line.append("[\n");\r
 275 \r
 276     while (rs.next()) {\r
 277       LOGJSONObject j2 = new LOGJSONObject();\r
 278       for (String key : fields) {\r
 279         Object v = rs.getString(key);\r
 280         if (v != null) {\r
 281           j2.put(key.toLowerCase(), v);\r
 282         } else {\r
 283           j2.put(key.toLowerCase(), "");\r
 284         }\r
 285       }\r
 286       line = line.append(j2.toString());\r
 287       line.append(",\n");\r
 288     }\r
 289     line.append("]");\r
 290     out.print(line.toString());\r
 291   }\r
 292 \r
 293   /**\r
 294    * getFeedIdsByGroupId - Getting FEEDID's by GROUP ID.\r
 295    *\r
 296    * @throws SQL Query SQLException.\r
 297    */\r
 298   public StringBuffer getFeedIdsByGroupId(int groupIds) throws SQLException {\r
 299 \r
 300     DB db = null;\r
 301     Connection conn = null;\r
 302     PreparedStatement prepareStatement = null;\r
 303     ResultSet resultSet = null;\r
 304     String sqlGoupid = null;\r
 305     StringBuffer feedIds = new StringBuffer();\r
 306 \r
 307     try {\r
 308       db = new DB();\r
 309       conn = db.getConnection();\r
 310       sqlGoupid = " SELECT FEEDID from FEEDS  WHERE GROUPID = ?";\r
 311       prepareStatement = conn.prepareStatement(sqlGoupid);\r
 312       prepareStatement.setInt(1, groupIds);\r
 313       resultSet = prepareStatement.executeQuery();\r
 314       while (resultSet.next()) {\r
 315         feedIds.append(resultSet.getInt("FEEDID"));\r
 316         feedIds.append(",");\r
 317       }\r
 318       feedIds.deleteCharAt(feedIds.length() - 1);\r
 319       System.out.println("feedIds" + feedIds.toString());\r
 320 \r
 321     } catch (SQLException e) {\r
 322       e.printStackTrace();\r
 323     } finally {\r
 324       try {\r
 325         if (resultSet != null) {\r
 326           resultSet.close();\r
 327           resultSet = null;\r
 328         }\r
 329 \r
 330         if (prepareStatement != null) {\r
 331           prepareStatement.close();\r
 332           prepareStatement = null;\r
 333         }\r
 334 \r
 335         if (conn != null) {\r
 336           db.release(conn);\r
 337         }\r
 338       } catch (Exception e) {\r
 339         e.printStackTrace();\r
 340       }\r
 341     }\r
 342     return feedIds;\r
 343   }\r
 344 \r
 345 \r
 346   /**\r
 347    * queryGeneretor - Generating sql query\r
 348    *\r
 349    * @param map as key value pare of all user input fields\r
 350    */\r
 351   public String queryGeneretor(Map<String, String> map) throws ParseException {\r
 352 \r
 353     String sql = null;\r
 354     String eventType = null;\r
 355     String feedids = null;\r
 356     String start_time = null;\r
 357     String end_time = null;\r
 358     String subid = " ";\r
 359     if (map.get("eventType") != null) {\r
 360       eventType = (String) map.get("eventType");\r
 361     }\r
 362     if (map.get("feedids") != null) {\r
 363       feedids = (String) map.get("feedids");\r
 364     }\r
 365     if (map.get("start_time") != null) {\r
 366       start_time = (String) map.get("start_time");\r
 367     }\r
 368     if (map.get("end_time") != null) {\r
 369       end_time = (String) map.get("end_time");\r
 370     }\r
 371     if ("all".equalsIgnoreCase(eventType)) {\r
 372       eventType = "PUB','DEL, EXP, PBF";\r
 373     }\r
 374     if (map.get("subid") != null) {\r
 375       subid = (String) map.get("subid");\r
 376     }\r
 377 \r
 378     eventlogger.info("Generating sql query to get Statistics resultset. ");\r
 379 \r
 380     if (end_time == null && start_time == null) {\r
 381 \r
 382       sql = "SELECT (SELECT NAME FROM FEEDS AS f WHERE f.FEEDID in(" + feedids\r
 383           + ") and f.FEEDID=e.FEEDID) AS FEEDNAME, e.FEEDID as FEEDID, (SELECT COUNT(*) FROM LOG_RECORDS AS c WHERE c.FEEDID in("\r
 384           + feedids\r
 385           + ") and c.FEEDID=e.FEEDID AND c.TYPE='PUB') AS FILES_PUBLISHED,(SELECT SUM(content_length) FROM LOG_RECORDS AS c WHERE c.FEEDID in("\r
 386           + feedids\r
 387           + ")  and c.FEEDID=e.FEEDID AND c.TYPE='PUB') AS PUBLISH_LENGTH, COUNT(e.EVENT_TIME) as FILES_DELIVERED,  sum(m.content_length) as DELIVERED_LENGTH,SUBSTRING_INDEX(e.REQURI,'/',+3) as SUBSCRIBER_URL, e.DELIVERY_SUBID as SUBID, e.EVENT_TIME AS PUBLISH_TIME, m.EVENT_TIME AS DELIVERY_TIME,  AVG(e.EVENT_TIME - m.EVENT_TIME)/1000 as AverageDelay FROM LOG_RECORDS e JOIN LOG_RECORDS m ON m.PUBLISH_ID = e.PUBLISH_ID AND e.FEEDID IN ("\r
 388           + feedids + ") " + subid + " AND m.STATUS=204 AND e.RESULT=204  group by SUBID";\r
 389 \r
 390       return sql;\r
 391     } else if (start_time != null && end_time == null) {\r
 392 \r
 393       long inputTimeInMilli = 60000 * Long.parseLong(start_time);\r
 394       Calendar cal = Calendar.getInstance(TimeZone.getTimeZone("GMT"));\r
 395       long currentTimeInMilli = cal.getTimeInMillis();\r
 396       long compareTime = currentTimeInMilli - inputTimeInMilli;\r
 397 \r
 398       sql = "SELECT (SELECT NAME FROM FEEDS AS f WHERE f.FEEDID in(" + feedids\r
 399           + ") and f.FEEDID=e.FEEDID) AS FEEDNAME, e.FEEDID as FEEDID, (SELECT COUNT(*) FROM LOG_RECORDS AS c WHERE c.FEEDID in("\r
 400           + feedids\r
 401           + ") and c.FEEDID=e.FEEDID AND c.TYPE='PUB') AS FILES_PUBLISHED,(SELECT SUM(content_length) FROM LOG_RECORDS AS c WHERE c.FEEDID in("\r
 402           + feedids\r
 403           + ")  and c.FEEDID=e.FEEDID AND c.TYPE='PUB') AS PUBLISH_LENGTH, COUNT(e.EVENT_TIME) as FILES_DELIVERED,  sum(m.content_length) as DELIVERED_LENGTH,SUBSTRING_INDEX(e.REQURI,'/',+3) as SUBSCRIBER_URL, e.DELIVERY_SUBID as SUBID, e.EVENT_TIME AS PUBLISH_TIME, m.EVENT_TIME AS DELIVERY_TIME,  AVG(e.EVENT_TIME - m.EVENT_TIME)/1000 as AverageDelay FROM LOG_RECORDS e JOIN LOG_RECORDS m ON m.PUBLISH_ID = e.PUBLISH_ID AND e.FEEDID IN ("\r
 404           + feedids + ") " + subid + " AND m.STATUS=204 AND e.RESULT=204 and e.event_time>="\r
 405           + compareTime + " group by SUBID";\r
 406 \r
 407       return sql;\r
 408 \r
 409     } else {\r
 410       SimpleDateFormat inFormat = new SimpleDateFormat("yyyy-MM-dd'T'HH:mm:ss");\r
 411       Date startDate = inFormat.parse(start_time);\r
 412       Date endDate = inFormat.parse(end_time);\r
 413 \r
 414       long startInMillis = startDate.getTime();\r
 415       long endInMillis = endDate.getTime();\r
 416 \r
 417       {\r
 418 \r
 419         sql = "SELECT (SELECT NAME FROM FEEDS AS f WHERE f.FEEDID in(" + feedids\r
 420             + ") and f.FEEDID=e.FEEDID) AS FEEDNAME, e.FEEDID as FEEDID, (SELECT COUNT(*) FROM LOG_RECORDS AS c WHERE c.FEEDID in("\r
 421             + feedids\r
 422             + ") and c.FEEDID=e.FEEDID AND c.TYPE='PUB') AS FILES_PUBLISHED,(SELECT SUM(content_length) FROM LOG_RECORDS AS c WHERE c.FEEDID in("\r
 423             + feedids\r
 424             + ")  and c.FEEDID=e.FEEDID AND c.TYPE='PUB') AS PUBLISH_LENGTH, COUNT(e.EVENT_TIME) as FILES_DELIVERED,  sum(m.content_length) as DELIVERED_LENGTH,SUBSTRING_INDEX(e.REQURI,'/',+3) as SUBSCRIBER_URL, e.DELIVERY_SUBID as SUBID, e.EVENT_TIME AS PUBLISH_TIME, m.EVENT_TIME AS DELIVERY_TIME,  AVG(e.EVENT_TIME - m.EVENT_TIME)/1000 as AverageDelay FROM LOG_RECORDS e JOIN LOG_RECORDS m ON m.PUBLISH_ID = e.PUBLISH_ID AND e.FEEDID IN ("\r
 425             + feedids + ") " + subid\r
 426             + " AND m.STATUS=204 AND e.RESULT=204 and e.event_time between " + startInMillis\r
 427             + " and " + endInMillis + " group by SUBID";\r
 428 \r
 429       }\r
 430       return sql;\r
 431     }\r
 432   }\r
 433 \r
 434 \r
 435   /**\r
 436    * PUT a Statistics URL -- not supported.\r
 437    */\r
 438   @Override\r
 439   public void doPut(HttpServletRequest req, HttpServletResponse resp) throws IOException {\r
 440     String message = "PUT not allowed for the StatisticsURL.";\r
 441     EventLogRecord elr = new EventLogRecord(req);\r
 442     elr.setMessage(message);\r
 443     elr.setResult(HttpServletResponse.SC_METHOD_NOT_ALLOWED);\r
 444     eventlogger.info(elr);\r
 445     resp.sendError(HttpServletResponse.SC_METHOD_NOT_ALLOWED, message);\r
 446   }\r
 447 \r
 448   /**\r
 449    * POST a Statistics URL -- not supported.\r
 450    */\r
 451   @Override\r
 452   public void doPost(HttpServletRequest req, HttpServletResponse resp) throws IOException {\r
 453     String message = "POST not allowed for the StatisticsURL.";\r
 454     EventLogRecord elr = new EventLogRecord(req);\r
 455     elr.setMessage(message);\r
 456     elr.setResult(HttpServletResponse.SC_METHOD_NOT_ALLOWED);\r
 457     eventlogger.info(elr);\r
 458     resp.sendError(HttpServletResponse.SC_METHOD_NOT_ALLOWED, message);\r
 459   }\r
 460 \r
 461   private Map<String, String> buildMapFromRequest(HttpServletRequest req) {\r
 462     Map<String, String> map = new HashMap<String, String>();\r
 463     String s = req.getParameter("type");\r
 464     if (s != null) {\r
 465       if (s.equals("pub") || s.equals("del") || s.equals("exp")) {\r
 466         map.put("type", s);\r
 467       } else {\r
 468         map.put("err", "bad type");\r
 469         return map;\r
 470       }\r
 471     } else {\r
 472       map.put("type", "all");\r
 473     }\r
 474     map.put("publishSQL", "");\r
 475     map.put("statusSQL", "");\r
 476     map.put("resultSQL", "");\r
 477     map.put("reasonSQL", "");\r
 478 \r
 479     s = req.getParameter("publishId");\r
 480     if (s != null) {\r
 481       if (s.indexOf("'") >= 0) {\r
 482         map.put("err", "bad publishId");\r
 483         return map;\r
 484       }\r
 485       map.put("publishSQL", " AND PUBLISH_ID = '" + s + "'");\r
 486     }\r
 487 \r
 488     s = req.getParameter("statusCode");\r
 489     if (s != null) {\r
 490       String sql = null;\r
 491       if (s.equals("success")) {\r
 492         sql = " AND STATUS >= 200 AND STATUS < 300";\r
 493       } else if (s.equals("redirect")) {\r
 494         sql = " AND STATUS >= 300 AND STATUS < 400";\r
 495       } else if (s.equals("failure")) {\r
 496         sql = " AND STATUS >= 400";\r
 497       } else {\r
 498         try {\r
 499           Integer n = Integer.parseInt(s);\r
 500           if ((n >= 100 && n < 600) || (n == -1)) {\r
 501             sql = " AND STATUS = " + n;\r
 502           }\r
 503         } catch (NumberFormatException e) {\r
 504         }\r
 505       }\r
 506       if (sql == null) {\r
 507         map.put("err", "bad statusCode");\r
 508         return map;\r
 509       }\r
 510       map.put("statusSQL", sql);\r
 511       map.put("resultSQL", sql.replaceAll("STATUS", "RESULT"));\r
 512     }\r
 513 \r
 514     s = req.getParameter("expiryReason");\r
 515     if (s != null) {\r
 516       map.put("type", "exp");\r
 517       if (s.equals("notRetryable")) {\r
 518         map.put("reasonSQL", " AND REASON = 'notRetryable'");\r
 519       } else if (s.equals("retriesExhausted")) {\r
 520         map.put("reasonSQL", " AND REASON = 'retriesExhausted'");\r
 521       } else if (s.equals("diskFull")) {\r
 522         map.put("reasonSQL", " AND REASON = 'diskFull'");\r
 523       } else if (s.equals("other")) {\r
 524         map.put("reasonSQL", " AND REASON = 'other'");\r
 525       } else {\r
 526         map.put("err", "bad expiryReason");\r
 527         return map;\r
 528       }\r
 529     }\r
 530 \r
 531     long stime = getTimeFromParam(req.getParameter("start"));\r
 532     if (stime < 0) {\r
 533       map.put("err", "bad start");\r
 534       return map;\r
 535     }\r
 536     long etime = getTimeFromParam(req.getParameter("end"));\r
 537     if (etime < 0) {\r
 538       map.put("err", "bad end");\r
 539       return map;\r
 540     }\r
 541     if (stime == 0 && etime == 0) {\r
 542       etime = System.currentTimeMillis();\r
 543       stime = etime - TWENTYFOUR_HOURS;\r
 544     } else if (stime == 0) {\r
 545       stime = etime - TWENTYFOUR_HOURS;\r
 546     } else if (etime == 0) {\r
 547       etime = stime + TWENTYFOUR_HOURS;\r
 548     }\r
 549     map.put("timeSQL", String.format(" AND EVENT_TIME >= %d AND EVENT_TIME <= %d", stime, etime));\r
 550     return map;\r
 551   }\r
 552 \r
 553   private long getTimeFromParam(final String s) {\r
 554     if (s == null) {\r
 555       return 0;\r
 556     }\r
 557     try {\r
 558       // First, look for an RFC 3339 date\r
 559       String fmt = (s.indexOf('.') > 0) ? fmt2 : fmt1;\r
 560       SimpleDateFormat sdf = new SimpleDateFormat(fmt);\r
 561       Date d = sdf.parse(s);\r
 562       return d.getTime();\r
 563     } catch (ParseException e) {\r
 564     }\r
 565     try {\r
 566       // Also allow a long (in ms); useful for testing\r
 567       long n = Long.parseLong(s);\r
 568       return n;\r
 569     } catch (NumberFormatException e) {\r
 570     }\r
 571     intlogger.info("Error parsing time=" + s);\r
 572     return -1;\r
 573   }\r
 574 \r
 575 \r
 576   private ResultSet getRecordsForSQL(String sql) {\r
 577     intlogger.debug(sql);\r
 578     long start = System.currentTimeMillis();\r
 579     DB db = new DB();\r
 580     Connection conn = null;\r
 581     ResultSet rs = null;\r
 582 \r
 583     try {\r
 584       conn = db.getConnection();\r
 585       Statement stmt = conn.createStatement();\r
 586       PreparedStatement pst = conn.prepareStatement(sql);\r
 587       rs = pst.executeQuery();\r
 588       //this.rsToJson(rs)\r
 589       //rs.close();\r
 590       stmt.close();\r
 591     } catch (SQLException e) {\r
 592       e.printStackTrace();\r
 593     } finally {\r
 594       if (conn != null) {\r
 595         db.release(conn);\r
 596       }\r
 597     }\r
 598 \r
 599     intlogger.debug("Time: " + (System.currentTimeMillis() - start) + " ms");\r
 600 \r
 601     return rs;\r
 602   }\r
 603 }\r