Fix bug in directory read with json files
[aaf/sms.git] / sms-service / src / preload / preload.go
1 /*
2  * Copyright 2018 Intel Corporation, Inc
3  *
4  * Licensed under the Apache License, Version 2.0 (the "License");
5  * you may not use this file except in compliance with the License.
6  * You may obtain a copy of the License at
7  *
8  *     http://www.apache.org/licenses/LICENSE-2.0
9  *
10  * Unless required by applicable law or agreed to in writing, software
11  * distributed under the License is distributed on an "AS IS" BASIS,
12  * WITHOUT WARRANTIES OR CONDITIONS OF ANY KIND, either express or implied.
13  * See the License for the specific language governing permissions and
14  * limitations under the License.
15  */
16
17 package main
18
19 import (
20         "bytes"
21         "crypto/tls"
22         "crypto/x509"
23         "encoding/json"
24         "flag"
25         "fmt"
26         "io/ioutil"
27         "log"
28         "net/http"
29         "net/url"
30         "path/filepath"
31         "strings"
32         "time"
33
34         pkgerrors "github.com/pkg/errors"
35 )
36
37 //DataJSON stores a list of domains from JSON file
38 type DataJSON struct {
39         //Support single domain: {} structure in JSON
40         Domain SecretDomainJSON `json:"domain,omitempty"`
41         //Support plural domains: [{}] structure in JSON
42         Domains []SecretDomainJSON `json:"domains,omitempty"`
43 }
44
45 //SecretDomainJSON stores a name for the Domain and a list of Secrets
46 type SecretDomainJSON struct {
47         Name    string       `json:"name"`
48         Secrets []SecretJSON `json:"secrets"`
49 }
50
51 //SecretJSON stores a name for the Secret and a list of Values
52 type SecretJSON struct {
53         Name   string                 `json:"name"`
54         Values map[string]interface{} `json:"values"`
55 }
56
57 //Processes the JSON file and returns a DataJSON struct
58 func processJSONFile(name string) (DataJSON, error) {
59
60         data, err := ioutil.ReadFile(name)
61         if err != nil {
62                 return DataJSON{}, pkgerrors.Cause(err)
63         }
64
65         d := DataJSON{}
66         err = json.Unmarshal(data, &d)
67         if err != nil {
68                 return DataJSON{}, pkgerrors.Cause(err)
69         }
70
71         return d, nil
72 }
73
74 type smsClient struct {
75         BaseURL *url.URL
76         //In seconds
77         Timeout    int
78         CaCertPath string
79
80         httpClient *http.Client
81 }
82
83 func (c *smsClient) init() error {
84
85         skipVerify := false
86         caCert, err := ioutil.ReadFile(c.CaCertPath)
87         if err != nil {
88                 fmt.Println(pkgerrors.Cause(err))
89                 fmt.Println("Using Insecure Server Verification")
90                 skipVerify = true
91         }
92
93         tlsConfig := &tls.Config{
94                 MinVersion: tls.VersionTLS12,
95         }
96
97         tlsConfig.InsecureSkipVerify = skipVerify
98
99         // Add cert information when skipVerify is false
100         if skipVerify == false {
101                 caCertPool := x509.NewCertPool()
102                 caCertPool.AppendCertsFromPEM(caCert)
103                 tlsConfig.RootCAs = caCertPool
104         }
105
106         tr := &http.Transport{
107                 TLSClientConfig: tlsConfig,
108         }
109
110         c.httpClient = &http.Client{
111                 Transport: tr,
112                 Timeout:   time.Duration(c.Timeout) * time.Second,
113         }
114
115         return nil
116 }
117
118 func (c *smsClient) sendPostRequest(relURL string, message map[string]interface{}) error {
119
120         rel, err := url.Parse(relURL)
121         if err != nil {
122                 return pkgerrors.Cause(err)
123         }
124         u := c.BaseURL.ResolveReference(rel)
125
126         body, err := json.Marshal(message)
127         if err != nil {
128                 return pkgerrors.Cause(err)
129         }
130
131         resp, err := c.httpClient.Post(u.String(), "application/json", bytes.NewBuffer(body))
132         if err != nil {
133                 return pkgerrors.Cause(err)
134         }
135
136         if resp.StatusCode >= 400 && resp.StatusCode < 600 {
137                 // Request Failed
138                 errText, _ := ioutil.ReadAll(resp.Body)
139                 return pkgerrors.Errorf("Request Failed with: %s and Error: %s",
140                         resp.Status, string(errText))
141         }
142
143         return nil
144 }
145
146 func (c *smsClient) createDomain(domain string) error {
147
148         message := map[string]interface{}{
149                 "name": domain,
150         }
151         url := "/v1/sms/domain"
152         err := c.sendPostRequest(url, message)
153         if err != nil {
154                 return pkgerrors.Cause(err)
155         }
156         return nil
157 }
158
159 func (c *smsClient) createSecret(domain string, secret string,
160
161         values map[string]interface{}) error {
162         message := map[string]interface{}{
163                 "name":   secret,
164                 "values": values,
165         }
166
167         url := "/v1/sms/domain/" + strings.TrimSpace(domain) + "/secret"
168         err := c.sendPostRequest(url, message)
169         if err != nil {
170                 return pkgerrors.Cause(err)
171         }
172
173         return nil
174 }
175
176 //uploadToSMS reads through the domain or domains and uploads
177 //their corresponding secrets to SMS service
178 func (c *smsClient) uploadToSMS(data DataJSON) error {
179
180         var ldata []SecretDomainJSON
181
182         //Check if Domain is empty
183         if strings.TrimSpace(data.Domain.Name) != "" {
184                 ldata = append(ldata, data.Domain)
185         } else if len(data.Domains) != 0 {
186                 //Check if plural Domains are empty
187                 ldata = append(ldata, data.Domains...)
188         } else {
189                 return pkgerrors.New("Invalid JSON Data. No domain or domains found")
190         }
191
192         for _, d := range ldata {
193                 err := c.createDomain(d.Name)
194                 if err != nil {
195                         return pkgerrors.Cause(err)
196                 }
197
198                 for _, s := range d.Secrets {
199                         err = c.createSecret(d.Name, s.Name, s.Values)
200                         if err != nil {
201                                 return pkgerrors.Cause(err)
202                         }
203                 }
204         }
205
206         return nil
207 }
208
209 func main() {
210
211         cacert := flag.String("cacert", "/sms/certs/aaf_root_ca.cer",
212                 "Path to the CA Certificate file")
213         serviceurl := flag.String("serviceurl", "https://aaf-sms.onap",
214                 "Url for the SMS Service")
215         serviceport := flag.String("serviceport", "10443",
216                 "Service port if its different than the default")
217         jsondir := flag.String("jsondir", ".",
218                 "Folder containing json files to upload")
219
220         flag.Parse()
221
222         //Clear all trailing/leading spaces from incoming strings
223         *cacert = strings.TrimSpace(*cacert)
224         *serviceurl = strings.TrimSpace(*serviceurl)
225         *serviceport = strings.TrimSpace(*serviceport)
226         *jsondir = strings.TrimSpace(*jsondir)
227
228         files, err := ioutil.ReadDir(*jsondir)
229         if err != nil {
230                 log.Fatal(pkgerrors.Cause(err))
231         }
232
233         //URL validity is checked here
234         serviceURL, err := url.Parse(*serviceurl + ":" + *serviceport)
235         if err != nil {
236                 log.Fatal(pkgerrors.Cause(err))
237         }
238
239         client := &smsClient{
240                 Timeout:    30,
241                 BaseURL:    serviceURL,
242                 CaCertPath: *cacert,
243         }
244         client.init()
245
246         for _, file := range files {
247                 if filepath.Ext(file.Name()) == ".json" {
248                         fmt.Println("Processing   ", filepath.Join(*jsondir, file.Name()))
249                         d, err := processJSONFile(filepath.Join(*jsondir, file.Name()))
250                         if err != nil {
251                                 log.Printf("Error Reading %s : %s", file.Name(), pkgerrors.Cause(err))
252                                 continue
253                         }
254
255                         err = client.uploadToSMS(d)
256                         if err != nil {
257                                 log.Printf("Error Uploading %s : %s", file.Name(), pkgerrors.Cause(err))
258                                 continue
259                         }
260                 }
261         }
262 }