Builder/Provider/Database/generate.js
[app.Builder.js] / Builder / Provider / Database / generate.js
1 //<script type="text/javascript">
2
3 /**
4  * 
5  * Let's see if libgda can be used to generate our Readers for roo...
6  * 
7  * Concept - conect to database..
8  * 
9  * list tables
10  * 
11  * extra schemas..
12  * 
13  * write readers..
14  * 
15  * 
16  */
17 Gda  = imports.gi.Gda;
18 GObject = imports.gi.GObject;
19
20 GLib = imports.gi.GLib;
21
22 console = imports['../../../console.js'];
23 File = imports['../../../File.js'].File;
24 Gda.init();
25
26 var prov = Gda.Config.list_providers ();
27 //print(prov.dump_as_string());
28 var args = Array.prototype.slice.call(Seed.argv);
29 args.shift();args.shift();// remove first 2
30 if (args.length < 1) {
31     var sample = {
32         DB_NAME : "XXX",
33         USERNAME : "YYY",
34         PASSWORD: "ZZZ",
35         INI : "/path/to/mydb.ini",
36     }
37     print("Usage : seed generate.js  '" + JSON.stringify(sample) +"'");
38     Seed.quit();
39 }
40 var cfg = JSON.parse(args[0]);
41
42 var   cnc = Gda.Connection.open_from_string ("MySQL", "DB_NAME=" + cfg.DB_NAME, 
43                                               "USERNAME=" + cfg.USERNAME + ';PASSWORD=' + cfg.PASSWORD,
44                                               Gda.ConnectionOptions.NONE, null);
45
46
47
48                                               
49
50  
51 Gda.DataSelect.prototype.fetchAll = function()
52 {
53     var cols = [];
54     
55     for (var i =0;i < this.get_n_columns(); i++) {
56         cols.push(this.get_column_name(i));
57     }
58     //console.dump(cols);
59     var iter = this.create_iter();
60     var res = [];
61     while (iter.move_next()) {
62         if (cols.length == 1) {
63             res.push(iter.get_value_at(0).get_string());
64             continue;
65         }
66         var add = { };
67         
68         cols.forEach(function(n,i) {
69            var val = iter.get_value_at(i);
70            var type = GObject.type_name(val.g_type) ;
71            var vs = type == 'GdaBlob' ? val.value.to_string(1024) : val.value;
72          //  print(n + " : TYPE: " + GObject.type_name(val.g_type) + " : " + vs);
73             //print (n + '=' + iter.get_value_at(i).value);
74             add[n] = vs;
75         });
76         
77         res.push(add);
78         
79     }
80     return res;
81
82 }
83
84 var map = {
85     'date' : 'date',
86     'datetime' : 'string',
87     'int' : 'int',
88     'bigint' : 'int',
89     'char' : 'int',
90     'tinyint' : 'int',
91     'decimal' : 'float',
92     'float' : 'float',
93     'varchar' : 'string',
94     'text' : 'string',
95     'longtext' : 'string',
96     'mediumtext' : 'string',
97     'enum' : 'string',
98     
99     
100 }
101
102 var ini = { }
103
104 function readIni(fn)
105 {
106     var key_file = GLib.key_file_new();
107     if (!GLib.key_file_load_from_file (key_file, fn , GLib.KeyFileFlags.NONE )) {
108         return;
109     }
110    
111     var groups = GLib.key_file_get_groups(key_file);
112     groups.forEach(function(g) {
113         ini[g] = {}
114            
115         var keys = GLib.key_file_get_keys(key_file,g);
116         keys.forEach(function(k) {
117             ini[g][k] = GLib.key_file_get_value(key_file,g,k);
118         })
119     })
120     
121 }
122 if (File.isFile(cfg.INI)) {
123     if (cfg.INI.match(/links\.ini$/)) {
124         readIni(cfg.INI);
125     } else {
126         readIni(cfg.INI.replace(/\.ini$/, ".links.ini"));
127     }
128 }
129
130 if (File.isDirectory(cfg.INI)) {
131         
132
133     //--- load ini files..
134     // this is very specific.
135     var dirs = File.list( GLib.get_home_dir() + '/gitlive').filter( 
136         function(e) { return e.match(/^Pman/); }
137     );
138     
139     dirs.forEach(function(d) {
140         // this currently misses the web.*/Pman/XXXX/DataObjects..
141         var path = GLib.get_home_dir() + '/gitlive/' + d + '/DataObjects';
142         if (!File.isDirectory(path)) {
143             path = GLib.get_home_dir() + '/gitlive/' + d + '/Pman/DataObjects';
144         }
145         if (!File.isDirectory(path)) {
146             return; //skip
147         }
148         var inis = File.list(path).filter(
149             function(e) { return e.match(/\.links\.ini$/); }
150         );
151         if (!inis.length) {
152             return;
153         }
154         
155         inis.forEach(function(i) {
156             readIni(path + '/' + i); 
157             
158         })
159
160         
161         
162     });
163 }
164 print(JSON.stringify(ini, null,4));
165  //console.dump(ini);
166
167
168  //Seed.quit();
169
170 //GLib.key_file_load_from_file (key_file, String file, KeyFileFlags flags) : Boolean
171
172
173
174  
175
176 var tables = Gda.execute_select_command(cnc, "SHOW TABLES").fetchAll();
177 var readers = [];
178 tables.forEach(function(table) {
179     //print(table);
180     var schema = Gda.execute_select_command(cnc, "DESCRIBE `" + table+'`').fetchAll();
181     var reader = []; 
182     var colmodel = []; 
183     var combofields= [ { name : 'id', type: 'int' } ]; // technically the primary key..
184          
185     var form = {}
186        
187     var firstTxtCol = '';
188     
189     
190     
191     schema.forEach(function(e)  {
192         var type = e.Type.match(/([^(]+)\(([^\)]+)\)/);
193         var row  = { }; 
194         if (type) {
195             e.Type = type[1];
196             e.Size = type[2];
197         }
198         
199         
200         
201         row.name = e.Field;
202         
203         
204         if (typeof(map[e.Type]) == 'undefined') {
205            console.dump(e);
206            throw {
207                 name: "ArgumentError", 
208                 message: "Unknown mapping for type : " + e.Type
209             };
210         }
211         row.type = map[e.Type];
212         
213         if (row.type == 'string' && !firstTxtCol.length) {
214             firstTxtCol = row.name;
215         }
216         
217         if (row.type == 'date') {
218             row.dateFormat = 'Y-m-d';
219         }
220         reader.push(row);
221         
222         if (combofields.length == 1 && row.type == 'string') {
223             combofields.push(row);
224         }
225         
226         
227         var title = row.name.replace(/_id/, '').replace(/_/g, ' ');
228         title  = title[0].toUpperCase() + title.substring(1);
229         
230         colmodel.push({
231             "xtype": "ColumnModel",
232             "header": title,
233             "width":  row.type == 'string' ? 200 : 75,
234             "dataIndex": row.name,
235             "|renderer": row.type != 'date' ? 
236                     "function(v) { return String.format('{0}', v); }" :
237                     "function(v) { return String.format('{0}', v ? v.format('d/M/Y') : ''); }" , // special for date
238             "|xns": "Roo.grid",
239             "*prop": "colModel[]"
240         });
241         var xtype = 'TextField';
242         if (row.type == 'number') {
243             xtype = 'NumberField';
244         }
245         if (row.type == 'date') {
246             xtype = 'DateField';
247         }
248         if (e.Type == 'text') {
249             xtype = 'TextArea';
250         }
251         
252         // what about booleans.. -> checkboxes..
253         
254         
255         
256         form[row.name] = {
257             fieldLabel : title,
258             name : row.name,
259             width : row.type == 'string' ? 200 : 75,
260             '|xns' : 'Roo.form',
261             xtype : xtype
262         }
263         if (xtype == 'TextArea') {
264             form[row.name].height = 100;
265         }
266         
267         
268     });
269     
270     var combo = {
271         '|xns' : 'Roo.form',
272         xtype: 'ComboBox',
273         allowBlank : 'false',
274         editable : 'false',
275         emptyText : 'Select ' + table,
276         forceSelection : true,
277         listWidth : 400,
278         loadingText: 'Searching...',
279         minChars : 2,
280         pageSize : 20,
281         qtip: 'Select ' + table,
282         selectOnFocus: true,
283         tirggerAction : all,
284         typeAhead: true,
285         valueField : id,
286         width: 300,
287         tpl : '<div class="x-grid-cell-text x-btn button"><b>{name}</b> </div>', // SET WHEN USED
288         queryParam : '',// SET WHEN USED
289         fieldLabel : table,  // SET WHEN USED
290         hiddenName : '', // SET WHEN USED eg. project_id
291         name : '', // SET WHEN USED eg. project_id_name
292         items : [
293             {
294                     
295                 '*prop' : 'store',
296                 'xtype' : 'Store',
297                 '|xns' : 'Roo.data',
298                 listeners : {
299                     '|beforeload' : 'function (_self, o)' +
300                     "{\n" +
301                     "    o.params = o.params || {};\n" +
302                     "    // set more here\n" +
303                     "}\n"
304                 },
305                 items : [
306                     {
307                         '*prop' : 'proxy',
308                         'xtype' : 'HttpProxy',
309                         'method' : 'GET',
310                         '|xns' : 'Roo.data',
311                         '|url' : "baseURL + '/Roo/" + table + ".php'",
312                     },
313                     
314                     {
315                         '*prop' : 'reader',
316                         'xtype' : 'JsonReader',
317                         '|xns' : 'Roo.data',
318                         'id' : 'id',
319                         'root' : 'data',
320                         'totalProperty' : 'total',
321                         '|fields' : JSON.stringify(combofields)
322                         
323                     }
324                 ]
325             }
326         ]
327     }
328     
329     
330     
331     
332     //print(JSON.stringify(reader,null,4));
333     readers.push({
334         table : table ,
335         combo : combo,
336         combofields : combofields,
337         reader :  reader,
338         oreader : JSON.parse(JSON.stringify(reader)), // dupe it..
339         colmodel : colmodel,
340         firstTxtCol : firstTxtCol,
341         form : form
342     });
343     
344     //console.dump(schema );
345     
346      
347 });
348
349
350
351 // merge in the linked tables..
352 readers.forEach(function(reader) {
353     if (typeof(ini[reader.table]) == 'undefined') {
354      
355         return;
356     }
357     print("OVERLAY - " + reader.table);
358     // we have a map..
359     for (var col in ini[reader.table]) {
360         var kv = ini[reader.table][col].split(':');
361         var add = readers.filter(function(r) { return r.table == kv[0] })[0];
362         
363         // merge in data (eg. project_id => project_id_*****
364      
365         add.oreader.forEach(function(or) {
366            
367             
368             
369             reader.reader.push({
370                 name : col + '_' + or.name,
371                 type : or.type
372             });
373         });
374         
375         // col is mapped to something..
376         var combofields = add.combofields;
377         var combofields_name = add.combofields[1].name;
378         var old =   reader.form[col];
379         reader.form[col] = JSON.parse(JSON.stringify(add.combo)); // clone
380         reader.form[col].queryParam  = 'query[' + combofields_name + ']',// SET WHEN USED
381         reader.form[col].fieldLabel = old.fieldLabel,  // SET WHEN USED
382         reader.form[col].hiddenName : old.name, // SET WHEN USED eg. project_id
383         reader.form[col].name : old.name + '_' + combofields_name, // SET WHEN USED eg. project_id_name
384         
385         reader.form[col].tpl = '<div class="x-grid-cell-text x-btn button"><b>{' + combofields_name +'}</b> </div>', // SET WHEN USED
386         
387              
388     };
389     
390     
391 });
392
393 //readers.forEach(function(reader) {
394 //    delete reader.oreader;
395 //});
396
397  
398
399
400
401 //print(JSON.stringify(readers, null, 4));
402
403 readers.forEach(function(reader) {
404     
405
406     var dir = GLib.get_home_dir() + '/.Builder/Roo.data.JsonReader'; 
407     if (!File.isDirectory(dir)) {
408         File.mkdir(dir);
409     }
410     
411     // READERS
412     print("WRITE: " +  dir + '/' + cfg.DB_NAME + '_' + reader.table + '.json');
413     
414                 
415     var jreader = {
416         '|xns' : 'Roo.data',
417         xtype : "JsonReader",
418         totalProperty : "total",
419         root : "data",
420         '*prop' : "reader",
421         id : 'id', // maybe no..
422         '|fields' :  JSON.stringify(reader.reader, null,4)
423     };
424     
425     File.write(
426         dir + '/' + cfg.DB_NAME + '_' + reader.table + '.json',
427         JSON.stringify(jreader, null, 4)
428     )
429     
430     
431     // GRIDS
432     dir = GLib.get_home_dir() + '/.Builder/Roo.GridPanel'; 
433     if (!File.isDirectory(dir)) {
434         File.mkdir(dir);
435     }
436     
437
438     print("WRITE: " +  dir + '/' + cfg.DB_NAME + '_' + reader.table + '.json');
439     
440     File.write(
441         dir + '/' + cfg.DB_NAME + '_' + reader.table + '.json',
442             
443        
444         JSON.stringify({
445             '|xns' : 'Roo',
446             xtype : "GridPanel",
447             "title": reader.table,
448             "fitToframe": true,
449             "fitContainer": true,
450             "tableName": reader.table,
451             "background": true,
452             "listeners": {
453                 "|activate": "function() {\n    _this.panel = this;\n    if (_this.grid) {\n        _this.grid.footer.onClick('first');\n    }\n}"
454             },
455             "items": [
456                 {
457                     "*prop": "grid",
458                     "xtype": "Grid",
459                     "autoExpandColumn": reader.firstTxtCol,
460                     "loadMask": true,
461                     "listeners": {
462                         "|render": "function() \n" +
463                             "{\n" +
464                             "   _this.grid = this; \n" +
465                             "    //_this.dialog = Pman.Dialog.FILL_IN\n" +
466                             "    if (_this.panel.active) {\n" +
467                             "       this.footer.onClick('first');\n" +
468                             "    }\n" +
469                             "}"
470                     },
471                     "|xns": "Roo.grid",
472
473                     "items": [
474                         {
475                             "*prop": "dataSource",
476                             "xtype": "Store",
477                             
478                             "|xns": "Roo.data",
479                             "items": [
480                                 
481                                 {
482                                     "*prop": "proxy",
483                                     "xtype": "HttpProxy",
484                                     "method": "GET",
485                                     "|url": "baseURL + '/Roo/" + reader.table + ".php'",
486                                     "|xns": "Roo.data"
487                                 },
488                                 jreader
489                             ]
490                         },
491                         {
492                             "*prop": "footer",
493                             "xtype": "PagingToolbar",
494                             "pageSize": 25,
495                             "displayInfo": true,
496                             "displayMsg": "Displaying " + reader.table + "{0} - {1} of {2}",
497                             "emptyMsg": "No " + reader.table + " found",
498                             "|xns": "Roo"
499                         },
500                         {
501                             "*prop": "toolbar",
502                             "xtype": "Toolbar",
503                             "|xns": "Roo",
504                             "items": [
505                                 {
506                                     "text": "Add",
507                                     "xtype": "Button",
508                                     "cls": "x-btn-text-icon",
509                                     "|icon": "Roo.rootURL + 'images/default/dd/drop-add.gif'",
510                                     "listeners": {
511                                         "|click": "function()\n"+
512                                             "{\n"+
513                                             "   //yourdialog.show( { id : 0 } , function() {\n"+
514                                             "   //  _this.grid.footer.onClick('first');\n"+
515                                             "   //}); \n"+
516                                             "}\n"
517                                     },
518                                     "|xns": "Roo"
519                                 },
520                                 {
521                                     "text": "Edit",
522                                     "xtype": "Button",
523                                     "cls": "x-btn-text-icon",
524                                     "|icon": "Roo.rootURL + 'images/default/tree/leaf.gif'",
525                                     "listeners": {
526                                         "|click": "function()\n"+
527                                             "{\n"+
528                                             "    var s = _this.grid.getSelectionModel().getSelections();\n"+
529                                             "    if (!s.length || (s.length > 1))  {\n"+
530                                             "        Roo.MessageBox.alert(\"Error\", s.length ? \"Select only one Row\" : \"Select a Row\");\n"+
531                                             "        return;\n"+
532                                             "    }\n"+
533                                             "    \n"+
534                                             "    //_this.dialog.show(s[0].data, function() {\n"+
535                                             "    //    _this.grid.footer.onClick('first');\n"+
536                                             "    //   }); \n"+
537                                             "    \n"+
538                                             "}\n" 
539                                         
540                                     },
541                                     "|xns": "Roo"
542                                 },
543                                 {
544                                     "text": "Delete",
545                                     "cls": "x-btn-text-icon",
546                                     "|icon": "rootURL + '/Pman/templates/images/trash.gif'",
547                                     "xtype": "Button",
548                                     "listeners": {
549                                         "|click": "function()\n"+
550                                             "{\n"+
551                                             "   //Pman.genericDelete(_this, _this.grid.tableName); \n"+
552                                             "}\n"+
553                                             "        "
554                                     },
555                                     "|xns": "Roo"
556                                 }
557                             ]
558                         }, // end toolbar
559                     ].concat( reader.colmodel)
560                 }
561             ]
562             
563             
564         }, null, 4)
565     )
566     
567     /// FORMS..
568     
569     dir = GLib.get_home_dir() + '/.Builder/Roo.form.Form'; 
570     if (!File.isDirectory(dir)) {
571         File.mkdir(dir);
572     }
573     formElements = [];
574     for (var k in reader.form) {
575         if (k == 'id') { // should really do primary key testing..
576             continue;
577            }
578         formElements.push(reader.form[k]);
579     }
580
581     print("WRITE: " +  dir + '/' + cfg.DB_NAME + '_' + reader.table + '.json');
582     
583     File.write(
584         dir + '/' + cfg.DB_NAME + '_' + reader.table + '.json',
585             
586        
587         JSON.stringify({
588             '|xns' : 'Roo.form',
589             xtype : "Form",
590             listeners : {
591                 "|actioncomplete" : "function(_self,action)\n"+
592                     "{\n"+
593                     "    if (action.type == 'setdata') {\n"+
594                     "       //_this.dialog.el.mask(\"Loading\");\n"+
595                     "       //this.load({ method: 'GET', params: { '_id' : _this.data.id }});\n"+
596                     "       return;\n"+
597                     "    }
598                     "    if (action.type == 'load') {\n"+
599                     "        _this.dialog.el.unmask();\n"+
600                     "        return;\n"+
601                     "    }\n"+
602                     "    if (action.type =='submit') {\n"+
603                     "    \n"+
604                     "        _this.dialog.el.unmask();\n"+
605                     "        _this.dialog.hide();\n"+
606                     "    \n"+
607                     "         if (_this.callback) {\n"+
608                     "            _this.callback.call(_this, _this.form.getValues());\n"+
609                     "         }\n"+
610                     "         _this.form.reset();\n"+
611                     "         return;"\n"+
612                     "    }\n"+
613                     "}\n",
614                 
615                 "|rendered" : "function (form)\n"+
616                     "{\n"+
617                     "    _this.form= form;
618                     "}\n"
619             }
620             method : "POST",
621             style : "margin:10px;",
622             "|url" : "baseURL + '/Roo/" + reader.table + ".php'",
623             items : formElements
624         })
625     );
626             
627             
628                    
629 });              
630
631
632
633