sync
[gitlive] / GitMonitor.vala
1
2  
3
4 public class GitMonitorQueue : MonitorNamePathDir {
5         // name = basename
6         // path = full path..
7         // dir = dir path
8     
9         public string gitpath;
10         public string vdir;  // relative path (within git)
11         public string vname;  // relative filename (within git)
12         public string message ; // for commit
13         public bool commit_all;
14          
15         public GitMonitorQueue(MonitorNamePathDir f) {
16
17             base(f.name, f.path, f.dir);
18  
19             this.message = "";
20             this.commit_all = false;
21             
22             var vpath_ar = this.dir.substring(GitMonitor.gitlive.length +1).split("/", 0);
23             
24             if (vpath_ar[0].length < 1) {
25
26                 this.gitpath = "";
27                 this.vdir = "";
28                 this.vname = "";
29             }        
30
31
32             this.gitpath = GitMonitor.gitlive + "/" + vpath_ar[0];
33             
34             string[]  vpath = {};
35             for (var i = 1; i< vpath_ar.length; i++) {
36                 vpath += vpath_ar[i];
37             }
38
39             this.vdir =  string.joinv("/", vpath);
40
41             this.vname =  this.vdir + (this.vdir.length > 0 ? "/" : "") + this.name;
42 /*
43             stdout.printf(
44                     "NEW GitMonitorQueue\nname: %s\npath: %s\ndir: %s\n" + 
45                     "gitpath: %s\nvdir: %s\nvname: %s\n",
46                     this.name, this.path, this.dir,
47                     this.gitpath, this.vdir, this.vname
48             );
49 */
50
51             //f.repo = new imports.Scm.Git.Repo({ repopath: f.gitpath })
52         
53         
54         }
55
56         public bool shouldIgnore()
57         {
58             
59              
60             // vim.. what a seriously brain dead program..
61             if (this.name == "4913") {
62                 return true;
63             }
64             
65             if (this.name[0] == '.') {
66                 // except!
67                 if (this.name == ".htaccess") {
68                     return false;
69                 }
70                 
71                 return true;
72             }
73             if (this.name[this.name.length -1] == '~') {
74                 return true;
75             }
76
77             //if (f.name.match(/~$/)) {
78             //    return true;
79             //}
80             //if (f.name.match(/^nbproject/)) {
81             //    return true;
82             //}
83             // ignore anything in top level!!!!
84             if (this.gitpath.length < 1) {
85                 return true;
86             }
87             
88             return false;
89         }
90         
91         /** -- statics --*/
92         
93         public static int indexOfAdd( Array<GitMonitorQueue> add_files, string add) {
94             for(var i =0; i < add_files.length; i++) {
95                 if (add_files.index(i).vname == add) {
96                     return i;
97                 }
98             }
99             return -1;
100         }
101         public static  int indexOfMessage(Array<GitMonitorQueue> messages, string message)  {
102             for(var i =0; i < messages.length; i++) {
103                 if (messages.index(i).message == message) {
104                     return i;
105                 }
106             }
107             return -1;
108         }
109         public static string messageToString(Array<GitMonitorQueue> messages ) {
110             string[] ret = {};
111             for(var i =0; i < messages.length; i++) {
112                 ret+= messages.index(i).message;
113             }
114             return string.joinv("\n",ret);
115         }
116
117 }
118
119
120
121 public class GitMonitor : Monitor
122 {
123
124     public static GitMonitor gitmonitor;
125     /**
126      * @property {String} the "gitlive" directory, normally ~/gitlive
127      *  dset by OWNER... - we should do this as a CTOR.
128      *  
129      */
130     public static string gitlive;
131     
132     
133     public Array<GitMonitorQueue> queue ;
134     public bool queueRunning = false;
135     
136     public DateTime lastAdd;
137      
138     
139     public GitMonitor () {
140         this.queue = new Array<GitMonitorQueue>();
141         GitMonitor.gitmonitor = this;
142     }
143
144
145
146  
147     public new void pause() {
148         this.paused = true;
149         // what does this do to the old one...
150         this.queue = new Array<GitMonitorQueue> ();
151         StatusIconA.statusicon.set_from_stock( Gtk.Stock.MEDIA_PAUSE );
152
153     }
154     
155     public new void resume () {
156         this.paused = false;
157         this.queue = new Array<GitMonitorQueue> ();
158         StatusIconA.statusicon.set_from_stock( Gtk.Stock.MEDIA_PLAY );
159         
160         
161     }
162     /**
163      * Start the monitoring
164      * and run the queue every 500 milliseconds..
165      *
166      */
167     public new void start() {
168         StatusIconA.statusicon.set_from_stock( Gtk.Stock.REFRESH );
169         
170          
171         this.lastAdd = new DateTime.now(new TimeZone.local()); 
172         
173         Timeout.add_full(Priority.LOW, 500, () => {
174             //stdout.printf("GitMonitor.start :: top.length = %u\n", this.top.length);
175             // call this.monitor on each of 'top'
176             for(int i = 0; i < this.top.length ; i++) {
177
178                 this.monitor(this.top.index(i) );
179             }
180             StatusIconA.statusicon.set_from_stock( Gtk.Stock.MEDIA_PLAY );
181              
182            
183             
184             try {
185
186               
187                 var notification = new Notify.Notification(
188                     "Git Live",
189                     "%s\nMonitoring %u Directories".printf(GitMonitor.gitlive, this.monitors.length), 
190                      "dialog-information"
191                 );
192         
193                 notification.set_timeout(5);
194                 notification.show();
195             } catch(Error e) {
196                 print(e.message);
197             }
198             return false; // do not keep doing this..
199
200         });
201         
202
203         Timeout.add_full(Priority.LOW, 1000, () => {
204             //TIMEOUT", _this.queue.length , _this.queueRunning].join(', '));
205
206             //stdout.printf("QL %u: QR: %d\n", this.queue.length, this.queueRunning ? 1 : 0);
207             if (this.queue.length < 1  || this.queueRunning) {
208                 return true;
209             }
210             
211             var last = -1 * this.lastAdd.difference(new DateTime.now(new TimeZone.local()));
212  
213             // stdout.printf("LAST RUN: %s (expect %s) \n" ,
214             //         last.to_string(),   (5 * TimeSpan.SECOND).to_string() );
215  
216             if (last < 5 * TimeSpan.SECOND) { // wait 5 seconds before running. ????
217                 return true;
218             }
219             //_this.lastAdd = new Date();
220             //return 1;
221         
222             this.runQueue();
223             return true; //
224         });
225          
226     }
227
228
229     public new void stop() {
230         StatusIconA.statusicon.set_from_stock( Gtk.Stock.MEDIA_PAUSE );;
231         base.stop();
232     }
233     
234     
235     public new void monitor (string path,  int depth = 0)
236     {
237         
238         //var depth = typeof(depth) == 'number'  ? depth *1 : 0;
239         
240          
241         // if we are not at top level.. and there is a .git directory  (it's a submodule .. ignore) 
242         if (depth > 1 && FileUtils.test(path + "/.git" , FileTest.IS_DIR)) {
243             return;
244         }
245         
246         if (depth == 1) {
247             // FIXME - check if repo is flagged as not autocommit..
248             //var repo = imports.Scm.Repo.Repo.get(path);
249             //if (!repo || !repo.autocommit()) {
250             //    return;
251             //} 
252         }
253         
254         
255         // check if the repo is to be monitored.
256         //print("PATH : " + path);
257         
258         
259         base.monitor(path, depth);
260     }
261
262     
263
264     /**
265      * run the queue.
266      * - pulls the items off the queue 
267      *    (as commands run concurrently and new items may get added while it's running)
268      * - runs the queue items
269      * - pushes upstream.
270      * 
271      */
272     public void runQueue()
273     {
274         
275         if (this.paused) {
276             return;
277         }
278         print("GitMonitor.runQueue\n");
279
280         this.queueRunning = true;
281
282         var cmds = new Array<GitMonitorQueue>();
283
284         for(var i = 0; i < this.queue.length; i++) {
285             cmds.append_val(this.queue.index(i));
286         }
287
288         this.queue = new Array<GitMonitorQueue>();// empty queue!
289
290         
291         string[] success = {};
292         string[] failure = {};
293        //var repos = new Array<GitRepo>(); //??
294         //var done = new Array<GitMonitorQueue>();
295         
296         // first build a array of repo's to work with
297         var repo_list = new Array<GitRepo>();
298         
299         // pull and group.
300         
301         //print(JSON.stringify(cmds));
302         // make sure nothing get's added to the queue where we are doing this..
303
304         this.paused = true;
305
306         print("GitMonitor.runQueue - creating repos\n");
307         
308         for(var i = 0; i < cmds.length; i++) {
309            
310             var cmd = cmds.index(i);
311         
312             var gitpath = cmd.gitpath; 
313             stdout.printf("GitMonitor.runQueue - finding %s\n", cmd.gitpath);
314         
315             var ix  = GitRepo.indexOf(repo_list,  cmd.gitpath);
316             if (ix < 0) {
317                 repo_list.append_val(new GitRepo( gitpath ));
318                 ix = GitRepo.indexOf(repo_list,  cmd.gitpath);
319             }
320             stdout.printf("GitMonitor.runQueue - adding to repolist %d\n", ix);
321
322             //if (typeof(repo_list[gitpath]) == 'undefined') {
323             //    repo_list[gitpath] = new imports.Scm.Git.Repo.Repo( { repopath : gitpath });
324             //    repo_list[gitpath].cmds = [];
325              //   repo_list[gitpath].pull();
326             //}
327             repo_list.index(ix).cmds.append_val(cmd);
328
329         }
330         this.paused = false;
331         // build add, remove and commit message list..
332
333         print("GitMonitor.runQueue - creating actions\n");
334         
335         for(var i = 0;i < repo_list.length;i++) {
336      
337             var repo = repo_list.index(i);
338
339             var add_files = new Array<GitMonitorQueue>();
340             var remove_files = new Array<GitMonitorQueue>();
341             var messages = new Array<GitMonitorQueue>();
342             //print(JSON.stringify(repo.cmds,null,4));
343             
344             for(var ii = 0;ii < repo.cmds.length;ii++) {
345                 var cmd = repo.cmds.index(ii);
346     
347                 
348                 switch(cmd.action) {
349                     case "add" :
350                         
351                         if (GitMonitorQueue.indexOfAdd(add_files, cmd.vname) > -1) {
352                            break;
353                         }
354                         
355                         add_files.append_val(cmd);
356                         break;
357                     
358                     case "rm":
359                         if (GitMonitorQueue.indexOfAdd(add_files, cmd.vname) > -1 ) {
360                            break;
361                         }
362                         
363                         // if file exists, do not try and delete it.
364                         if (FileUtils.test(cmd.vname, FileTest.EXISTS)) {
365                             break;
366                         }
367                         
368                         remove_files.append_val(cmd);
369                         break;
370                     
371                     case "commit" :
372                         if (GitMonitorQueue.indexOfMessage(messages, cmd.message) > -1 ) {
373                            break;
374                         }
375                         messages.append_val(cmd);
376                         
377                         break;
378                     default:
379                         stdout.printf("Opps unmatched action %s\n", cmd.action);
380                         break;
381                 } 
382             }
383             
384             //repo.debug = 1;
385             // these can fail... at present... as we wildcard stuff.
386             stdout.printf("ADD : %u files\n"  , add_files.length);
387             
388             // make sure added files do not get removed..
389
390             var remove_files_f = new Array<GitMonitorQueue>();
391             for(var ii = 0;ii < remove_files.length;ii++) {
392                 if (GitMonitorQueue.indexOfAdd(add_files,  remove_files.index(ii).vname) > -1 ) {
393                      continue;
394                 }
395                 remove_files_f.append_val(remove_files.index(ii));
396             };
397             stdout.printf("REMOVE : %u files\n"  , remove_files_f.length);
398              
399             // make sure monitoring is paused so it does not recursively pick up
400             // deletions
401             try {
402                 repo.pull();
403             } catch(Error e) {
404                 failure +=  e.message;
405             }
406             
407             
408             // -- DO STUFF..            
409             try {
410                 repo.add(add_files);
411             } catch(Error e) {
412                 failure +=  e.message;
413             }  
414             try {
415                  repo.remove(remove_files_f);
416             } catch(Error e) {
417                 failure +=  e.message;
418             }  
419
420             this.paused = false;
421             
422             
423             try { 
424                 success += repo.commit(
425                     GitMonitorQueue.messageToString(messages),
426                     add_files  
427                 );
428                 success += repo.push();
429
430             } catch(Error e) {
431                 failure += e.message;
432                 
433             }   
434         }
435         
436         // finally merge all the commit messages.
437          
438         try {
439             // catch notification failures.. so we can carry on..
440             if (success.length > 0) {
441
442                 
443                 var notification = new Notify.Notification(
444                     "Git Live Commited",
445                     string.joinv("\n",success),
446                      "dialog-information"
447                     
448                 );
449     
450                 notification.set_timeout(5);
451                 notification.show();   
452             }
453             
454             if (failure.length > 0) {
455
456                 var notification = new Notify.Notification(
457                       "Git Live ERROR!!",
458                     string.joinv("\n",failure),
459                     "dialog-information"
460                     
461                 );
462     
463                 notification.set_timeout(5); // show errros for longer
464                 notification.show();   
465             }
466         } catch(Error e) {
467             print(e.message);
468             
469         }
470         this.queueRunning = false;
471     }
472     
473
474
475     
476
477     //string[] just_created;
478  
479  
480
481
482
483    
484
485
486     public override  void onChanged(MonitorNamePathDir src) 
487     { 
488         print("GitMonitor.onChanged\n");        
489         return; // always ignore this..?
490         //this.parsePath(src);
491     }
492     
493
494  
495     /**
496      *  results in  git add  + git commit..
497      *
498      */
499     public override void onChangesDoneHint(MonitorNamePathDir src)  
500     { 
501         print("GitMonitor.onChangedHint\n");        
502         if (this.paused) {
503             return;
504         }
505             
506
507         this.lastAdd = new DateTime.now(new TimeZone.local()); 
508         var cmd = new GitMonitorQueue(src);
509         if (cmd.shouldIgnore()) {
510             return;
511         }
512         
513        
514         //var add_it = false;
515         /*
516         if (this.is_just_created(cmd.path)) {
517             
518         if (typeof(this.just_created[src.path]) !='undefined') {
519             delete this.just_created[src.path];
520             
521             this.queue.push( 
522                 [ src.gitpath,  'add', src.vpath ],
523                 [ src.gitpath,  'commit',    { message: src.vpath} ] 
524                 
525             );
526          
527             return;
528         }
529         */
530         cmd.action = "add";
531         this.queue.append_val(cmd);
532
533         cmd = new GitMonitorQueue(src);
534         cmd.action = "commit";
535         cmd.message = cmd.vname;
536         this.queue.append_val(cmd);
537  
538          
539     }
540     public override  void onDeleted(MonitorNamePathDir src) 
541    { 
542         print("GitMonitor.onDeleted\n");        
543         if (this.paused) {
544             return;
545         }
546         this.lastAdd = new DateTime.now(new TimeZone.local()); 
547         var cmd = new GitMonitorQueue(src);
548         if (cmd.shouldIgnore()) {
549             return;
550         }
551         // should check if monitor needs removing..
552         // it should also check if it was a directory.. - so we dont have to commit all..
553         cmd.action = "rm";
554         this.queue.append_val(cmd);
555
556         cmd = new GitMonitorQueue(src);
557         cmd.action = "commit";
558         cmd.message = cmd.vname;
559         cmd.commit_all = true;
560
561         this.queue.append_val(cmd);
562  
563     }
564     public override  void onCreated(MonitorNamePathDir src) {
565         print("GitMonitor.onCreated\n");        
566         if (this.paused) {
567             return;
568         }
569         this.lastAdd = new DateTime.now(new TimeZone.local()); 
570         var cmd = new GitMonitorQueue(src);
571         if (cmd.shouldIgnore()) {
572             return;
573         }
574
575         if (!FileUtils.test(src.path, GLib.FileTest.IS_DIR)) {
576            // this.just_created[src.path] = true;
577             return; // we do not handle file create flags... - use done hint.
578         }
579         // directory has bee created
580         this.monitor(src.path);
581         //this.top.append_val(src.path);
582         //this.monitor(src.path );
583
584
585 // -- no point in adding a dir.. as git does not handle them...
586 //        this.queue.push( 
587   //          [ src.gitpath, 'add' , src.vpath,  { all: true } ],
588  //           [ src.gitpath, 'commit' , { all: true, message: src.vpath} ]
589   //          
590    //     );
591
592     }
593
594     public  override void onAttributeChanged(MonitorNamePathDir src) { 
595         print("GitMonitor.onAttributeChanged\n");        
596         if (this.paused) {
597             return;
598         }
599         if (src.dir == GitMonitor.gitlive) {
600            return; // attribute on top level..
601         }
602         
603         this.lastAdd = new DateTime.now(new TimeZone.local()); 
604         var cmd = new GitMonitorQueue(src);
605         if (cmd.shouldIgnore()) {
606             return;
607         }
608         cmd.action = "add";
609         this.queue.append_val(cmd);
610
611         cmd = new GitMonitorQueue(src);
612         cmd.action = "commit";
613         cmd.message = "Attribute changed " + cmd.vname;
614         this.queue.append_val(cmd);
615     }
616  
617    public  override void onMoved(MonitorNamePathDir src,MonitorNamePathDir dest)  
618     { 
619         print("GitMonitor.onMoved\n");        
620         if (this.paused) {
621             return;
622         }
623         this.lastAdd = new DateTime.now(new TimeZone.local()); 
624         var cmd_s = new GitMonitorQueue(src);
625
626         var cmd_d = new GitMonitorQueue(src);
627    
628         
629         if (cmd_d.gitpath != cmd_s.gitpath) {
630             this.onDeleted(src);
631             this.onCreated(dest);
632             this.onChangesDoneHint(dest);
633             return;
634         }
635         // needs to handle move to/from unsupported types..
636         
637         if (cmd_s.shouldIgnore()) {
638             this.onCreated(dest);
639             this.onChangesDoneHint(dest);
640             return;
641
642         }
643         if (cmd_d.shouldIgnore()) {
644             
645             this.onDeleted(src);
646  
647
648             return;
649         }
650         
651         cmd_s.action = "rm";
652         this.queue.append_val(cmd_s);
653
654
655
656
657         cmd_d.action = "add";
658         this.queue.append_val(cmd_d);
659
660
661         var cmd = new GitMonitorQueue(dest);
662         cmd.action = "commit";
663         cmd.message = "MOVED " + cmd_s.vname + " to " + cmd_d.vname;
664         this.queue.append_val(cmd);
665
666
667          
668     }
669        
670 }