fix #8131 - chinese translations
[Pman.Core] / DataObjects / I18n.php
1 <?php
2 /**
3  * Table Definition for i18n
4  *
5  * This is heavily related to the Pman_I18n implementation..
6  *
7  * It should eventually replace most of that..
8  * 
9  */
10 class_exists('DB_DataObject') ? '' : require_once 'DB/DataObject.php';
11
12 class Pman_Core_DataObjects_I18n extends DB_DataObject 
13 {
14     ###START_AUTOCODE
15     /* the code below is auto generated do not remove the above tag */
16
17     public $__table = 'i18n';                            // table name
18     public $id;                              // int(11)  not_null primary_key auto_increment
19     public $ltype;                           // string(1)  not_null multiple_key
20     public $lkey;                            // string(8)  not_null
21     public $inlang;                          // string(8)  not_null
22     public $lval;                            // string(64)  not_null
23
24     
25     /* the code above is auto generated do not remove the tag below */
26     ###END_AUTOCODE
27     
28     // we have a small default set of languages available..
29     // you can modify this by making this setting in the index.php loader.
30     // Pman_Core_i18n = array( 'c' => *, 'l' => '*', 'm' => '*')
31     
32     static $cfg = array(
33         // translated versions availalable
34         
35         't' => array(
36             'en', 'zh_CN',   'zh_HK', 
37         ),
38         // languages available
39         'l' => array(
40             
41             'en', 'zh_CN',   'zh_HK',  'zh_TW', //'th', 'ko', 'ja', 'ms', 
42             //'id', // indonesian
43            // 'tl', // tagalog
44            // 'vi', //vietnamise
45           //  'hi', // hindi
46           //  'ta', // tamil
47           //  '**', // other
48         ),
49         'c' => '*', // array(
50              //'AU', 'CN', 'HK', 'IN', 'ID', 'JP', 'MY', 'NZ', 'TW', 'SG', 'TH', 'KR', 'US', 'PH', 'VN','**'
51         //),
52         'm' => array(
53             'USD', 'HKD', 'GBP', 'CNY', 'SGD', 'JPY'
54         ),
55         'p' => '*',
56         'add_l'=> array(), // key -> value additional languages... 
57         'add_c'=> array(), // additional countries...(eg. '-R' => 'Regional' )
58         'add_m'=> array(), // additional currencies...
59         'add_p'=> array(), // additional currencies...
60
61         
62     );
63     /**
64      * initalizie the cfg aray
65      *
66      */
67     function cfg()
68     {
69         static $loaded  = false;
70         if ($loaded) {
71             return self::$cfg;
72         }
73          
74         $loaded =true;
75         $ff= HTML_FlexyFramework::get();
76         
77         // BC compatible.. if any of these are set, then we use them as the settings..
78         $opts = array();
79         foreach(array('Pman_Core_I18n', 'Pman_Core_I18N', 'Pman_I18N','Pman_I18n') as $pk) {
80             if (isset($ff->$pk)) {
81                 //var_dump($pk);
82                 $opts =  $ff->$pk;
83                 break;
84             }
85         }
86         //echo '<PRE>';print_R($opts);//exit;
87         
88          
89         // var_dump($opts);exit;
90         
91         $i = DB_DataObject::Factory('I18n');
92         // load the cofiguration
93         foreach($opts as $k=>$v) {
94             
95             if ($v == '*') { // everything..
96                // self::$cfg[$k] = $i->availableCodes($k, false);
97                 continue;
98             }
99              
100             self::$cfg[$k] = is_array($v) ? $v  : explode(',', $v);
101         }
102         // available codes recursively calls this... -- so the above has to be set first..
103         foreach($opts as $k=>$v) {
104             
105             if ($v == '*') { // everything..
106                 self::$cfg[$k] = '*'; //$i->availableCodes($k, false);
107                 continue;
108             }
109            
110         }
111         
112         
113         return self::$cfg;
114         
115         
116     }
117     
118     
119       // the default configuration.
120     
121     function applyFilters($q, $au)
122     {
123         $this->buildDB();
124         //DB_DataObject::debugLevel(1);
125         if (!empty($q['query']['_with_en'])) {
126             
127             $this->buildDB(); // ensure we have the full database...
128             
129             $this->selectAdd("
130                 id as id,
131                 i18n_translate(ltype, lkey, 'en') as lval_en
132             ");
133         }
134         
135         if (!empty($q['_as_code_and_title'])) {
136             $tn = $this->tableName();
137             
138             $this->selectAdd();
139             $this->selectAdd("
140                     {$tn}.lval as title,
141                     {$tn}.lkey as code
142             ");
143             $this->is_active = 1;
144             if (!empty($q['_title'])) {
145                 $this->whereAdd("{$tn}.lval like '{$this->escape($_REQUEST['_title'])}%'");
146             }
147         }
148          
149         if (!empty($q['!code'])) {
150             $this->whereAddIn('!lkey', explode(',', $q['!code']), 'string'); 
151         }
152         if (!empty($q['query']['name'])) {
153             //DB_DAtaObject::debugLevel(1);
154             $v = strtoupper($this->escape($q['query']['name']));
155             $this->whereAdd("upper(lval) LIKE '%{$v}%'");
156         }
157         
158          if (!empty($q['query']['name_starts'])) {
159             $this->whereAdd("lval LIKE '". $this->escape($q['query']['name_starts']). "%'");
160         }
161         
162         if (!empty($q['_filtered']) && !empty($this->ltype)) {
163             $cfg = $this->cfg();
164             $filter = $cfg[$this->ltype];
165             if(is_array($filter)){
166                 $this->whereAddIn('lkey', $filter, 'string'); 
167             }
168             
169         }
170         
171         if(!empty($q['_with_geoip_count'])) {
172             
173             $this->selectAdd("
174                 (
175                     SELECT
176                             COUNT(geoip_division.id)
177                     FROM
178                             geoip_division
179                     WHERE
180                             geoip_division.country = i18n.lkey
181                 ) AS no_of_division,
182                 (
183                     SELECT
184                             COUNT(geoip_city.id)
185                     FROM
186                             geoip_city
187                     WHERE
188                             geoip_city.country = i18n.lkey
189                 ) AS no_of_city
190             ");
191         }
192         
193         if(!empty($q['_hide_unused'])) {
194             $this->whereAdd("
195                 (
196                     SELECT
197                             COUNT(geoip_division.id)
198                     FROM
199                             geoip_division
200                     WHERE
201                             geoip_division.country = i18n.lkey
202                 ) > 0
203             ");
204         }
205     }
206     
207     function lookupCode($inlang,$ltype,$name)
208     {
209         $x = DB_DataObject::factory('i18n');
210         $x->ltype = $ltype;
211         $x->lval = $name;
212         $x->inlang= $inlang;
213         
214         $x->limit(1);
215         if ($x->find(true) && !empty($x->lkey)) {
216             return $x->lkey;
217         }
218         return '';
219         
220         
221     }
222     
223     function codeExists($ltype, $key)
224     {
225         $x = DB_DataObject::factory('i18n');
226         $x->ltype = $ltype;
227         $x->lkey = $key;
228         return $x->count() ? true : false;
229     }
230     
231     // load all all to reduce future queries..
232     function translateCache($inlang, $ltype, $build)
233     {
234         static $cache;
235         $key = "{$inlang} {$ltype}";
236         if (isset($cache[$key])) {
237             return $cache[$key];
238         }
239         if (!$build) {
240             return false;
241         }
242         
243         $x = DB_DataObject::factory('i18n');
244         $x->ltype = $ltype;
245         
246         $x->inlang= $inlang;
247         $cache[$key] = $x->fetchAll('lkey', 'lval');
248         
249         return $cache[$key] ;
250
251     }
252     
253     
254     function translate($inlang,$ltype,$kval)
255     {
256         
257         $tc = $this->translateCache($inlang, $ltype, false);
258         if ($tc !== false && isset($tc[$kval])) {
259             return $tc[$kval];
260         }
261         
262         static $cache = array();
263         $cache_key = implode(' ', array($inlang,$ltype,$kval));
264         if (isset($cache[$cache_key ])) {
265             return $cache[$cache_key];
266         }
267         
268         $x = DB_DataObject::factory('i18n');
269         $x->ltype = $ltype;
270         $x->lkey = $kval;
271         $x->inlang= $inlang;
272         $fallback = clone($x);
273         
274         $x->limit(1);
275         if ($x->find(true) && !empty($x->lval)) {
276             $cache[$cache_key] = $x->lval;
277             return $x->lval;
278         }
279         $fallback->inlang = 'en';
280         if ($fallback->find(true) && !empty($fallback->lval)) {
281             $cache[$cache_key] = $fallback->lval;
282             return $fallback->lval;
283         }
284          $cache[$cache_key] = $kval;
285         return $kval;
286     }
287     
288     
289     
290     function toTransList($ltype, $inlang)
291     {
292         
293         $this->is_active = 1;
294         $this->ltype = $ltype;
295         $this->inlang= $inlang;
296         $this->selectAdd();
297         $this->selectAdd('lkey as code, lval as title');
298         
299         $this->find();
300         $ret = array();
301         while ($this->fetch()) {
302             $ret[] = array(
303                 'code'  => $this->code,
304                 'title' => $this->title
305             );
306         }
307         return $ret;
308     }
309      
310     
311     
312     
313     // -------------- code to handle importing into database..
314     
315     
316     
317     
318     // returns a list of all countries/languages etc.. (with '*')
319     function availableCodes($t, $filtered = true)
320     {
321         $ret = array();
322         $cfg = $this->cfg();
323         //echo '<PRE>';print_r($cfg);
324         switch ($t) {
325             case 'c':
326                 require_once 'I18Nv2/Country.php';
327                 
328                 $c = new I18Nv2_Country('en');
329                 $ret =  array_keys($c->codes);
330                 if (!empty($cfg['add_c'])) {
331                     $ret = array_merge($ret, array_keys($cfg['add_c']));
332                 }
333                 
334                 
335                  
336                 
337                 $ret[] = '**';
338                 //echo '<PRE>';print_R($cfg); print_r($ret); exit;
339                 break;
340             
341             case 'l':
342                 require_once 'I18Nv2/Language.php';
343                 $c = new I18Nv2_Language('en');
344                 $ret =  array_keys($c->codes); // we need to make sure these are lowercase!!!
345                 
346                 
347                 foreach ($cfg['add_l'] as $k=>$v){
348                     // make sure that add_l is formated correctly.. (lower_UPPER?)
349                     $tolang = explode('_', $k);
350                     $tolang[0] = strtolower($tolang[0]);
351                     $tolang = implode('_', $tolang);
352                     
353                     unset($cfg['add_l'][$k]); // if they match..unset first.. then set
354                     
355                     $cfg['add_l'][$tolang] = $v;
356                 }
357                 if (!empty($cfg['add_l'])) {
358                     $ret = array_merge($ret, array_keys($cfg['add_l']));
359                 }
360
361                 $ret[] = '**';
362                 break;
363             case 'm':
364                 require_once 'I18Nv2/Currency.php';
365                 $c = new I18Nv2_Currency('en');
366                 $ret =  array_keys($c->codes);
367                 if (!empty($cfg['add_m'])) {
368                     $ret = array_merge($ret, array_keys($cfg['add_m']));
369                 }
370                 $ret[] = '**';
371                 break;
372             case 'p':
373                 require_once 'I18Nv2/PhonePrefix.php';
374                 $c = new I18Nv2_PhonePrefix('en');
375                 $ret =  array_keys($c->codes);
376                 if (!empty($cfg['add_p'])) {
377                     $ret = array_merge($ret, array_keys($cfg['add_p']));
378                 }
379                 $ret[] = '**';
380                 break;
381         }
382         
383         
384         
385         if ($filtered  && !empty($cfg[$t]) && is_array($cfg[$t])) {
386             // then there is a filter. - we should include all of them, even if they are not relivatn??
387             return $cfg[$t]; //array_intersect($cfg[$t], $ret);
388             
389         }
390         
391         // why upper case everyting?!?!?
392         
393         //foreach ($ret as $k=>$v) {
394         //    $ret[$k] = ($t=='l') ? $ret[$k] : strtoupper($v);
395         //}
396
397         return $ret;
398     }
399     
400     
401     function buildDB($ltype= false, $inlang= false )
402     {
403         $cfg = $this->cfg();
404         
405         if ($ltype === false) {
406             // trigger all builds.
407             //DB_DataObject::debugLevel(1);
408             $this->buildDB('c');
409             $this->buildDB('l');
410             $this->buildDB('m');
411             $this->buildDB('p', 'en');
412             return;
413         }
414         
415         if ($inlang == '**') {
416             return; // dont bother building generic..
417         }
418         
419         
420         if ($inlang === false) {
421             // do we want to add our 'configured ones..'
422             // We only build translatiosn for our configured ones..
423             //foreach( $this->availableCodes('l') as $l) {
424                 
425             foreach( $cfg['t'] as $l) {
426                 $this->buildDB($ltype, $l);
427             }
428             return;
429         }
430         
431         
432         //DB_DataObject::debugLevel(1);
433         $x = DB_DataObject::factory('I18n');
434         $x->inlang= $inlang;
435         $x->ltype = $ltype;
436         
437         $complete = $x->fetchAll('lkey');
438         
439         $list =  $this->availableCodes($ltype);
440         
441         foreach($list as $lkey) {
442             // skip ones we know we have done...
443             if (in_array($lkey, $complete)) {
444                 continue;
445             }
446             if (empty($lkey)) { // not sure why we get empty values here.
447                 continue;
448             }
449             $x = DB_DataObject::factory('I18n');
450             $x->ltype = $ltype;
451             $x->lkey = $lkey;  
452             $x->inlang= $inlang;
453             if ($x->find(true)) {
454                 $xx= clone($x);
455                 $x->lval = $this->defaultTranslate($inlang, $ltype, $lkey);
456                 $x->update($xx);
457                 continue;
458             }
459             $x->lval = $this->defaultTranslate($inlang, $ltype, $lkey);
460             $x->insert();
461             
462         }
463          
464         
465     }
466     
467     /**
468      * default translate  - use i18n classes to provide a value.
469      *
470      * 
471      */
472      
473     function defaultTranslate($lang, $type, $k) 
474     {
475       
476         static $cache;
477         
478         
479         $cfg = $this->cfg();
480         if (empty($k)) {
481             return '??';
482         }
483         
484         //$lbits = explode('_', strtoupper($lang));
485         $lbits = explode('_', $lang);
486         $orig_lang = $lang;
487         $lang = $lbits[0];
488         
489         if (!isset($cache[$lang])) {
490             require_once 'I18Nv2/Country.php';
491             require_once 'I18Nv2/Language.php';
492             require_once 'I18Nv2/Currency.php';
493             require_once 'I18Nv2/PhonePrefix.php';
494             $cache[$lang] = array(
495                 'l' =>  new I18Nv2_Language($lang, 'UTF-8'),
496                 'c' => new I18Nv2_Country($lang, 'UTF-8'),
497                 'm' => new I18Nv2_Currency($lang, 'UTF-8'),
498                 'p' => new I18Nv2_PhonePrefix($lang, 'UTF-8')
499             );
500             //echo '<PRE>';print_r(array($lang, $cache[$lang]['c']));
501         }
502         
503         if ($k == '**') {
504             return 'Other / Unknown';
505         }
506         
507         
508         // for languages if we get zh_HK then we write out Chinese ( HK )
509         
510         
511         if ($type == 'l' && strpos($k, '_') > -1) {
512             $tolang = explode('_', $k);
513             $ret = $cache[$lang][$type]->getName(strtolower($tolang[0])) .  '('.$tolang[1].')'; 
514             
515         } else {
516             $ret = $cache[$lang][$type]->getName($k);
517         }
518         
519         if ($orig_lang == 'zh_HK' || $orig_lang == 'zh_TW' ) {
520             // then translation is by default in simplified.
521             //print_r($ret);
522             $ret = @iconv("UTF-8", "GB2312//IGNORE", $ret);
523             //print_r($ret);
524             $ret = @iconv("GB2312", "BIG5//IGNORE", $ret);
525             //print_r($ret);
526             
527             $ret = @iconv("BIG5", "UTF-8//IGNORE", $ret);
528             //print_r($ret);
529          }
530         
531         
532         
533         // our wierd countries/langs etc..
534         if (isset($cfg['add_' . $type][$k])) {
535             return $cfg['add_' . $type][$k];
536             
537         }
538         
539         return $ret;
540         
541         
542     }
543     
544     
545 }