src/localization/localize.cpp

   1 /*
   2  * Copyright (C) Volition, Inc. 1999.  All rights reserved.
   3  *
   4  * All source code herein is the property of Volition, Inc. You may not sell
   5  * or otherwise commercially exploit the source or things you created based on
   6  * the source.
   7  */
   8
   9 /*
  10  * $Logfile: /Freespace2/code/Localization/localize.cpp $
  11  * $Revision$
  12  * $Date$
  13  * $Author$
  14  *
  15  *
  16  * $Log$
  17  * Revision 1.10  2005/10/03 11:23:14  taylor
  18  * don't display error message in FS1 for missing tstrings.tbl, it's ok to be missing in that case
  19  *
  20  * Revision 1.9  2005/10/01 21:35:51  taylor
  21  * various FS1 related changes, removes need to extra fs1.vp file
  22  *
  23  * Revision 1.8  2005/03/29 02:18:47  taylor
  24  * Various 64-bit platform fixes
  25  * Fix compiler errors with MAKE_FS1 and fix gr_set_bitmap() too
  26  * Make sure that turrets can fire at asteroids for FS1 (needed for a couple missions)
  27  * Streaming audio support (big thanks to Pierre Willenbrock!!)
  28  * Removed dependance on strings.tbl for FS1 since we don't actually need it now
  29  *
  30  * Revision 1.7  2004/07/04 11:39:06  taylor
  31  * fix missing debrief text, crash on exit, path separator's, warning fixes, no GR_SOFT
  32  *
  33  * Revision 1.6  2003/06/11 18:30:32  taylor
  34  * plug memory leaks
  35  *
  36  * Revision 1.5  2003/06/03 04:00:40  taylor
  37  * Polish language support (Janusz Dziemidowicz)
  38  *
  39  * Revision 1.4  2003/05/18 03:55:30  taylor
  40  * automatic language selection support
  41  *
  42  * Revision 1.3  2002/06/09 04:41:22  relnev
  43  * added copyright header
  44  *
  45  * Revision 1.2  2002/05/07 03:16:46  theoddone33
  46  * The Great Newline Fix
  47  *
  48  * Revision 1.1.1.1  2002/05/03 03:28:09  root
  49  * Initial import.
  50  *
  51  *
  52  * 91    6/16/00 3:16p Jefff
  53  * sim of the year dvd version changes, a few german soty localization
  54  * fixes
  55  *
  56  * 90    11/02/99 8:20p Jefff
  57  * more translation changes/additions
  58  *
  59  * 89    11/02/99 3:24p Jefff
  60  * added translation functions for a few key instances where english was
  61  * showing up
  62  *
  63  * 88    10/29/99 10:40p Jefff
  64  * mo stirngs
  65  *
  66  * 87    10/28/99 2:05a Jefff
  67  * safety fix in localization stuff
  68  *
  69  * 86    10/26/99 10:53a Jefff
  70  * German builds now correctly default to German on first run
  71  *
  72  * 85    10/25/99 11:22p Jefff
  73  * mo' strings (launcher)
  74  *
  75  * 84    10/25/99 5:46p Jefff
  76  * Many localization fixes/changes for German builds
  77  *
  78  * 83    10/14/99 3:25p Jefff
  79  * soo...many....xstrs....
  80  *
  81  * 82    10/14/99 2:52p Jefff
  82  * localization fixes.  added support for hi-res specific xstr offsets
  83  *
  84  * 81    10/13/99 3:58p Jefff
  85  * added a bunch of missed XSTRs
  86  *
  87  * 80    9/13/99 11:30a Dave
  88  * Added checkboxes and functionality for disabling PXO banners as well as
  89  * disabling d3d zbuffer biasing.
  90  *
  91  * 79    9/08/99 9:59a Jefff
  92  *
  93  * 78    9/07/99 4:01p Dave
  94  * Fixed up a string.tbl paroblem (self destruct message). Make sure IPX
  95  * does everything properly (setting up address when binding). Remove
  96  * black rectangle background from UI_INPUTBOX.
  97  *
  98  * 77    9/07/99 1:54p Jefff
  99  * skip mission strings added
 100  *
 101  * 76    9/03/99 10:55a Jefff
 102  * xstr_size++
 103  *
 104  * 75    9/03/99 1:31a Dave
 105  * CD checking by act. Added support to play 2 cutscenes in a row
 106  * seamlessly. Fixed super low level cfile bug related to files in the
 107  * root directory of a CD. Added cheat code to set campaign mission # in
 108  * main hall.
 109  *
 110  * 74    8/27/99 12:04a Dave
 111  * Campaign loop screen.
 112  *
 113  * 73    8/26/99 12:48p Jefff
 114  *
 115  * 72    8/22/99 5:53p Dave
 116  * Scoring fixes. Added self destruct key. Put callsigns in the logfile
 117  * instead of ship designations for multiplayer players.
 118  *
 119  * 71    8/22/99 1:55p Dave
 120  * Cleaned up host/team-captain leaving code.
 121  *
 122  * 70    8/17/99 7:32p Jefff
 123  * mo' strings
 124  *
 125  * 69    8/16/99 5:15p Dave
 126  * Upped string count.
 127  *
 128  * 68    8/16/99 4:04p Dave
 129  * Big honking checkin.
 130  *
 131  * 67    8/11/99 2:09p Jefff
 132  * ill give you three guesses.
 133  *
 134  * 66    8/10/99 7:57p Jefff
 135  * even more strings
 136  *
 137  * 65    8/05/99 2:40p Jefff
 138  * added string
 139  *
 140  * 64    8/02/99 9:13p Dave
 141  * Added popup tips.
 142  *
 143  * 63    8/02/99 12:01p Jefff
 144  * added a string
 145  *
 146  * 62    7/29/99 10:47p Dave
 147  * Standardized D3D fogging using vertex fog. Shook out Savage 4 bugs.
 148  *
 149  * 61    7/29/99 9:44a Jefff
 150  * added some strings for ingame objectives screen
 151  *
 152  * 60    7/27/99 7:15p Jefff
 153  * 3 new interface strings
 154  *
 155  * 59    7/27/99 6:53p Dave
 156  * Hi-res main hall support.
 157  *
 158  * 58    7/24/99 1:54p Dave
 159  * Hud text flash gauge. Reworked dead popup to use 4 buttons in red-alert
 160  * missions.
 161  *
 162  * 57    7/22/99 4:08p Jefff
 163  * some new strings
 164  *
 165  * 56    7/19/99 7:20p Dave
 166  * Beam tooling. Specialized player-killed-self messages. Fixed d3d nebula
 167  * pre-rendering.
 168  *
 169  * 55    7/19/99 2:13p Dave
 170  * Added some new strings for Heiko.
 171  *
 172  * 54    7/15/99 2:37p Jefff
 173  *
 174  * 53    7/13/99 6:07p Jefff
 175  * Added support for localization string offsets.
 176  *
 177  * 52    7/09/99 10:32p Dave
 178  * Command brief and red alert screens.
 179  *
 180  * 51    6/25/99 2:51p Jasons
 181  * New string.
 182  *
 183  * 50    6/25/99 11:59a Dave
 184  * Multi options screen.
 185  *
 186  * 49    6/24/99 12:34a Dave
 187  * Main options screen.
 188  *
 189  * 48    6/19/99 3:58p Dave
 190  * More new strings.
 191  *
 192  * 47    6/14/99 5:19p Dave
 193  *
 194  * 46    6/04/99 11:32a Dave
 195  * Added reset text to ship select screen. Fixed minor xstr bug in ui
 196  * window
 197  *
 198  * 45    6/01/99 6:07p Dave
 199  * New loading/pause/please wait bar.
 200  *
 201  * 44    6/01/99 4:03p Dave
 202  * Changed some popup flag #defines. Upped string count to 1336
 203  *
 204  * 43    5/26/99 11:46a Dave
 205  * Added ship-blasting lighting and made the randomization of lighting
 206  * much more customizable.
 207  *
 208  * 42    5/22/99 6:05p Dave
 209  * Fixed a few localization # problems.
 210  *
 211  * 41    5/21/99 6:45p Dave
 212  * Sped up ui loading a bit. Sped up localization disk access stuff. Multi
 213  * start game screen, multi password, and multi pxo-help screen.
 214  *
 215  * 40    5/17/99 2:52p Dave
 216  * Fixed dumb localization problem.
 217  *
 218  * 39    5/17/99 10:07a Dave
 219  * Updated string count.
 220  *
 221  * 38    5/04/99 6:38p Dave
 222  * Finished multi join-wait screen.
 223  *
 224  * 37    5/04/99 5:20p Dave
 225  * Fixed up multiplayer join screen and host options screen. Should both
 226  * be at 100% now.
 227  *
 228  * 36    5/03/99 11:04p Dave
 229  * Most of the way done with the multi join screen.
 230  *
 231  * 35    5/03/99 8:32p Dave
 232  * New version of multi host options screen.
 233  *
 234  * 34    4/09/99 2:28p Dave
 235  * Upped Xstring count.
 236  *
 237  * 33    4/09/99 2:21p Dave
 238  * Multiplayer beta stuff. CD checking.
 239  *
 240  * 32    4/08/99 12:50p Neilk
 241  * changed number of xstr constant
 242  *
 243  * 31    4/07/99 5:54p Dave
 244  * Fixes for encryption in updatelauncher.
 245  *
 246  * 30    3/24/99 4:05p Dave
 247  * Put in support for assigning the player to a specific squadron with a
 248  * specific logo. Preliminary work for doing pos/orient checksumming in
 249  * multiplayer to reduce bandwidth.
 250  *
 251  * 29    3/23/99 3:35p Andsager
 252  * Add error check for duplicate string indices
 253  *
 254  * 28    3/22/99 2:56p Andsager
 255  * Localize Launcher Updater
 256  *
 257  * 27    2/23/99 11:18a Andsager
 258  * Localize launcher using strings.tbl
 259  *
 260  * 26    2/22/99 9:35p Andsager
 261  * Add lcl_get_language_name() returns string with current lang.  Added
 262  * localization for launcher.
 263  *
 264  * 25    2/21/99 6:02p Dave
 265  * Fixed standalone WSS packets.
 266  *
 267  * 24    2/17/99 2:11p Dave
 268  * First full run of squad war. All freespace and tracker side stuff
 269  * works.
 270  *
 271  * 23    2/12/99 6:15p Dave
 272  * Pre-mission Squad War code is 95% done.
 273  *
 274  * 22    2/02/99 7:27p Neilk
 275  * implemented lc_close() to free up some string memory when shutting down
 276  *
 277  * 21    1/30/99 1:29a Dave
 278  * Fixed nebula thumbnail problem. Full support for 1024x768 choose pilot
 279  * screen.  Fixed beam weapon death messages.
 280  *
 281  * 20    1/29/99 7:56p Neilk
 282  * Added new mission log interface
 283  *
 284  * 19    1/29/99 4:17p Dave
 285  * New interface screens.
 286  *
 287  * 18    1/29/99 12:47a Dave
 288  * Put in sounds for beam weapon. A bunch of interface screens (tech
 289  * database stuff).
 290  *
 291  * 17    1/13/99 2:10p Andsager
 292  * added string
 293  *
 294  * 16    12/14/98 12:13p Dave
 295  * Spiffed up xfer system a bit. Put in support for squad logo file xfer.
 296  * Need to test now.
 297  *
 298  * 15    12/03/98 5:22p Dave
 299  * Ported over Freespace 1 multiplayer ships.tbl and weapons.tbl
 300  * checksumming.
 301  *
 302  * 14    12/02/98 5:47p Dave
 303  * Put in interface xstr code. Converted barracks screen to new format.
 304  *
 305  * 13    12/01/98 4:46p Dave
 306  * Put in targa bitmap support (16 bit).
 307  *
 308  * $NoKeywords: $
 309  */
 310
 311
 312 #include <ctype.h>
 313 #include "cfile.h"
 314 #include "localize.h"
 315 #include "parselo.h"
 316 #include "osregistry.h"
 317 #include "encrypt.h"
 318 #include "2d.h"
 319
 320 // ------------------------------------------------------------------------------------------------------------
 321 // LOCALIZE DEFINES/VARS
 322 //
 323
 324 // general language/localization data ---------------------
 325
 326 // current language
 327 int Lcl_current_lang = LCL_ENGLISH;
 328
 329 // language info table
 330 typedef struct lang_info {
 331         char lang_name[LCL_LANG_NAME_LEN + 1];                          // literal name of the language
 332         char lang_ext[LCL_LANG_NAME_LEN + 1];                           // for adding to names on disk access
 333 } lang_info;
 334
 335 lang_info Lcl_languages[LCL_NUM_LANGUAGES] = {
 336         { "English",            "" },                                                                   // english
 337         { "German",                     "gr" },                                                         // german
 338         { "French",                     "fr" },                                                         // french
 339         { "Polish",                     "pl" },                                                         // polish
 340 };
 341
 342 //#if defined(GERMAN_BUILD)
 343 //#define DEFAULT_LANGUAGE                                                      "German"
 344 //#else
 345 #define DEFAULT_LANGUAGE                                                        "English"
 346 //#endif
 347
 348 // following is the offset where special characters start in our font
 349 #define LCL_SPECIAL_CHARS_FR    164
 350 #define LCL_SPECIAL_CHARS_GR    164
 351 #define LCL_SPECIAL_CHARS_PL    127
 352 #define LCL_SPECIAL_CHARS               127
 353 int Lcl_special_chars;
 354
 355 // use these to replace *_BUILD, values before
 356 // only 1 will be active at a time
 357 int Lcl_fr = 0;
 358 int Lcl_gr = 0 ;
 359 int Lcl_pl = 0;
 360 int Lcl_english = 1;
 361
 362
 363 // executable string localization data --------------------
 364
 365 // XSTR_SIZE is the total count of unique XSTR index numbers.  An index is used to
 366 // reference an entry in strings.tbl.  This is used for translation of strings from
 367 // the english version (in the code) to a foreign version (in the table).  Thus, if you
 368 // add a new string to the code, you must assign it a new index.  Use the number below for
 369 // that index and increase the number below by one.
 370 #define XSTR_SIZE       1570
 371
 372
 373 // struct to allow for strings.tbl-determined x offset
 374 // offset is 0 for english, by default
 375 typedef struct {
 376         char *str;
 377         int  offset_x;                          // string offset in 640
 378         int  offset_x_hi;                       // string offset in 1024
 379 } lcl_xstr;
 380
 381 //char *Xstr_table[XSTR_SIZE];
 382 lcl_xstr Xstr_table[XSTR_SIZE];
 383 int Xstr_inited = 0;
 384
 385
 386 // table/mission externalization stuff --------------------
 387
 388 #define TABLE_STRING_FILENAME                                           "tstrings.tbl"
 389 // filename of the file to use when localizing table strings
 390 char *Lcl_ext_filename = NULL;
 391 CFILE *Lcl_ext_file = NULL;
 392
 393 // for scanning/parsing tstrings.tbl (from ExStr)
 394 #define PARSE_TEXT_STRING_LEN                   2048
 395 #define PARSE_ID_STRING_LEN                     128
 396 #define TS_SCANNING                                             0                               // scanning for a line of text
 397 #define TS_ID_STRING                                            1                               // reading in an id string
 398 #define TS_OPEN_QUOTE                                   2                               // looking for an open quote
 399 #define TS_STRING                                                       3                               // reading in the text string itself
 400 int Ts_current_state = 0;
 401 char Ts_text[PARSE_TEXT_STRING_LEN];                            // string we're currently working with
 402 char Ts_id_text[PARSE_ID_STRING_LEN];                           // id string we're currently working with
 403 int Ts_text_size;
 404 int Ts_id_text_size;
 405
 406 // file pointers for optimized string lookups
 407 // some example times for Freespace2 startup with granularities (mostly .tbl files, ~500 strings in the table file, many looked up more than once)
 408 // granularity 20                       :               13 secs
 409 // granularity 10                       :               11 secs
 410 // granularity 5                        :               9 secs
 411 // granularity 2                        :               7-8 secs
 412 #define LCL_GRANULARITY                                 1                               // how many strings between each pointer (lower granularities should give faster lookup times)
 413 #define LCL_MAX_POINTERS                                4500                    // max # of pointers
 414 #define LCL_MAX_STRINGS                                 (LCL_GRANULARITY * LCL_MAX_POINTERS)
 415 int Lcl_pointers[LCL_MAX_POINTERS];
 416 int Lcl_pointer_count = 0;
 417
 418 #ifdef MAKE_FS1
 419 // strings.tbl for FS1, hard coded
 420 extern const char *FS1_trans[LCL_NUM_LANGUAGES_FS1][LCL_NUM_STRINGS_FS1];
 421 #endif
 422
 423 // ------------------------------------------------------------------------------------------------------------
 424 // LOCALIZE FORWARD DECLARATIONS
 425 //
 426
 427 // associate table file externalization with the specified input file
 428 void lcl_ext_associate(const char *filename);
 429
 430 // given a valid XSTR() tag piece of text, extract the string portion, return it in out, nonzero on success
 431 int lcl_ext_get_text(char *xstr, char *out);
 432
 433 // given a valid XSTR() tag piece of text, extract the id# portion, return the value in out, nonzero on success
 434 int lcl_ext_get_id(char *xstr, int *out);
 435
 436 // given a valid XSTR() id#, lookup the string in tstrings.tbl, filling in out if found, nonzero on success
 437 int lcl_ext_lookup(char *out, const int max_out, int id);
 438
 439 // if the char is a valid char for a signed integer value string
 440 int lcl_is_valid_numeric_char(char c);
 441
 442 // sub-parse function for individual lines of tstrings.tbl (from Exstr)
 443 // returns : integer with the low bits having the following values :
 444 // 0 on fail, 1 on success, 2 if found a matching id/string pair, 3 if end of language has been found
 445 // for cases 1 and 2 : the high bit (1<<31) will be set if the parser detected the beginning of a new string id on this line
 446 // so be sure to mask this value out to get the low portion of the return value
 447 //
 448 int lcl_ext_lookup_sub(char *text, char *out, const int max_out, int id);
 449
 450 // initialize the pointer array into tstrings.tbl (call from lcl_ext_open() ONLY)
 451 void lcl_ext_setup_pointers();
 452
 453
 454 // ------------------------------------------------------------------------------------------------------------
 455 // LOCALIZE FUNCTIONS
 456 //
 457
 458 // initialize localization, if no language is passed - use the language specified in the registry
 459 void lcl_init(int lang_init)
 460 {
 461         char lang_string[128];
 462         const char *ret;
 463         int lang, idx;
 464
 465         // initialize encryption
 466         encrypt_init();
 467
 468         // read the language from the registry
 469         if(lang_init < 0){
 470                 memset(lang_string, 0, 128);
 471
 472                 // default to DEFAULT_LANGUAGE (which should be english so we dont have to put German text
 473                 // in tstrings in the #default section
 474                 ret = os_config_read_string(NULL, "Language", DEFAULT_LANGUAGE);
 475
 476                 if(ret == NULL){
 477                         Int3();
 478                         SDL_strlcpy(lang_string, DEFAULT_LANGUAGE, SDL_arraysize(lang_string));
 479                 } else {
 480                         SDL_strlcpy(lang_string, ret, SDL_arraysize(lang_string));
 481                 }
 482
 483                 // look it up
 484                 lang = -1;
 485                 for(idx=0; idx<LCL_NUM_LANGUAGES; idx++){
 486                         if(!SDL_strcasecmp(Lcl_languages[idx].lang_name, lang_string)){
 487                                 lang = idx;
 488                                 break;
 489                         }
 490                 }
 491                 if(lang < 0){
 492                         lang = 0;
 493                 }
 494         } else {
 495                 SDL_assert((lang_init >= 0) && (lang_init < LCL_NUM_LANGUAGES));
 496                 lang = lang_init;
 497         }
 498
 499 #ifdef MAKE_FS1
 500         if (lang >= LCL_NUM_LANGUAGES_FS1)
 501                 lang = 0;
 502 #endif
 503
 504         // language markers
 505         Lcl_pointer_count = 0;
 506
 507         // associate the table string file
 508         lcl_ext_associate(TABLE_STRING_FILENAME);
 509
 510         // set the language (this function takes care of setting up file pointers)
 511         lcl_set_language(lang);
 512 }
 513
 514 // added 2.2.99 by NeilK to take care of fs2 launcher memory leaks
 515 // shutdown localization
 516 void lcl_close()
 517 {
 518         // if the filename exists, free it up
 519         if(Lcl_ext_filename != NULL){
 520                 free(Lcl_ext_filename);
 521         }
 522
 523         // free the Xstr_table
 524         lcl_xstr_close();
 525 };
 526
 527 // determine what language we're running in, see LCL_* defines above
 528 int lcl_get_language()
 529 {
 530         return Lcl_current_lang;
 531 }
 532
 533 // initialize the xstr table
 534 void lcl_xstr_init()
 535 {
 536 #ifndef MAKE_FS1
 537         int i;
 538         char chr, buf[4096];
 539         char language_tag[512];
 540         int z, index;
 541         char *p_offset = NULL;
 542         int offset_lo = 0, offset_hi = 0;
 543         int num_offsets_on_this_line = 0;
 544
 545         for (i=0; i<XSTR_SIZE; i++){
 546                 Xstr_table[i].str = NULL;
 547         }
 548
 549         // make sure localization is NOT running
 550         lcl_ext_close();
 551
 552         try {
 553                 read_file_text("strings.tbl");
 554                 reset_parse();
 555
 556                 // move down to the proper section
 557                 memset(language_tag, 0, 512);
 558                 SDL_strlcpy(language_tag, "#", SDL_arraysize(language_tag));
 559                 SDL_strlcat(language_tag, Lcl_languages[Lcl_current_lang].lang_name, SDL_arraysize(language_tag));
 560                 if(skip_to_string(language_tag) != 1){
 561                         Error(LOCATION, NOX("Strings.tbl is corrupt"));
 562                 }
 563
 564                 // parse all the strings in this section of the table
 565                 while (!check_for_string("#")) {
 566                         stuff_int(&index);
 567                         stuff_string(buf, F_NAME, NULL, 4096);
 568
 569                         if(Lcl_pl) {
 570                             lcl_fix_polish(buf);
 571                         }
 572
 573                         i = strlen(buf);
 574                         while (i--) {
 575                                 if (!isspace(buf[i])) {
 576                                         break;
 577                                 }
 578                         }
 579
 580                         // trim unneccesary end of string
 581                         if (i >= 0) {
 582                                 // SDL_assert(buf[i] == '"');
 583                                 if (buf[i] != '"') {
 584                                         // probably an offset on this entry
 585                                         buf[i+1] = 0;                                           // drop down a null terminator (prolly unnecessary)
 586                                         while(!is_white_space(buf[i])) i--;     // back up over the potential offset
 587                                         while(is_white_space(buf[i])) i--;      // now back up over intervening spaces
 588                                         num_offsets_on_this_line = 1;
 589                                         if (buf[i] != '"') {
 590                                                 // could have a 2nd offset value (one for 640, one for 1024)
 591                                                 // so back up again
 592                                                 while(!is_white_space(buf[i])) i--;     // back up over the 2nd offset
 593                                                 while(is_white_space(buf[i])) i--;      // now back up over intervening spaces
 594                                                 num_offsets_on_this_line = 2;
 595                                         }
 596
 597                                         p_offset = &buf[i+1];                   // get ptr to string section with offset in it
 598                                         if (buf[i] != '"') {
 599                                                 Error(LOCATION, NOX("Strings.tbl is corrupt"));         // now its an error
 600                                         }
 601                                 }
 602
 603                                 buf[i] = 0;
 604                         }
 605
 606                         // copy string into buf
 607                         z = 0;
 608                         for (i=1; buf[i]; i++) {
 609                                 chr = buf[i];
 610                                 if (chr == '\\') {
 611                                         chr = buf[++i];
 612                                         if (chr == 'n') {
 613                                                 chr = '\n';
 614                                         } else if (chr == 'r') {
 615                                                 chr = '\r';
 616                                         }
 617
 618                                 }
 619
 620                                 buf[z++] = chr;
 621                         }
 622
 623                         // null terminator on buf
 624                         buf[z] = 0;
 625
 626                         // write into Xstr_table
 627                         if (index >= 0 && index < XSTR_SIZE) {
 628                                 if (Xstr_table[index].str != NULL) {
 629                                         Warning(LOCATION, "Strings table index %d used more than once", index);
 630                                 }
 631                                 Xstr_table[index].str = strdup(buf);
 632                         }
 633
 634                         // read offset information, assume 0 if nonexistant
 635                         if (p_offset != NULL) {
 636                                 if (sscanf(p_offset, "%d%d", &offset_lo, &offset_hi) < num_offsets_on_this_line) {
 637                                         // whatever is in the file ain't a proper offset
 638                                         Error(LOCATION, NOX("Strings.tbl is corrupt"));
 639                                 }
 640                         }
 641                         Xstr_table[index].offset_x = offset_lo;
 642                         if (num_offsets_on_this_line == 2) {
 643                                 Xstr_table[index].offset_x_hi = offset_hi;
 644                         } else {
 645                                 Xstr_table[index].offset_x_hi = offset_lo;
 646                         }
 647
 648                         // clear out our vars
 649                         p_offset = NULL;
 650                         offset_lo = 0;
 651                         offset_hi = 0;
 652                         num_offsets_on_this_line = 0;
 653                 }
 654         } catch (parse_error_t rval) {
 655                 mprintf(("Error parsing 'strings.tbl'\nError code = %i.\n", (int)rval));
 656         }
 657 #else
 658         int i;
 659
 660         SDL_assert(XSTR_SIZE == LCL_NUM_STRINGS_FS1);
 661         SDL_assert(Lcl_current_lang < LCL_NUM_LANGUAGES_FS1);
 662
 663         for (i=0; i<XSTR_SIZE; i++) {
 664                 if ( !strlen(FS1_trans[Lcl_current_lang][i]) ) {
 665                         Xstr_table[i].str = NULL;
 666                 } else {
 667                         Xstr_table[i].str = (char *)FS1_trans[Lcl_current_lang][i];
 668                 }
 669
 670                 Xstr_table[i].offset_x = 0;
 671                 Xstr_table[i].offset_x_hi = 0;
 672         }
 673 #endif
 674
 675         Xstr_inited = 1;
 676 }
 677
 678
 679 // free Xstr table
 680 void lcl_xstr_close()
 681 {
 682 #ifndef MAKE_FS1
 683         for (int i=0; i<XSTR_SIZE; i++){
 684                 if (Xstr_table[i].str != NULL) {
 685                         free(Xstr_table[i].str);
 686                         Xstr_table[i].str = NULL;
 687                 }
 688         }
 689 #endif
 690 }
 691
 692
 693 // set our current language
 694 void lcl_set_language(int lang)
 695 {
 696         Lcl_current_lang = lang;
 697
 698         nprintf(("General", "Setting language to %s\n", Lcl_languages[lang].lang_name));
 699
 700         // flag the proper language as being active
 701         Lcl_fr = 0;
 702         Lcl_gr = 0;
 703         Lcl_pl = 0;
 704         Lcl_english = 0;
 705         switch(lang){
 706         case LCL_ENGLISH:
 707                 Lcl_english = 1;
 708                 Lcl_special_chars = LCL_SPECIAL_CHARS;
 709                 break;
 710         case LCL_FRENCH:
 711                 Lcl_fr = 1;
 712                 Lcl_special_chars = LCL_SPECIAL_CHARS_FR;
 713                 break;
 714         case LCL_GERMAN:
 715                 Lcl_gr = 1;
 716                 Lcl_special_chars = LCL_SPECIAL_CHARS_GR;
 717                 break;
 718         case LCL_POLISH:
 719                 Lcl_pl = 1;
 720                 Lcl_special_chars = LCL_SPECIAL_CHARS_PL;
 721                 break;
 722         }
 723
 724         // set to 0, so lcl_ext_open() knows to reset file pointers
 725         Lcl_pointer_count = 0;
 726
 727         // reset file pointers to the proper language-section
 728         if(Lcl_current_lang != LCL_DEFAULT_LANGUAGE){
 729                 lcl_ext_setup_pointers();
 730         }
 731 }
 732
 733 // maybe add on an appropriate subdirectory when opening a localized file
 734 void lcl_add_dir(char *current_path, const int max_len)
 735 {
 736         char last_char;
 737         int path_len;
 738
 739         // if the disk extension is 0 length, don't add enything
 740         if (strlen(Lcl_languages[Lcl_current_lang].lang_ext) <= 0) {
 741                 return;
 742         }
 743
 744         // get the length of the string so far
 745         path_len = strlen(current_path);
 746         if (path_len <= 0) {
 747                 return;
 748         }
 749
 750         // get the current last char
 751         last_char = current_path[path_len - 1];
 752
 753         // if the last char is a slash, just copy in the disk extension
 754         if (last_char == DIR_SEPARATOR_CHAR) {
 755                 SDL_strlcat(current_path, Lcl_languages[Lcl_current_lang].lang_ext, max_len);
 756                 SDL_strlcat(current_path, DIR_SEPARATOR_STR, max_len);
 757         }
 758         // otherwise add a slash, then copy in the disk extension
 759         else {
 760                 SDL_strlcat(current_path, DIR_SEPARATOR_STR, max_len);
 761                 SDL_strlcat(current_path, Lcl_languages[Lcl_current_lang].lang_ext, max_len);
 762         }
 763 }
 764
 765 // maybe add localized directory to full path with file name when opening a localized file
 766 void lcl_add_dir_to_path_with_filename(char *current_path, const int path_len)
 767 {
 768         char temp[MAX_PATH_LEN];
 769
 770         // if the disk extension is 0 length, don't add enything
 771         if (strlen(Lcl_languages[Lcl_current_lang].lang_ext) <= 0) {
 772                 return;
 773         }
 774
 775         // find position of last slash and copy rest of filename (not counting slash) to temp
 776         // mark end of current path with '\0', so strcat will work
 777         char *last_slash = strrchr(current_path, DIR_SEPARATOR_CHAR);
 778         if (last_slash == NULL) {
 779                 SDL_strlcpy(temp, current_path, SDL_arraysize(temp));
 780                 current_path[0] = '\0';
 781         } else {
 782                 SDL_strlcpy(temp, last_slash+1, SDL_arraysize(temp));
 783                 last_slash[1] = '\0';
 784         }
 785
 786         // add extension
 787         SDL_strlcat(current_path, Lcl_languages[Lcl_current_lang].lang_ext, path_len);
 788         SDL_strlcat(current_path, DIR_SEPARATOR_STR, path_len);
 789
 790         // copy rest of filename from temp
 791         SDL_strlcat(current_path, temp, path_len);
 792 }
 793
 794
 795 // externalization of table/mission files -----------------------
 796
 797 // open the externalization file for use during parsing (call before parsing a given file)
 798 void lcl_ext_open()
 799 {
 800         // if the file is already open, do nothing
 801         SDL_assert(Lcl_ext_file == NULL);
 802
 803         // if we're running in the default language, do nothing
 804         if(Lcl_current_lang == LCL_DEFAULT_LANGUAGE){
 805                 return;
 806         }
 807
 808 #ifndef MAKE_FS1
 809         // otherwise open the file
 810         Lcl_ext_file = cfopen(Lcl_ext_filename, "rt");
 811         if(Lcl_ext_file == NULL){
 812                 return;
 813         }
 814 #endif
 815 }
 816
 817 // close the externalization file (call after parsing a given file)
 818 void lcl_ext_close()
 819 {
 820         // if the file is not open, do nothing
 821         if(Lcl_ext_file == NULL){
 822                 return;
 823         }
 824
 825         // if we're running in the default language, do nothing
 826         if(Lcl_current_lang == LCL_DEFAULT_LANGUAGE){
 827                 return;
 828         }
 829
 830         // otherwise close it
 831         cfclose(Lcl_ext_file);
 832         Lcl_ext_file = NULL;
 833 }
 834
 835 // get the localized version of the string. if none exists, return the original string
 836 // valid input to this function includes :
 837 // "this is some text"
 838 // XSTR("wheeee", -1)
 839 // XSTR("whee", 20)
 840 // and these should cover all the externalized string cases
 841 // fills in id if non-NULL. a value of -2 indicates it is not an external string
 842 void lcl_ext_localize(char *in, char *out, int max_len, int *id)
 843 {
 844         char first_four[5];
 845         char text_str[2048]="";
 846         char lookup_str[2048]="";
 847         int str_id;
 848         int str_len;
 849
 850         SDL_assert(in);
 851         SDL_assert(out);
 852
 853         // default (non-external string) value
 854         if(id != NULL){
 855                 *id = -2;
 856         }
 857
 858         str_len = strlen(in);
 859
 860         // if the string is < 9 chars, it can't be an XSTR("",) tag, so just copy it
 861         if(str_len < 9){
 862                 if(str_len > max_len){
 863                         error_display(0, "Token too long: [%s].  Length = %i.  Max is %i.\n", in, str_len, max_len);
 864                         return;
 865                 }
 866                 SDL_strlcpy(out, in, max_len);
 867                 if(id != NULL){
 868                         *id = -2;
 869                 }
 870                 return;
 871         }
 872
 873         // otherwise, check to see if it's an XSTR() tag
 874         memset(first_four, 0, 5);
 875         SDL_strlcpy(first_four, in, SDL_arraysize(first_four));
 876         if(SDL_strcasecmp(first_four, "XSTR")){
 877                 // NOT an XSTR() tag
 878                 if(str_len > max_len){
 879                         error_display(0, "Token too long: [%s].  Length = %i.  Max is %i.\n", in, str_len, max_len);
 880                         return;
 881                 }
 882                 SDL_strlcpy(out, in, max_len);
 883                 if(id != NULL){
 884                         *id = -2;
 885                 }
 886                 return;
 887         }
 888
 889         // at this point we _know_ its an XSTR() tag, so split off the strings and id sections
 890         if(!lcl_ext_get_text(in, text_str)){
 891                 Int3();
 892                 SDL_strlcpy(out, in, max_len);
 893                 if(id != NULL){
 894                         *id = -1;
 895                 }
 896                 return;
 897         }
 898         if(!lcl_ext_get_id(in, &str_id)){
 899                 SDL_strlcpy(out, in, max_len);
 900                 if(id != NULL){
 901                         *id = -1;
 902                 }
 903                 return;
 904         }
 905
 906         // if the localization file is not open, or we're running in the default language, return the original string
 907         if((Lcl_ext_file == NULL) || (str_id < 0) || (Lcl_current_lang == LCL_DEFAULT_LANGUAGE)){
 908                 SDL_strlcpy(out, text_str, max_len);
 909                 if(id != NULL){
 910                         *id = str_id;
 911                 }
 912                 return;
 913         }
 914
 915         // attempt to find the string
 916         if(lcl_ext_lookup(lookup_str, SDL_arraysize(lookup_str), str_id)){
 917                 // copy to the outgoing string
 918                 SDL_assert(strlen(lookup_str) <= (unsigned int)(max_len - 1));
 919
 920                 if (strlen(lookup_str) > (unsigned int)(max_len-1)) {
 921                         // be safe and truncate string to fit
 922                         SDL_strlcpy(out, lookup_str, max_len);
 923                 } else {
 924                         SDL_strlcpy(out, lookup_str, max_len);
 925                 }
 926
 927         }
 928         // otherwise use what we have - probably should Int3() or assert here
 929         else {
 930                 SDL_strlcpy(out, text_str, max_len);
 931         }
 932
 933         // set the id #
 934         if(id != NULL){
 935                 *id = str_id;
 936         }
 937 }
 938
 939 // translate the specified string based upon the current language
 940 const char *XSTR(const char *str, int index)
 941 {
 942         if(!Xstr_inited){
 943                 return str;
 944         }
 945
 946         // perform a lookup
 947         if (index >= 0 && index < XSTR_SIZE) {
 948                 if (Xstr_table[index].str){
 949                         return Xstr_table[index].str;  // return translation of string
 950                 }
 951         }
 952
 953         // can't translate, return original english string
 954         return str;
 955 }
 956
 957 // retrieve the offset for a localized string
 958 int lcl_get_xstr_offset(int index, int res)
 959 {
 960         if (res == GR_640) {
 961                 return Xstr_table[index].offset_x;
 962         } else {
 963                 return Xstr_table[index].offset_x_hi;
 964         }
 965 }
 966
 967
 968 // ------------------------------------------------------------------------------------------------------------
 969 // LOCALIZE FORWARD DEFINITIONS
 970 //
 971
 972 // associate table file externalization with the specified input file
 973 void lcl_ext_associate(const char *filename)
 974 {
 975 #ifndef MAKE_FS1
 976         // if the filename already exists, free it up
 977         if(Lcl_ext_filename != NULL){
 978                 free(Lcl_ext_filename);
 979         }
 980
 981         // set the new filename
 982         Lcl_ext_filename = strdup(filename);
 983 #endif
 984 }
 985
 986 // given a valid XSTR() tag piece of text, extract the string portion, return it in out, nonzero on success
 987 int lcl_ext_get_text(char *xstr, char *out)
 988 {
 989         int str_start = 0, str_end = 0;
 990         int str_len;
 991         char *p, *p2;
 992
 993         SDL_assert(xstr != NULL);
 994         SDL_assert(out != NULL);
 995         str_len = strlen(xstr);
 996
 997         // this is some crazy wack-ass code.
 998         // look for the open quote
 999         p = strstr(xstr, "\"");
1000         if(p == NULL){
1001                 error_display(0, "Error parsing XSTR() tag %s\n", xstr);
1002                 return 0;
1003         } else {
1004                 str_start = p - xstr + 1;
1005         }
1006         // make sure we're not about to walk past the end of the string
1007         if((p - xstr) >= str_len){
1008                 error_display(0, "Error parsing XSTR() tag %s\n", xstr);
1009                 return 0;
1010         }
1011
1012         // look for the close quote
1013         p2 = strstr(p+1, "\"");
1014         if(p2 == NULL){
1015                 error_display(0, "Error parsing XSTR() tag %s\n", xstr);
1016                 return 0;
1017         } else {
1018                 str_end = p2 - xstr;
1019         }
1020
1021         // now that we know the boundaries of the actual string in the XSTR() tag. copy it
1022         memcpy(out, xstr + str_start, str_end - str_start);
1023
1024         if(Lcl_pl) {
1025             lcl_fix_polish(out);
1026         }
1027
1028         // success
1029         return 1;
1030 }
1031
1032 // given a valid XSTR() tag piece of text, extract the id# portion, return the value in out, nonzero on success
1033 int lcl_ext_get_id(char *xstr, int *out)
1034 {
1035         char *p, *pnext;
1036         int str_len;
1037
1038         SDL_assert(xstr != NULL);
1039         SDL_assert(out != NULL);
1040
1041         str_len = strlen(xstr);
1042
1043         // find the first quote
1044         p = strstr(xstr, "\"");
1045         if(p == NULL){
1046                 error_display(0, "Error parsing id# in XSTR() tag %s\n", xstr);
1047                 return 0;
1048         }
1049         // make sure we're not about to walk off the end of the string
1050         if((p - xstr) >= str_len){
1051                 error_display(0, "Error parsing id# in XSTR() tag %s\n", xstr);
1052                 return 0;
1053         }
1054         p++;
1055
1056         // continue searching until we find the close quote
1057         while(1){
1058                 pnext = strstr(p, "\"");
1059                 if(pnext == NULL){
1060                         error_display(0, "Error parsing id# in XSTR() tag %s\n", xstr);
1061                         return 0;
1062                 }
1063
1064                 // if the previous char is a \, we know its not the "end-of-string" quote
1065                 if(*(pnext - 1) != '\\'){
1066                         p = pnext;
1067                         break;
1068                 }
1069
1070                 // continue
1071                 p = pnext;
1072         }
1073
1074         // search until we find a ,
1075         pnext = strstr(p, ",");
1076         if(pnext == NULL){
1077                 error_display(0, "Error parsing id# in XSTR() tag %s\n", xstr);
1078                 return 0;
1079         }
1080         // make sure we're not about to walk off the end of the string
1081         if((pnext - xstr) >= str_len){
1082                 error_display(0, "Error parsing id# in XSTR() tag %s\n", xstr);
1083                 return 0;
1084         }
1085         pnext++;
1086
1087         // now get the id string
1088         p = pnext;
1089         pnext = strtok(p, ")");
1090         if(pnext == NULL){
1091                 error_display(0, "Error parsing id# in XSTR() tag %s\n", xstr);
1092                 return 0;
1093         }
1094
1095         // get the value and we're done
1096         *out = atoi(pnext);
1097
1098         // success
1099         return 1;
1100 }
1101
1102 // given a valid XSTR() id#, lookup the string in tstrings.tbl, filling in out if found, nonzero on success
1103 int lcl_ext_lookup(char *out, const int max_out, int id)
1104 {
1105         char text[1024];
1106         int ret;
1107         int pointer;
1108
1109         SDL_assert(Lcl_pointer_count >= 0);
1110         SDL_assert(Lcl_pointers[0] >= 0);
1111         SDL_assert(Lcl_pointers[Lcl_pointer_count - 1] >= 0);
1112         SDL_assert(Lcl_ext_file != NULL);
1113         SDL_assert(id >= 0);
1114
1115         // seek to the closest pointer <= the id# we're looking for
1116         pointer = id / LCL_GRANULARITY;
1117         cfseek(Lcl_ext_file, Lcl_pointers[pointer], CF_SEEK_SET);
1118
1119         // reset parsing vars and go to town
1120         Ts_current_state = TS_SCANNING;
1121         Ts_id_text_size = 0;
1122         Ts_text_size = 0;
1123         memset(Ts_text, 0, PARSE_TEXT_STRING_LEN);
1124         memset(Ts_id_text, 0, PARSE_ID_STRING_LEN);
1125         while((cftell(Lcl_ext_file) < Lcl_pointers[Lcl_pointer_count - 1]) && cfgets(text, 1024, Lcl_ext_file)){
1126                 ret = lcl_ext_lookup_sub(text, out, max_out, id);
1127
1128                 // run the line parse function
1129                 switch(ret & 0x0fffffff){
1130                 // error
1131                 case 0 :
1132                         Int3();                 // should never get here - it means the string doens't exist in the table!!
1133                         return 0;
1134
1135                 // success parsing the line - please continue
1136                 case 1 :
1137                         break;
1138
1139                 // found a matching string/id pair
1140                 case 2 :
1141                         // success
1142                         if (Lcl_gr) {
1143                                 // this is because tstrings.tbl reads in as ANSI for some reason
1144                                 // opening tstrings with "rb" mode didnt seem to help, so its now still "rt" like before
1145                                 lcl_fix_umlauts(out, LCL_TO_ASCII);
1146                         }
1147                         return 1;
1148
1149                 // end of language found
1150                 case 3 :
1151                         Int3();                 // should never get here - it means the string doens't exist in the table!!
1152                         return 0;
1153                 }
1154         }
1155
1156         Int3();                 // should never get here - it means the string doens't exist in the table!!
1157         return 0;
1158 }
1159
1160 // sub-parse function for individual lines of tstrings.tbl (from Exstr)
1161 // returns : integer with the low bits having the following values :
1162 // 0 on fail, 1 on success, 2 if found a matching id/string pair, 3 if end of language has been found
1163 // for cases 1 and 2 : the high bit (1<<31) will be set if the parser detected the beginning of a new string id on this line
1164 //
1165 int lcl_ext_lookup_sub(char *text, char *out, const int max_out, int id)
1166 {
1167         char *p;                                        // current ptr
1168         int len = strlen(text);
1169         int count;
1170         char text_copy[1024];
1171         char *tok;
1172         int found_new_string_id = 0;
1173
1174         p = text;
1175         count = 0;
1176         while(count < len){
1177                 // do something useful
1178                 switch(Ts_current_state){
1179                 // scanning for a line of text
1180                 case TS_SCANNING:
1181                         // if the first word is #end, we're done with the file altogether
1182                         SDL_strlcpy(text_copy, text, SDL_arraysize(text_copy));
1183                         tok = strtok(text_copy, " \n");
1184                         if((tok != NULL) && !SDL_strcasecmp(tok, "#end")){
1185                                 return 3;
1186                         }
1187                         // if its a commented line, skip it
1188                         else if((text[0] == ';') || (text[0] == ' ') || (text[0] == '\n')){
1189                                 return 1;
1190                         }
1191                         // otherwise we should have an ID #, so stuff it and move to the proper state
1192                         else {
1193                                 if(lcl_is_valid_numeric_char(*p)){
1194                                         memset(Ts_id_text, 0, PARSE_ID_STRING_LEN);
1195                                         Ts_id_text_size = 0;
1196                                         Ts_id_text[Ts_id_text_size++] = *p;
1197                                         Ts_current_state = TS_ID_STRING;
1198
1199                                         found_new_string_id = 1;
1200                                 }
1201                                 // error
1202                                 else {
1203                                         Int3();
1204                                         return 0;
1205                                 }
1206                         }
1207                         break;
1208
1209                 // scanning in an id string
1210                 case TS_ID_STRING:
1211                         // if we have another valid char
1212                         if(lcl_is_valid_numeric_char(*p)){
1213                                 Ts_id_text[Ts_id_text_size++] = *p;
1214                         }
1215                         // if we found a comma, our id# is finished, look for the open quote
1216                         else if(*p == ','){
1217                                 Ts_current_state = TS_OPEN_QUOTE;
1218                         } else {
1219                                 Int3();
1220                                 return 0;
1221                         }
1222                         break;
1223
1224                 case TS_OPEN_QUOTE:
1225                         // valid space or an open quote
1226                         if((*p == ' ') || (*p == '\"')){
1227                                 if(*p == '\"'){
1228                                         memset(Ts_text, 0, PARSE_TEXT_STRING_LEN);
1229                                         Ts_text_size = 0;
1230                                         Ts_current_state = TS_STRING;
1231                                 }
1232                         } else {
1233                                 Int3();
1234                                 return 0;
1235                         }
1236                         break;
1237
1238                 case TS_STRING:
1239                         // if we have an end quote, we need to look for a comma
1240                         if((*p == '\"') /*&& (Ts_text_size > 0)*/ && (Ts_text[Ts_text_size - 1] != '\\')){
1241                                 // we're now done - we have a string
1242                                 Ts_current_state = TS_SCANNING;
1243
1244                                 // if the id#'s match, copy the string and return "string found"
1245                                 if((atoi(Ts_id_text) == id) && (out != NULL)){
1246                                         SDL_strlcpy(out, Ts_text, max_out);
1247
1248                                         return found_new_string_id ? (1<<1) | (1<<31) : (1<<1);
1249                                 }
1250
1251                                 // otherwise, just continue parsing
1252                                 return found_new_string_id ? (1<<0) | (1<<31) : (1<<0);
1253                         }
1254                         // otherwise add to the string
1255                         else {
1256                                 Ts_text[Ts_text_size++] = *p;
1257                         }
1258                         break;
1259                 }
1260
1261                 // if we have a newline, return success, we're done with this line
1262                 if(*p == '\n'){
1263                         return found_new_string_id ? (1<<0) | (1<<31) : (1<<0);
1264                 }
1265
1266                 // next char in the line
1267                 p++;
1268                 count++;
1269         }
1270
1271         // success
1272         return found_new_string_id ? (1<<0) | (1<<31) : (1<<0);
1273 }
1274
1275 // if the char is a valid char for a signed integer value
1276 int lcl_is_valid_numeric_char(char c)
1277 {
1278         return ( (c == '-') || (c == '0') || (c == '1') || (c == '2') || (c == '3') || (c == '4') ||
1279                                 (c == '5') || (c == '6') || (c == '7') || (c == '8') || (c == '9') ) ? 1 : 0;
1280 }
1281
1282 // initialize the pointer array into tstrings.tbl (call from lcl_ext_open() ONLY)
1283 void lcl_ext_setup_pointers()
1284 {
1285         char language_string[128];
1286         char line[1024];
1287         char *tok;
1288         int string_count;
1289         int ret;
1290         int found_start = 0;
1291
1292         // open the localization file
1293         lcl_ext_open();
1294         if(Lcl_ext_file == NULL){
1295 #ifndef MAKE_FS1
1296                 error_display(0, "Error opening externalization file! File likely does not exist or could not be found");
1297 #endif
1298                 return;
1299         }
1300
1301         // seek to the currently active language
1302         memset(language_string, 0, 128);
1303         SDL_strlcpy(language_string, "#", SDL_arraysize(language_string));
1304         if(!SDL_strcasecmp(DEFAULT_LANGUAGE, Lcl_languages[Lcl_current_lang].lang_name)){
1305                 SDL_strlcat(language_string, "default", SDL_arraysize(language_string));
1306         } else {
1307                 SDL_strlcat(language_string, Lcl_languages[Lcl_current_lang].lang_name, SDL_arraysize(language_string));
1308         }
1309         memset(line, 0, 1024);
1310
1311         // reset seek variables and begin
1312         Lcl_pointer_count = 0;
1313         while(cfgets(line, 1024, Lcl_ext_file)){
1314                 tok = strtok(line, " \n");
1315                 if(tok == NULL){
1316                         continue;
1317                 }
1318
1319                 // if the language matches, we're good to start parsing strings
1320                 if(!SDL_strcasecmp(language_string, tok)){
1321                         found_start = 1;
1322                         break;
1323                 }
1324         }
1325
1326         // if we didn't find the language specified, error
1327         if(found_start <= 0){
1328                 error_display(0, "Could not find specified langauge in tstrings.tbl!\n");
1329                 lcl_ext_close();
1330                 return;
1331         }
1332
1333         string_count = 0;
1334         while(cfgets(line, 1024, Lcl_ext_file)){
1335                 ret = lcl_ext_lookup_sub(line, NULL, 0, -1);
1336
1337                 // do stuff
1338                 switch(ret & 0x0fffffff){
1339                 // error
1340                 case 0 :
1341                         lcl_ext_close();
1342                         return;
1343
1344                 // end of language found
1345                 case 3 :
1346                         // mark one final pointer
1347                         Lcl_pointers[Lcl_pointer_count++] = cftell(Lcl_ext_file) - strlen(line) - 1;
1348                         lcl_ext_close();
1349                         return;
1350                 }
1351
1352                 // the only other case we care about is the beginning of a new id#
1353                 if(ret & (1<<31)){
1354                         if((string_count % LCL_GRANULARITY) == 0){
1355                                 // mark the pointer down
1356                                 Lcl_pointers[Lcl_pointer_count++] = cftell(Lcl_ext_file) - strlen(line) - 1;
1357
1358                                 // if we're out of pointer slots
1359                                 if(Lcl_pointer_count >= LCL_MAX_POINTERS){
1360                                         error_display(0, "Out of pointer for tstrings.tbl lookup. Please increment LCL_MAX_POINTERS in localize.cpp");
1361                                         lcl_ext_close();
1362                                         return;
1363                                 }
1364                         }
1365                         // increment string count
1366                         string_count++;
1367                 }
1368         }
1369
1370         // should never get here. we should always be exiting through case 3 (end of language section) of the above switch
1371         // statement
1372         Int3();
1373         lcl_ext_close();
1374 }
1375
1376 void lcl_get_language_name(char *lang_name, const int max_len)
1377 {
1378         SDL_assert(LCL_NUM_LANGUAGES == 3);
1379
1380         SDL_strlcpy(lang_name, Lcl_languages[Lcl_current_lang].lang_name, max_len);
1381 }
1382
1383 // converts german umlauted chars from ASCII to ANSI
1384 // so they appear in the launcher
1385 // how friggin lame is this
1386 // pass in a null terminated string, foo!
1387 // returns ptr to string you sent in
1388 char* lcl_fix_umlauts(char *str, int which_way)
1389 {
1390         int i=0;
1391
1392         if (which_way == LCL_TO_ANSI) {
1393                 // moving to ANSI charset
1394                 // run thru string and perform appropriate conversions
1395                 while (str[i] != '\0') {
1396                         switch (str[i]) {
1397                         case '\x81':
1398                                 // lower umlaut u
1399                                 str[i] = '\xFC';
1400                                 break;
1401                         case '\x84':
1402                                 // lower umlaut a
1403                                 str[i] = '\xE4';
1404                                 break;
1405                         case '\x94':
1406                                 // lower umlaut o
1407                                 str[i] = '\xF6';
1408                                 break;
1409                         case '\x9A':
1410                                 // upper umlaut u
1411                                 str[i] = '\xDC';
1412                                 break;
1413                         case '\x8E':
1414                                 // upper umlaut a
1415                                 str[i] = '\xC4';
1416                                 break;
1417                         case '\x99':
1418                                 // upper umlaut o
1419                                 str[i] = '\xD6';
1420                                 break;
1421                         case '\xE1':
1422                                 // beta-lookin thing that means "ss"
1423                                 str[i] = '\xDF';
1424                                 break;
1425                         }
1426
1427                         i++;
1428                 }
1429         } else {
1430                 // moving to ASCII charset
1431                 // run thru string and perform appropriate conversions
1432                 while (str[i] != '\0') {
1433                         switch (str[i]) {
1434                         case '\xFC':
1435                                 // lower umlaut u
1436                                 str[i] = '\x81';
1437                                 break;
1438                         case '\xE4':
1439                                 // lower umlaut a
1440                                 str[i] = '\x84';
1441                                 break;
1442                         case '\xF6':
1443                                 // lower umlaut o
1444                                 str[i] = '\x94';
1445                                 break;
1446                         case '\xDC':
1447                                 // upper umlaut u
1448                                 str[i] = '\x9A';
1449                                 break;
1450                         case '\xC4':
1451                                 // upper umlaut a
1452                                 str[i] = '\x8E';
1453                                 break;
1454                         case '\xD6':
1455                                 // upper umlaut o
1456                                 str[i] = '\x99';
1457                                 break;
1458                         case '\xDF':
1459                                 // beta-lookin thing that means "ss"
1460                                 str[i] = '\xE1';
1461                                 break;
1462                         }
1463
1464                         i++;
1465                 }
1466         }
1467
1468         return str;
1469 }
1470
1471 // convert some of the polish characters
1472 void lcl_fix_polish(char *str)
1473 {
1474     for(;*str;str++) {
1475         if(*str == '\xA2') *str = '\xF3';
1476         else if(*str == '\x88') *str = '\xEA';
1477     }
1478 }
1479
1480 // ------------------------------------------------------------------
1481 // lcl_translate_wep_name()
1482 //
1483 // For displaying weapon names in german version
1484 // since we cant actually just change them outright.
1485 //
1486 void lcl_translate_wep_name(char *name, const int max_len)
1487 {
1488         if (!strcmp(name, "Morning Star")) {
1489                 SDL_strlcpy(name, "Morgenstern", max_len);
1490         } else if (!strcmp(name, "MorningStar")) {
1491                 SDL_strlcpy(name, "Morgenstern D", max_len);
1492         } else if (!strcmp(name, "UD-8 Kayser")) {
1493                 SDL_strlcpy(name, "Kayserstrahl", max_len);
1494         } else if (!strcmp(name, "UD-D Kayser")) {
1495                 SDL_strlcpy(name, "Kayserstrahl", max_len);
1496         }
1497 }
1498
1499 // ------------------------------------------------------------------
1500 // lcl_translate_brief_icon_name()
1501 //
1502 // For displaying ship names in german version
1503 // since we cant actually just change them outright.
1504 //
1505 void lcl_translate_brief_icon_name(char *name, const int max_len)
1506 {
1507         char *pos;
1508         char buf[128];
1509
1510         if (!SDL_strcasecmp(name, "Subspace Portal")) {
1511                 SDL_strlcpy(name, "Subraum Portal", max_len);
1512
1513         } else if (!SDL_strcasecmp(name, "Alpha Wing")) {
1514                 SDL_strlcpy(name, "Alpha", max_len);
1515
1516         } else if (!SDL_strcasecmp(name, "Beta Wing")) {
1517                 SDL_strlcpy(name, "Beta", max_len);
1518
1519         } else if (!SDL_strcasecmp(name, "Zeta Wing")) {
1520                 SDL_strlcpy(name, "Zeta", max_len);
1521
1522         } else if (!SDL_strcasecmp(name, "Capella Node")) {
1523                 SDL_strlcpy(name, "Capella", max_len);
1524
1525         } else if (!SDL_strcasecmp(name, "Hostile")) {
1526                 SDL_strlcpy(name, "Gegner", max_len);
1527
1528         } else if (!SDL_strcasecmp(name, "Hostile Craft")) {
1529                 SDL_strlcpy(name, "Gegner", max_len);
1530
1531         } else if (!SDL_strcasecmp(name, "Rebel Wing")) {
1532                 SDL_strlcpy(name, "Rebellen", max_len);
1533
1534         } else if (!SDL_strcasecmp(name, "Rebel Fleet")) {
1535                 SDL_strlcpy(name, "Rebellenflotte", max_len);
1536
1537         } else if (!SDL_strcasecmp(name, "Sentry Gun")) {
1538                 SDL_strlcpy(name, "Gesch\x81tz", max_len);
1539
1540         } else if (!SDL_strcasecmp(name, "Cargo")) {
1541                 SDL_strlcpy(name, "Fracht", max_len);
1542
1543         } else if (!SDL_strcasecmp(name, "Knossos Device")) {
1544                 SDL_strlcpy(name, "Knossosger\x84t", max_len);
1545
1546         } else if (!SDL_strcasecmp(name, "Support")) {
1547                 SDL_strlcpy(name, "Versorger", max_len);
1548
1549         } else if (!SDL_strcasecmp(name, "Unknown")) {
1550                 SDL_strlcpy(name, "Unbekannt", max_len);
1551
1552         } else if (!SDL_strcasecmp(name, "Instructor")) {
1553                 SDL_strlcpy(name, "Ausbilder", max_len);
1554
1555         } else if (!SDL_strcasecmp(name, "Jump Node")) {
1556                 SDL_strlcpy(name, "Sprungknoten", max_len);
1557
1558         } else if (!SDL_strcasecmp(name, "Escort")) {
1559                 SDL_strlcpy(name, "Geleitschutz", max_len);
1560
1561         } else if (!SDL_strcasecmp(name, "Asteroid Field")) {
1562                 SDL_strlcpy(name, "Asteroidenfeld", max_len);
1563
1564         } else if (!SDL_strcasecmp(name, "Enif Station")) {
1565                 SDL_strlcpy(name, "Station Enif", max_len);
1566
1567         } else if (!SDL_strcasecmp(name, "Rally Point")) {
1568                 SDL_strlcpy(name, "Sammelpunkt", max_len);
1569
1570         } else if ((pos = strstr(name, "Transport")) != NULL) {
1571                 pos += 9;               // strlen of "transport"
1572                 SDL_strlcpy(buf, "Transporter", SDL_arraysize(buf));
1573                 SDL_strlcat(buf, pos, SDL_arraysize(buf));
1574                 SDL_strlcpy(name, buf, max_len);
1575
1576         } else if ((pos = strstr(name, "Jump Node")) != NULL) {
1577                 pos += 9;               // strlen of "jump node"
1578                 SDL_strlcpy(buf, "Sprungknoten", SDL_arraysize(buf));
1579                 SDL_strlcat(buf, pos, SDL_arraysize(buf));
1580                 SDL_strlcpy(name, buf, max_len);
1581
1582         } else if (!SDL_strcasecmp(name, "Orion under repair")) {
1583                 SDL_strlcpy(name, "Orion wird repariert", max_len);
1584
1585         // SOTY-specific ones below!
1586
1587         } else if (!SDL_strcasecmp(name, "Wayfarer Station")) {
1588                 SDL_strlcpy(name, "Station Wayfarer", max_len);
1589         } else if (!SDL_strcasecmp(name, "Enemy")) {
1590                 SDL_strlcpy(name, "Gegner", max_len);
1591         } else if (!SDL_strcasecmp(name, "Supply Depot")) {
1592                 SDL_strlcpy(name, "Nachschubdepot", max_len);
1593         } else if (!SDL_strcasecmp(name, "Fighter Escort")) {
1594                 SDL_strlcpy(name, "Jagdschutz", max_len);
1595         } else if (!SDL_strcasecmp(name, "Shivans")) {
1596                 SDL_strlcpy(name, "Shivaner", max_len);
1597         } else if (!SDL_strcasecmp(name, "NTF Base of Operations")) {
1598                 SDL_strlcpy(name, "NTF-Operationsbasis", max_len);
1599         } else if (!SDL_strcasecmp(name, "NTF Bombers")) {
1600                 SDL_strlcpy(name, "NTF-Bomber", max_len);
1601         } else if (!SDL_strcasecmp(name, "NTF Fighters")) {
1602                 SDL_strlcpy(name, "NTF-J\x84ger", max_len);
1603         } else if (!SDL_strcasecmp(name, "Sentry")) {
1604                 SDL_strlcpy(name, "Sperrgesch\x81tz", max_len);
1605         } else if (!SDL_strcasecmp(name, "Cargo Containers")) {
1606                 SDL_strlcpy(name, "Frachtbeh\x84lter", max_len);
1607         } else if (!SDL_strcasecmp(name, "NTF Reinforcements")) {
1608                 SDL_strlcpy(name, "NTF-Verst\x84rkungen", max_len);
1609         } else if (!SDL_strcasecmp(name, "NTF Base")) {
1610                 SDL_strlcpy(name, "NTF-St\x81tzpunkt", max_len);
1611         } else if (!SDL_strcasecmp(name, "Refugee Convoy")) {
1612                 SDL_strlcpy(name, "Fl\x81""chtlingskonvoi", max_len);
1613         } else if (!SDL_strcasecmp(name, "Food Convoy")) {
1614                 SDL_strlcpy(name, "Nachschubkonvoi", max_len);
1615         } else if (!SDL_strcasecmp(name, "Governor's Shuttle")) {
1616                 SDL_strlcpy(name, "F\x84hre des Gouverneurs", max_len);
1617         } else if (!SDL_strcasecmp(name, "GTVA Patrol")) {
1618                 SDL_strlcpy(name, "GTVA-Patrouille", max_len);
1619         } else if (!SDL_strcasecmp(name, "Escort fighters")) {
1620                 SDL_strlcpy(name, "Geleitschutz", max_len);
1621         } else if (!SDL_strcasecmp(name, "Nagada Outpost")) {
1622                 SDL_strlcpy(name, "Nagada-Aussenposten", max_len);
1623         } else if (!SDL_strcasecmp(name, "Fighters")) {
1624                 SDL_strlcpy(name, "J\x84ger", max_len);
1625         } else if (!SDL_strcasecmp(name, "Bombers")) {
1626                 SDL_strlcpy(name, "Bomber", max_len);
1627         } else if (!SDL_strcasecmp(name, "Enemy Destroyers")) {
1628                 SDL_strlcpy(name, "Feindliche Zerst\x94rer", max_len);
1629         } else if (!SDL_strcasecmp(name, "Ross 128 System")) {
1630                 SDL_strlcpy(name, "System Ross 128", max_len);
1631         } else if (!SDL_strcasecmp(name, "Knossos Station")) {
1632                 SDL_strlcpy(name, "Knossos-Station", max_len);
1633         } else if (!SDL_strcasecmp(name, "Transporters")) {
1634                 SDL_strlcpy(name, "Transporter", max_len);
1635         } else if (!SDL_strcasecmp(name, "Pirates?")) {
1636                 SDL_strlcpy(name, "Piraten?", max_len);
1637         } else if (!SDL_strcasecmp(name, "Escorts")) {
1638                 SDL_strlcpy(name, "Geleitschutz", max_len);
1639         } else if (!SDL_strcasecmp(name, "Shivan Fighters")) {
1640                 SDL_strlcpy(name, "J\x84ger", max_len);
1641         } else if (!SDL_strcasecmp(name, "Shivan Territory")) {
1642                 SDL_strlcpy(name, "Shivaner", max_len);
1643         }
1644 }
1645
1646 // ------------------------------------------------------------------
1647 // lcl_translate_brief_icon_name_pl()
1648 //
1649 // For displaying ship names in polish version
1650 // since we cant actually just change them outright.
1651 //
1652 void lcl_translate_brief_icon_name_pl(char *name, const int max_len)
1653 {
1654         char *pos;
1655         char buf[128];
1656
1657         if (!SDL_strcasecmp(name, "Subspace Portal")) {
1658                 SDL_strlcpy(name, "Portal podprz.", max_len);
1659
1660         } else if (!SDL_strcasecmp(name, "Alpha Wing")) {
1661                 SDL_strlcpy(name, "Alfa", max_len);
1662
1663         } else if (!SDL_strcasecmp(name, "Beta Wing")) {
1664                 SDL_strlcpy(name, "Beta", max_len);
1665
1666         } else if (!SDL_strcasecmp(name, "Zeta Wing")) {
1667                 SDL_strlcpy(name, "Zeta", max_len);
1668
1669         } else if (!SDL_strcasecmp(name, "Capella Node")) {
1670                 SDL_strlcpy(name, "Capella", max_len);
1671
1672         } else if (!SDL_strcasecmp(name, "Hostile")) {
1673                 SDL_strlcpy(name, "Wr\xF3g", max_len);
1674
1675         } else if (!SDL_strcasecmp(name, "Hostile Craft")) {
1676                 SDL_strlcpy(name, "Wr\xF3g", max_len);
1677
1678         } else if (!SDL_strcasecmp(name, "Rebel Wing")) {
1679                 SDL_strlcpy(name, "Rebelianci", max_len);
1680
1681         } else if (!SDL_strcasecmp(name, "Rebel Fleet")) {
1682                 SDL_strlcpy(name, "Flota Rebelii", max_len);
1683
1684         } else if (!SDL_strcasecmp(name, "Sentry Gun")) {
1685                 SDL_strlcpy(name, "Dzia\xB3o str.", max_len);
1686
1687         } else if (!SDL_strcasecmp(name, "Cargo")) {
1688                 SDL_strlcpy(name, "\xA3\x61\x64unek", max_len);
1689
1690         } else if (!SDL_strcasecmp(name, "Knossos Device")) {
1691                 SDL_strlcpy(name, "Urz. Knossos, max_len", max_len);
1692
1693         } else if (!SDL_strcasecmp(name, "Support")) {
1694                 SDL_strlcpy(name, "Wsparcie", max_len);
1695
1696         } else if (!SDL_strcasecmp(name, "Unknown")) {
1697                 SDL_strlcpy(name, "Nieznany", max_len);
1698
1699         } else if (!SDL_strcasecmp(name, "Instructor")) {
1700                 SDL_strlcpy(name, "Instruktor", max_len);
1701
1702         } else if (!SDL_strcasecmp(name, "Jump Node")) {
1703                 SDL_strlcpy(name, "W\xEAze\xB3 skokowy", max_len);
1704
1705         } else if (!SDL_strcasecmp(name, "Escort")) {
1706                 SDL_strlcpy(name, "Eskorta", max_len);
1707
1708         } else if (!SDL_strcasecmp(name, "Asteroid Field")) {
1709                 SDL_strlcpy(name, "Pole asteroid", max_len);
1710
1711         } else if (!SDL_strcasecmp(name, "Enif Station")) {
1712                 SDL_strlcpy(name, "Stacja Enif", max_len);
1713
1714         } else if (!SDL_strcasecmp(name, "Rally Point")) {
1715                 SDL_strlcpy(name, "Pkt zborny", max_len);
1716
1717         } else if ((pos = strstr(name, "Transport")) != NULL) {
1718                 pos += 9;               // strlen of "transport"
1719                 SDL_strlcpy(buf, "Transporter", SDL_arraysize(buf));
1720                 SDL_strlcat(buf, pos, SDL_arraysize(buf));
1721                 SDL_strlcpy(name, buf, max_len);
1722
1723         } else if ((pos = strstr(name, "Jump Node")) != NULL) {
1724                 pos += 9;               // strlen of "jump node"
1725                 SDL_strlcpy(buf, "W\xEAze\xB3 skokowy", SDL_arraysize(buf));
1726                 SDL_strlcat(buf, pos, SDL_arraysize(buf));
1727                 SDL_strlcpy(name, buf, max_len);
1728
1729         } else if (!SDL_strcasecmp(name, "Orion under repair")) {
1730                 SDL_strlcpy(name, "Naprawiany Orion", max_len);
1731         }
1732 }
1733
1734 // ------------------------------------------------------------------
1735 // lcl_translate_ship_name()
1736 //
1737 // For displaying ship names in german version in the briefing
1738 // since we cant actually just change them outright.
1739 //
1740 void lcl_translate_ship_name(char *name, const int max_len)
1741 {
1742         if (!strcmp(name, "GTDR Amazon Advanced")) {
1743                 SDL_strlcpy(name, "GTDR Amazon VII", max_len);
1744         }
1745 }
1746
1747 // ------------------------------------------------------------------
1748 // lcl_translate_targetbox_name()
1749 //
1750 // For displaying ship names in german version in the targetbox
1751 // since we cant actually just change them outright.
1752 //
1753 void lcl_translate_targetbox_name(char *name, const int max_len)
1754 {
1755         char *pos;
1756         char buf[128];
1757
1758         if ((pos = strstr(name, "Sentry")) != NULL) {
1759                 pos += 6;               // strlen of "sentry"
1760                 SDL_strlcpy(buf, "Sperrgesch\x81tz", SDL_arraysize(buf));
1761                 SDL_strlcat(buf, pos, SDL_arraysize(buf));
1762                 SDL_strlcpy(name, buf, max_len);
1763
1764         } else if ((pos = strstr(name, "Support")) != NULL) {
1765                 pos += 7;               // strlen of "support"
1766                 SDL_strlcpy(buf, "Versorger", SDL_arraysize(buf));
1767                 SDL_strlcat(buf, pos, SDL_arraysize(buf));
1768                 SDL_strlcpy(name, buf, max_len);
1769
1770         } else if ((pos = strstr(name, "Unknown")) != NULL) {
1771                 pos += 7;               // strlen of "unknown"
1772                 SDL_strlcpy(buf, "Unbekannt", SDL_arraysize(buf));
1773                 SDL_strlcat(buf, pos, SDL_arraysize(buf));
1774                 SDL_strlcpy(name, buf, max_len);
1775
1776         } else if ((pos = strstr(name, "Drone")) != NULL) {
1777                 pos += 5;               // strlen of "drone"
1778                 SDL_strlcpy(buf, "Drohne", SDL_arraysize(buf));
1779                 SDL_strlcat(buf, pos, SDL_arraysize(buf));
1780                 SDL_strlcpy(name, buf, max_len);
1781
1782         } else if ((pos = strstr(name, "Jump Node")) != NULL) {
1783                 pos += 9;               // strlen of "jump node"
1784                 SDL_strlcpy(buf, "Sprungknoten", SDL_arraysize(buf));
1785                 SDL_strlcat(buf, pos, SDL_arraysize(buf));
1786                 SDL_strlcpy(name, buf, max_len);
1787
1788         } else if (!SDL_strcasecmp(name, "Instructor")) {
1789                 SDL_strlcpy(name, "Ausbilder", max_len);
1790
1791         } else if (!SDL_strcasecmp(name, "NTF Vessel")) {
1792                 SDL_strlcpy(name, "NTF-Schiff", max_len);
1793
1794         } else if (!SDL_strcasecmp(name, "Enif Station")) {
1795                 SDL_strlcpy(name, "Station Enif", max_len);
1796         }
1797 }
1798
1799 // ------------------------------------------------------------------
1800 // lcl_translate_targetbox_name_pl()
1801 //
1802 // For displaying ship names in polish version in the targetbox
1803 // since we cant actually just change them outright.
1804 //
1805 void lcl_translate_targetbox_name_pl(char *name, const int max_len)
1806 {
1807         char *pos;
1808         char buf[128];
1809
1810         if ((pos = strstr(name, "Sentry")) != NULL) {
1811                 pos += 6;               // strlen of "sentry"
1812                 SDL_strlcpy(buf, "Stra\xBFnik", SDL_arraysize(buf));
1813                 SDL_strlcat(buf, pos, SDL_arraysize(buf));
1814                 SDL_strlcpy(name, buf, max_len);
1815
1816         } else if ((pos = strstr(name, "Support")) != NULL) {
1817                 pos += 7;               // strlen of "support"
1818                 SDL_strlcpy(buf, "Wsparcie", SDL_arraysize(buf));
1819                 SDL_strlcat(buf, pos, SDL_arraysize(buf));
1820                 SDL_strlcpy(name, buf, max_len);
1821
1822         } else if ((pos = strstr(name, "Unknown")) != NULL) {
1823                 pos += 7;               // strlen of "unknown"
1824                 SDL_strlcpy(buf, "Nieznany", SDL_arraysize(buf));
1825                 SDL_strlcat(buf, pos, SDL_arraysize(buf));
1826                 SDL_strlcpy(name, buf, max_len);
1827
1828         } else if ((pos = strstr(name, "Drone")) != NULL) {
1829                 pos += 5;               // strlen of "drone"
1830                 SDL_strlcpy(buf, "Sonda", SDL_arraysize(buf));
1831                 SDL_strlcat(buf, pos, SDL_arraysize(buf));
1832                 SDL_strlcpy(name, buf, max_len);
1833
1834         } else if ((pos = strstr(name, "Jump Node")) != NULL) {
1835                 pos += 9;               // strlen of "jump node"
1836                 SDL_strlcpy(buf, "W\xEAze\xB3 skokowy", SDL_arraysize(buf));
1837                 SDL_strlcat(buf, pos, SDL_arraysize(buf));
1838                 SDL_strlcpy(name, buf, max_len);
1839
1840         } else if (!SDL_strcasecmp(name, "Instructor")) {
1841                 SDL_strlcpy(name, "Instruktor", max_len);
1842
1843         } else if (!SDL_strcasecmp(name, "NTF Vessel")) {
1844                 SDL_strlcpy(name, "Okr\xEAt NTF", max_len);
1845
1846         } else if (!SDL_strcasecmp(name, "Enif Station")) {
1847                 SDL_strlcpy(name, "Stacja Enif", max_len);
1848         }
1849 }