| """ |
| FLORES language code mapping to 2 letter ISO language code for compatibility |
| with Indic NLP Library (https://github.com/anoopkunchukuttan/indic_nlp_library) |
| """ |
| flores_codes = { |
| "asm_Beng": "as", |
| "awa_Deva": "hi", |
| "ben_Beng": "bn", |
| "bho_Deva": "hi", |
| "brx_Deva": "hi", |
| "doi_Deva": "hi", |
| "eng_Latn": "en", |
| "gom_Deva": "kK", |
| "guj_Gujr": "gu", |
| "hin_Deva": "hi", |
| "hne_Deva": "hi", |
| "kan_Knda": "kn", |
| "kas_Arab": "ur", |
| "kas_Deva": "hi", |
| "kha_Latn": "en", |
| "lus_Latn": "en", |
| "mag_Deva": "hi", |
| "mai_Deva": "hi", |
| "mal_Mlym": "ml", |
| "mar_Deva": "mr", |
| "mni_Beng": "bn", |
| "mni_Mtei": "hi", |
| "npi_Deva": "ne", |
| "ory_Orya": "or", |
| "pan_Guru": "pa", |
| "san_Deva": "hi", |
| "sat_Olck": "or", |
| "snd_Arab": "ur", |
| "snd_Deva": "hi", |
| "tam_Taml": "ta", |
| "tel_Telu": "te", |
| "urd_Arab": "ur", |
| } |
|
|
|
|
| flores_to_iso = { |
| "asm_Beng": "as", |
| "awa_Deva": "awa", |
| "ben_Beng": "bn", |
| "bho_Deva": "bho", |
| "brx_Deva": "brx", |
| "doi_Deva": "doi", |
| "eng_Latn": "en", |
| "gom_Deva": "gom", |
| "guj_Gujr": "gu", |
| "hin_Deva": "hi", |
| "hne_Deva": "hne", |
| "kan_Knda": "kn", |
| "kas_Arab": "ksa", |
| "kas_Deva": "ksd", |
| "kha_Latn": "kha", |
| "lus_Latn": "lus", |
| "mag_Deva": "mag", |
| "mai_Deva": "mai", |
| "mal_Mlym": "ml", |
| "mar_Deva": "mr", |
| "mni_Beng": "mnib", |
| "mni_Mtei": "mnim", |
| "npi_Deva": "ne", |
| "ory_Orya": "or", |
| "pan_Guru": "pa", |
| "san_Deva": "sa", |
| "sat_Olck": "sat", |
| "snd_Arab": "sda", |
| "snd_Deva": "sdd", |
| "tam_Taml": "ta", |
| "tel_Telu": "te", |
| "urd_Arab": "ur", |
| } |
|
|
| iso_to_flores = {iso_code: flores_code for flores_code, iso_code in flores_to_iso.items()} |
| |
| iso_to_flores["ks"] = "kas_Arab" |
| iso_to_flores["ks_Deva"] = "kas_Deva" |
| iso_to_flores["mni"] = "mni_Mtei" |
| iso_to_flores["mni_Beng"] = "mni_Beng" |
| iso_to_flores["sd"] = "snd_Arab" |
| iso_to_flores["sd_Deva"] = "snd_Deva" |
|
|
