Skip to content

Commit

Permalink
Regenerate
Browse files Browse the repository at this point in the history
* Update all trigrams (tiny differences in results)
* `franc-all`: add `ese` (Ese Ejja), `fkv` (Kven Finnish), `mfq` (Moba),
  `niu` (Niuean), `kqs` (Northern Kissi)
  • Loading branch information
wooorm committed Jan 27, 2020
1 parent 9da2814 commit 012bf50
Show file tree
Hide file tree
Showing 8 changed files with 628 additions and 609 deletions.
747 changes: 376 additions & 371 deletions packages/franc-all/data.json

Large diffs are not rendered by default.

7 changes: 6 additions & 1 deletion packages/franc-all/readme.md
Original file line number Diff line number Diff line change
Expand Up @@ -4,7 +4,7 @@

> Detect the language of text.
Built with support for 401 languages.
Built with support for 406 languages.

View the [monorepo](https://github.com/wooorm/franc) for more packages and
usage information.
Expand Down Expand Up @@ -383,6 +383,7 @@ This build supports the following languages:
| [`bis`](http://www-01.sil.org/iso639-3/documentation.asp?id=bis) | Bislama | 1k |
| [`orh`](http://www-01.sil.org/iso639-3/documentation.asp?id=orh) | Oroqen | 1k |
| [`ykg`](http://www-01.sil.org/iso639-3/documentation.asp?id=ykg) | Northern Yukaghir | 1k |
| [`ese`](http://www-01.sil.org/iso639-3/documentation.asp?id=ese) | Ese Ejja | 1k |
| [`nio`](http://www-01.sil.org/iso639-3/documentation.asp?id=nio) | Nganasan | 1k |
| [`cic`](http://www-01.sil.org/iso639-3/documentation.asp?id=cic) | Chickasaw | 1k |
| [`csa`](http://www-01.sil.org/iso639-3/documentation.asp?id=csa) | Chiltepec Chinantec | 1k |
Expand All @@ -407,11 +408,15 @@ This build supports the following languages:
| [`ina`](http://www-01.sil.org/iso639-3/documentation.asp?id=ina) | Interlingua (International Auxiliary Language Association) | unknown |
| [`kkh`](http://www-01.sil.org/iso639-3/documentation.asp?id=kkh) | Khün | unknown |
| [`ktu`](http://www-01.sil.org/iso639-3/documentation.asp?id=ktu) | Kituba (Democratic Republic of Congo) | unknown |
| [`fkv`](http://www-01.sil.org/iso639-3/documentation.asp?id=fkv) | Kven Finnish | unknown |
| [`lat`](http://www-01.sil.org/iso639-3/documentation.asp?id=lat) | Latin | unknown |
| [`glv`](http://www-01.sil.org/iso639-3/documentation.asp?id=glv) | Manx | unknown |
| [`mfq`](http://www-01.sil.org/iso639-3/documentation.asp?id=mfq) | Moba | unknown |
| [`mnw`](http://www-01.sil.org/iso639-3/documentation.asp?id=mnw) | Mon | unknown |
| [`mxi`](http://www-01.sil.org/iso639-3/documentation.asp?id=mxi) | Mozarabic | 0 |
| [`pcm`](http://www-01.sil.org/iso639-3/documentation.asp?id=pcm) | Nigerian Pidgin | unknown |
| [`niu`](http://www-01.sil.org/iso639-3/documentation.asp?id=niu) | Niuean | unknown |
| [`kqs`](http://www-01.sil.org/iso639-3/documentation.asp?id=kqs) | Northern Kissi | unknown |
| [`sey`](http://www-01.sil.org/iso639-3/documentation.asp?id=sey) | Secoya | unknown |
| [`ekk`](http://www-01.sil.org/iso639-3/documentation.asp?id=ekk) | Standard Estonian | unknown |
| [`lvs`](http://www-01.sil.org/iso639-3/documentation.asp?id=lvs) | Standard Latvian | unknown |
Expand Down
132 changes: 66 additions & 66 deletions packages/franc-min/data.json

Large diffs are not rendered by default.

328 changes: 164 additions & 164 deletions packages/franc/data.json

Large diffs are not rendered by default.

2 changes: 1 addition & 1 deletion readme.md
Original file line number Diff line number Diff line change
Expand Up @@ -9,7 +9,7 @@ Detect the language of text.

1. **franc** can support more languages<sup>(†)</sup> than any other
library
2. **franc** is packaged with support for [82][s], [187][m], or [401][l]
2. **franc** is packaged with support for [82][s], [187][m], or [406][l]
languages
3. **franc** has a CLI

Expand Down
15 changes: 12 additions & 3 deletions test/api.js
Original file line number Diff line number Diff line change
Expand Up @@ -131,7 +131,10 @@ test('franc.all()', function(t) {

t.deepEqual(
franc.all('פאר טסי', {minLength: 3}),
[['heb', 0], ['ydd', 0]],
[
['heb', 0],
['ydd', 0]
],
'should return `[["und", 1]]` without matches (2)'
)

Expand All @@ -155,7 +158,10 @@ test('franc.all()', function(t) {

t.deepEqual(
franc.all('the the the the the ').slice(0, 2),
[['sco', 1], ['eng', 0.9858799798285426]],
[
['sco', 1],
['eng', 0.9865523617414692]
],
'should work on weird values'
)

Expand Down Expand Up @@ -184,7 +190,10 @@ test('franc.all()', function(t) {

t.deepEqual(
franc.all('the', {minLength: 3}).slice(0, 2),
[['sco', 1], ['eng', 0.9988851727982163]],
[
['sco', 1],
['eng', 0.9988851727982163]
],
'should accept `minLength` (1)'
)

Expand Down
4 changes: 2 additions & 2 deletions test/cli.js
Original file line number Diff line number Diff line change
Expand Up @@ -81,7 +81,7 @@ test('cli', function(t) {
execa(cli, [flag, 'por,glg', 'O Brasil caiu 26 posições']).then(function(
result
) {
t.equal(result.stdout, 'src', flag)
t.equal(result.stdout, 'vec', flag)
},
t.ifErr)
})
Expand All @@ -100,7 +100,7 @@ test('cli', function(t) {
execa(cli, [flag, 'Alle menslike wesens word vry']).then(function(result) {
t.deepEqual(
result.stdout.split('\n').slice(0, 3),
['afr 1', 'nld 0.7532813781788351', 'nob 0.5412223133716161'],
['afr 1', 'nld 0.7569230769230769', 'nob 0.544'],
flag
)
}, t.ifErr)
Expand Down
2 changes: 1 addition & 1 deletion test/fixtures.json
Original file line number Diff line number Diff line change
Expand Up @@ -45,7 +45,7 @@
},
"deu_1996": {
"iso6393": "deu",
"fixture": "Da die Anerkennung der angeborenen Würde und der gleichen und unveräußerlichen Rechte aller Mitglieder der Gemeinschaft der Menschen die Grundlage von Freiheit, Gerechtigkeit und Frieden in der Welt bildet,\nda die Nichtanerkennung und Verachtung der Menschenrechte zu Akten der Barbarei geführt haben, die das Gewissen der Menschheit mit Empörung erfüllen, und da verkündet worden ist, dass einer Welt, in der die Menschen Rede- und Glaubensfreiheit und Freiheit von Furcht und Not genießen, das höchste Streben des Menschen gilt,\nda es notwendig ist, die Menschenrechte durch die Herrschaft des Rechtes zu schützen, damit der Mensch nicht gezwungen wird, als letztes Mittel zum Aufstand gegen Tyrannei und Unterdrückung zu greifen,\nda es notwendig ist, die Entwicklung freundschaftlicher Beziehungen zwischen den Nationen zu fördern,\nda die Völker der Vereinten Nationen in der Charta ihren Glauben an die grundlegenden Menschenrechte, an die Würde und den Wert der menschlichen Person und an die Gl"
"fixture": "Da die Anerkennung der angeborenen Würde und der gleichen und unveräußerlichen Rechte aller Mitglieder der Gemeinschaft der Menschen die Grundlage von Freiheit, Gerechtigkeit und Frieden in der Welt bildet,\nda die Nichtanerkennung und Verachtung der Menschenrechte zu Akten der Barbarei geführt haben, die das Gewissen der Menschheit mit Empörung erfüllen, und da verkündet worden ist, dass einer Welt, in der die Menschen Rede und Glaubensfreiheit und Freiheit von Furcht und Not genießen, das höchste Streben des Menschen gilt,\nda es notwendig ist, die Menschenrechte durch die Herrschaft des Rechtes zu schützen, damit der Mensch nicht gezwungen wird, als letztes Mittel zum Aufstand gegen Tyrannei und Unterdrückung zu greifen,\nda es notwendig ist, die Entwicklung freundschaftlicher Beziehungen zwischen den Nationen zu fördern,\nda die Völker der Vereinten Nationen in der Charta ihren Glauben an die grundlegenden Menschenrechte, an die Würde und den Wert der menschlichen Person und an die Gl"
},
"jav": {
"iso6393": "jav",
Expand Down

0 comments on commit 012bf50

Please sign in to comment.