🐛

CHANGELOG.md

@@ -4,6 +4,11 @@
 
 * Updated some dependencies. Now Nekomata can be built with GHC 9.8.1.
 * Fixed a bug in printing truncated results.
+* Now characters are internally represented as `Word8`s instead of `Char`s.
+
+### Breaking changes
+
+* Fixed a bug in comparing characters. Now characters are compared by their code points in Nekomata's custom code page instead of Unicode.
 
 ## 0.5.1.0 -- 2023-09-27
 

analysis/corpus.txt

@@ -290,3 +290,7 @@ Jĭ?∑haṀ
 ĎSᵉti¦
 Jᵐ{x:ᵒ≈>~}aş#
 →r$ÇƆ/←ŗ0ɔ$ᵑ∆
+1D∑
+rjŢ
+ŋ∑Aaṁ
+ĕ3¦¿ĭÐŤʳXH"c"I

analysis/freq_1gram.txt

@@ -1,19 +1,19 @@
 { : 67
 $ : 48
 : : 45
-∑ : 39
+∑ : 41
 = : 38
 + : 36
 ᵐ : 32
 ← : 29
 → : 28
 R : 28
 * : 27
+a : 26
 } : 26
-a : 25
+1 : 23
 - : 23
-1 : 22
-j : 21
+j : 22
 ᵉ : 20
 ç : 20
 x : 20
@@ -22,54 +22,55 @@ x : 20
 o : 18
 ↔ : 18
 # : 17
+3 : 17
 u : 17
 2 : 17
-3 : 16
+ĭ : 16
 p : 16
 ~ : 16
 ↕ : 15
-ĭ : 15
 l : 15
 ᵖ : 15
 Ṁ : 15
 Ƃ : 14
+Ð : 14
 S : 13
 đ : 13
 ∫ : 13
 t : 13
 Ň : 13
-Ð : 13
+" : 12
 ᶦ : 12
 N : 12
 ½ : 12
+Ť : 12
 Ɔ : 12
 ᵑ : 12
 Ɗ : 12
 ; : 12
 J : 11
 Q : 11
-Ť : 11
 ᶻ : 11
 ≡ : 11
 Z : 11
 ĉ : 11
 _ : 11
 L : 11
-" : 10
 < : 10
+Ţ : 10
 ᵃ : 10
+r : 10
+ŋ : 10
 ? : 10
 Ë : 10
+ṁ : 10
 ∏ : 10
 ʷ : 9
 z : 9
 ˡ : 9
-Ţ : 9
-r : 9
-ŋ : 9
+c : 9
 ᵚ : 9
 ᶠ : 9
-ṁ : 9
 ± : 9
 P : 8
 ᶜ : 8
@@ -81,7 +82,6 @@ E : 8
 ž : 8
 ≥ : 8
 ‼ : 8
-c : 8
 % : 8
 ŗ : 8
 ƒ : 8
@@ -94,6 +94,7 @@ f : 7
 £ : 7
 / : 7
 ɗ : 7
+¦ : 7
 Ĉ : 7
 ∙ : 7
 ä : 7
@@ -107,42 +108,43 @@ O : 7
 ∕ : 6
 Ä : 6
 Ø : 6
-¦ : 6
 ş : 6
+¿ : 6
 i : 6
 B : 6
 ∩ : 6
 Ř : 6
 į : 6
 ¢ : 6
 ƀ : 5
+I : 5
 y : 5
 Ö : 5
+H : 5
 d : 5
 Ď : 5
 ≤ : 5
 Ç : 5
+ʳ : 5
 Ĭ : 5
 ɔ : 5
 µ : 5
-¿ : 5
+ĕ : 5
 h : 5
 8 : 5
 √ : 5
 5 : 5
 0 : 5
 b : 5
-I : 4
-H : 4
+A : 5
 ŧ : 4
-ʳ : 4
 U : 4
 G : 4
 k : 4
 F : 4
 ƥ : 4
 s : 4
-ĕ : 4
+D : 4
 M : 4
 > : 4
 ÷ : 4
@@ -151,15 +153,14 @@ M : 4
 ᵈ : 4
 ň : 4
 ᵋ : 4
-A : 4
 ĝ : 3
 Ṃ : 3
 ř : 3
 Y : 3
 T : 3
 Ħ : 3
-D : 3
 7 : 3
+X : 3
 ƶ : 3
 & : 3
 ≠ : 3
@@ -170,7 +171,6 @@ v : 3
 Ƥ : 2
 g : 2
 ^ : 2
-X : 2
 K : 2
 6 : 2
 m : 2

analysis/freq_2gram.txt

@@ -53,6 +53,7 @@ u# : 3
 pN : 3
 {ˣ : 3
 {į : 3
+aṁ : 3
 ↕ũ : 3
 x: : 3
 +} : 3
@@ -108,6 +109,7 @@ qᵗ : 2
 ;ᶜ : 2
 ᶜt : 2
 :Ĭ : 2
+ÐŤ : 2
 ∑≡ : 2
 R~ : 2
 ĉ~ : 2
@@ -131,10 +133,12 @@ Qƥ : 2
 +1 : 2
 12 : 2
 {- : 2
+3¦ : 2
 {≈ : 2
 Ë: : 2
 ᵒ& : 2
 &Þ : 2
+ŋ∑ : 2
 ĉᵐ : 2
 Þ½ : 2
 Sđ : 2
@@ -143,6 +147,7 @@ Sđ : 2
 ;$ : 2
 N, : 2
 ½$ : 2
+ĭÐ : 2
 oĉ : 2
 oĭ : 2
 ĉ# : 2
@@ -154,7 +159,6 @@ $đ : 2
 _= : 2
 Ṁ→ : 2
 -ň : 2
-aṁ : 2
 0* : 2
 x= : 2
 $ᶻ : 2
@@ -196,9 +200,11 @@ $L : 2
 RS : 2
 += : 2
 ɔ$ : 2
+jŢ : 2
 3~ : 2
 ~ᵑ : 2
 ᵋ∩ : 2
+rj : 2
 ↕∆ : 2
 ←_ : 2
 :, : 2
@@ -330,7 +336,6 @@ tᶻ : 1
 Ɗ: : 1
 Ĭ; : 1
 ;Ð : 1
-ÐŤ : 1
 Ť∑ : 1
 Fƒ : 1
 ƒ# : 1
@@ -458,7 +463,6 @@ $∑ : 1
 %→ : 1
 -Z : 1
 Z3 : 1
-3¦ : 1
 RË : 1
 Ë3 : 1
 3÷ : 1
@@ -473,7 +477,6 @@ Ođ : 1
 ≈∑ : 1
 ∑Ƶ : 1
 Þ£ : 1
-ŋ∑ : 1
 ∑ũ : 1
 ᵐ∫ : 1
 ∫j : 1
@@ -506,7 +509,6 @@ _∑ : 1
 *Ɗ : 1
 Ɗa : 1
 jĭ : 1
-ĭÐ : 1
 Ðɗ : 1
 ɗ$ : 1
 Ţ≡ : 1
@@ -838,7 +840,6 @@ tI : 1
 I} : 1
 }ṁ : 1
 Sj : 1
-jŢ : 1
 Ţ½ : 1
 ađ : 1
 R↔ : 1
@@ -941,7 +942,6 @@ RF : 1
 F£ : 1
 £b : 1
 ↕r : 1
-rj : 1
 j@ : 1
 @ũ : 1
 ᵚp : 1
@@ -1208,3 +1208,17 @@ r$ : 1
 ŗ0 : 1
 0ɔ : 1
 ᵑ∆ : 1
+1D : 1
+D∑ : 1
+∑A : 1
+Aa : 1
+ĕ3 : 1
+¦¿ : 1
+¿ĭ : 1
+Ťʳ : 1
+ʳX : 1
+XH : 1
+H" : 1
+"c : 1
+c" : 1
+"I : 1

analysis/freq_3gram.txt

@@ -1196,3 +1196,20 @@ $ÇƆ : 1
 0ɔ$ : 1
 ɔ$ᵑ : 1
 $ᵑ∆ : 1
+1D∑ : 1
+rjŢ : 1
+ŋ∑A : 1
+∑Aa : 1
+Aaṁ : 1
+ĕ3¦ : 1
+3¦¿ : 1
+¦¿ĭ : 1
+¿ĭÐ : 1
+ĭÐŤ : 1
+ÐŤʳ : 1
+ŤʳX : 1
+ʳXH : 1
+XH" : 1
+H"c : 1
+"c" : 1
+c"I : 1

analysis/freq_4gram.txt

@@ -972,3 +972,16 @@ $ÇƆ/ : 1
 ŗ0ɔ$ : 1
 0ɔ$ᵑ : 1
 ɔ$ᵑ∆ : 1
+ŋ∑Aa : 1
+∑Aaṁ : 1
+ĕ3¦¿ : 1
+3¦¿ĭ : 1
+¦¿ĭÐ : 1
+¿ĭÐŤ : 1
+ĭÐŤʳ : 1
+ÐŤʳX : 1
+ŤʳXH : 1
+ʳXH" : 1
+XH"c : 1
+H"c" : 1
+"c"I : 1

analysis/freq_5gram.txt

@@ -765,3 +765,14 @@ $ÇƆ/← : 1
 ←ŗ0ɔ$ : 1
 ŗ0ɔ$ᵑ : 1
 0ɔ$ᵑ∆ : 1
+ŋ∑Aaṁ : 1
+ĕ3¦¿ĭ : 1
+3¦¿ĭÐ : 1
+¦¿ĭÐŤ : 1
+¿ĭÐŤʳ : 1
+ĭÐŤʳX : 1
+ÐŤʳXH : 1
+ŤʳXH" : 1
+ʳXH"c : 1
+XH"c" : 1
+H"c"I : 1

analysis/particles.txt

@@ -1,6 +1,6 @@
 particle : with "{" / total
 ᵈ : 0 / 4
-ʳ : 0 / 4
+ʳ : 0 / 5
 ˣ : 0 / 4
 ᶻ : 0 / 11
 ᶾ : 0 / 1