test: add a test case for gb18030

2 files changed, 168 insertions, 0 deletions

diff --git a/tests/gb18030.txt b/tests/gb18030.txt
new file mode 100644
index 0000000..648c743
--- /dev/null
+++ b/tests/gb18030.txt
@@ -0,0 +1,84 @@
+岳阳楼记 
+　　　　　　　　　　　　　　　范仲淹 　　
+庆历四年春，
+滕子京谪守巴陵郡。
+越明年，
+政通人和，
+百废俱兴，
+乃重修岳阳楼， 
+增其旧制，
+刻唐贤今人诗赋于其上，
+属予作文以记之。
+
+予观夫巴陵胜状，
+在洞庭一湖。
+衔远山，
+吞长江，
+浩浩汤汤，
+横无际涯；
+朝晖夕阴，
+气象万千；
+此则岳阳楼之大观也，
+前人之述备矣。
+然则北通巫峡，
+南极潇湘，
+迁客骚人，
+多会于此，
+览物之情，
+得无异乎？
+
+若夫霪雨霏霏，
+连月不开；
+阴风怒号，
+浊浪排空；
+日星隐耀，
+山岳潜形；
+商旅不行，
+樯倾楫摧；
+薄暮冥冥，
+虎啸猿啼；
+登斯楼也，
+则有去国怀乡，
+忧谗畏讥，
+满目萧然，
+感极而悲者矣。
+
+至若春和景明，
+波澜不惊，
+上下天光，
+一碧万顷；
+沙鸥翔集，
+锦鳞游泳，
+岸芷汀兰，
+郁郁青青。
+而或长烟一空，
+皓月千里，
+浮光跃金，
+静影沉璧，
+渔歌互答，
+此乐何极！
+登斯楼也，
+则有心旷神怡，
+宠辱皆忘，
+把酒临风，
+其喜洋洋者矣。
+
+嗟夫！
+予尝求古仁人之心，
+或异二者之为，
+何哉？
+不以物喜，
+不以己悲，
+居庙堂之高，
+则忧其民；
+处江湖之远，
+则忧其君。
+是进亦忧，
+退亦忧；
+然则何时而乐耶？
+其必曰：
+先天下之忧而忧，
+后天下之乐而乐欤！
+噫！
+微斯人，
+吾谁与归！ 
diff --git a/tests/gb18030_utf8.txt b/tests/gb18030_utf8.txt
new file mode 100644
index 0000000..e03d0c6
--- /dev/null
+++ b/tests/gb18030_utf8.txt
@@ -0,0 +1,84 @@
+宀抽槼妤艰 
+銆�銆�銆�銆�銆�銆�銆�銆�銆�銆�銆�銆�銆�銆�銆�鑼冧徊娣� 銆�銆�
+搴嗗巻鍥涘勾鏄ワ紝
+婊曞瓙浜蔼瀹堝反闄甸儭銆�
+瓒婃槑骞达紝
+鏀块�氫汉鍜岋紝
+鐧惧簾淇卞叴锛�
+涔冮噸淇渤闃虫ゼ锛� 
+澧炲叾鏃у埗锛�
+鍒诲攼璐や粖浜鸿瘲璧嬩簬鍏朵笂锛�
+灞炰簣浣滄枃浠ヨ涔嬨��
+
+浜堣澶反闄佃儨鐘讹紝
+鍦ㄦ礊搴竴婀栥��
+琛旇繙灞憋紝
+鍚為暱姹燂紝
+娴╂旦姹ゆ堡锛�
+妯棤闄呮动锛�
+鏈濇櫀澶曢槾锛�
+姘旇薄涓囧崈锛�
+姝ゅ垯宀抽槼妤间箣澶ц涔燂紝
+鍓嶄汉涔嬭堪澶囩煟銆�
+鐒跺垯鍖楅�氬帆宄★紝
+鍗楁瀬娼囨箻锛�
+杩佸楠氫汉锛�
+澶氫細浜庢锛�
+瑙堢墿涔嬫儏锛�
+寰楁棤寮備箮锛�
+
+鑻ュか闇洦闇忛湉锛�
+杩炴湀涓嶅紑锛�
+闃撮鎬掑彿锛�
+娴婃氮鎺掔┖锛�
+鏃ユ槦闅愯��锛�
+灞卞渤娼滃舰锛�
+鍟嗘梾涓嶈锛�
+妯�炬カ鎽э紱
+钖勬毊鍐ュ啣锛�
+铏庡暩鐚垮暭锛�
+鐧绘柉妤间篃锛�
+鍒欐湁鍘诲浗鎬�涔★紝
+蹇ц皸鐣忚锛�
+婊＄洰钀х劧锛�
+鎰熸瀬鑰屾偛鑰呯煟銆�
+
+鑷宠嫢鏄ュ拰鏅槑锛�
+娉㈡緶涓嶆儕锛�
+涓婁笅澶╁厜锛�
+涓�纰т竾椤凤紱
+娌欓弗缈旈泦锛�
+閿﹂碁娓告吵锛�
+宀歌姺姹�鍏帮紝
+閮侀儊闈掗潚銆�
+鑰屾垨闀跨儫涓�绌猴紝
+鐨撴湀鍗冮噷锛�
+娴厜璺冮噾锛�
+闈欏奖娌夌挧锛�
+娓旀瓕浜掔瓟锛�
+姝や箰浣曟瀬锛�
+鐧绘柉妤间篃锛�
+鍒欐湁蹇冩椃绁炴�★紝
+瀹犺颈鐨嗗繕锛�
+鎶婇厭涓撮锛�
+鍏跺枩娲嬫磱鑰呯煟銆�
+
+鍡熷か锛�
+浜堝皾姹傚彜浠佷汉涔嬪績锛�
+鎴栧紓浜岃�呬箣涓猴紝
+浣曞搲锛�
+涓嶄互鐗╁枩锛�
+涓嶄互宸辨偛锛�
+灞呭簷鍫備箣楂橈紝
+鍒欏咖鍏舵皯锛�
+澶勬睙婀栦箣杩滐紝
+鍒欏咖鍏跺悰銆�
+鏄繘浜﹀咖锛�
+閫�浜﹀咖锛�
+鐒跺垯浣曟椂鑰屼箰鑰讹紵
+鍏跺繀鏇帮細
+鍏堝ぉ涓嬩箣蹇ц�屽咖锛�
+鍚庡ぉ涓嬩箣涔愯�屼箰娆わ紒
+鍣紒
+寰柉浜猴紝
+鍚捐皝涓庡綊锛�