Move test_examplefiles to new tests/lexers scheme.examplefiles

3 files changed, 554 insertions, 0 deletions

diff --git a/tests/lexers/aheui/example.txt b/tests/lexers/aheui/example.txt
new file mode 100644
index 00000000..dd9740ce
--- /dev/null
+++ b/tests/lexers/aheui/example.txt
@@ -0,0 +1,333 @@
+---input---
+우주메이저☆듀렉스전도사♀♂♀♂♀♂♀♂♀♂♀♂♀♂♀♂♀♂♀♂♀♂♀♂♀♂♀♂♀♂♀♂♀♂♀♂♀♂♀♂♀♂♀♂♀♂♀♂♀♂♀♂♀♂♀♂♀♂♀♂♀♂♀♂♀♂♀♂♀♂♀♂♀♂♀♡먊
+삶은밥과야근밥샤주세양♡밥사밥사밥사밥사밥사땅땅땅빵☆따밦내발따밦다빵맣밥밥밥내놔밥줘밥밥밥밗땅땅땅박밝땅땅딻타밟타맣밦밣따박타맣밦밣따박타맣밦밣따박타맣박빵빵빵빵따따따따맣삶몲
+Original Source by @harunene // Run it on AheuiChem(http://yoo2001818.github.io/AheuiChem/)
+https://gist.github.com/item4/ca870a63b390da6cc6f1
+
+---tokens---
+'우'           Comment
+'주'           Operator
+'메'           Comment
+'이'           Comment
+'저'           Operator
+'☆'           Comment
+'듀'           Operator
+'렉'           Comment
+'스'           Operator
+'전'           Operator
+'도'           Operator
+'사'           Operator
+'♀'           Comment
+'♂'           Comment
+'♀'           Comment
+'♂'           Comment
+'♀'           Comment
+'♂'           Comment
+'♀'           Comment
+'♂'           Comment
+'♀'           Comment
+'♂'           Comment
+'♀'           Comment
+'♂'           Comment
+'♀'           Comment
+'♂'           Comment
+'♀'           Comment
+'♂'           Comment
+'♀'           Comment
+'♂'           Comment
+'♀'           Comment
+'♂'           Comment
+'♀'           Comment
+'♂'           Comment
+'♀'           Comment
+'♂'           Comment
+'♀'           Comment
+'♂'           Comment
+'♀'           Comment
+'♂'           Comment
+'♀'           Comment
+'♂'           Comment
+'♀'           Comment
+'♂'           Comment
+'♀'           Comment
+'♂'           Comment
+'♀'           Comment
+'♂'           Comment
+'♀'           Comment
+'♂'           Comment
+'♀'           Comment
+'♂'           Comment
+'♀'           Comment
+'♂'           Comment
+'♀'           Comment
+'♂'           Comment
+'♀'           Comment
+'♂'           Comment
+'♀'           Comment
+'♂'           Comment
+'♀'           Comment
+'♂'           Comment
+'♀'           Comment
+'♂'           Comment
+'♀'           Comment
+'♂'           Comment
+'♀'           Comment
+'♂'           Comment
+'♀'           Comment
+'♂'           Comment
+'♀'           Comment
+'♂'           Comment
+'♀'           Comment
+'♂'           Comment
+'♀'           Comment
+'♂'           Comment
+'♀'           Comment
+'♂'           Comment
+'♀'           Comment
+'♂'           Comment
+'♀'           Comment
+'♂'           Comment
+'♀'           Comment
+'♂'           Comment
+'♀'           Comment
+'♂'           Comment
+'♀'           Comment
+'♡'           Comment
+'먊'           Operator
+'\n'          Text
+
+'삶'           Operator
+'은'           Comment
+'밥'           Operator
+'과'           Comment
+'야'           Comment
+'근'           Comment
+'밥'           Operator
+'샤'           Operator
+'주'           Operator
+'세'           Comment
+'양'           Comment
+'♡'           Comment
+'밥'           Operator
+'사'           Operator
+'밥'           Operator
+'사'           Operator
+'밥'           Operator
+'사'           Operator
+'밥'           Operator
+'사'           Operator
+'밥'           Operator
+'사'           Operator
+'땅'           Operator
+'땅'           Operator
+'땅'           Operator
+'빵'           Operator
+'☆'           Comment
+'따'           Operator
+'밦'           Operator
+'내'           Comment
+'발'           Operator
+'따'           Operator
+'밦'           Operator
+'다'           Operator
+'빵'           Operator
+'맣'           Operator
+'밥'           Operator
+'밥'           Operator
+'밥'           Operator
+'내'           Comment
+'놔'           Comment
+'밥'           Operator
+'줘'           Comment
+'밥'           Operator
+'밥'           Operator
+'밥'           Operator
+'밗'           Operator
+'땅'           Operator
+'땅'           Operator
+'땅'           Operator
+'박'           Operator
+'밝'           Operator
+'땅'           Operator
+'땅'           Operator
+'딻'           Operator
+'타'           Operator
+'밟'           Operator
+'타'           Operator
+'맣'           Operator
+'밦'           Operator
+'밣'           Operator
+'따'           Operator
+'박'           Operator
+'타'           Operator
+'맣'           Operator
+'밦'           Operator
+'밣'           Operator
+'따'           Operator
+'박'           Operator
+'타'           Operator
+'맣'           Operator
+'밦'           Operator
+'밣'           Operator
+'따'           Operator
+'박'           Operator
+'타'           Operator
+'맣'           Operator
+'박'           Operator
+'빵'           Operator
+'빵'           Operator
+'빵'           Operator
+'빵'           Operator
+'따'           Operator
+'따'           Operator
+'따'           Operator
+'따'           Operator
+'맣'           Operator
+'삶'           Operator
+'몲'           Operator
+'\n'          Text
+
+'O'           Comment
+'r'           Comment
+'i'           Comment
+'g'           Comment
+'i'           Comment
+'n'           Comment
+'a'           Comment
+'l'           Comment
+' '           Comment
+'S'           Comment
+'o'           Comment
+'u'           Comment
+'r'           Comment
+'c'           Comment
+'e'           Comment
+' '           Comment
+'b'           Comment
+'y'           Comment
+' '           Comment
+'@'           Comment
+'h'           Comment
+'a'           Comment
+'r'           Comment
+'u'           Comment
+'n'           Comment
+'e'           Comment
+'n'           Comment
+'e'           Comment
+' '           Comment
+'/'           Comment
+'/'           Comment
+' '           Comment
+'R'           Comment
+'u'           Comment
+'n'           Comment
+' '           Comment
+'i'           Comment
+'t'           Comment
+' '           Comment
+'o'           Comment
+'n'           Comment
+' '           Comment
+'A'           Comment
+'h'           Comment
+'e'           Comment
+'u'           Comment
+'i'           Comment
+'C'           Comment
+'h'           Comment
+'e'           Comment
+'m'           Comment
+'('           Comment
+'h'           Comment
+'t'           Comment
+'t'           Comment
+'p'           Comment
+':'           Comment
+'/'           Comment
+'/'           Comment
+'y'           Comment
+'o'           Comment
+'o'           Comment
+'2'           Comment
+'0'           Comment
+'0'           Comment
+'1'           Comment
+'8'           Comment
+'1'           Comment
+'8'           Comment
+'.'           Comment
+'g'           Comment
+'i'           Comment
+'t'           Comment
+'h'           Comment
+'u'           Comment
+'b'           Comment
+'.'           Comment
+'i'           Comment
+'o'           Comment
+'/'           Comment
+'A'           Comment
+'h'           Comment
+'e'           Comment
+'u'           Comment
+'i'           Comment
+'C'           Comment
+'h'           Comment
+'e'           Comment
+'m'           Comment
+'/'           Comment
+')'           Comment
+'\n'          Text
+
+'h'           Comment
+'t'           Comment
+'t'           Comment
+'p'           Comment
+'s'           Comment
+':'           Comment
+'/'           Comment
+'/'           Comment
+'g'           Comment
+'i'           Comment
+'s'           Comment
+'t'           Comment
+'.'           Comment
+'g'           Comment
+'i'           Comment
+'t'           Comment
+'h'           Comment
+'u'           Comment
+'b'           Comment
+'.'           Comment
+'c'           Comment
+'o'           Comment
+'m'           Comment
+'/'           Comment
+'i'           Comment
+'t'           Comment
+'e'           Comment
+'m'           Comment
+'4'           Comment
+'/'           Comment
+'c'           Comment
+'a'           Comment
+'8'           Comment
+'7'           Comment
+'0'           Comment
+'a'           Comment
+'6'           Comment
+'3'           Comment
+'b'           Comment
+'3'           Comment
+'9'           Comment
+'0'           Comment
+'d'           Comment
+'a'           Comment
+'6'           Comment
+'c'           Comment
+'c'           Comment
+'6'           Comment
+'f'           Comment
+'1'           Comment
+'\n'          Text
diff --git a/tests/lexers/aheui/example2.txt b/tests/lexers/aheui/example2.txt
new file mode 100644
index 00000000..f1a37607
--- /dev/null
+++ b/tests/lexers/aheui/example2.txt
@@ -0,0 +1,42 @@
+---input---
+바싹반박나싼순
+뿌멓떠벌번멍뻐
+쌀삭쌀살다순옭
+어어선썬설썩옭
+
+---tokens---
+'바'           Operator
+'싹'           Operator
+'반'           Operator
+'박'           Operator
+'나'           Operator
+'싼'           Operator
+'순'           Operator
+'\n'          Text
+
+'뿌'           Operator
+'멓'           Operator
+'떠'           Operator
+'벌'           Operator
+'번'           Operator
+'멍'           Operator
+'뻐'           Operator
+'\n'          Text
+
+'쌀'           Operator
+'삭'           Operator
+'쌀'           Operator
+'살'           Operator
+'다'           Operator
+'순'           Operator
+'옭'           Comment
+'\n'          Text
+
+'어'           Comment
+'어'           Comment
+'선'           Operator
+'썬'           Operator
+'설'           Operator
+'썩'           Operator
+'옭'           Comment
+'\n'          Text
diff --git a/tests/lexers/aheui/example3.txt b/tests/lexers/aheui/example3.txt
new file mode 100644
index 00000000..97cc31a1
--- /dev/null
+++ b/tests/lexers/aheui/example3.txt
@@ -0,0 +1,179 @@
+---input---
+밤밣따빠밣밟따뿌
+빠맣파빨받밤뚜뭏
+돋밬탕빠맣붏두붇
+볻뫃박발뚷투뭏붖
+뫃도뫃희멓뭏뭏붘
+뫃봌토범더벌뿌뚜
+뽑뽀멓멓더벓뻐뚠
+뽀덩벐멓뻐덕더벅
+
+https://github.com/aheui/snippets/blob/master/hello-world/hello-world.puzzlet.aheui
+
+---tokens---
+'밤'           Operator
+'밣'           Operator
+'따'           Operator
+'빠'           Operator
+'밣'           Operator
+'밟'           Operator
+'따'           Operator
+'뿌'           Operator
+'\n'          Text
+
+'빠'           Operator
+'맣'           Operator
+'파'           Operator
+'빨'           Operator
+'받'           Operator
+'밤'           Operator
+'뚜'           Operator
+'뭏'           Operator
+'\n'          Text
+
+'돋'           Operator
+'밬'           Operator
+'탕'           Operator
+'빠'           Operator
+'맣'           Operator
+'붏'           Operator
+'두'           Operator
+'붇'           Operator
+'\n'          Text
+
+'볻'           Operator
+'뫃'           Operator
+'박'           Operator
+'발'           Operator
+'뚷'           Operator
+'투'           Operator
+'뭏'           Operator
+'붖'           Operator
+'\n'          Text
+
+'뫃'           Operator
+'도'           Operator
+'뫃'           Operator
+'희'           Operator
+'멓'           Operator
+'뭏'           Operator
+'뭏'           Operator
+'붘'           Operator
+'\n'          Text
+
+'뫃'           Operator
+'봌'           Operator
+'토'           Operator
+'범'           Operator
+'더'           Operator
+'벌'           Operator
+'뿌'           Operator
+'뚜'           Operator
+'\n'          Text
+
+'뽑'           Operator
+'뽀'           Operator
+'멓'           Operator
+'멓'           Operator
+'더'           Operator
+'벓'           Operator
+'뻐'           Operator
+'뚠'           Operator
+'\n'          Text
+
+'뽀'           Operator
+'덩'           Operator
+'벐'           Operator
+'멓'           Operator
+'뻐'           Operator
+'덕'           Operator
+'더'           Operator
+'벅'           Operator
+'\n'          Text
+
+'\n'          Text
+
+'h'           Comment
+'t'           Comment
+'t'           Comment
+'p'           Comment
+'s'           Comment
+':'           Comment
+'/'           Comment
+'/'           Comment
+'g'           Comment
+'i'           Comment
+'t'           Comment
+'h'           Comment
+'u'           Comment
+'b'           Comment
+'.'           Comment
+'c'           Comment
+'o'           Comment
+'m'           Comment
+'/'           Comment
+'a'           Comment
+'h'           Comment
+'e'           Comment
+'u'           Comment
+'i'           Comment
+'/'           Comment
+'s'           Comment
+'n'           Comment
+'i'           Comment
+'p'           Comment
+'p'           Comment
+'e'           Comment
+'t'           Comment
+'s'           Comment
+'/'           Comment
+'b'           Comment
+'l'           Comment
+'o'           Comment
+'b'           Comment
+'/'           Comment
+'m'           Comment
+'a'           Comment
+'s'           Comment
+'t'           Comment
+'e'           Comment
+'r'           Comment
+'/'           Comment
+'h'           Comment
+'e'           Comment
+'l'           Comment
+'l'           Comment
+'o'           Comment
+'-'           Comment
+'w'           Comment
+'o'           Comment
+'r'           Comment
+'l'           Comment
+'d'           Comment
+'/'           Comment
+'h'           Comment
+'e'           Comment
+'l'           Comment
+'l'           Comment
+'o'           Comment
+'-'           Comment
+'w'           Comment
+'o'           Comment
+'r'           Comment
+'l'           Comment
+'d'           Comment
+'.'           Comment
+'p'           Comment
+'u'           Comment
+'z'           Comment
+'z'           Comment
+'l'           Comment
+'e'           Comment
+'t'           Comment
+'.'           Comment
+'a'           Comment
+'h'           Comment
+'e'           Comment
+'u'           Comment
+'i'           Comment
+'\n'          Text