diff --git a/backend/analysis/conftest.py b/backend/analysis/conftest.py index 7982162e..82fb8669 100644 --- a/backend/analysis/conftest.py +++ b/backend/analysis/conftest.py @@ -36,7 +36,13 @@ def stap_category(db): @pytest.fixture def asta_category(db): - obj = MethodCategory.objects.create(name='ASTA', zc_embeddings=False, levels=["SampleGrootte", "MLU", "Taalmaat", "Lemma", "Grammaticale fout", "QA"], marking_postcodes=["[+ G]"]) + obj = MethodCategory.objects.create(name='ASTA', zc_embeddings=False, levels=[ + "Samplegrootte", + "MLU", + "Taalmaat", + "Foutenanalyse", + "Lemma" + ], marking_postcodes=["[+ G]"]) yield obj obj.delete() @@ -59,7 +65,7 @@ def tarsp_method(db, tarsp_category, method_dir): @pytest.fixture def asta_method(db, asta_category, method_dir): - file = glob.glob(f'{method_dir}/ASTA Index Current.xlsx')[0] + file = glob.glob(f'{method_dir}/ASTA_Index_Current.xlsx')[0] with open(file, 'rb') as f: wrapped_file = File(f) instance = AssessmentMethod(name='asta_test_method', category=asta_category) diff --git a/backend/analysis/fixtures/method_categories.json b/backend/analysis/fixtures/method_categories.json index ef316812..57419650 100644 --- a/backend/analysis/fixtures/method_categories.json +++ b/backend/analysis/fixtures/method_categories.json @@ -14,7 +14,13 @@ "fields": { "name": "ASTA", "zc_embeddings": false, - "levels": ["SampleGrootte", "MLU", "Taalmaat", "Lemma", "Grammaticale fout", "QA"], + "levels": [ + "Samplegrootte", + "MLU", + "Taalmaat", + "Foutenanalyse", + "Lemma" + ], "marking_postcodes": ["[+ G]"] } }, diff --git a/backend/requirements.txt b/backend/requirements.txt index 15255925..eaed3959 100644 --- a/backend/requirements.txt +++ b/backend/requirements.txt @@ -210,7 +210,7 @@ requests==2.28.1 # spacy requests-oauthlib==1.3.1 # via django-allauth -sastadev==0.1.3 +sastadev==0.1.4 # via # -r requirements.in # auchann diff --git a/backend/analysis/annotations/test_files/sample_1.cha b/backend/test_files/sample_1.cha similarity index 100% rename from backend/analysis/annotations/test_files/sample_1.cha rename to backend/test_files/sample_1.cha diff --git a/backend/analysis/annotations/test_files/sample_1.xml b/backend/test_files/sample_1.xml similarity index 100% rename from backend/analysis/annotations/test_files/sample_1.xml rename to backend/test_files/sample_1.xml diff --git a/backend/test_files/sample_16.cha b/backend/test_files/sample_16.cha index f97ce88e..4a85532f 100644 --- a/backend/test_files/sample_16.cha +++ b/backend/test_files/sample_16.cha @@ -37,11 +37,13 @@ %xsid: 12 *PMA: en en toen ik zo ver weer was ben ik naar hier gekomen %xsid: 13 -*PMA: dat heet de uh ZORGINSTELLING1 +*PMA: dat heet de uh Rijnstate %xsid: 14 +%xano: 15|ZORGINSTELLING1|Rijnstate *INV: ga ik nu een ander uh vraag stellen wat was uw beroep -*PMA: uh (..) BEROEP1 +*PMA: uh (..) chirurgh %xsid: 15 +%xano: 8|BEROEP1|chirurgh *INV: oke kunt u daar wat meer over vertellen *PMA: ja is heel erg leuk ja %xsid: 16 @@ -81,8 +83,9 @@ %xsid: 30 *PMA: uh kinderen met beperking %xsid: 31 -*PMA: dat was dicht bij de WERKINSTELLING1 +*PMA: dat was dicht bij de Rijnstate %xsid: 32 +%xano: 21|WERKINSTELLING1|Rijnstate *INV: ja ja en dat was ook een dagopvang *PMA: (.) ja (.) ja ik weet het niet %xsid: 33 @@ -97,8 +100,9 @@ %xsid: 37 *PMA: dat heb ik net nog gelezen (..) %xsid: 38 -*PMA: WERKINSTELLING2 +*PMA: Vogellanden %xsid: 39 +%xano: 0|WERKINSTELLING2|Vogellanden *INV: ja *PMA: veel geweest voor uh %xsid: 40 diff --git a/backend/test_files/sample_16.xml b/backend/test_files/sample_16.xml index 5a6258f4..dfce4d30 100644 --- a/backend/test_files/sample_16.xml +++ b/backend/test_files/sample_16.xml @@ -1,34 +1,35 @@ - - + + - + - - + + - + + + + + + + + + + - - - - - - - - - - - - - - - + + + + + + + + + - - @@ -38,9 +39,9 @@ - + - + @@ -57,15 +58,15 @@ - + - + - + @@ -82,56 +83,58 @@ - - - + + - - - + + + - - + + - + - + - - - + + + - + - - + + - - + + - + - + - ja uh ik vind het beetje moeilijk om het goed te vertellen want ik heb een ongeluk gehad + ja uh ik vind het beetje moeilijk om het goed te vertellen want ik heb een ongeluk gehad + Q#ng1699535914|ik vind het beetje moeilijk om het goed te vertellen want ik heb een ongeluk gehad|1|1|-12.662841177789993 + + - + - + @@ -149,7 +152,7 @@ - + @@ -157,13 +160,13 @@ - + - en daarvan weet ik niks - - + en daarvan weet ik niks + + oke @@ -172,9 +175,9 @@ - + - + @@ -191,15 +194,15 @@ - + - + - + @@ -217,14 +220,14 @@ - + - + @@ -238,15 +241,15 @@ - ik heb zes weken weet ik helemaal niets + ik heb zes weken weet ik helemaal niets - + - + @@ -263,35 +266,37 @@ - - - - + + + - + - - - + + + - + - + - en uh nu krijg ik te horen + en uh nu krijg ik te horen + Q#ng1699535921|en nu krijg ik te horen|1|1|0.1923325752099997 + + - + - + @@ -309,7 +314,7 @@ - + @@ -322,15 +327,15 @@ - en dat vind ik wel lastig + en dat vind ik wel lastig - + - + @@ -347,39 +352,41 @@ - - - - - + + + + - - + + - - - + + + - - en verder ja het gaat redelijk denk ik - + en verder ja het gaat redelijk denk ik + Q#ng1699535923|en verder het gaat redelijk denk ik|1|2|3.4648723212599988 + + + - + - - + + @@ -392,9 +399,9 @@ - + - + @@ -411,15 +418,15 @@ - + - + - + @@ -436,47 +443,47 @@ - - - + + - - + + - + - + - - + + - + - - - - - + + + - + - oh ja sorry ja ik ben eerst uh naar een ziekenhuis geweest een aantal weken + oh ja sorry ja ik ben eerst uh naar een ziekenhuis geweest een aantal weken + Q#ng1699535924|ik ben eerst naar een ziekenhuis geweest een aantal weken|1|1|-8.04287764489 + + - + - + @@ -493,37 +500,39 @@ - - - + + - - - + + + - + - - + + - - + + - + - toen een aantal weken in een een iets van zorg + toen een aantal weken in een een iets van zorg + Q#ng1699535925|toen een aantal weken in een iets van zorg|1|2|2.6670418012899995 + + - + - + @@ -540,34 +549,33 @@ - - - - - - - - - + + + + + + + + + + - - - - - - - + + - ik weet niet uh in uh ( . ) + ik weet niet uh in uh( . ) + Q#ng1699535927|ik weet niet in uh( . )|1|1|-1.5799665774000007 + + - + - + @@ -585,19 +593,21 @@ - - - - + + + - - - + + + - uh buiten is Breda - - + uh buiten is Breda + Q#ng1699535929|buiten is Breda|1|1|1.046710481759999 + + + + oke @@ -606,9 +616,9 @@ - + - + @@ -625,15 +635,15 @@ - + - + - + @@ -651,7 +661,7 @@ - + @@ -663,15 +673,15 @@ - niet zo ver denk ik + niet zo ver denk ik - + - + @@ -689,7 +699,7 @@ - + @@ -697,15 +707,15 @@ - ik weet niet + ik weet niet - + - + @@ -722,47 +732,49 @@ - - - + + - + - - + + - + - + - - + + - - + + - - + + - + - en en toen ik zo ver weer was ben ik naar hier gekomen + en en toen ik zo ver weer was ben ik naar hier gekomen + Q#ng1699535933|en toen ik zo ver weer was ben ik naar hier gekomen|1|1|-6.924020875550005 + + - - - + + + @@ -778,24 +790,27 @@ + - - - - + + + - - + + - - + + - dat heet de uh ZORGINSTELLING1 - + dat heet de uh Rijnstate + Q#ng1699535934|dat heet de Rijnstaten|1|1|-0.4477186049599994 + + + - + @@ -830,13 +845,13 @@ - + - + - + - + @@ -849,19 +864,19 @@ - + - - - + + + - + - + @@ -873,15 +888,18 @@ + - - - - - + + + + - uh BEROEP1 - + uh chirurgh + Q#ng1699535937|chirurgh|1|1|0.5886019999999997 + + + + - + - + - + - + @@ -953,35 +971,37 @@ - - - - - - + + + + + - - + + - + - - ja is heel erg leuk ja + + ja is heel erg leuk ja + Q#ng1699535938|is heel erg leuk|1|1|-4.78336550295 + + - + - + - + - + @@ -995,40 +1015,40 @@ - + - + - + - - - - - + + + + + - kinderen in de groep van tien tot twaalf + kinderen in de groep van tien tot twaalf - + - + - + - + @@ -1042,39 +1062,39 @@ - + - + - + - - - - - + - - + + + + + + - + - + - en ze zijn de leeftijd is van nul tot bijna drie - - + en ze zijn de leeftijd is van nul tot bijna drie + + ja @@ -1083,13 +1103,13 @@ - + - + - + - + @@ -1102,19 +1122,19 @@ - + - + - + - + - + @@ -1128,7 +1148,7 @@ - + @@ -1157,9 +1177,9 @@ - en als ze ouder worden dan gaan ze naar de andere groep - - + en als ze ouder worden dan gaan ze naar de andere groep + + ja @@ -1168,13 +1188,13 @@ - + - + - + - + @@ -1187,19 +1207,19 @@ - + - + - + - + - + @@ -1212,46 +1232,48 @@ - - - + + - + - - - + + + - - + + - - - - - - + + + + + + - + - en is ook leuk kon kinderen zo gezellig zo lief zo fijn ja + en is ook leuk kon kinderen zo gezellig zo lief zo fijn ja + Q#ng1699535947|en is ook leuk kon kinderen zo gezellig zo lief zo fijn|1|2|5.555597863169984 + + - + - + - + - + @@ -1264,40 +1286,42 @@ - - - + + - + - - + + - - + + - + - ja en ook ouders heel goed contact + ja en ook ouders heel goed contact + Q#ng1699535949|en ook ouders heel goed contact|1|1|2.6244477218799966 + + - + - + - + - + @@ -1310,32 +1334,34 @@ - - - + + - - + + - + - ki kinderen worden gebracht + ki kinderen worden gebracht + Q#ng1699535951|kinderen worden gebracht|1|1|-1.4226060098999993 + + - + - + - + - + @@ -1348,45 +1374,47 @@ - - - + + - + - - + + - - + + - + - + - - + + - + - en uh dan is het contact goed met de ouders + en uh dan is het contact goed met de ouders + Q#ng1699535952|en dan is het contact goed met de ouders|1|1|3.835047491639995 + + - + - + - + - + @@ -1400,7 +1428,7 @@ - + @@ -1421,9 +1449,9 @@ - en ook eind van de middag weer opgehaald - - + en ook eind van de middag weer opgehaald + + ja @@ -1432,13 +1460,13 @@ - + - + - + - + @@ -1451,19 +1479,19 @@ - + - + - + - + - + @@ -1476,35 +1504,37 @@ - - - + + - + - - + + - - + + - en kinderen zijn ja fijn lief + en kinderen zijn ja fijn lief + Q#ng1699535956|en kinderen zijn fijn lief|1|1|3.3756422091800005 + + - + - + - + - + @@ -1517,40 +1547,42 @@ - - - + + - + - - - - + + + + - - + + - - + + - + - en voelen zich wel uh voelen zich wel gelukkig bij ons + en voelen zich wel uh voelen zich wel gelukkig bij ons + Q#ng1699535957|en voelen zich wel gelukkig bij ons|1|1|-0.11310258963000253 + + - + - + - + - + @@ -1564,21 +1596,21 @@ - + - + - spelen graag - + spelen graag + - + @@ -1595,13 +1627,13 @@ - + - + - + - + @@ -1614,19 +1646,19 @@ - + - + - + - + - + @@ -1639,31 +1671,35 @@ - - - + + - - + + - - + + - - + + - oo uh uh ik werk drie dagen - + oo uh uh ik werk drie dagen + Q#ng1699535960|ik werk drie dagen|1|1|-0.06668924663999931 + + + - - + + - - + lange dagen denk ik @@ -1672,13 +1708,13 @@ - + - + - + - + @@ -1691,19 +1727,19 @@ - + - + - + - + - + @@ -1716,43 +1752,45 @@ - - - + + - + - - + + - - - - + + + + - + - - + + - - - - + + + + - - + + - ja ik begin ik om uh half acht tot ik denk tot zes uur ja - + ja ik begin ik om uh half acht tot ik denk tot zes uur ja + Q#ng1699535961|ik begin ik om half acht tot ik denk tot zes uur|1|2|4.776017459679991 + + + + - + - + - + - + @@ -1834,28 +1872,30 @@ - - - + + - - + + - ja toevallig hierachter + ja toevallig hierachter + Q#ng1699535963|toevallig hierachter|1|1|3.1740006442599995 + + - + - + - + - + @@ -1868,31 +1908,33 @@ - - - - + + + - + - - + + - uh kinderen met beperking + uh kinderen met beperking + Q#ng1699535964|kinderen met beperking|1|1|2.85980687515 + + - - - + + + - + - + @@ -1904,30 +1946,33 @@ + - - - + + - - + + - + - + - - + + - dat was dicht bij de WERKINSTELLING1 - + dat was dicht bij de Rijnstate + Q#ng1699535965|dat was dicht bij de Rijnstaten|1|1|-3.961170843459999 + + + - + - + - + - + - + @@ -1996,31 +2041,33 @@ - - - + + - - - - + + + + - ja ja ik weet het niet + ja ja ik weet het niet + Q#ng1699535970|ik weet het niet|1|1|-3.1934260798 + + - + - + - + - + @@ -2034,40 +2081,38 @@ - + - - - - - - - + + + + + - - - - - + + + + + - dat is jammer van nu op dit moment + dat is jammer van nu op dit moment - + - + - + - + @@ -2080,29 +2125,31 @@ - - - + + - - - + + + - ik ik herken het + ik ik herken het + Q#ng1699535973|ik herken het|1|1|0.3249225631100008 + + - + - + - + - + @@ -2115,34 +2162,36 @@ - - - + + - - + + - + - - + + - wauw daar ben ik veel geweest + wauw daar ben ik veel geweest + Q#ng1699535974|daar ben ik veel geweest|1|1|-5.353241436460001 + + - + - + - + - + @@ -2155,29 +2204,31 @@ - - - + + - - + + - + - ook hier de uh + ook hier de uh + Q#ng1699535975|ook hier de|1|2|0.2363647608900002 + + - + - + - + - + @@ -2191,7 +2242,7 @@ - + @@ -2207,19 +2258,19 @@ - dat heb ik net nog gelezen + dat heb ik net nog gelezen - - - + + + - + - + @@ -2231,15 +2282,16 @@ + - - - - + + + + - WERKINSTELLING2 - - + Vogellanden + + ja @@ -2248,13 +2300,13 @@ - + - + - + - + @@ -2267,19 +2319,19 @@ - + - + - + - + - + @@ -2292,31 +2344,31 @@ - - - - - - - - - + + + + + + - veel geweest voor uh + veel geweest voor uh + Q#ng1699535978|veel geweest voor|1|1|6.287694428459999 + + - + - + - + - + @@ -2330,10 +2382,10 @@ - + - + @@ -2344,19 +2396,19 @@ - past bij mijn werk nu + past bij mijn werk nu - + - + - + - + @@ -2369,19 +2421,21 @@ - - - + + - + - - + + - ja uh net gekoppeld - - + ja uh net gekoppeld + Q#ng1699535981|net gekoppeld|1|1|3.64780386377 + + + + ja @@ -2390,13 +2444,13 @@ - + - + - + - + @@ -2409,19 +2463,19 @@ - + - + - + - + - + @@ -2435,26 +2489,26 @@ - - + + - ik weet + ik weet - + - + - + - + @@ -2467,37 +2521,39 @@ - - - - - - - - - - - - - - + + + + + + + + + + + + + - - - - - - - - + + + + + + + + - + - dus maar ben ik veel geweest maar ook als ik hier uh - + dus maar ben ik veel geweest maar ook als ik hier uh + Q#ng1699535983|dus maar ben ik veel geweest maar ook als ik hier|1|1|0.8965879978199991 + + + + - + - + - + - + @@ -2573,41 +2629,43 @@ - - - + + - + - - + + - + - - + + - - + + - - + + - oo uh ja uh uh ik zing met uh oudere mensen uh + oo uh ja uh uh ik zing met uh oudere mensen uh + Q#ng1699535984|ik zing met oudere mensen|1|1|-0.19140639580999919 + + - + - + - + - + @@ -2620,44 +2678,46 @@ - - - - + + + - - - + + + - - + + - + ik uh uh ik doe uh boekjes voor uh club geloof ik uh + Q#ng1699535985|ik doe boekjes voor club geloof ik|1|1|-1.5973626265500003 + + - + - + - + - + @@ -2670,13 +2730,15 @@ - - - - - - - + + + + + + - en uh uh uh sorry \ No newline at end of file + en uh uh uh sorry + Q#ng1699535986|en|1|1|0.0 + + \ No newline at end of file diff --git a/backend/test_files/sample_16_SAF.xlsx b/backend/test_files/sample_16_SAF.xlsx index 971cad3b..671a99e3 100644 Binary files a/backend/test_files/sample_16_SAF.xlsx and b/backend/test_files/sample_16_SAF.xlsx differ diff --git a/backend/analysis/annotations/test_files/sample_1_SAF.xlsx b/backend/test_files/sample_1_SAF.xlsx similarity index 100% rename from backend/analysis/annotations/test_files/sample_1_SAF.xlsx rename to backend/test_files/sample_1_SAF.xlsx diff --git a/frontend/src/environments/version.ts b/frontend/src/environments/version.ts index 31ada276..fc18713d 100644 --- a/frontend/src/environments/version.ts +++ b/frontend/src/environments/version.ts @@ -1,2 +1,2 @@ // TODO: Compile this from toplevel package.json -export const version = '0.6.3'; +export const version = '0.7.1'; diff --git a/package.json b/package.json index 9a23edbf..d98ef59d 100644 --- a/package.json +++ b/package.json @@ -1,6 +1,6 @@ { "name": "sasta", - "version": "0.7.0", + "version": "0.7.1", "description": "Annotate and analyze transcripts", "author": "UU Digital Humanities Lab", "license": "BSD-3-Clause",