Project management of NTIS P1 Cybernetic Systems and Department of Cybernetics | WiKKY

Project

General

Profile

Actions

Task #3707

closed

Task #3637: Etapa 01 - Nová strukturace poradenských hovorů – návrh automatické segmentace

Zpracování dat z emailů - témata

Added by Zajíc Zbyněk about 8 years ago. Updated over 4 years ago.

Status:
Closed
Priority:
Normal
Start date:
20.01.2016
Due date:
01.08.2017
% Done:

50%

Estimated time:

Description

Zkusit na emailech (až je ÚJČ předá na FTP #3696)
-detekci klíčových slov
-klustrovací metody


Files

kmeans.log (30.7 KB) kmeans.log log s výpisy top slov v každém clusteru, výpis pro různý počet clusterů Skorkovská Lucie, 24.05.2016 09:30
kmeans_50clusters_lemma.log (162 KB) kmeans_50clusters_lemma.log Skorkovská Lucie, 31.05.2016 14:32
Actions #1

Updated by Zajíc Zbyněk about 8 years ago

data od ÚJČ budou na poli v korpusech v adresáři NAKI-II-UJC, heslo napsána na redmine wikki projektu naki-ii-ujc-privat

Actions #2

Updated by Skorkovská Lucie almost 8 years ago

  • Due date changed from 01.05.2016 to 23.05.2016
  • % Done changed from 0 to 20

Přehled výsledků připravit před schůzí s UJČ.

Actions #3

Updated by Skorkovská Lucie almost 8 years ago

Testování shlukovacích algoritmů na dopisech ukázalo, že dokážeme najít často se vyskytující jevy v dotazech:
  • psaní cikán / rom
  • přechylování příjmení
  • psaní ulic s předložkou
  • jaký pád se používá při oslovení
  • psaní počátečních velkých písmen
  • pravidla velkých písmen u psaní názvů měst
  • psaní přídavných jmen "řídící" "měřící" "kropící" .....
  • skloňování příjmení
  • že jazyková poradna není právní poradna
  • norma úpravy písemností strojem
Další postup
  • v přípravě zapojení lemmatizace, normalizace - může trochu zlepšit výsledky
  • chtělo by to anotované dopisy
Actions #4

Updated by Zajíc Zbyněk almost 8 years ago

Aleš říká, že online přepis není problém (kontinuálně i např. po pauze předávat slova), proto zkoumej i klasifikaci témat online.

Actions #5

Updated by Skorkovská Lucie almost 8 years ago

  • Due date changed from 23.05.2016 to 30.06.2016
  • lematizace dost vylepšuje shlukování témat
  • na jakékoli další experimenty to chce anotovana data
Actions #7

Updated by Zajíc Zbyněk about 7 years ago

  • Due date changed from 30.06.2016 to 01.08.2017
Actions #8

Updated by Zajíc Zbyněk over 4 years ago

  • Status changed from Assigned to Closed
Actions

Also available in: Atom PDF