Jspell ... Derivação + frequências

Introdução ao Jspell

Introdução ao Jspell (2)

Avaliação: comentários gerais

Derivação

Derivação: como avaliar

Não queremos todas as palavras!

Frequências

Próximos episódios

Próximos episódios (2)

Jspell: Introdução ao Jspell

• Dicionário

   Palavras + Classificação + conjunto de esquemas

   avaliar/#vt/XYPLcMDRu/
   
   #vt = /CAT=v,T=inf,TR=t/
   D ---> avaliador,avaliadora,avaliadores, avaliadoras

• Muitas opções para alterar detalhes do seu algoritmo
• Funcionamento como interpretador
• Funcionamento como corrector ortográfico
• Funcionamento como Biblioteca de programação

   perl jspell.pm
   perl jspell::dict.pm
   C
   Prolog (yalg)

Jspell: Introdução ao Jspell (2)

• Aspecto da programação sobre jspell

   use jspell;
   jspell_dict("port");

   a = rad("palavra");
   for(a){ .....}

   b = fea("palavra");
   for(b){ .... }

   c = onethat({CAT=>"np"},fea("avaliar"))

  E muitas outras funções...

Jspell: Avaliação: comentários gerais

• Participação em avaliação conjunta

   ...Algum medo de fazer fraca figura
       . melhorar léxico em cobertura
       . regras mal associadas a certas palavras
   
   Submissão de respostas --> levou sempre 
      a novas versões dos programas/dicionários

Jspell: Derivação

• O que é?
• Para quê?

   1. reduzir tamanho ao dicionário
   2. obter o mesmo radical para palavras com semântica
        aparentada...
           avaliar
           avaliador
           avaliação
    
   3. reconhecimento de palavras novas
        avaliómetro
        avaliacionismo
        avaliadamente
        avaliódromo
   
   4. Aplicações de PLN (ajudar na semântica)
        em pp atach.

Jspell: Derivação: como avaliar

• Aceitam-se sugestões...
• provas obrigatórias

   ... arranjar alguns casos concensuais de sufixos/prefixos
     que sejam usados para teste

• Testes de co-radicalidade
• Testes de sobrevivências a palavras novas
• Testes de utilidade(?)

Jspell: Não queremos todas as palavras!

• funcionamento como corrector ortográfico

   árvore -> arvore

• PLN - algumas confusões desnecessárias

   dele   -> delir   ou de+ele
   delira -> delirar ou delir

• Qual é o domínio activo da língua?

   aliazar
   alibânia
   álibi
   alibilidade
   alíbil
   alibile
   álica
   alicaído
   alicanso
   alicante
   alicantinador
   alicantina
   alicantineiro
   alicário
   alicatão
   alicate
   alicece

   aliazar::grupo de lezírias circundadas de água
   alibânia::tecido de algodão das Índias Orientais
   álibi::justificação do réu, que consiste em p
   alibilidade::qualidade do que é alíbil
   alíbil::próprio para a nutrição
   alibile::
   álica::espécie de trigo ou de cevada de que os
   alicaído::de asa caída
   alicanso::licranço
   alicante::casta de uva algarvia e andaluza
   alicantinador::alicantineiro
   alicantina::trapaça no jogo ou nos negócios
   alicantineiro::que ou aquele que faz ou vive de alicantinas
   alicário::o que fabrica ou vende álica
   alicatão::grande tenaz para segurar a peça que se pretende forjar
   alicate::ferramenta formada por duas barras ou p
   alicece::alicerce

Jspell: Frequências

• O que são?

   Escalas logarítmicas (?)
   indexadas ao lema

• Para quê

   ranking de importância das análises
   desambiguar
   filtragem dinâmica

• Como calcular?

   Via corpora etiquetado
   Via freqnormpt
   ...

• Como avaliar?

   Calcular diferenças...
   amostragem

Jspell: Próximos episódios

• avaliar derivação
• avaliar frequências de palavras
• avaliar capacidade de resolver problemas com ...

   tipo mini concurso de programação envolvendo morfologia

• avaliar/fomentar sofisticação de features

Jspell: Próximos episódios (2)

...Jspell

• Meta dicionário

   Palavra' ->
     classificação Jspell
     conjunto de esquemas de derivação jspell
     frequências (1)
     fonética (2)
     informação semântica(3)
     relações com outras palavras (sin, heter. meron. etc)
     relações com outras línguas
     classificação temática
     ... 

  Donde se possa extrair um dicionário jspell (4)