HAREM - Avaliação de Reconhecimento de Entidades Mencionadas

Linguateca - 2006.
  Versão para impressão
IMPORTANTE: Este sítio diz respeito ao Primeiro HAREM, que terminou em 2006, e encontra-se encerrado. O sítio actual do HAREM encontra-se em /HAREM.


Caros participantes do HAREM,

    A publicação dos resultados finais para a classificação semântica irá ainda demorar mais algum tempo, devido a problemas inesperados. A nossa responsabilidade como avaliadores do CLEF em simultâneo, levaram-nos a adiar a divulgação desses resultados, pelo qual pedimos desculpa. Apesar destes contratempos, estamos a fazer um esforço para garantir que estes saiam em breve.

    E, como é normal no desenvolvimento de software, encontrámos também alguns erros nos programas de avaliação para a tarefa de identificação e classificação morfológica, que foram prontamente corrigidos. Uma das alterações irá afectar levemente os resultados da tarefa de identificação, mas apenas no relatório com separação por categorias. Estamos constantemente a rever os resultados e a controlar os valores finais, de maneira a podermos garantir a fidelidade dos mesmos, o que muito importante para nós.
 
  Assim, há uma actualização na página de resultados para as tarefa de identificação e classificação morfológica. Os vencedores, porém, são os mesmos...
Para ver as novas tabelas de resultados finais, basta ir ao sítido ho HAREM e clicar em 'Classificação' (ou então, clique aqui: harem.php?l=classfinal)

Na área privada dos participantes, actualizámos os ficheiros gerados pelos programas de avaliação HAREM. Na tarefa de identificação, estes encontram-se no mesmo sítio, em harem/downloads/NOME_SISTEMA/. Os ficheiros antigos foram colocados em  harem/downloads/NOME_SISTEMA/old/.
Os ficheiros respeitantes à tarefa de avaliação podem ser encontrados em:

  
    Finalmente, o documento 'Avaliação no HAREM: Método e medidas' (que pode ser consultado em harem.php?l=medidas) foi revisto e encontra-se na versão 2.5, e reflete a avaliação da tarefa de classificação morfológica feita pelos programas de avaliação, que produziu os resultados finais. O capítulo da avaliação da tarefa de classificação semântica será revisto em breve.

Esperamos ter mais notícias em breve.
 
Pela Organização do Harem,
Nuno Cardoso, Nuno Seco, Rui e Diana
Esta página e a sua informação não se encontra actualizada. Clique aqui para visitar o síio actual do HAREM.