Avaliação da etiqueta ALT

Existirão dois modos para a avaliação de ALTs no Segundo HAREM:

estrito: cada análise terá uma classificação independente. Essa classificação será obtida multiplicando a classificação semântica de cada alternativa por um peso. O peso será por sua vez igual a 1/N, onde N é o número total de alternativas com pelo menos uma EM anotada.

relaxado: de forma semelhante ao primeiro HAREM, onde basta acertar numa alternativa para obter a classificação completa.

Vejamos o seguinte exemplo de avaliação de um atributo com vagueza ao nível da identificação:

Na CD: <ALT> [A de B] | [A] de [B] | A de [B] </ALT>

Na avaliação estrita de ALTs todas as diferentes alternativas possíveis são avaliadas. Cada alternativa terá um peso dentro do ALT onde está inserida. Para se obter a classificação semântica de um ALT é necessário multiplicar a classificação de cada alternativa pelo seu peso (1 / total de alternativas com EMs anotadas) .

Vejamos alguns exemplos concretos:

1. Exemplo: Reitor da Faculdade de Educação da USP.
2. Exemplo: líder do Mundo.

Exemplo 1

Texto:
Reitor da Faculdade de Educação da USP.

CD:
<ALT>
<EM CATEG="PESSOA" TIPO="CARGO">Reitor da Faculdade de Educação da USP</EM> |
<EM CATEG="PESSOA" TIPO="CARGO">Reitor da Faculdade de Educação</EM> da <EM CATEG="ORGANIZACAO" TIPO="INSTITUICAO">USP</EM> |
Reitor da <EM CATEG="ORGANIZACAO" TIPO="INSTITUICAO">Faculdade de Educação da USP</EM> |
Reitor da <EM CATEG="ORGANIZACAO" TIPO="INSTITUICAO">Faculdade de Educação</EM> da <EM CATEG="ORGANIZACAO" TIPO="INSTITUICAO">USP</EM>
</ALT>

Cenário total

Hipótese de saídas do sistema:

1. Todas as (quatro) alternativas que estão no ALT da CD (por qualquer ordem).
2. ALT com três das quatro alternativas que estão na CD.
3. ALT com duas das quatro alternativas que estão na CD.
4. Apenas uma das quatro alternativas que estão na CD.
5. ALT com algumas alternativas correctas e outras incorrectas.
6. EM mal identificada.
7. EM com CATEGORIA errada.
8. EM com TIPO errado.
9. Nenhuma anotação.

Cenário com a categoria PESSOA e sem a categoria ORGANIZACAO

Hipótese de saídas do sistema:

1. Todas as alternativas com EMs de categoria PESSOA (por qualquer ordem), sem qualquer ORGANIZACAO identificada. No caso de alguma ORGANIZACAO ser anotada, essa anotação será considerada espúria.
2. Uma das duas alternativas da solução do ponto 1.

Cenário com a categoria ORGANIZACAO e sem a categoria PESSOA

Hipótese de saídas do sistema:

1. Todas as alternativas com EMs de categoria ORGANIZACAO (por qualquer ordem), sem qualquer PESSOA identificada. No caso de alguma PESSOA ser anotada, essa anotação será considerada espúria.
2. Apenas uma das alternativas da solução do ponto 1.

Exemplo 2

Neste exemplo existe uma alternativa sem qualquer EM anotada.

Texto:
líder do Mundo.

CD:
<ALT>
líder do Mundo |
líder do <EM CATEG="LOCAL" TIPO="HUMANO" SUBTIPO="REGIAO">Mundo</EM> |
<EM CATEG="PESSOA" TIPO="TITULO">líder do Mundo</EM>
</ALT>

Cenário total

Hipótese de saídas do sistema:

1. ALT com toda as alternativas representadas na CD (por qualquer ordem).
2. Só as alternativas com EMs anotadas .
3. Nenhuma anotação.
4. ALT com algumas alternativas correctas e outras incorrectas.
5. Anotações incorrectas.