Elementos da avaliação conjunta
Tarefa de controle é a função que os sistemas participantes realizam durante a avaliação juntamente com as condições sob as quais ela deve ser realizada.
Requisitos genéricos para a tarefa de controle:
- Pode ser facilmente realizada por um operador humano;
- Não precisa ser identificada com a funcionalidade específica de um componente numa arquitetura de PLN;
Requisitos genéricos para as métricas:
- Deve existir concordância em um formalismo de referência comum a todos os participantes;
- As métricas devem ser diretas e de fácil entendimento.