Resultados do Segundo HAREM

HAREM clássico	Pista TEMPO	ReRelEM	Informação adicional
Avaliação por cenários Classificação Identificação Avaliação por categorias Classificação Identificação	Participantes HAREM clássico na miniCD TEMPO TEMPO estendido completo TEMPO estendido sem normalização TEMPO só com normalização	Participantes HAREM clássico na CD ReRelEM Pontuação ReRelEM Avaliação de Relações	Legenda: identificação das participações Parâmetros utilizados

HAREM clássico

Avaliação por cenários [menu]

Os sistemas foram avaliados em vários cenários:

Total: Avaliação comparando todas as entidades anotadas na CD com todas as entidades anotadas na saída do sistema.
Selectivo: Cada sistema é avaliado no cenário em que participou. Neste caso, na tabela que mostra os resultados correspondentes, cada sistema está a ser avaliado num cenário diferente (daí haver diferentes valores para a classificação máxima na CD, o que não acontece quando os sistemas estão todos a ser avaliados no mesmo cenário.)
Selectivos 2-6: Cada sistema é avaliado em cada um dos cenários selectivos propostos pelos participantes no Segundo HAREM. Neste caso, tomou-se cada cenário de participação como cenário de avaliação para todos os participantes. Como tal, numa mesma tabela todos os sistemas estão a ser avaliados no mesmo cenário.

Para informações mais detalhadas sobre a avaliação em cenários selectivos consulte a Documentação da Avaliação por Cenários Selectivos.

Classificação [menu]

(para consultar os resultados completos de cada avaliação, carregue no nome do cenário que se encontra nos cabeçalhos das tabelas)

Melhores sistemas na classificação com avaliação estrita de ALTs

Medida	Total	Selectivo	Selectivo 2	Selectivo 3	Selectivo 4	Selectivo 5	Selectivo 6
Medida-F	Priberam_1 (0,5711386547459057)	PorTexTO_4_corr (0,598956597702692)	XIP-L2F/Xerox_3 (0,6325652348047489)	Priberam_1 (0,6350599993414381)	Priberam_1 (0,5739490810907777)	REMBRANDT_1 (0,6246798992678873)	REMBRANDT_2 (0,584519921325006)
Precisão	SeRELeP_no (0,817982831150176)	SeRELeP_no (0,817982831150176)	SEIGeo_2 (0,7347937018085421)	SeRELeP_no (0,8109364319890634)	SeRELeP_no (0,8130579021170353)	XIP-L2F/Xerox_2 (0,7080423935712151)	SEIGeo_2 (0,750986619353536)
Abrangência	Priberam_1 (0,5145506166874225)	PorTexTO_4_corr (0,541903152616035)	Priberam_1 (0,5893479543037549)	Priberam_1 (0,5641459019770853)	Priberam_1 (0,5175271115354602)	REMBRANDT_3_corr (0,7023626245174724)	Priberam_1 (0,5343415932377363)

Melhores sistemas na classificação com avaliação relaxada de ALTs

Medida	Total	Selectivo	Selectivo 2	Selectivo 3	Selectivo 4	Selectivo 5	Selectivo 6
Medida-F	Priberam_1 (0,5907700004119418)	PorTexTO_4_corr (0,6013038814268507)	XIP-L2F/Xerox_3 (0,6484687670155904)	Priberam_1 (0,6575701556674213)	Priberam_1 (0,5935774174879874)	REMBRANDT_1 (0,6325811452223821)	REMBRANDT_2 (0,5987818154147537)
Precisão	SeRELeP_1 (0,8343072573044298)	SeRELeP_1 (0,8343072573044298)	SEIGeo_2 (0,7422913898905498)	SeRELeP_no (0,8267668562144598)	SeRELeP_1 (0,829185520361991)	XIP-L2F/Xerox_2 (0,7105054861720081)	SeRELeP_1 (0,7583930592229348)
Abrangência	Priberam_1 (0,5352216937501953)	PorTexTO_4_corr (0,5423358111836967)	Priberam_1 (0,6109218523812282)	Priberam_1 (0,5900368957002127)	Priberam_1 (0,5381055358168156)	Priberam_1 (0,7126136197091294)	Priberam_1 (0,5569883179158903)

Identificação [menu]

Melhores sistemas na identificação

Medida	Total	Selectivo	Selectivo 2	Selectivo 3	Selectivo 4	Selectivo 5	Selectivo 6
Medida-F	Priberam_1 (0,7109760643404989)	R3M_1 (0,7681069810913798)	REMBRANDT_2 (0,6813029781429639)	Priberam_1 (0,7892907891219632)	Priberam_1 (0,7088252272238511)	REMBRANDT_1 (0,6572135201978566)	REMBRANDT_2 (0,6785608007574735)
Precisão	SEIGeo_3 (0,9055992596020361)	SeRELeP_no (0,8179828311501762)	SEIGeo_3 (0,8561549100968188)	SEIGeo_3 (0,9037482646922721)	SEIGeo_3 (0,9019426456984274)	XIP-L2F/Xerox_2 (0,7186046511627907)	SEIGeo_3 (0,8898658028690422)
Abrangência	Priberam_1 (0,7229062342077462)	R3M_1 (0,7768308998894773)	Priberam_1 (0,7127595546193201)	Priberam_1 (0,8158629515444132)	Priberam_1 (0,7222901432492913)	Priberam_1 (0,7856135401974612)	Priberam_1 (0,7144970785164385)

Melhores sistemas na identificação avaliação relaxada de ALTs

Medida	Total	Selectivo	Selectivo 2	Selectivo 3	Selectivo 4	Selectivo 5	Selectivo 6
Medida-F	Priberam_1 (0,7333197859513648)	R3M_1 (0,7946560249848181)	REMBRANDT_2 (0,6961913197519929)	Priberam_1 (0,8143157894736841)	Priberam_1 (0,7311973934292696)	REMBRANDT_1 (0,6651239669421487)	Priberam_1 (0,6973310618966497)
Precisão	SEIGeo_3 (0,910828025477707)	SeRELeP_1 (0,8343072573044298)	SEIGeo_3 (0,8624772313296903)	SEIGeo_3 (0,9090081892629663)	SEIGeo_3 (0,9080145719489982)	XIP-L2F/Xerox_2 (0,7212543554006968)	SEIGeo_3 (0,8945454545454545)
Abrangência	Priberam_1 (0,7484789823008849)	R3M_1 (0,8133546439353578)	Priberam_1 (0,735859318346628)	Priberam_1 (0,8480968251184002)	Priberam_1 (0,7478478200499861)	SeRELeP_1 (0,8017057569296375)	Priberam_1 (0,7419939577039275)

Avaliação por categorias [menu]

A avaliação por categorias corresponde a avaliar os sistemas apenas numa categoria, aplicando um véu correspondente a um cenário apenas com essa categoria.

Classificação [menu]

Melhores sistemas na classificação com avaliação estrita de ALTs

Medida	ABSTRACCAO	ACONTECIMENTO	COISA	LOCAL	OBRA	ORGANIZACAO	PESSOA	TEMPO	VALOR
Medida-F	Priberam_1 (0,18104650457769966)	XIP-L2F/Xerox_no (0,3007425261439179)	Priberam_1 (0,12745598366930352)	REMBRANDT_1 (0,599336207698742)	REMBRANDT_3_corr (0,30722007206726276)	REMBRANDT_3_corr (0,402868415175802)	REMBRANDT_3_corr (0,6320122024070284)	XIP-L2F/Xerox_3 (0,7053678507239937)	REMBRANDT_3_corr (0,5240581872435659)
Precisão	REMMA_1_corr (0,22309197651663373)	XIP-L2F/Xerox_no (0,7250234301780695)	XIP-L2F/Xerox_1 (1,0)	XIP-L2F/Xerox_2 (0,6900764363108643)	XIP-L2F/Xerox_2 (0,6037735849056604)	REMMA_2_corr (0,66031882809134)	REMBRANDT_3_corr (0,7683335996165521)	XIP-L2F/Xerox_no (0,7419949706621841)	REMBRANDT_3_corr (0,4127497062279671)
Abrangência	R3M_1 (0,5637676177380585)	R3M_1 (0,46537178732587803)	R3M_1 (0,5083918813427043)	REMBRANDT_3_corr (0,6929790569683834)	R3M_1 (0,38936049801924166)	R3M_1 (0,5397646621827784)	Priberam_1 (0,7157000361915649)	XIP-L2F/Xerox_3 (0,7313565038462225)	REMBRANDT_3_corr (0,7175689479060265)

Melhores sistemas na classificação com avaliação relaxada de ALTs

Medida	ABSTRACCAO	ACONTECIMENTO	COISA	LOCAL	OBRA	ORGANIZACAO	PESSOA	TEMPO	VALOR
Medida-F	Priberam_1 (0,18180715585203155)	XIP-L2F/Xerox_no (0,3564446465105706)	Priberam_1 (0,1280687135440037)	REMBRANDT_3_corr (0,607846192163232)	REMBRANDT_3_corr (0,324722259403025)	REMBRANDT_3_corr (0,418963287235101)	REMBRANDT_3_corr (0,6386017800746482)	XIP-L2F/Xerox_3 (0,7090732350275865)	REMBRANDT_3_corr (0,5245962848875199)
Precisão	REMMA_1_corr (0,23679060665362)	XIP-L2F/Xerox_no (0,7832167832167832)	XIP-L2F/Xerox_1 (1,0)	XIP-L2F/Xerox_2 (0,6928502012462328)	XIP-L2F/Xerox_2 (0,6296296296296297)	REMMA_2_corr (0,6850828729281768)	REMBRANDT_3_corr (0,7771663172606569)	XIP-L2F/Xerox_no (0,7489075233258413)	REMBRANDT_3_corr (0,41341768427247316)
Abrangência	R3M_1 (0,5673637298594488)	R3M_1 (0,503825779870512)	R3M_1 (0,5132708821233444)	REMBRANDT_3_corr (0,7015083559780827)	R3M_1 (0,4074702886247878)	R3M_1 (0,5587810745789896)	Priberam_1 (0,723434900799286)	XIP-L2F/Xerox_3 (0,7330871381168692)	REMBRANDT_3_corr (0,7175689479060265)

Identificação [menu]

Melhores sistemas na identificação com avaliação estrita de ALTs

Medida	ABSTRACCAO	ACONTECIMENTO	COISA	LOCAL	OBRA	ORGANIZACAO	PESSOA	TEMPO	VALOR
Medida-F	Priberam_1 (0,18562681276184337)	REMBRANDT_3_corr (0,33084479371316305)	Priberam_1 (0,13386880856760378)	REMBRANDT_3_corr (0,628562989218727)	REMBRANDT_3_corr (0,30927835051546393)	REMBRANDT_3_corr (0,4528610354223432)	REMBRANDT_3_corr (0,6371219065077911)	XIP-L2F/Xerox_3 (0,7223127035830618)	REMBRANDT_3_corr (0,5286885245901639)
Precisão	REMMA_1_corr (0,2328767123287671)	XIP-L2F/Xerox_no (0,7206477732793523)	XIP-L2F/Xerox_1 (1,0)	SEIGeo_2 (0,7113010446343779)	REMMA_2_corr (0,5973154362416108)	REMMA_2_corr (0,6928909952606634)	REMBRANDT_3_corr (0,7746573052490806)	XIP-L2F/Xerox_no (0,7631578947368421)	REMBRANDT_3_corr (0,4161290322580645)
Abrangência	R3M_1 (0,7922705314009661)	R3M_1 (0,6315228966986136)	R3M_1 (0,7117486338797814)	SeRELeP_1 (0,7798570942497448)	R3M_1 (0,5375)	R3M_1 (0,7393516499491198)	R3M_1 (0,8573986144625206)	XIP-L2F/Xerox_3 (0,7516949152542373)	REMBRANDT_3_corr (0,7247191011235955)

Melhores sistemas na identificação com avaliação relaxada de ALTs

Medida	ABSTRACCAO	ACONTECIMENTO	COISA	LOCAL	OBRA	ORGANIZACAO	PESSOA	TEMPO	VALOR
Medida-F	Priberam_1 (0,18633139909735652)	REMBRANDT_3_corr (0,36951501154734406)	Priberam_1 (0,13454423141607805)	REMBRANDT_3_corr (0,6376554174067496)	REMBRANDT_3_corr (0,32791728212703103)	REMBRANDT_3_corr (0,47078099399235396)	REMBRANDT_3_corr (0,6437224669603525)	XIP-L2F/Xerox_3 (0,7260106165781952)	REMBRANDT_3_corr (0,5292307692307692)
Precisão	REMMA_1_corr (0,2465753424657534)	XIP-L2F/Xerox_no (0,7912087912087912)	XIP-L2F/Xerox_1 (1,0)	SEIGeo_2 (0,7121212121212122)	REMMA_2_corr (0,64)	REMMA_2_corr (0,7182320441988951)	REMBRANDT_3_corr (0,7835120643431636)	XIP-L2F/Xerox_no (0,7701271186440678)	REMBRANDT_3_corr (0,4168012924071082)
Abrangência	R3M_1 (0,7975903614457831)	R3M_1 (0,6837060702875399)	R3M_1 (0,7185792349726776)	SeRELeP_1 (0,7982155113246396)	R3M_1 (0,5625)	R3M_1 (0,7653778558875219)	R3M_1 (0,8695652173913043)	XIP-L2F/Xerox_3 (0,7533898305084745)	REMBRANDT_3_corr (0,7247191011235955)