TREC là vi t t t c a Text REtrieval Conference, có ngh a là H i ngh v Tìm ki m Thông tin V n b n, đ c t ch c h ng n m t i Vi n Qu c gia v Tiêu chu n và Công ngh Hoa K (NIST _ National Institute Standard and Technology) [ 8]. TREC là m t lo t H i ngh chuyên cung c p c s h t ng cho vi c ki m tra, đánh giá quy mô l n v công ngh tìm ki m (ch y u là tìm ki m v n b n). H i ngh TREC đ c t o ra đ thúc đ y nghiên c u v các công ngh tìm ki m thông tin. Các m c tiêu chính c a TREC là :
• Khuy n khích các nghiên c u trong tìm ki m thông tin d a trên ng li u
đánh giá qui mô l n.
• Phát tri n giao ti p, liên l c gi a các ngành công nghi p, giáo d c và chính ph b ng cách cung c p m t di n đàn m đ trao đ i các ý ki n nghiên c u.
• H tr trao đ i công ngh t nh ng phòng thí nghi m nghiên c u thành nh ng s n ph m th ng m i.
• C i thi n v t b t các ph ng pháp lu n tìm ki m trên các v n đ th gi i th c và các đ đo cho tìm ki m thông tin.
Lu n v n : ánh giá các h th ng tìm ki m thông tin
• T o ra m t lo t ng li u đánh giá liên quan các khía c nh khác nhau c a tìm ki m thông tin.
• Phát tri n các công ngh đánh giá thích h p s n có mà đ c s d ng b i ngành công ngh p và giáo d c, bao g m c vi c phát tri n các công ngh
đánh giá m i thích h p h n v i các h th ng hi n t i. Chu trình H i ngh h ng n m c a TREC :
TREC g m các l nh v c t p trung khác nhau g i là TRACK. Nhi m v c a các TRACK ch y u là t p trung vào v n đ con c a tìm ki m thông tin v n b n. Chính nh ng TRACK này ti p thêm sinh l c, và làm cho TREC ti p t c phát tri n vì nh ng TRACK này th c hi n :
+ Ng li u chuyên môn hóa h tr nghiên c u trong các l nh v c m i.
+ Nh ng thí nghi m qui mô l n g nh ng l i mà công vi c g p ph i.
Kêu g i tham gia Xác đnh công vi c Ki m đ c tài li u Th nghi m tìm ki m thông tin Phát tri n ch đ ánh giá đ liên quan ánh giá k t qu Phân tích k t qu H i ngh TREC Ti n hành công b
Lu n v n : ánh giá các h th ng tìm ki m thông tin
Tuy nhiên, s phát tri n t p h p TRACK trong m t TREC c th ph thu c vào :
+ S h ng ng c a nh ng ng i tham gia.
+ Các công vi c mà TREC đ a ra có thích h p hay không
+ Nhu c u v tài tr
+ S ràng bu c v ngu n ng li u…
ánh giá theo tiêu chu n c a TREC chính là xây d ng b ng l êu dùng đ đánh giá theo chu n c a TREC và ph ng pháp đánh giá theo đ liên quan theo chu n TREC, thêm vào đó là ph ng pháp đánh giá k t qu theo chu n 11 đi m c a đ bao ph .
Vì ph ng pháp đánh giá theo đ liên quan, ph ng pháp đánh giá k t qu theo chu n 11 đi m c a đ bao ph đã đ c trình bày đ n trong các ph n trên nên chúng tôi ch y u s trình bày trong ph n ti p theo v cách xây d ng ng li u c a TREC.