3.1.1 Tiêu chí đánh giá dựa trên kích thước kho lưu trữ (cache size):
Mục đính: Với tiêu chí đánh giá này, kích thước kho lưu trữ sẽ được tăng lên từ
thấp đến cao. Để thử nghiệm tính năng thay thế dữ liệu tại kho lưu trữ (cache replacement) của kiến trúc và thể hiện được tính hiệu quả trong cộng tác kho lưu trữ trong các trường hợp kích thước kho lưu trữ lớn.
Tiêu chí thử nghiệm [1] [2]:
Số lượng thơng điệp: Để đánh giá tính hiệu quả về băng thơng và năng lượng
khi kích thước kho lưu trữ thay đổi. Số lượng thông điệp sẽ khác nhau tùy vào kích thước bộ nhớ kho lưu trữ, kích thước bộ nhớ kho lưu trữ càng lớn thì khả năng tìm thấy dữ liệu trong cục bộ, trong vùng là càng lớn, do đó số lượng thơng điệp phải càng thấp.
Thời gian hồi đáp: Để đánh giá tính hiệu quả về thời gian hồi đáp của một yêu
cầu dữ liệu khi kích thước kho lưu trữ thay đổi. Tương tự như thử nghiệm về số lượng thông điệp, bộ nhớ kho lưu trữ càng lớn, khả năng lưu trữ dữ liệu càng lớn. Nếu kỹ thuật lưu trữ dữ liệu của giải pháp đề xuất hiệu quả thì khả năng tìm thấy dữ liệu càng nhanh do vậy thời gian hồi đáp sẽ càng thấp.
Tỷ lệ tìm thấy dữ liệu: Tỷ lệ tìm thấy dữ liệu được định nghĩa là tỉ lệ dữ liệu
được tìm thấy tại kho lưu trữ cục bộ của mỗi MH hoặc tại các MH vùng. Để đánh giá tính hiệu quả của kiến trúc cộng tác dữ liệu cũng như thuật toán thay thế dữ liệu. Trong tiêu chí này, với kích thước bộ nhớ kho lưu trữ càng thấp thì
thuật tốn thay thế dữ liệu càng thế hiện được tính hiệu quả khi mà phải thường xuyên thay thế kho lưu trữ.
3.1.2 Tiêu chí dựa trên số lượng MH:
Mục đích: Với số lượng MH trong vùng càng nhiều thì khả năng cộng tác dữ liệu
giữa các MH càng cao. Điều này thể hiện tính hiệu quả của việc cộng tác dữ liệu trong kiến trúc.
Tiêu chí thử nghiệm:
Số lượng thông điệp: Để đánh giá tính hiệu quả về băng thơng và năng lượng
khi số lượng MH trong vùng thay đổi. Số lượng MH càng nhiều thì tính cộng tác càng nhiều, tỷ lệ tìm thấy dữ liệu trong vùng sẽ càng cao. Do đó khi số lượng MH càng tăng thì số thơng điệp càng giảm.
Thời gian hồi đáp: Để đánh giá tính hiệu quả về thời gian hồi đáp của một yêu
cầu dữ liệu khi số lượng MH trong vùng thay đổi. Khi trong vùng càng nhiều MH, thì tỷ lệ tìm thấy trong vùng sẽ càng cao, hạn chế việc gửi yêu cầu tìm kiếm dữ liệu lên BS do đó thời gian hồi đáp sẽ càng giảm.
Tỷ lệ tìm thấy dữ liệu: Để đánh giá tính hiệu quả về tỷ lệ tìm thấy dữ liệu khi
số lượng MH thay đổi. Khi kích thước kho lưu trữ khơng thay đổi thì phải đảm bảo được tỷ lệ tìm thấy dữ liệu tại kho lưu trữ giữ ở một mức độ ổn định, khi số lượng MH càng tăng thì tỷ lệ tìm thấy dữ liệu trong vùng phải tăng.