De betrouwbaarheid van altmetrics data hangt enerzijds af van de mate waarin de verzameling van vermeldingen van onderzoeksoutput op de diverse platforms (nieuwsmedia, blogs, Twitter etc.) volledig is. Voor geaggregeerde altmetrics (bv. op het niveau van een individuele onderzoeker of een departement/instelling) is het daarnaast van belang dat de onderzoeksoutput waarover informatie wordt verzameld zo compleet mogelijk is.