Gerade bei der Erde bemerken wir sie ständig: Gravitationskraft = Gewichtskraft.
Nur wenn beide Massen, die sich gegenseitig anziehen, nicht sehr groß sind, ist die Gravitationskraft so klein, dass man sie nicht spürt.
Die Gravitationskraft zwischen dir und deinem Radiergummi ist kleiner als die Reibungskraft, die den Radiergummi festhält.
Deshalb wird er nicht zu dir hingezogen (und umgekehrt! .-))
Aber auch in einem kräftefreien Raum wären euer beider Massen so klein, dass er sich so langsam auf dich zu bewegen würde, dass du es - in überschaubarer Zeit - nicht bemerken würdest.