Se não tem um identificador único a única coisa que você pode usar o spider é no máximo para facilitar o seu trabalho, mas você não vai conseguir automatizar 100%, exceto se usar uma IA ou algo assim. Faz parte.