Nos meus projetos tenho usado Python e JavaScript.

Não sei se terá grande diferença de desempenho (ainda não testei), mas uns dias atrás pesquisando sobre Go, encontrei esse framework:https://github.com/gocolly/colly