Acho que se encaixe mais como um pré teste interno, ele simula com que outros vídeos estariam competindo com a atenção do usuário e vc verifica se a sua thamb está se destacando entre elas.
Acho uma boa maneira para visualizar o resultado final, e testar com alguns amigos / seguidores, mas os dados precisos, seria só quando publicasse e o youtube desse o informe, como comentou.
É possível, mas isso não é exatamente um teste A/B, pelo menos dentro ddo que eu apreendi, o teste A/B você coloca à prova em uso real com público, se você apenas tem uma ferramenta que te ajuda visualizar o que fica melhor, para você escolher na sua intuição, tem serventia, mas não é teste A/B. Mesmo testando com pessoas próximas à você pode dar um resultado contrário e até prejudicar. Tenho a impressão que esse teste vai frequentemente performar diferente do que acontecerá no Youtube de verdade, e será menos confiável que o ChatGPT.
Mas vamos aguardar o que ele responde para eu entender melhor a proposta, até porque pode ser útil pra mim.