Como fazer o teste A/B é um problema difícil. Existem estruturas ou ferramentas disponíveis para aliviar a dor?
Existe uma ferramenta do google para aplicativos da web.
www.google.com/websiteoptimizer
Se você estiver usando o Django, existe o Django-Lean ( http://bitbucket.org/akoha/Django-lean/wiki/Home ).
Existem também vários aplicativos da Web para criar várias páginas de destino e fazer testes A/B nelas: