Czy ktoś może podpowiedzieć coś w tym temacie? Jak wygląda robienie takich testów w przypadku Wordpressa? Może jakieś wtyczki (chociaż wolałbym bardziej ogólnie, bo wiadomo, że przy pomocy wtyczek nie będzie dało się wszystkiego sprawdzić na co będzie zapotrzebowanie)? Z góry dzięki za info.
Pytam zarówno o teoretyczne podstawy, ale zwłaszcza jak wygląda przeprowadzanie takich testów w praktyce.

A co konkretnie chcesz sprawdzić?

W zasadzie to wszystko, ale głównie będzie to układ reklam - czy w sidebarze po lewej, po prawej, w obu? Czy w treści tak jak ty masz na blogu czy po prawej będzie porównywalna klikalność? Albo np. ta sama jednostka reklam (wspomniana na początku treści) - ale w różnych theme.

Inna sprawa to ile trzeba mieć dziennie wizyt by taki test miał sens? 100 osób dziennie i 7 dni testu myślisz że będzie już reprezentatywne?

Aby test miał sensowne wyniki, to trzeba IMHO co najmniej po 10 000 wyświetleń każdego wariantu.

Jeśli chcesz testować proste rzeczy, np. wyrównanie jednostki reklamowej, wystarczy fragment kodu PHP w odpowiednim pliku szablonu, który Ci wyświetli albo jedną, albo drugą jednostkę.
Jeśli chciałbyś porównać np. wyświetlanie jednostki w treści z wyświetlaniem w bocznym pasku, będziesz potrzebować więcej dłubaniny.

A mógłbyś pokazać jakiś przykład takiego kodu php który raz wyświetli tą a raz inną wersję strony? (Ja nie znam php na tyle by nawet coś takiego prostego napisać.)

Jakiś czas temu skleciłem na swoje potrzeby prosty skrypcik do testów A/B:
http://www.herbalsgroup.pl/files/testab.zip