Kontrolowane eksperymenty online. Praktyczny przewodnik po testach A/B
- Wydawnictwo:
- Helion
- Ocena:
- Bądź pierwszym, który oceni tę książkę
- Stron:
- 296
- Druk:
- oprawa miękka
- Dostępne formaty:
-
PDFePubMobi
Opis ebooka: Kontrolowane eksperymenty online. Praktyczny przewodnik po testach A/B
Trudno od razu ocenić wartość pomysłu. Tymczasem nawet małe zmiany mogą mieć olbrzymi wpływ na dochody organizacji. Aby się przekonać, jak zmiana sposobu prezentowania treści użytkownikowi wpłynie na jego wrażenia, najlepiej przeprowadzić eksperyment kontrolowany online. Tego rodzaju badania, zwane również testami A/B, są regularnie prowadzone przez największe firmy. Przed wykorzystaniem otrzymanych wyników w działalności biznesowej trzeba jednak poddać je walidacji.
Ta książka zawiera szereg praktycznych wskazówek dotyczących przygotowania, przeprowadzania i oceniania wyników kontrolowanych eksperymentów online. Dzięki niej nauczysz się stosować naukowe podejście do formułowania założeń i oceny hipotez w testach A/B, dowiesz się także, jak sprawdzać wiarygodność wyników i interpretować je do celów dalszej pracy. Omówiono tu takie pułapki jak efekt przeniesienia, prawo Twymana, paradoks Simpsona i interakcji sieciowych, zaprezentowano również informacje ułatwiające zrozumienie praktycznych konsekwencji statystyki. Interesującą częścią książki jest opis skalowalnej platformy, która radykalnie zmniejsza całościowy koszt eksperymentu. Publikację docenią zarówno początkujący, jak i zaawansowani eksperymentatorzy, którzy wymagają wysokiej pewności uzyskanych wyników.
Pozyskuj dane, którym zaufasz!
Kontrolowane eksperymenty online. Praktyczny przewodnik po testach A/B
Przytoczenie liczb jest proste. Przytoczenie liczb, którym możesz zaufać, jest trudne. Ten praktyczny przewodnik stworzony przez liderów eksperymentowania w Google, LinkedIn i Microsofcie nauczy Cię, jak nadać tempa rozwojowi innowacji w Twojej firmie dzięki wiarygodnym kontrolowanym eksperymentom online czy testom A/B. Korzystając z doświadczenia zdobytego w firmach, z których każda przeprowadza ponad 20 tysięcy kontrolowanych eksperymentów rocznie, autorzy podają przykłady, wskazują pułapki i oferują rady studentom oraz zawodowcom w branży zaczynającym działania w tym zakresie, a także pogłębiają rozważania na kilka zaawansowanych tematów z pożytkiem dla doświadczonych eksperymentatorów chcących poprawić sposób podejmowania decyzji opartych na danych w swoich organizacjach.
Z tej książki dowiesz się:
- jak posługiwać się metodą naukową w celu oceny hipotez w kontrolowanych eksperymentach;
- jak definiować kluczowe wskaźniki, a najlepiej także Ogólne Kryterium Ewaluacji;
- jak testować wiarygodność wyników i ostrzegać eksperymentatorów przed nieuzasadnionymi założeniami;
- jak interpretować wyniki i posługiwać się nimi w pracy iteracyjnej;
- jak implementować zabezpieczenia chroniące kluczowe cele biznesowe;
- jak zbudować skalowalną platformę, która zmniejsza krańcowy koszt eksperymentu niemal do zera;
- jak unikać pułapek takich jak efekt przeniesienia, prawo Twymana, paradoks Simpsona i interakcji sieciowych;
- jak rozumieć praktyczne konsekwencje statystyki, w tym częste błędy założeń.
Wybrane bestsellery
-
Ta książka pomoże Ci się przygotować do pracy na stanowisku testera oprogramowania, a także zapewni wsparcie podczas wykonywania nowych zadań. Znajdziesz tu dokładne omówienie podstaw testowania, jego różnych rodzajów i poziomów w odniesieniu do zastosowania na różnych etapach pracy nad projektem...
Tester samouk. Praktyczny przewodnik po testowaniu oprogramowania na bazie gotowego projektu Tester samouk. Praktyczny przewodnik po testowaniu oprogramowania na bazie gotowego projektu
(38.35 zł najniższa cena z 30 dni)41.30 zł
59.00 zł(-30%) -
Firmy z branży IT prześcigają się w tworzeniu rozwiązań zwiększających wydajność pracy, jak również podnoszących poziom specjalizacji pracowników w określonych dziedzinach. Od kilku już lat pozycja full stack developera, który wykonywał wszystkie prace programistyczne, jest wielką rzadkością. Obe...
Postman i SQL. Kurs video. Metody testowania REST API i przeszukiwania baz danych Postman i SQL. Kurs video. Metody testowania REST API i przeszukiwania baz danych
(63.60 zł najniższa cena z 30 dni)95.40 zł
159.00 zł(-40%) -
Testowanie oprogramowania to jedna z najdynamiczniej rozwijających się dziedzin inżynierii oprogramowania. Zarobki doświadczonych testerów są porównywalne z wynagrodzeniem, jakie otrzymują dobrzy programiści. Aby rozpocząć karierę w tym zawodzie, trzeba się legitymować odpowiednimi umiejętnościam...
Certyfikowany tester ISTQB®. Poziom podstawowy. Wydanie II Certyfikowany tester ISTQB®. Poziom podstawowy. Wydanie II
(70.85 zł najniższa cena z 30 dni)76.30 zł
109.00 zł(-30%) -
Właściwe wymagania to nie tylko kwestia ich dokumentacji, ale też przede wszystkim kwestia odpowiedniego ich pozyskania i walidacji. Dobrej jakości wymagania zmniejszają ryzyko produktowe i projektowe, pozwalają tworzyć systemy, które realnie spełniają potrzeby interesariuszy i umożliwiają im osi...
Inżynieria wymagań. Kurs video. Modelowanie wymagań i rozwiązań w projektach informatycznych Inżynieria wymagań. Kurs video. Modelowanie wymagań i rozwiązań w projektach informatycznych
(67.60 zł najniższa cena z 30 dni)76.05 zł
169.00 zł(-55%) -
Ten szczegółowy przewodnik pozwoli Ci na błyskawiczne zapoznanie się z .NET MAUI i sprawne rozpoczęcie pisania aplikacji za pomocą tej technologii. Zaprezentowano w nim filozofię działania .NET MAUI, jak również przebieg prac nad tworzeniem kompletnej aplikacji wieloplatformowej dla systemów: And...
Projektowanie aplikacji w .NET MAUI. Jak budować doskonałe interfejsy użytkownika dla aplikacji wieloplatformowych Projektowanie aplikacji w .NET MAUI. Jak budować doskonałe interfejsy użytkownika dla aplikacji wieloplatformowych
(51.35 zł najniższa cena z 30 dni)55.30 zł
79.00 zł(-30%) -
Jeśli zapytać aktywnych specjalistów branży IT o najpopularniejszy obecnie język programowania, większość z nich odpowie bez wahania: Python. Kto zatem rozważa rozpoczęcie kariery jako specjalista DevOps albo jako administrator systemów, zdecydowanie powinien zacząć naukę od opanowa...
Python dla administratorów. Kurs video. Od podstaw do automatyzacji pracy w świecie DevOps Python dla administratorów. Kurs video. Od podstaw do automatyzacji pracy w świecie DevOps
(62.64 zł najniższa cena z 30 dni)80.55 zł
179.00 zł(-55%) -
Testowanie manualne polega na uruchamianiu przypadków testowych ręcznie. Dla powodzenia projektu istotne jest rozpoczęcie testów na jak najwcześniejszym etapie pracy. W ten sposób zespół uzyskuje kontrolę nad błędami w kodzie i na bieżąco sprawdza, czy oprogramowanie spełnia określone w dokumenta...
Tester manualny. Kurs video. Testowanie wspierane narzędziami Tester manualny. Kurs video. Testowanie wspierane narzędziami
(67.05 zł najniższa cena z 30 dni)89.40 zł
149.00 zł(-40%) -
Czy wiesz, czym się zajmuje programista? To ktoś, kto, używając swojego umysłu i odpowiedniego języka programowania, rozwiązuje rozmaite problemy. Programista to taki współczesny superbohater. Przychodzi, siada do komputera, szybko przebiega palcami po klawiaturze i proszę ― działa. Oczywiś...
Python dla nastolatków. Projekty graficzne z Python Turtle Python dla nastolatków. Projekty graficzne z Python Turtle
(25.92 zł najniższa cena z 30 dni)27.93 zł
39.90 zł(-30%) -
Naglący termin, niedoczas, permanentne opóźnienie - oto najwierniejsi towarzysze i zarazem najwięksi wrogowie kierownika projektu. Nawet certyfikowani project managerowie, ludzie z ogromną wiedzą i nie mniejszym doświadczeniem, raz po raz znajdują się w sytuacji, w której potrzeba naprawdę wielki...(38.35 zł najniższa cena z 30 dni)
41.30 zł
59.00 zł(-30%) -
Ta książka jest siódmym, zaktualizowanym i ulepszonym wydaniem znakomitego podręcznika. Zrozumienie zagadnień ułatwia oparcie się autorów na metodzie omawiania zagadnień „od góry do dołu”, od ogółu do szczegółu, a więc prezentowania jako pierwszej warstwy aplikacji, a następnie kolejn...(96.85 zł najniższa cena z 30 dni)
104.30 zł
149.00 zł(-30%)
O autorach ebooka
Dr Ron Kohavi jest wiceprezesem i partnerem technologicznym w Airbnb. Wcześniej pracował w Microsofcie i Amazonie. Jego artykuły cytowano ponad 40 tysięcy razy.
Diane Tang jest ekspertką Google w dziedzinie zeskalowanej analizy danych i infrastruktury, kontrolowanych eksperymentów online, a także systemów reklamowych. Ma na koncie liczne publikacje i patenty.
Dr Ya Xu kieruje działem data science i eksperymentami w LinkedIn. Opublikowała szereg artykułów na temat eksperymentów. Często występuje na prestiżowych konferencjach, wykłada też na uczelniach wyższych.
Ebooka "Kontrolowane eksperymenty online. Praktyczny przewodnik po testach A/B" przeczytasz na:
-
czytnikach Inkbook, Kindle, Pocketbook, Onyx Boox i innych
-
systemach Windows, MacOS i innych
-
systemach Windows, Android, iOS, HarmonyOS
-
na dowolnych urządzeniach i aplikacjach obsługujących formaty: PDF, EPub, Mobi
Masz pytania? Zajrzyj do zakładki Pomoc »
Audiobooka "Kontrolowane eksperymenty online. Praktyczny przewodnik po testach A/B" posłuchasz:
-
w aplikacji Ebookpoint na Android, iOS, HarmonyOs
-
na systemach Windows, MacOS i innych
-
na dowolnych urządzeniach i aplikacjach obsługujących format MP3 (pliki spakowane w ZIP)
Masz pytania? Zajrzyj do zakładki Pomoc »
Kurs Video "Kontrolowane eksperymenty online. Praktyczny przewodnik po testach A/B" zobaczysz:
-
w aplikacjach Ebookpoint i Videopoint na Android, iOS, HarmonyOs
-
na systemach Windows, MacOS i innych z dostępem do najnowszej wersji Twojej przeglądarki internetowej
Szczegóły ebooka
- Tytuł oryginału:
- Trustworthy Online Controlled Experiments: A Practical Guide to A/B Testing
- Tłumaczenie:
- Katarzyna Ellerik
- ISBN Książki drukowanej:
- 978-83-289-0763-8, 9788328907638
- ISBN Ebooka:
- 978-83-289-0764-5, 9788328907645
- Format:
- 158x235
- Numer z katalogu:
- 223487
- Rozmiar pliku Pdf:
- 6.4MB
- Rozmiar pliku ePub:
- 8.2MB
- Rozmiar pliku Mobi:
- 8.2MB
- Pobierz przykładowy rozdział PDF
Spis treści ebooka
- Żargon kontrolowanych eksperymentów online
- Po co eksperymentować? Korelacja, sprawstwo i wiarygodność
- Niezbędne elementy przeprowadzania użytecznych eksperymentów kontrolowanych
- Zasady
- Poprawa z czasem
- Przykłady ciekawych kontrolowanych eksperymentów online
- Strategia, taktyka i ich związek z eksperymentami
- Dodatkowe źródła
- Kontekst przykładu
- Testowanie hipotezy - zdobycie wagi statystycznej
- Projektowanie eksperymentu
- Przeprowadzanie eksperymentu i pozyskanie danych
- Interpretowanie rezultatów
- Od rezultatów do decyzji
- Błędna interpretacja rezultatów statystycznych
- Przedziały ufności
- Zagrożenia dla wewnętrznej trafności
- Problemy z zewnętrzną trafnością
- Różnice segmentów
- Paradoks Simpsona
- Zachęcaj do zdrowego sceptycyzmu
- Modele dojrzałości eksperymentów
- Infrastruktura i narzędzia
- Kluczowe założenie: lokalna aproksymacja liniowa
- Jak mierzyć wydajność strony?
- Projekt eksperymentu spowalniającego
- Różne elementy strony mają różny wpływ
- Ekstremalne wyniki
- Taksonomia wskaźników
- Formułowanie wskaźników - zasady i techniki
- Ocena wskaźników
- Ewolucja wskaźników
- Dodatkowe źródła
- Od wskaźników biznesowych do wskaźników właściwych dla eksperymentów
- Łączenie kluczowych wskaźników w OKE
- Przykład: OKE dla wiadomości e-mail w Amazonie
- Przykład: OKE dla silnika wyszukiwarki Bing
- Prawo Goodharta, prawo Campbella i krytyka Lucasa
- Czym jest pamięć instytucjonalna?
- Dlaczego pamięć instytucjonalna jest pożyteczna?
- Tło
- Zbieranie danych
- Kultura i procesy
- Przestrzeń technik uzupełniających
- Analiza oparta na logach
- Ludzka ocena
- Badania wrażeń użytkownika
- Grupy fokusowe
- Ankiety
- Zewnętrzne dane
- Wszystko razem
- Gdy kontrolowane eksperymenty są niemożliwe
- Projekty w przyczynowych badaniach obserwacyjnych
- Pułapki
- Różnice między serwerem a klientem
- Implikacje w zakresie eksperymentów
- Podsumowanie
- Instrumentacja po stronie klienta a instrumentacja po stronie serwera
- Przetwarzanie logów z różnych źródeł
- Kultura instrumentacji
- Jednostka randomizacji i jednostka analizy
- Randomizacja na poziomie użytkownika
- Czym jest faza rozbiegowa?
- Model rozbiegowy SQR
- Cztery etapy rozbiegu
- Faza porozbiegowa
- Przetwarzanie danych
- Obliczenia na danych
- Podsumowanie rezultatów i wizualizacje
- Test t Studenta
- Wartość p i przedział ufności
- Założenie normalności rozkładu
- Błędy typu I i II oraz moc
- Tendencyjność
- Wielokrotne testowanie
- Metaanaliza Fishera
- Częste problemy
- Zwiększanie czułości
- Wariancja innych statystyk
- Po co robić testy A/A?
- Jak przeprowadzać testy A/A?
- Gdy test A/A daje negatywny wynik
- Przykłady objęcia eksperymentem
- Przykład liczbowy (Kohavi, Longbotham i inni, 2009)
- Optymalne i konserwatywne objęcie eksperymentem
- Ogólny efekt eksperymentalny
- Wiarygodne objęcie eksperymentem
- Częste problemy
- Otwarte kwestie
- Błąd niedopasowania proporcji próbki
- Analizowanie problemów SRM
- Przykłady
- Propozycje praktycznych rozwiązań
- Wykrywanie i monitorowanie zakłóceń
- Czym są efekty długofalowe?
- Powody, dla których efekt eksperymentalny może się różnić krótko- i długofalowo
- Po co mierzyć efekt długofalowy?
- Długotrwałe eksperymenty
- Alternatywne metody długoterminowych eksperymentów
Przedmowa
Podziękowania
CZĘŚĆ I . Zagadnienia wstępne dla wszystkich
Rozdział 1. Wstęp i motywacja
Rozdział 2. Przeprowadzanie i analizowanie eksperymentów - kompleksowy przykład
Rozdział 3. Prawo Twymana i wiarygodność eksperymentów
Rozdział 4. Platforma i kultura eksperymentowania
CZĘŚĆ II . Wybrane zagadnienia dla wszystkich
Rozdział 5. Szybkość ma znaczenie. Całościowe studium przypadku
Rozdział 6. Wskaźniki organizacyjne
Rozdział 7. Wskaźniki dla eksperymentów i ogólne kryterium ewaluacji
Rozdział 8. Pamięć instytucjonalna i metaanaliza
Rozdział 9. Etyka w eksperymentach kontrolowanych
CZĘŚĆ III . Techniki uzupełniające i alternatywne w stosunku do eksperymentów kontrolowanych
Rozdział 10. Techniki uzupełniające
Rozdział 11. Obserwacyjne badania przyczynowe
CZĘŚĆ IV. Zaawansowane zagadnienia związane z budowaniem platformy do eksperymentowania
Rozdział 12. Eksperymenty po stronie klienta
Rozdział 13. Instrumentacja
Rozdział 14. Wybór jednostki randomizacji
Rozdział 15. Zwiększanie ekspozycji eksperymentu - kompromis między szybkością, jakością i ryzykiem
Rozdział 16. Skalowanie analizy eksperymentów
CZĘŚĆ V. Zaawansowane zagadnienia dotyczące analizy eksperymentów
Rozdział 17. Statystyka kontrolowanych eksperymentów online
Rozdział 18. Szacowanie wariancji i poprawa czułości - problemy i rozwiązania
Rozdział 19. Testy A/A
Rozdział 20. Objęcie eksperymentem i poprawa czułości
Rozdział 21. Błąd niedopasowania proporcji próby oraz inne wskaźniki ochronne
Rozdział 22. Wyciek informacji i zakłócenia między wariantami
Rozdział 23. Mierzenie długofalowego efektu eksperymentalnego
Oceny i opinie klientów: Kontrolowane eksperymenty online. Praktyczny przewodnik po testach A/B Ron Kohavi, Diane Tang, Ya Xu (0) Weryfikacja opinii następuję na podstawie historii zamówień na koncie Użytkownika umieszczającego opinię. Użytkownik mógł otrzymać punkty za opublikowanie opinii uprawniające do uzyskania rabatu w ramach Programu Punktowego.