[{"data":1,"prerenderedAt":3536},["ShallowReactive",2],{"story:de:de/data-science/testing-statistik-konfidenz-grundlagen":3,"icon:chevron-right":1583,"icon:envelope":1584,"icon:cross":1585,"blog-teaser::/data-science/testing-statistik-konfidenz-grundlagen:1":1586},[4,901],{"story":5,"cv":720,"rels":721,"links":893},{"name":6,"created_at":7,"published_at":8,"updated_at":9,"id":10,"uuid":11,"content":12,"slug":713,"full_slug":714,"sort_by_date":118,"position":715,"tag_list":716,"is_startpage":81,"parent_id":121,"meta_data":118,"group_id":717,"first_published_at":718,"release_id":118,"lang":124,"path":118,"alternates":719,"default_full_slug":118,"translated_slugs":118},"Settings","2025-02-26T17:11:48.854Z","2025-12-11T08:40:21.040Z","2025-12-11T08:40:21.063Z",632563359,"83ad7de7-b46f-48d7-9edc-3d89061e3d4f",{"_uid":13,"footer":14,"header":126,"component":499,"blog_read_more":500,"error_page_body":501,"error_page_head":671,"blog_author_head":687,"blog_bottom_head":701,"blog_sidebar_cta":702,"error_page_title":679,"blog_reading_time":703,"blog_bottom_buttons":704,"error_page_subtitle":685,"blog_meta_label_author":709,"blog_table_of_contents":710,"blog_meta_label_reading_time":711,"blog_meta_label_reading_minutes":712},"95ccfc97-3659-4608-8990-0248adfa1881",{"name":15,"created_at":7,"published_at":16,"updated_at":17,"id":18,"uuid":19,"content":20,"slug":116,"full_slug":117,"sort_by_date":118,"position":119,"tag_list":120,"is_startpage":51,"parent_id":121,"meta_data":118,"group_id":122,"first_published_at":123,"release_id":118,"lang":124,"path":118,"alternates":125,"default_full_slug":118,"translated_slugs":118,"_stopResolving":81},"Footer","2026-10-07T08:04:25.947Z","2026-10-07T08:04:25.973Z",632563360,"f91caf23-4392-4247-a497-5a33b5f8b0e2",{"cta":21,"_uid":45,"logo":46,"links":52,"component":82,"copyright":83,"logo_link":84,"legal_links":87},[22],{"_uid":23,"buttons":24,"caption":38,"component":43,"caption_position":44},"647620f2-206f-41a8-a066-1a9bcfafbedc",[25],{"_uid":26,"icon":27,"link":28,"text":34,"intent":35,"component":36,"icon_position":37},"290b992e-f2fa-47b9-805d-e59ebaab0660","chevron-right",{"id":29,"url":30,"linktype":31,"fieldtype":32,"cached_url":33},"dda7b895-91ef-4e7f-a501-501bafa8bc2b","","story","multilink","de/newsletter","Know-how ins Postfach","primary","util-button","leading",{"type":39,"content":40},"doc",[41],{"type":42},"paragraph","item-action-buttons","center","63d8b1e8-ed60-47da-be57-40b9eed794a0",{"id":47,"alt":30,"name":30,"focus":30,"title":30,"source":30,"filename":48,"copyright":30,"fieldtype":49,"meta_data":50,"is_external_url":51},22764167,"https://a.storyblok.com/f/328018/236x25/9dd018f217/logo-bk.svg","asset",{},false,[53,60,66,72],{"_uid":54,"link":55,"text":58,"component":59},"31741abf-7693-4e4f-9502-d2c322e40b4f",{"id":56,"url":30,"linktype":31,"fieldtype":32,"cached_url":57},"ceb695b8-32ca-4bcc-b418-0148c2a00dc8","de/conversion-optimierung","Conversion-Optimierung","util-link",{"_uid":61,"link":62,"text":65,"type":30,"component":59},"e0155237-ab2f-4584-8cd8-2bfd210973c1",{"id":63,"url":30,"linktype":31,"fieldtype":32,"cached_url":64},"5df5215d-7c85-44aa-a463-137a895ed5f2","de/personalisierung","Personalisierung",{"_uid":67,"link":68,"text":71,"component":59},"2fc5d177-de04-4a95-b66f-83dd15c604e7",{"id":69,"url":30,"linktype":31,"fieldtype":32,"cached_url":70},"8c7b080c-9822-4a6e-ac1a-d3ac1930d644","de/kontakt","Kontakt",{"_uid":73,"link":74,"text":78,"component":59},"a84a6018-72c7-403e-a16d-9033ec862d46",{"id":75,"url":30,"linktype":31,"fieldtype":32,"cached_url":76,"story":77},"d678066e-5183-42ca-9740-53aef05840bc","de/ueber-uns/karriere",{"name":78,"id":79,"uuid":75,"slug":80,"url":76,"full_slug":76,"_stopResolving":81},"Karriere",61774610481128,"karriere",true,"core-footer","© 2026 konversionsKRAFT AG",{"id":85,"url":30,"linktype":31,"fieldtype":32,"cached_url":86},"f74c775f-6663-471d-8909-a2c89001a39f","de/",[88,94,100,106,112],{"_uid":89,"link":90,"text":93,"component":59},"de414811-3677-47d5-9976-0b0ffcbf33cb",{"id":91,"url":30,"linktype":31,"fieldtype":32,"cached_url":92},"ff78948e-62fc-4366-bb99-35a4e445f7b7","de/datenschutzerklaerung","Datenschutz",{"_uid":95,"link":96,"text":99,"component":59},"61a55edc-2e44-4c34-85ee-592092d40fff",{"id":97,"url":30,"linktype":31,"fieldtype":32,"cached_url":98},"db985f58-3c1f-4682-a22c-1e309a879bfc","de/allgemeine-geschaeftsbedingungen","AGB",{"_uid":101,"link":102,"text":105,"component":59},"9dd6dd9c-8099-46cb-94eb-7a2eff25cafb",{"id":103,"url":30,"linktype":31,"fieldtype":32,"cached_url":104},"8844a87b-92ca-4340-ad83-45623ec51d28","de/impressum","Impressum",{"_uid":107,"link":108,"text":111,"component":59},"1c9552b5-81f7-49e0-b7c7-7f78e48fe757",{"id":109,"url":30,"linktype":31,"fieldtype":32,"cached_url":110},"c180fc5b-1552-4f9a-8096-7522c2fc74b8","de/barrierefreiheitserklaerung","Barrierefreiheitserklärung",{"_uid":113,"link":114,"text":115,"component":59},"7c9e9042-51c1-4e2d-b44e-43b819a28273",{"id":97,"url":30,"linktype":31,"fieldtype":32,"cached_url":98},"Cookies","footer","de/_settings/footer",null,-30,[],632563353,"265f0d28-1033-4059-a49d-3cbad3c63dd2","2025-05-05T09:35:19.813Z","default",[],{"name":127,"created_at":7,"published_at":128,"updated_at":129,"id":130,"uuid":131,"content":132,"slug":492,"full_slug":493,"sort_by_date":118,"position":494,"tag_list":495,"is_startpage":51,"parent_id":121,"meta_data":118,"group_id":496,"first_published_at":497,"release_id":118,"lang":124,"path":118,"alternates":498,"default_full_slug":118,"translated_slugs":118,"_stopResolving":81},"Header","2026-10-07T11:10:10.189Z","2026-10-07T11:10:10.205Z",632563358,"2f01a7ab-082d-45e9-adbe-b223c4ba9feb",{"_uid":133,"link":134,"logo":137,"links":141,"buttons":487,"component":491},"5ff93704-f742-47ed-92db-e5b13f03564b",{"id":30,"url":135,"linktype":136,"fieldtype":32,"cached_url":135},"https://www.konversionskraft.de","url",{"id":138,"alt":30,"name":30,"focus":30,"title":30,"source":30,"filename":139,"copyright":30,"fieldtype":49,"meta_data":140,"is_external_url":51},21395391,"https://a.storyblok.com/f/328018/300x31/362acdb1c8/kk-logo-white.svg",{},[142,190,244,293,432,443],{"_uid":143,"link":144,"links":147,"title":188,"component":189},"b2cf1eaa-6274-4de9-bf12-eec7e5df59f9",{"id":145,"url":30,"linktype":31,"fieldtype":32,"cached_url":146},"147973fb-7b43-4d6d-a404-ab2c0678fbc2","de/loesungen/",[148,153,158,164,170,176,182],{"_uid":149,"link":150,"text":58,"component":59},"3a7093f2-25df-4ed5-b335-805febe74512",{"id":151,"url":30,"linktype":31,"fieldtype":32,"cached_url":152},"c9021c39-1839-49c7-98c4-4014de8cfe28","de/loesungen/conversion-optimierung",{"_uid":154,"link":155,"text":65,"component":59},"159678a7-7dd0-460b-b9d9-8741afdc2b23",{"id":156,"url":30,"linktype":31,"fieldtype":32,"cached_url":157},"3f593847-2edc-4128-9330-e5bd0c0cdeb8","de/loesungen/personalisierung-ueberblick",{"_uid":159,"link":160,"text":163,"component":59},"4214b02c-039c-4a9c-b545-3cbce68afe82",{"id":161,"url":30,"linktype":31,"fieldtype":32,"cached_url":162},"2f790b38-6102-44bf-be14-30eb612116b7","de/loesungen/redesign-absicherung","Relaunch-/Redesign-Absicherung",{"_uid":165,"link":166,"text":169,"component":59},"328ea4fc-4b3f-47ec-b944-44bd93652d5e",{"id":167,"url":30,"linktype":31,"fieldtype":32,"cached_url":168},"556166c5-b13e-4cb7-9f29-b3ee70e89da5","de/loesungen/mehr-marketingeffizienz","Online-Marketing & Kampagnenoptimierung",{"_uid":171,"link":172,"text":175,"component":59},"836ef4eb-2dc4-419e-b607-99f8e0a55eea",{"id":173,"url":30,"linktype":31,"fieldtype":32,"cached_url":174},"f0d0c226-175e-437e-9ec3-2a774d53176b","de/loesungen/kundenbindung-loyalty","Kundenbindung & Loyalty",{"_uid":177,"link":178,"text":181,"component":59},"b4b4fb97-e791-42a6-b3a1-b1eff37e39cc",{"id":179,"url":30,"linktype":31,"fieldtype":32,"cached_url":180},"8384ac3d-99d5-450c-a366-97de897ba6c4","de/loesungen/kundenzentrierung","Kundenzentrierte Test-/Experimentierkultur",{"_uid":183,"link":184,"text":187,"component":59},"6bb72781-75bb-447e-8c30-4e3731e74c1b",{"id":185,"url":30,"linktype":31,"fieldtype":32,"cached_url":186},"3e74fa84-d5dd-4989-9b54-dc4b17d78d61","de/loesungen/product-discovery","Produktentwicklung & MVP-Begleitung","Lösungen","util-link-list",{"_uid":191,"link":192,"links":195,"title":243,"component":189},"c72751dc-01ca-4393-88d5-f98044c20dfe",{"id":193,"url":30,"linktype":31,"fieldtype":32,"cached_url":194},"3d5d20be-27f5-4633-85b0-bd2e681643a7","de/case-studies/case-study-ueberblick",[196,202,208,213,219,225,231,237],{"_uid":197,"link":198,"text":201,"component":59},"7842509a-13c2-4d57-887d-eca5e88c29c0",{"id":199,"url":30,"linktype":31,"fieldtype":32,"cached_url":200},"432ec656-e9cb-4462-85f3-0d653d33bcd3","de/case-studies/case-study-betzold","Betzold: Personalisierung für KMU",{"_uid":203,"link":204,"text":207,"component":59},"edd83cb1-2bb0-469a-8007-d76d26c94804",{"id":205,"url":30,"linktype":31,"fieldtype":32,"cached_url":206},"b2f8d181-b222-4b79-a35a-ffc813533953","de/case-studies/case-study-freenet-ag","Freenet: CRO Team aufbauen & Inhousing",{"_uid":209,"link":210,"text":212,"component":59},"c43a5159-7404-431a-a873-696fc2415618",{"id":30,"url":211,"linktype":136,"fieldtype":32,"cached_url":211},"https://www.konversionskraft.de/innovationsmanagement/design-sprints.html","Telefonica: Innovation mit Design Sprints",{"_uid":214,"link":215,"text":218,"component":59},"79bdb63a-dd36-468f-ad57-1ff6352335ff",{"id":216,"url":30,"linktype":31,"fieldtype":32,"cached_url":217},"9da92b5c-0b48-463c-96af-f324d5951218","de/case-studies/case-study-computeruniverse","computeruniverse: Echtzeit Personalisierung",{"_uid":220,"link":221,"text":224,"component":59},"ed7cefbb-abbd-4bbe-ad78-97923943a968",{"id":222,"url":30,"linktype":31,"fieldtype":32,"cached_url":223},"bbad9c18-473e-4035-bb5a-9ec561f46a1d","de/case-studies/case-study-goertz","Görtz: Design Driven Relaunch",{"_uid":226,"link":227,"text":230,"component":59},"0025c2b0-0253-444d-89be-9bbae77b66fd",{"id":228,"url":30,"linktype":31,"fieldtype":32,"cached_url":229},"c6eccf7f-3c04-4d2e-84d7-aca24c02131a","de/case-studies/case-study-haufe","Haufe: Customer Centricity",{"_uid":232,"link":233,"text":236,"component":59},"ce573bb0-0e46-4c94-a737-bec58af9b6b3",{"id":234,"url":30,"linktype":31,"fieldtype":32,"cached_url":235},"0d6607f2-7b17-4248-877e-fab97adadbbd","de/case-studies/case-study-aldi-sued-personalisierung","ALDI Süd: Kanalübergreifende Personalisierung",{"_uid":238,"link":239,"text":242,"component":59},"155dbddf-9f79-4a6e-a17e-9c044fba1145",{"id":240,"url":30,"linktype":31,"fieldtype":32,"cached_url":241},"cb05cdff-2855-4e30-8abe-b7c60fb50e07","de/ressourcen/studien/download-grow-report","G.R.O.W. Report & Canvas - Download","Cases",{"_uid":245,"link":246,"links":249,"title":292,"component":189},"290333ca-9ef6-4c0d-8878-f5c285374311",{"id":247,"url":30,"linktype":31,"fieldtype":32,"cached_url":248},"0a47fb29-43c0-480d-8192-fdec9bed2a00","de/branchen/",[250,256,262,268,274,280,286],{"_uid":251,"link":252,"text":255,"component":59},"e03779ff-4a0c-492b-a23f-82cc41ce1b42",{"id":253,"url":30,"linktype":31,"fieldtype":32,"cached_url":254},"9db23777-e782-4660-8772-9f6b5706455e","de/branchen/banking-finance","Banking & Finance",{"_uid":257,"link":258,"text":261,"component":59},"f87e851a-7b12-4e65-8e92-329f5c9320c3",{"id":259,"url":30,"linktype":31,"fieldtype":32,"cached_url":260},"df24ecee-0472-4e18-b719-98ae5a7eaf30","de/branchen/b2b","B2B",{"_uid":263,"link":264,"text":267,"component":59},"2e8b4eaa-1fc5-445c-976f-bf38a081e21f",{"id":265,"url":30,"linktype":31,"fieldtype":32,"cached_url":266},"bdd1cf11-ef56-4696-be69-fa57208726f9","de/branchen/ngo","Non-Governmental Organisations",{"_uid":269,"link":270,"text":273,"component":59},"fbfa0f52-59fb-4fe2-9124-29860f34613f",{"id":271,"url":30,"linktype":31,"fieldtype":32,"cached_url":272},"f6d46912-5fe2-4540-9d5b-c06a31e49306","de/branchen/telekommunikation","Telekommunikation",{"_uid":275,"link":276,"text":279,"component":59},"2c8f964f-f25d-47fe-ac8f-e11f53673926",{"id":277,"url":30,"linktype":31,"fieldtype":32,"cached_url":278},"7bfaf1a9-5c8e-4a08-92ce-80b5ed12e311","de/branchen/e-commerce","E-Commerce",{"_uid":281,"link":282,"text":285,"component":59},"7657fffb-c9f6-47f7-a970-a9a623d59aca",{"id":283,"url":30,"linktype":31,"fieldtype":32,"cached_url":284},"d972d186-d012-40ec-94bf-d6f072c006bd","de/branchen/conversion-optimierung-travel","Travel & Entertainment",{"_uid":287,"link":288,"text":291,"component":59},"95e5bd1c-820a-404c-9425-fa5726f46039",{"id":289,"url":30,"linktype":31,"fieldtype":32,"cached_url":290},"adec7223-27fe-48be-895d-542dd2154619","de/branchen/d2c","D2C","Branchen",{"_uid":294,"link":295,"links":298,"title":431,"component":189},"78233a78-d66e-44e6-9bc6-f04e21981a36",{"id":296,"url":30,"linktype":31,"fieldtype":32,"cached_url":297},"2868c027-4bca-49d6-a93e-64534a555c46","de/know-how-tools",[299,303,309,315,321,325,335,341,346,356,362,368,374,380,386,392,396,401,407,413,419,425],{"_uid":300,"link":301,"text":302,"component":59},"e1000000-0000-4000-8000-000000000001",{"id":56,"url":30,"linktype":31,"fieldtype":32,"cached_url":57},"Ratgeber: Was ist Conversion-Optimierung?",{"_uid":304,"link":305,"text":308,"component":59},"e1000000-0000-4000-8000-000000000002",{"id":306,"url":30,"linktype":31,"fieldtype":32,"cached_url":307},"c3fa47db-d9f1-440c-90f1-5edb09eff03b","de/customer-journey","Ratgeber: Was ist eine Customer Journey?",{"_uid":310,"link":311,"text":314,"component":59},"e1000000-0000-4000-8000-000000000003",{"id":312,"url":30,"linktype":31,"fieldtype":32,"cached_url":313},"cda69b30-8362-4d2d-80a3-ef4b9f11178a","de/ab-testing","Ratgeber: Was ist A/B-Testing?",{"_uid":316,"link":317,"text":320,"component":59},"e1000000-0000-4000-8000-000000000004",{"id":318,"url":30,"linktype":31,"fieldtype":32,"cached_url":319},"2c10eaf4-b33d-43f0-ac03-831a2c9513f2","de/cro-agentur-finden","Ratgeber: Wie finde ich eine gute CRO-Agentur?",{"_uid":322,"link":323,"text":324,"component":59},"e1000000-0000-4000-8000-000000000005",{"id":63,"url":30,"linktype":31,"fieldtype":32,"cached_url":64},"Ratgeber: Was ist Personalisierung?",{"_uid":326,"link":327,"text":334,"component":59},"5b065a95-dc2c-4157-9cce-36a5491d748a",{"id":328,"url":30,"linktype":31,"fieldtype":32,"cached_url":329,"story":330},"f3c858d2-69c1-4782-a66c-03634b2258f6","de/weiterbildung/uebersicht-der-weiterbildungsangebote",{"name":331,"id":332,"uuid":328,"slug":333,"url":329,"full_slug":329,"_stopResolving":81},"Übersicht der Weiterbildungsangebote",61789049106112,"uebersicht-der-weiterbildungsangebote","Academy - E-Kurse & Schulungen",{"_uid":336,"link":337,"text":340,"component":59},"7f66786d-3901-4f91-b78b-5363f8a34cbd",{"id":338,"url":30,"linktype":31,"fieldtype":32,"cached_url":339},"cb7da046-7dd0-466b-a99d-5e01142617f1","de/ressourcen/download-bibliothek","Download Bibliothek - E-Books, Studien, Frameworks",{"_uid":342,"link":343,"text":345,"component":59},"8eb16b14-6456-4a01-8f2c-aa930c24ac5d",{"id":328,"url":30,"linktype":31,"fieldtype":32,"cached_url":329,"story":344},{"name":331,"id":332,"uuid":328,"slug":333,"url":329,"full_slug":329,"_stopResolving":81},"Weiterbildungen im Überblick",{"_uid":347,"link":348,"text":355,"component":59},"aff38e25-0be7-4a95-8247-7875f706c31d",{"id":349,"url":30,"linktype":31,"fieldtype":32,"cached_url":350,"story":351},"59affe36-02b5-42a7-9ef1-a2ea2e34bc71","de/webinare/",{"name":352,"id":353,"uuid":349,"slug":354,"url":350,"full_slug":350,"_stopResolving":81},"Anstehende Webinare",62483764663535,"webinare","Webinare",{"_uid":357,"link":358,"text":361,"component":59},"2ab92889-dda6-4602-89d4-48b24e7a6e97",{"id":359,"url":30,"linktype":31,"fieldtype":32,"cached_url":360},"c96790f9-bb24-4408-873a-807fa6dab582","de/tools/","Statistik Tools",{"_uid":363,"link":364,"text":367,"component":59},"6332bc11-9aaf-402f-84b6-715384d999ad",{"id":365,"url":30,"linktype":31,"fieldtype":32,"cached_url":366},"c9edb73d-2ca1-4011-bc6f-6b60489a133b","de/weiterbildung/inhouse-lehrgang-zertifizierter-conversion-manager","Inhouse Lehrgang - Conversion Manager",{"_uid":369,"link":370,"text":373,"component":59},"b4dc283b-c2a3-4b37-bd4d-ab62342a5fc5",{"id":371,"url":30,"linktype":31,"fieldtype":32,"cached_url":372},"25e060e7-a7d4-43e4-845a-2287180afe78","de/weiterbildung/inhouse-schulung-product-discovery","Inhouse Training - Product Discovery ",{"_uid":375,"link":376,"text":379,"component":59},"f10472fa-9d8b-4ab7-96f8-2dd9c93f6553",{"id":377,"url":30,"linktype":31,"fieldtype":32,"cached_url":378},"af525344-9836-4511-81a1-4fb95c0e67aa","de/produkte/behavior-pattern-model-poster","Behavior Pattern Model Poster",{"_uid":381,"link":382,"text":385,"component":59},"fb118cba-5d23-4282-8a72-c27ea9a8aec9",{"id":383,"url":30,"linktype":31,"fieldtype":32,"cached_url":384},"9c48d4d5-330b-4b96-af5e-68a9cda735d4","de/produkte/behavior-patterns-kartenset","Behavior Pattern Kartenset",{"_uid":387,"link":388,"text":391,"component":59},"90aba8f9-395b-4f38-abad-71f05bc0449f",{"id":389,"url":30,"linktype":31,"fieldtype":32,"cached_url":390},"5dab273c-49bb-4f64-a3cd-de96f0d7b39f","de/growth-ambassador-community","Growth Ambassador Community",{"_uid":393,"link":394,"text":395,"component":59},"99cf735d-f680-4c48-9074-636c4830d35a",{"id":29,"url":30,"linktype":31,"fieldtype":32,"cached_url":33},"News & Know-how in dein Postfach",{"_uid":397,"link":398,"text":400,"component":59},"f5697cde-7f34-4274-9572-e5ec3e7457bd",{"id":30,"url":399,"linktype":136,"fieldtype":32,"cached_url":399},"https://www.growthmindedsuperheroes.com/","GMS - growth minded SUPERHEROES",{"_uid":402,"link":403,"text":406,"component":59},"00f49f9b-f75c-4775-a61f-41fd61a92ed3",{"id":404,"url":30,"linktype":31,"fieldtype":32,"cached_url":405},"1d084a65-02b3-4ee1-be0d-9806be223ab2","de/ressourcen/e-books/statistik-e-book-und-basic-wissen-fuer-a-b-testing","Download: Statistik E-Book Bundle",{"_uid":408,"link":409,"text":412,"component":59},"e0422140-94e7-4dd8-87f7-a0f752dd712d",{"id":410,"url":30,"linktype":31,"fieldtype":32,"cached_url":411},"c8996f10-09f1-4543-874b-158275456f9b","de/ressourcen/e-books/personalisierung-mit-dem-4-stufen-modell","Download: E-Book Personalisierung",{"_uid":414,"link":415,"text":418,"component":59},"de7271fe-965f-418b-8d42-31b78f962e1d",{"id":416,"url":30,"linktype":31,"fieldtype":32,"cached_url":417},"58333d89-01c3-4cac-863e-e7cbc02a08bc","de/ressourcen/frameworks/wdw-hypothesen-framework","Download: WDW Hypothesen Framework",{"_uid":420,"link":421,"text":424,"component":59},"be031ed2-c7f7-4c8b-8f58-6f87074f4dc0",{"id":422,"url":30,"linktype":31,"fieldtype":32,"cached_url":423},"3aa8f349-0361-45a7-a391-066df5c9e7ff","de/ressourcen/frameworks/roi-ab-testing-business-case-paket","Download: A/B Testing ROI Business Case Paket",{"_uid":426,"link":427,"text":430,"type":30,"component":59},"8d464b9b-86fe-4c09-b5ad-15f1746ab4a8",{"id":428,"url":30,"linktype":31,"fieldtype":32,"cached_url":429},"4e8a7b56-0857-4af1-9068-edc69349fb30","de/ressourcen/frameworks/hook-model-canvas","Framework: Hook Model Canvas","Know-how & Tools",{"_uid":433,"link":434,"links":441,"title":442,"component":189},"3a303c5d-3ef4-482e-b31d-02856c821947",{"id":435,"url":30,"linktype":31,"fieldtype":32,"cached_url":436,"story":437},"1e20ab74-88ab-4f66-b3a1-019d85e2ef84","de/blog/",{"name":438,"id":439,"uuid":435,"slug":440,"url":436,"full_slug":436,"_stopResolving":81},"Overview",103884675285507,"blog",[],"Blog",{"_uid":444,"link":445,"links":448,"title":486,"component":189},"5e1fb531-7f55-4c8e-8b25-32fa43e7af94",{"id":446,"url":30,"linktype":31,"fieldtype":32,"cached_url":447},"d7112b89-d5ce-41d8-a369-293c8b86e98d","de/ueber-uns/wer-wir-sind",[449,453,463,469,474,480],{"_uid":450,"link":451,"text":452,"component":59},"95511c3e-0c54-4f6e-83bc-143e5ac943f2",{"id":446,"url":30,"linktype":31,"fieldtype":32,"cached_url":447},"Team: Wer wir sind",{"_uid":454,"link":455,"text":462,"component":59},"10e03a1d-860a-4a64-8997-f352cab5291c",{"id":456,"url":30,"linktype":31,"fieldtype":32,"cached_url":457,"story":458},"c20fc377-1157-4539-97d2-0ded113d1a69","de/ueber-uns/was-wir-tun",{"name":459,"id":460,"uuid":456,"slug":461,"url":457,"full_slug":457,"_stopResolving":81},"Was wir tun",62047816851482,"was-wir-tun","Methoden: Was wir tun",{"_uid":464,"link":465,"text":468,"component":59},"cc8765bf-7f12-478b-81a7-29f508fc805a",{"id":466,"url":30,"linktype":31,"fieldtype":32,"cached_url":467},"b190ded2-7e87-4b67-83c9-8ad6625d5480","de/ueber-uns/unsere-kunden","Kunden: Für wen arbeiten wir",{"_uid":470,"link":471,"text":473,"component":59},"47e8279b-16f2-4f6b-8cd3-bd9407369bba",{"id":75,"url":30,"linktype":31,"fieldtype":32,"cached_url":76,"story":472},{"name":78,"id":79,"uuid":75,"slug":80,"url":76,"full_slug":76,"_stopResolving":81},"Karriere & Jobs",{"_uid":475,"link":476,"text":479,"component":59},"85eb0d40-5379-4f62-a6a8-6cbbbcf27dd9",{"id":477,"url":30,"linktype":31,"fieldtype":32,"cached_url":478},"e5cc2d5c-06b8-4487-941c-0e463c3e4f0b","de/ueber-uns/team-first","Unsere Kultur: Team first",{"_uid":481,"link":482,"text":485,"component":59},"e8111c32-8191-4211-b40d-073b5afdf12f",{"id":483,"url":30,"linktype":31,"fieldtype":32,"cached_url":484},"31befb84-87a7-4c51-9028-092a1a69f015","de/grow-model","G.R.O.W. Model - Reifegrad Assessment","Über uns",[488],{"_uid":489,"icon":30,"link":490,"text":71,"intent":35,"component":36,"icon_position":37},"1b18d9f0-85af-48f2-a038-6a823d74dbff",{"id":69,"url":30,"linktype":31,"fieldtype":32,"cached_url":70},"core-header","header","de/_settings/header",0,[],"c1fc9f92-e520-41db-8395-ac2606e318d5","2025-05-05T09:35:20.471Z",[],"singleton-settings","Mehr lesen",[502],{"_uid":503,"head":504,"cards":519,"theme":124,"alignment":44,"component":667,"cards_per_row":668,"icon_position":669,"action_buttons":670,"bordered_cards":81},"3aaa4f32-19e8-41b0-aa02-03b4360405e7",[505],{"_uid":506,"kicker":30,"headline":507,"component":514,"subheadline":515,"show_top_line":81,"action_buttons":518},"67897cc1-c782-48fd-b6a9-3f48dfa972c1",{"type":39,"content":508},[509],{"type":42,"content":510},[511],{"text":512,"type":513},"Danach suchten andere Besucher","text","item-head",{"type":39,"content":516},[517],{"type":42},[],[520,549,575,597,621,644],{"tag":30,"_uid":521,"icon":522,"text":528,"image":534,"button":536,"headline":543,"component":548},"509dd04a-ac3a-4842-b787-c99d7bbe614b",{"id":523,"alt":524,"name":30,"focus":30,"title":525,"source":30,"filename":526,"copyright":30,"fieldtype":49,"meta_data":527,"is_external_url":51},23160806,"Halbkreis mit Tachonadel im rechten Bereich","Performance","https://a.storyblok.com/f/328018/150x150/d47b48585b/performance-heller-bg.svg",{"alt":524,"title":525,"source":30,"copyright":30},{"type":39,"content":529},[530],{"type":42,"content":531},[532],{"text":533,"type":513},"Mit dem Konfidenzrechner von konversionsKRAFT hast du die Möglichkeit, die Ergebnisse deines A/B-Tests auf signifikante Unterschiede zu untersuchen.",{"id":118,"alt":118,"name":30,"focus":118,"title":118,"source":118,"filename":30,"copyright":118,"fieldtype":49,"meta_data":535},{},[537],{"_uid":538,"icon":27,"link":539,"text":546,"intent":547,"component":36,"icon_position":37},"942eaebc-4d2f-49f1-818a-64913826a082",{"id":540,"url":30,"linktype":31,"fieldtype":32,"cached_url":541,"story":542},"20da88c1-38f8-46fb-8efb-99c7e3edaf41","de/tools/konfidenzrechner",{"name":543,"id":544,"uuid":540,"slug":545,"url":541,"full_slug":541,"_stopResolving":81},"Konfidenzrechner",62131923697584,"konfidenzrechner","Zum Tool","tertiary","section-features__card",{"tag":30,"_uid":550,"icon":551,"text":557,"image":563,"button":565,"headline":572,"component":548},"f5939252-f8ef-4fa9-a412-d80045de2c3a",{"id":552,"alt":553,"name":30,"focus":30,"title":554,"source":30,"filename":555,"copyright":30,"fieldtype":49,"meta_data":556,"is_external_url":51},23160824,"Stilisierte Uhr mit weißen Zeigern auf 12 und 3 Uhr, umgeben von einem schwarzen, gegen den Uhrzeigersinn gezeichneten Pfeilkreis","Rückblick","https://a.storyblok.com/f/328018/150x150/25b4408792/uhr-rueckblick-heller-bg.svg",{"alt":553,"title":554,"source":30,"copyright":30},{"type":39,"content":558},[559],{"type":42,"content":560},[561],{"text":562,"type":513},"Der Testlaufzeitrechner hilft dir, deine Uplifts sicher nachzuweisen und eine bessere Einschätzung für den nachweisbaren Effekt vornehmen zu können.",{"id":118,"alt":118,"name":30,"focus":118,"title":118,"source":118,"filename":30,"copyright":118,"fieldtype":49,"meta_data":564},{},[566],{"_uid":567,"icon":27,"link":568,"text":546,"intent":547,"component":36,"icon_position":37},"903598b6-6a79-4e7c-a44e-7ad9b3f1b2ab",{"id":569,"url":30,"linktype":31,"fieldtype":32,"cached_url":570,"story":571},"5c12fee4-da27-4b84-9e21-125e542f2261","de/tools/testlaufzeitrechner",{"name":572,"id":573,"uuid":569,"slug":574,"url":570,"full_slug":570,"_stopResolving":81},"Testlaufzeitrechner",62134457203508,"testlaufzeitrechner",{"tag":30,"_uid":576,"icon":577,"text":583,"image":589,"button":591,"headline":355,"component":548},"3f45584f-e296-4c4c-aeb2-74fb602c25cc",{"id":578,"alt":579,"name":30,"focus":30,"title":580,"source":30,"filename":581,"copyright":30,"fieldtype":49,"meta_data":582,"is_external_url":51},23160767,"Icon mit Person einem Notebook und Smartphone","Customer Journey","https://a.storyblok.com/f/328018/150x150/ea7a1982ed/customer-journey-heller-bg.svg",{"alt":579,"title":580,"source":30,"copyright":30},{"type":39,"content":584},[585],{"type":42,"content":586},[587],{"text":588,"type":513},"Unsere Webinare richten sich an alle, die mehr wollen – mehr Uplift, mehr ROI, mehr Wachstum. Unsere Experten und Gastreferenten vermitteln in den Web-Seminaren wichtiges Optimiererwissen.",{"id":118,"alt":118,"name":30,"focus":118,"title":118,"source":118,"filename":30,"copyright":118,"fieldtype":49,"meta_data":590},{},[592],{"_uid":593,"icon":27,"link":594,"text":596,"intent":547,"component":36,"icon_position":37},"eec7fdfe-219e-4996-b99e-645675c27ea8",{"id":349,"url":30,"linktype":31,"fieldtype":32,"cached_url":350,"story":595},{"name":352,"id":353,"uuid":349,"slug":354,"url":350,"full_slug":350,"_stopResolving":81},"Zur Übersicht",{"tag":30,"_uid":598,"icon":599,"text":605,"image":612,"button":614,"headline":620,"component":548},"d70a1587-7a51-414c-aa40-fa4419ea02b7",{"id":600,"alt":601,"name":30,"focus":30,"title":602,"source":30,"filename":603,"copyright":30,"fieldtype":49,"meta_data":604,"is_external_url":51},23160771,"Symbol eines Bachelor Huts für Bildung","Bachelor Hut","https://a.storyblok.com/f/328018/150x150/35fc1a0701/diplom-bachelor-heller-bg.svg",{"alt":601,"title":602,"source":30,"copyright":30},{"type":39,"content":606},[607],{"type":42,"attrs":608,"content":609},{"textAlign":118},[610],{"text":611,"type":513},"Profitiere von der langjährigen Erfahrung unserer Consultants, Analysten, UX Designern und Konsumpsychologen und erlange neues Know-how für deinen Alltag.",{"id":118,"alt":118,"name":30,"focus":118,"title":118,"source":118,"filename":30,"copyright":118,"fieldtype":49,"meta_data":613},{},[615],{"_uid":616,"icon":27,"link":617,"text":619,"intent":547,"component":36,"icon_position":37},"c320c7a7-6ad7-4ab7-8cbd-98b5dbe6fa38",{"id":328,"url":30,"linktype":31,"fieldtype":32,"cached_url":329,"story":618},{"name":331,"id":332,"uuid":328,"slug":333,"url":329,"full_slug":329,"_stopResolving":81},"Zur Weiterbildung","Weiterbildung",{"tag":30,"_uid":622,"icon":623,"text":629,"image":636,"button":638,"headline":459,"component":548},"cd63af88-8220-48f4-b392-1f5eabcb2d3c",{"id":624,"alt":625,"name":30,"focus":30,"title":626,"source":30,"filename":627,"copyright":30,"fieldtype":49,"meta_data":628,"is_external_url":51},23160799,"Drei Personen nebeneinander mit jeweils einem Stern darunter","Kundenbedürfnis verstehen","https://a.storyblok.com/f/328018/150x150/02138a981e/kundenbeduerfnis-verstehen-heller-bg.svg",{"alt":625,"title":626,"source":30,"copyright":30},{"type":39,"content":630},[631,635],{"type":42,"content":632},[633],{"text":634,"type":513},"Wir erschließen schnell und systematisch existierende digitale Wachstumspotenziale. Agil, kundenzentriert und datenbasiert.",{"type":42},{"id":118,"alt":118,"name":30,"focus":118,"title":118,"source":118,"filename":30,"copyright":118,"fieldtype":49,"meta_data":637},{},[639],{"_uid":640,"icon":27,"link":641,"text":643,"intent":547,"component":36,"icon_position":37},"e7f68e81-f9b0-4fb4-810b-224498e148b2",{"id":456,"url":30,"linktype":31,"fieldtype":32,"cached_url":457,"story":642},{"name":459,"id":460,"uuid":456,"slug":461,"url":457,"full_slug":457,"_stopResolving":81},"Mehr erfahren",{"tag":30,"_uid":645,"icon":646,"text":652,"image":659,"button":661,"headline":78,"component":548},"cf571a54-a871-40ed-b3da-a8f7bc23fdf4",{"id":647,"alt":648,"name":30,"focus":30,"title":649,"source":30,"filename":650,"copyright":30,"fieldtype":49,"meta_data":651,"is_external_url":51},23160774,"Ein skizzierter Diamant der funkelt","Diamant","https://a.storyblok.com/f/328018/150x150/67d557c518/diamant-heller-bg.svg",{"alt":648,"title":649,"source":30,"copyright":30},{"type":39,"content":653},[654,658],{"type":42,"content":655},[656],{"text":657,"type":513},"Bist du bereit, deine Karriere bei uns zu starten?",{"type":42},{"id":118,"alt":118,"name":30,"focus":118,"title":118,"source":118,"filename":30,"copyright":118,"fieldtype":49,"meta_data":660},{},[662],{"_uid":663,"icon":27,"link":664,"text":666,"intent":547,"component":36,"icon_position":37},"4b0f8e8b-cfbd-4bad-99ba-ed5635cc99ae",{"id":75,"url":30,"linktype":31,"fieldtype":32,"cached_url":76,"story":665},{"name":78,"id":79,"uuid":75,"slug":80,"url":76,"full_slug":76,"_stopResolving":81},"Vakanzen","section-features-1","3","top",[],[672],{"_uid":673,"kicker":30,"headline":674,"component":514,"subheadline":680,"show_top_line":51,"action_buttons":686},"31cce379-ea89-4fdf-84f8-52e990bcf402",{"type":39,"content":675},[676],{"type":42,"content":677},[678],{"text":679,"type":513},"Hoppla!",{"type":39,"content":681},[682],{"type":42,"content":683},[684],{"text":685,"type":513},"Die angeforderte Seite konnte leider nicht gefunden werden.",[],[688],{"_uid":689,"type":30,"kicker":30,"headline":690,"component":514,"subheadline":697,"show_top_line":51,"action_buttons":700},"3ffbe671-41cf-400a-980c-6dbe14b6ce6f",{"type":39,"content":691},[692],{"type":42,"attrs":693,"content":694},{"textAlign":118},[695],{"text":696,"type":513},"Über den Autor",{"type":39,"content":698},[699],{"type":42},[],[],[],"min Lesezeit",[705],{"_uid":706,"icon":27,"link":707,"text":500,"intent":35,"component":36,"icon_position":37},"bb239a64-a116-4d8f-9695-ffc1a5e260a3",{"id":435,"url":30,"linktype":31,"fieldtype":32,"cached_url":436,"story":708},{"name":438,"id":439,"uuid":435,"slug":440,"url":436,"full_slug":436,"_stopResolving":81},"Verfasst von","Inhalt","Lesedauer","Minuten","_settings","de/_settings/",-40,[],"c1ba6ded-acb9-4c7e-8404-38e942bdfab9","2025-05-05T09:35:20.134Z",[],1791547703,[722,857],{"name":127,"created_at":7,"published_at":128,"updated_at":129,"id":130,"uuid":131,"content":723,"slug":492,"full_slug":493,"sort_by_date":118,"position":494,"tag_list":855,"is_startpage":51,"parent_id":121,"meta_data":118,"group_id":496,"first_published_at":497,"release_id":118,"lang":124,"path":118,"alternates":856,"default_full_slug":118,"translated_slugs":118},{"_uid":133,"link":724,"logo":725,"links":727,"buttons":852,"component":491},{"id":30,"url":135,"linktype":136,"fieldtype":32,"cached_url":135},{"id":138,"alt":30,"name":30,"focus":30,"title":30,"source":30,"filename":139,"copyright":30,"fieldtype":49,"meta_data":726,"is_external_url":51},{},[728,745,764,781,831,835],{"_uid":143,"link":729,"links":730,"title":188,"component":189},{"id":145,"url":30,"linktype":31,"fieldtype":32,"cached_url":146},[731,733,735,737,739,741,743],{"_uid":149,"link":732,"text":58,"component":59},{"id":151,"url":30,"linktype":31,"fieldtype":32,"cached_url":152},{"_uid":154,"link":734,"text":65,"component":59},{"id":156,"url":30,"linktype":31,"fieldtype":32,"cached_url":157},{"_uid":159,"link":736,"text":163,"component":59},{"id":161,"url":30,"linktype":31,"fieldtype":32,"cached_url":162},{"_uid":165,"link":738,"text":169,"component":59},{"id":167,"url":30,"linktype":31,"fieldtype":32,"cached_url":168},{"_uid":171,"link":740,"text":175,"component":59},{"id":173,"url":30,"linktype":31,"fieldtype":32,"cached_url":174},{"_uid":177,"link":742,"text":181,"component":59},{"id":179,"url":30,"linktype":31,"fieldtype":32,"cached_url":180},{"_uid":183,"link":744,"text":187,"component":59},{"id":185,"url":30,"linktype":31,"fieldtype":32,"cached_url":186},{"_uid":191,"link":746,"links":747,"title":243,"component":189},{"id":193,"url":30,"linktype":31,"fieldtype":32,"cached_url":194},[748,750,752,754,756,758,760,762],{"_uid":197,"link":749,"text":201,"component":59},{"id":199,"url":30,"linktype":31,"fieldtype":32,"cached_url":200},{"_uid":203,"link":751,"text":207,"component":59},{"id":205,"url":30,"linktype":31,"fieldtype":32,"cached_url":206},{"_uid":209,"link":753,"text":212,"component":59},{"id":30,"url":211,"linktype":136,"fieldtype":32,"cached_url":211},{"_uid":214,"link":755,"text":218,"component":59},{"id":216,"url":30,"linktype":31,"fieldtype":32,"cached_url":217},{"_uid":220,"link":757,"text":224,"component":59},{"id":222,"url":30,"linktype":31,"fieldtype":32,"cached_url":223},{"_uid":226,"link":759,"text":230,"component":59},{"id":228,"url":30,"linktype":31,"fieldtype":32,"cached_url":229},{"_uid":232,"link":761,"text":236,"component":59},{"id":234,"url":30,"linktype":31,"fieldtype":32,"cached_url":235},{"_uid":238,"link":763,"text":242,"component":59},{"id":240,"url":30,"linktype":31,"fieldtype":32,"cached_url":241},{"_uid":245,"link":765,"links":766,"title":292,"component":189},{"id":247,"url":30,"linktype":31,"fieldtype":32,"cached_url":248},[767,769,771,773,775,777,779],{"_uid":251,"link":768,"text":255,"component":59},{"id":253,"url":30,"linktype":31,"fieldtype":32,"cached_url":254},{"_uid":257,"link":770,"text":261,"component":59},{"id":259,"url":30,"linktype":31,"fieldtype":32,"cached_url":260},{"_uid":263,"link":772,"text":267,"component":59},{"id":265,"url":30,"linktype":31,"fieldtype":32,"cached_url":266},{"_uid":269,"link":774,"text":273,"component":59},{"id":271,"url":30,"linktype":31,"fieldtype":32,"cached_url":272},{"_uid":275,"link":776,"text":279,"component":59},{"id":277,"url":30,"linktype":31,"fieldtype":32,"cached_url":278},{"_uid":281,"link":778,"text":285,"component":59},{"id":283,"url":30,"linktype":31,"fieldtype":32,"cached_url":284},{"_uid":287,"link":780,"text":291,"component":59},{"id":289,"url":30,"linktype":31,"fieldtype":32,"cached_url":290},{"_uid":294,"link":782,"links":783,"title":431,"component":189},{"id":296,"url":30,"linktype":31,"fieldtype":32,"cached_url":297},[784,786,788,790,792,794,797,799,802,805,807,809,811,813,815,817,819,821,823,825,827,829],{"_uid":300,"link":785,"text":302,"component":59},{"id":56,"url":30,"linktype":31,"fieldtype":32,"cached_url":57},{"_uid":304,"link":787,"text":308,"component":59},{"id":306,"url":30,"linktype":31,"fieldtype":32,"cached_url":307},{"_uid":310,"link":789,"text":314,"component":59},{"id":312,"url":30,"linktype":31,"fieldtype":32,"cached_url":313},{"_uid":316,"link":791,"text":320,"component":59},{"id":318,"url":30,"linktype":31,"fieldtype":32,"cached_url":319},{"_uid":322,"link":793,"text":324,"component":59},{"id":63,"url":30,"linktype":31,"fieldtype":32,"cached_url":64},{"_uid":326,"link":795,"text":334,"component":59},{"id":328,"url":30,"linktype":31,"fieldtype":32,"cached_url":329,"story":796},{"name":331,"id":332,"uuid":328,"slug":333,"url":329,"full_slug":329,"_stopResolving":81},{"_uid":336,"link":798,"text":340,"component":59},{"id":338,"url":30,"linktype":31,"fieldtype":32,"cached_url":339},{"_uid":342,"link":800,"text":345,"component":59},{"id":328,"url":30,"linktype":31,"fieldtype":32,"cached_url":329,"story":801},{"name":331,"id":332,"uuid":328,"slug":333,"url":329,"full_slug":329,"_stopResolving":81},{"_uid":347,"link":803,"text":355,"component":59},{"id":349,"url":30,"linktype":31,"fieldtype":32,"cached_url":350,"story":804},{"name":352,"id":353,"uuid":349,"slug":354,"url":350,"full_slug":350,"_stopResolving":81},{"_uid":357,"link":806,"text":361,"component":59},{"id":359,"url":30,"linktype":31,"fieldtype":32,"cached_url":360},{"_uid":363,"link":808,"text":367,"component":59},{"id":365,"url":30,"linktype":31,"fieldtype":32,"cached_url":366},{"_uid":369,"link":810,"text":373,"component":59},{"id":371,"url":30,"linktype":31,"fieldtype":32,"cached_url":372},{"_uid":375,"link":812,"text":379,"component":59},{"id":377,"url":30,"linktype":31,"fieldtype":32,"cached_url":378},{"_uid":381,"link":814,"text":385,"component":59},{"id":383,"url":30,"linktype":31,"fieldtype":32,"cached_url":384},{"_uid":387,"link":816,"text":391,"component":59},{"id":389,"url":30,"linktype":31,"fieldtype":32,"cached_url":390},{"_uid":393,"link":818,"text":395,"component":59},{"id":29,"url":30,"linktype":31,"fieldtype":32,"cached_url":33},{"_uid":397,"link":820,"text":400,"component":59},{"id":30,"url":399,"linktype":136,"fieldtype":32,"cached_url":399},{"_uid":402,"link":822,"text":406,"component":59},{"id":404,"url":30,"linktype":31,"fieldtype":32,"cached_url":405},{"_uid":408,"link":824,"text":412,"component":59},{"id":410,"url":30,"linktype":31,"fieldtype":32,"cached_url":411},{"_uid":414,"link":826,"text":418,"component":59},{"id":416,"url":30,"linktype":31,"fieldtype":32,"cached_url":417},{"_uid":420,"link":828,"text":424,"component":59},{"id":422,"url":30,"linktype":31,"fieldtype":32,"cached_url":423},{"_uid":426,"link":830,"text":430,"type":30,"component":59},{"id":428,"url":30,"linktype":31,"fieldtype":32,"cached_url":429},{"_uid":433,"link":832,"links":834,"title":442,"component":189},{"id":435,"url":30,"linktype":31,"fieldtype":32,"cached_url":436,"story":833},{"name":438,"id":439,"uuid":435,"slug":440,"url":436,"full_slug":436,"_stopResolving":81},[],{"_uid":444,"link":836,"links":837,"title":486,"component":189},{"id":446,"url":30,"linktype":31,"fieldtype":32,"cached_url":447},[838,840,843,845,848,850],{"_uid":450,"link":839,"text":452,"component":59},{"id":446,"url":30,"linktype":31,"fieldtype":32,"cached_url":447},{"_uid":454,"link":841,"text":462,"component":59},{"id":456,"url":30,"linktype":31,"fieldtype":32,"cached_url":457,"story":842},{"name":459,"id":460,"uuid":456,"slug":461,"url":457,"full_slug":457,"_stopResolving":81},{"_uid":464,"link":844,"text":468,"component":59},{"id":466,"url":30,"linktype":31,"fieldtype":32,"cached_url":467},{"_uid":470,"link":846,"text":473,"component":59},{"id":75,"url":30,"linktype":31,"fieldtype":32,"cached_url":76,"story":847},{"name":78,"id":79,"uuid":75,"slug":80,"url":76,"full_slug":76,"_stopResolving":81},{"_uid":475,"link":849,"text":479,"component":59},{"id":477,"url":30,"linktype":31,"fieldtype":32,"cached_url":478},{"_uid":481,"link":851,"text":485,"component":59},{"id":483,"url":30,"linktype":31,"fieldtype":32,"cached_url":484},[853],{"_uid":489,"icon":30,"link":854,"text":71,"intent":35,"component":36,"icon_position":37},{"id":69,"url":30,"linktype":31,"fieldtype":32,"cached_url":70},[],[],{"name":15,"created_at":7,"published_at":16,"updated_at":17,"id":18,"uuid":19,"content":858,"slug":116,"full_slug":117,"sort_by_date":118,"position":119,"tag_list":891,"is_startpage":51,"parent_id":121,"meta_data":118,"group_id":122,"first_published_at":123,"release_id":118,"lang":124,"path":118,"alternates":892,"default_full_slug":118,"translated_slugs":118},{"cta":859,"_uid":45,"logo":867,"links":869,"component":82,"copyright":83,"logo_link":879,"legal_links":880},[860],{"_uid":23,"buttons":861,"caption":864,"component":43,"caption_position":44},[862],{"_uid":26,"icon":27,"link":863,"text":34,"intent":35,"component":36,"icon_position":37},{"id":29,"url":30,"linktype":31,"fieldtype":32,"cached_url":33},{"type":39,"content":865},[866],{"type":42},{"id":47,"alt":30,"name":30,"focus":30,"title":30,"source":30,"filename":48,"copyright":30,"fieldtype":49,"meta_data":868,"is_external_url":51},{},[870,872,874,876],{"_uid":54,"link":871,"text":58,"component":59},{"id":56,"url":30,"linktype":31,"fieldtype":32,"cached_url":57},{"_uid":61,"link":873,"text":65,"type":30,"component":59},{"id":63,"url":30,"linktype":31,"fieldtype":32,"cached_url":64},{"_uid":67,"link":875,"text":71,"component":59},{"id":69,"url":30,"linktype":31,"fieldtype":32,"cached_url":70},{"_uid":73,"link":877,"text":78,"component":59},{"id":75,"url":30,"linktype":31,"fieldtype":32,"cached_url":76,"story":878},{"name":78,"id":79,"uuid":75,"slug":80,"url":76,"full_slug":76,"_stopResolving":81},{"id":85,"url":30,"linktype":31,"fieldtype":32,"cached_url":86},[881,883,885,887,889],{"_uid":89,"link":882,"text":93,"component":59},{"id":91,"url":30,"linktype":31,"fieldtype":32,"cached_url":92},{"_uid":95,"link":884,"text":99,"component":59},{"id":97,"url":30,"linktype":31,"fieldtype":32,"cached_url":98},{"_uid":101,"link":886,"text":105,"component":59},{"id":103,"url":30,"linktype":31,"fieldtype":32,"cached_url":104},{"_uid":107,"link":888,"text":111,"component":59},{"id":109,"url":30,"linktype":31,"fieldtype":32,"cached_url":110},{"_uid":113,"link":890,"text":115,"component":59},{"id":97,"url":30,"linktype":31,"fieldtype":32,"cached_url":98},[],[],[894,895,896,897,898,899,900],{"name":438,"id":439,"uuid":435,"slug":440,"url":436,"full_slug":436},{"name":543,"id":544,"uuid":540,"slug":545,"url":541,"full_slug":541},{"name":352,"id":353,"uuid":349,"slug":354,"url":350,"full_slug":350},{"name":572,"id":573,"uuid":569,"slug":574,"url":570,"full_slug":570},{"name":459,"id":460,"uuid":456,"slug":461,"url":457,"full_slug":457},{"name":78,"id":79,"uuid":75,"slug":80,"url":76,"full_slug":76},{"name":331,"id":332,"uuid":328,"slug":333,"url":329,"full_slug":329},{"story":902,"cv":720,"rels":1549,"links":1577},{"name":903,"created_at":904,"published_at":905,"updated_at":906,"id":907,"uuid":908,"content":909,"slug":1510,"full_slug":1511,"sort_by_date":118,"position":494,"tag_list":1543,"is_startpage":51,"parent_id":1545,"meta_data":118,"group_id":1546,"first_published_at":1547,"release_id":118,"lang":124,"path":118,"alternates":1548,"default_full_slug":118,"translated_slugs":118},"Konfidenz sollte man kennen. (Grundlagen zur Statistik beim A/B Testing)","2025-10-15T16:15:41.374Z","2026-10-04T09:56:22.402Z","2026-10-04T09:56:22.575Z",101807478296369,"789f15c0-8c3e-4816-b6cc-8f9e73b41ad3",{"seo":910,"_uid":914,"body":915,"text":913,"image":1400,"footer":30,"header":30,"authors":1403,"category":1432,"headline":903,"component":1433,"categories":1434,"bottom_head":1490,"breadcrumbs":1491,"seo_noindex":51,"sidebar_cta":1512,"reading_time":1540,"seo_nofollow":51,"seo_canonical":30,"bottom_buttons":1541,"additional_slot":1542,"sidebar_cta_enabled":81,"sidebar_toc_enabled":81},{"title":911,"plugin":912,"og_image":30,"og_title":911,"description":913,"twitter_image":30,"twitter_title":911,"og_description":913,"twitter_description":913},"Konfidenz sollte man kennen. Grundlagen zur Statistik beim A/B Testing","seo_metatags","Konfidenz Testing Visual Website Optimizer Test&Target Optimizely Statistik CTBO Uplift Berechnung","961f8d5c-605f-4791-a240-29eb22fecee1",[916,1072,1085,1162,1174,1294,1306],{"_uid":917,"text":918,"component":1071},"f722a365-cf29-4af6-8925-6170c9d1f85d",{"type":39,"content":919},[920,925,933,938,943,961,977,982,989,994,999,1004,1009,1014,1019,1026,1038,1043,1051,1056,1061,1066],{"type":42,"attrs":921,"content":922},{"textAlign":118},[923],{"text":924,"type":513},"Täglich werden Case Studies veröffentlich, in denen von teilweise erstaunlich hohen Uplifts die Rede ist. Doch wie belastbar sind diese Zahlen wirklich? Die Grafiken und Angaben, die in der Testing-Software zu sehen sind, mögen auf den ersten Blick recht einfach und plausibel wirken – bei näherer Betrachtung kommen dann aber die ersten Fragen:",{"type":926,"content":927},"blockquote",[928],{"type":42,"attrs":929,"content":930},{"textAlign":118},[931],{"text":932,"type":513},"„In der Testing-Software wird ein Uplift von 4% bei einer CTBO von 92% angezeigt. Heißt das nun, dass mit 92% Prozent Wahrscheinlichkeit der Uplift 4% ist?“",{"type":42,"attrs":934,"content":935},{"textAlign":118},[936],{"text":937,"type":513},"Jeder, der ohne eine Statistikvorlesung im Lebenslauf beginnt, sich in der Praxis mit Testing zu befassen, wird sich über kurz oder lang die gleichen Fragen stellen und auch mit Missverständnissen bei der Interpretation der Testergebnisse konfrontiert werden. Auch die Frage, wie lange ein Test laufen sollte bzw. wann er gestoppt werden kann, wird gerne diskutiert. Daher möchte ich in diesem Blogpost versuchen, das für die Praxis im Testing relevante Wissen verständlich und einfach und ganz ohne Formeln zusammenzufassen.",{"type":42,"attrs":939,"content":940},{"textAlign":118},[941],{"text":942,"type":513},"Befasst man sich näher mit dem Thema und hinterfragt die angezeigten Werte, sieht man sich schnell mit den zugrunde liegenden statistischen Formeln, Annahmen und Methoden konfrontiert. Hinzu kommt, dass die Anzeige je nach verwendeter Software unterschiedlich ist und daher die Werte nicht direkt miteinander verglichen werden können. Es wird noch komplizierter, wenn nicht mit einer einfachen Conversion-Rate, sondern mit Revenue oder Engagement-Score gerechnet wird.",{"type":42,"content":944},[945,947,959],{"text":946,"type":513},"Wenn du gerade erst einsteigst, lies zuerst unseren ",{"text":948,"type":513,"marks":949},"Ratgeber A/B-Testing",[950],{"type":951,"attrs":952},"link",{"href":953,"uuid":312,"anchor":118,"target":954,"linktype":31,"story":955},"/de/ab-testing","_self",{"name":956,"id":957,"uuid":312,"slug":958,"url":313,"full_slug":313,"_stopResolving":81},"A/B-Testing",226463371945680,"ab-testing",{"text":960,"type":513},". Dort erklären wir, wie ein Test von der Hypothese bis zur Auswertung abläuft.",{"type":42,"attrs":962,"content":963},{"textAlign":118},[964,966,975],{"text":965,"type":513},"Du solltest aufgrund dieser Begriffe jedoch keine Angst vor der Kultur des Experimentierens haben! Gerne kannst du dich für unser ",{"text":967,"type":513,"marks":968},"Growth Ambassador Programm",[969],{"type":951,"attrs":970},{"href":971,"uuid":389,"anchor":118,"target":954,"linktype":31,"story":972},"/de/growth-ambassador-community",{"name":391,"id":973,"uuid":389,"slug":974,"url":390,"full_slug":390,"_stopResolving":81},62086251701816,"growth-ambassador-community",{"text":976,"type":513}," bewerben, um dich mit anderen Expert:innen unserer Community in regelmäßigen Meetups über A/B-Testing auszutauschen. Es wartet zudem ein sehr interessanter Videokurs auf dich, der dir beibringt, wie du erfolgreich experimentierst.",{"type":42,"attrs":978,"content":979},{"textAlign":118},[980],{"text":981,"type":513},"Aber zuvor noch einmal zurück zu den Grundlagen:",{"type":983,"attrs":984,"content":986},"heading",{"level":985,"textAlign":118},2,[987],{"text":988,"type":513},"Was sollen die Zahlen uns überhaupt sagen?",{"type":42,"attrs":990,"content":991},{"textAlign":118},[992],{"text":993,"type":513},"Die Statistik beim Testing dient dem Ziel, aus einer kleinen Menge von „Samples“ – also für uns z.B. aus den einzelnen Nutzersitzungen, in denen eine Conversion entweder stattgefunden hat – oder eben nicht  – auf die „echten“ Werte zu schließen. Daraus soll eine Zukunftsprognose darüber abgeleitet werden, wie denn die Varianten, die in den Test geschickt wurden, weiterhin „performen“ werden und mit welcher Variante unser Auftraggeber das meiste Geld verdienen kann.",{"type":42,"attrs":995,"content":996},{"textAlign":118},[997],{"text":998,"type":513},"Dabei müssen wir uns allerdings stets bewusst machen, dass Formeln und Software die reale Welt stark vereinfachen müssen, um sie überhaupt abzubilden.",{"type":42,"attrs":1000,"content":1001},{"textAlign":118},[1002],{"text":1003,"type":513},"Die erste und gravierendste Annahme ist, dass der Test überhaupt ein sinnvolles Experiment darstellt, auf dessen Basis eine Zukunftsprognose abgegeben werden kann. Bereits dies ist ein häufiger Fallstrick. Wir setzen nämlich voraus, dass die Conversion-Rate jeder einzelnen Variante im Durchschnitt nach dem Testzeitraum die gleiche ist wie während des Testzeitraums. Dass sie sich auf einen Durchschnittswert „einpendelt“. In der Praxis ist diese aber vielen Einflüssen unterworfen. Saisonale Schwankungen, Sportereignisse, langfristige Trends durch sich stetig ändernde Mindsets der Nutzer, die neue TV-Kampagne des Wettbewerbers, sich ändernde Endgeräte oder der frisch versendete neue Katalog sind nur einige Beispiele dafür.",{"type":983,"attrs":1005,"content":1006},{"level":985,"textAlign":118},[1007],{"text":1008,"type":513},"Konfidenzniveau und Konfidenzintervall",{"type":42,"attrs":1010,"content":1011},{"textAlign":118},[1012],{"text":1013,"type":513},"Ein Test liefert eine Aussage über ein Intervall, in dem die Conversion-Rate wahrscheinlich liegt. Die Aussage wird um so präziser, je mehr Samples die Stichprobe umfasst – d.h. das Intervall wird kleiner.",{"type":42,"attrs":1015,"content":1016},{"textAlign":118},[1017],{"text":1018,"type":513},"Die Aussage bezüglich einer einzigen Variante kann folgendermaßen formuliert werden:",{"type":926,"content":1020},[1021],{"type":42,"attrs":1022,"content":1023},{"textAlign":118},[1024],{"text":1025,"type":513},"„Auf Grundlage der bereits gemessenen Werte liegt die Conversion-Rate mit 95% Wahrscheinlichkeit zwischen 5,5 und 7,5%.“",{"type":42,"attrs":1027,"content":1028},{"textAlign":118},[1029,1031,1036],{"text":1030,"type":513},"Dabei wird „95%“ als das Konfidenz",{"text":1032,"type":513,"marks":1033},"niveau",[1034],{"type":1035},"bold",{"text":1037,"type":513}," bezeichnet. Dieses ist in unterschiedlichen Testing-Tools auf unterschiedliche Werte voreingestellt. Somit können sich die Angaben unterschiedlicher Testing-Tools schon alleine dadurch unterscheiden, wie „optimistisch“ sie mit dem Konfidenzniveau umgehen.",{"type":42,"attrs":1039,"content":1040},{"textAlign":118},[1041],{"text":1042,"type":513},"Mehr dazu kann man im folgenden Wikipedia-Artikel nachlesen:",{"type":42,"attrs":1044,"content":1045},{"textAlign":118},[1046],{"text":1047,"type":513,"marks":1048},"http://de.wikipedia.org/wiki/Konfidenzintervall",[1049],{"type":951,"attrs":1050},{"href":1047,"uuid":118,"anchor":118,"target":118,"linktype":136},{"type":42,"attrs":1052,"content":1053},{"textAlign":118},[1054],{"text":1055,"type":513},"Die statistischen Formeln basieren auf der Annahme, dass die Mittelwerte von Testreihen annähernd normalverteilt um den tatsächlichen Mittelwert sind. Das ist insbesondere bei sehr niedrigen Conversionraten eventuell gar nicht der Fall – die reale Verteilung könnte eher „schief“ sein. Viele Testingtools rechnen zudem direkt mit den Formeln der Normalverteilungskurve und gehen davon aus, dass der Mittelwert aus der Testreihe auch dem tatsächlichen Mittelwert enspricht – bei einer geringen Anzahl von Conversions führt dies dazu, dass das Konfidenzintervall kleiner ausgewiesen wird, als es tatsächlich ist.",{"type":42,"attrs":1057,"content":1058},{"textAlign":118},[1059],{"text":1060,"type":513},"Das alles bedeutet jedoch nicht, dass die Ergebnisse der Testing-Tools völlig unbrauchbar sind – für die Conversion-Optimierung ist das letzte Prozent Konfidenzniveau nicht wirklich entscheidend, man sollte nur nicht den Fehler machen, die Ergebnisse zu optimistisch zu interpretieren!",{"type":983,"attrs":1062,"content":1063},{"level":985,"textAlign":118},[1064],{"text":1065,"type":513},"Uplift",{"type":42,"attrs":1067,"content":1068},{"textAlign":118},[1069],{"text":1070,"type":513},"Der Uplift wird üblicherweise berechnet, indem die Mittelwerte zweier Varianten ins Verhältnis gesetzt werden. Diese Zahl ist allerdings mit noch einem höheren Fehler behaftet, als die einzelnen Conversion-Rates – eine Aussage über den Uplift lässt sich als Intervall (von-bis) bei einem gewissen Konfidenzniveau ausdrücken. Vereinfacht kann man für den maximalen Uplift die beiden weiter auseinander liegenden Conversionraten-Intervallgrenzen ins Verhältnis setzen, für den minimalen Uplift die beiden eng beieinander liegenden Werte.","richtext-text",{"_uid":1073,"image":1074,"caption":1078,"component":1084},"27461bd0-b404-404a-9f1a-fc841c228bf0",{"alt":1075,"src":1076,"name":30,"focus":30,"title":118,"source":30,"filename":1076,"copyright":30,"fieldtype":49,"meta_data":1077,"is_external_url":81},"VWO-Beispiel","https://storage.googleapis.com/kk-website-assets/Wu8M5XUl_VWO-Beispiel-610x134.png",{"alt":1075,"title":118,"source":30,"copyright":30},{"type":39,"content":1079},[1080],{"type":42,"content":1081},[1082],{"text":1083,"type":513},"Visual Website Optimizer gibt den Fehler hier mit +/- 3 Prozentpunkte bezüglich der Conversion Rate an. Für den minimalen Uplift rechne ich also pessimistisch mit 24% CR für die Control und 28,5% CR für die Variante 1, macht rund 19% Uplift. Gewonnen hat die Variante in jedem Fall, daher ist die Chance das Original zu besiegen (Chance-To-Beat-Original = CTBO) hier 100%. Der maximal zu erwartende Uplift ergibt sich aus 18% für die Control und 34,5% für Variante 1, das ergibt 92% CR. Würde VWO eine Konfidenz für den Mittelwert von 50% anzeigen, wäre diese ebenfalls sehr hoch.","richtext-image",{"_uid":1086,"text":1087,"component":1071},"084555b7-8099-4d09-9470-b444d288dd7b",{"type":39,"content":1088},[1089,1093,1098,1127,1131,1135,1141,1145,1149,1153,1158],{"type":42,"content":1090},[1091],{"text":1092,"type":513},"Übrigens: Ich erbitte bei der Gelegenheit sinnvolle Vorschläge (auf Deutsch oder Denglisch) für das Gegenteil von Uplift!",{"type":983,"attrs":1094,"content":1095},{"level":985},[1096],{"text":1097,"type":513},"Chance to Beat",{"type":42,"content":1099},[1100,1102,1107,1109,1113,1115,1119,1121,1125],{"text":1101,"type":513},"Je nach Software werden auch die Werte ",{"text":1103,"type":513,"marks":1104},"„Chance to Beat Original“ (CTBO)",[1105],{"type":1106},"italic",{"text":1108,"type":513},", ",{"text":1110,"type":513,"marks":1111},"„Chance to Beat Control“ (CTBC)",[1112],{"type":1106},{"text":1114,"type":513}," oder ",{"text":1116,"type":513,"marks":1117},"„Chance to Beat Baseline“",[1118],{"type":1106},{"text":1120,"type":513}," – was in etwa das gleiche bedeutet – aber teilweise auch die ",{"text":1122,"type":513,"marks":1123},"„Chance to Beat All“ (CTBA)",[1124],{"type":1106},{"text":1126,"type":513},", die eine andere Bedeutung hat, ausgewiesen.",{"type":42,"content":1128},[1129],{"text":1130,"type":513},"Für die „CTBC“ wird die Überlappung der Intervalle der betrachteten Variante mit der Kontrollvariante berechnet. Je weniger sie sich überlappen, desto größer die Wahrscheinlichkeit.",{"type":42,"content":1132},[1133],{"text":1134,"type":513},"Die Aussage ist also bei 95% CTBO:",{"type":926,"content":1136},[1137],{"type":42,"content":1138},[1139],{"text":1140,"type":513},"„Mit 95% Wahrscheinlichkeit ist die Variante irgendwie besser als das Original“ – was schon gegeben ist, wenn der reale Uplift nur minimal über Null liegt.",{"type":42,"content":1142},[1143],{"text":1144,"type":513},"Eine häufige Fehlinterpretation ist, anzunehmen, dass CTBO die Wahrscheinlichkeit angibt, mit der der angezeigte Uplift (mindstens) erreicht wird, oder der „Konfidenz“ des Uplifts entspricht. Um Wahrscheinlichkeit zu berechnen, mit der ein bestimmter Uplift mindestens erreicht wird, müsste man nämlich nur den „rechten“ Abschnitt der Verteilungskurve heranziehen. Die entsprechenden Berechnungen sind jedoch nicht einfach, und leider sieht keines der mir bekannten Testingtools eine derartige Möglichkeit vor.",{"type":42,"content":1146},[1147],{"text":1148,"type":513},"Wenn die betrachtete Variante „am verlieren ist“, ist die CTBO kleiner als 50%. Je kleiner die CTBO ist, desto klarer wird, dass es sich um eine Verlierervariante handelt.",{"type":42,"content":1150},[1151],{"text":1152,"type":513},"Für die „Chance To Beat All“ (CTBA) wird eine entsprechende Berechnung gegen jede andere Variante durchgeführt, die Ergebnisse werden wiederum miteinander verrechnet.",{"type":983,"attrs":1154,"content":1155},{"level":985},[1156],{"text":1157,"type":513},"Konfidenz",{"type":42,"content":1159},[1160],{"text":1161,"type":513},"Einige Tools, beispielsweise Adobe Test&Target, zeigen zusätzlich Konfidenzwerte für den Uplift an. Dieser Wert darf keinesfalls mit der CTBO verwechselt werden. Sie sagt nämlich überhaupt nichts über die Änderung der Conversion-Rate aus oder darüber ob es sich um eine Gewinner- oder Verlierer-Variante handelt. Sie ist vielmehr um so größer, je valider die gezeigten Uplift- oder Verringerungs-Zahlen sind, und kann selbst dann hoch sein, wenn die Variante weder besser, noch schlechter „performt“ als das Original.",{"_uid":1163,"image":1164,"caption":1168,"component":1084},"d94e5669-3950-4c23-9eac-ffcc712ff565",{"alt":1165,"src":1166,"name":30,"focus":30,"title":118,"source":30,"filename":1166,"copyright":30,"fieldtype":49,"meta_data":1167,"is_external_url":81},"Adobe Test&Target Beispielbild","https://storage.googleapis.com/kk-website-assets/r7ZabwBG_TnT-Beispiel-610x193.png",{"alt":1165,"title":118,"source":30,"copyright":30},{"type":39,"content":1169},[1170],{"type":42,"content":1171},[1172],{"text":1173,"type":513},"Adobe Test&Target zeigt nicht die CTBO an, sondern die Konfidenz, die sich auf den ermittelten Uplift bezieht. Bewegt man den Mauszeiger über einen Wert, wird das Konfidenzintervall angezeigt, in dem die jeweilige Zahl sich bei einem Konfidenzniveau von 95% befindet (hier für die Conversion Rate von Variante C).",{"_uid":1175,"text":1176,"component":1071},"7d1318fb-c3cf-4afe-8c45-63b3102754e6",{"type":39,"content":1177},[1178,1182,1186,1191,1195,1199,1203,1207,1213,1217,1221,1225,1230,1234,1238,1242,1249,1253],{"type":42,"content":1179},[1180],{"text":1181,"type":513},"Zur Berechnung wird die „Signal-To-Noise-Ratio“ in Anspruch genommen – diese wiederum setzt den ermittelten Unterschied der Varianten ins Verhältnis mit dem Fehler, mit dem die Zahlen behaftet sind.",{"type":42,"content":1183},[1184],{"text":1185,"type":513},"Aber heute keine Formeln! Wichtig ist nur, dass der Unterschied klar ist!",{"type":983,"attrs":1187,"content":1188},{"level":985},[1189],{"text":1190,"type":513},"Rechnen mit Revenue oder Score",{"type":42,"content":1192},[1193],{"text":1194,"type":513},"Ein Experiment, bei dem lediglich eine Conversion Rate ermittelt wird, ist „binomial“ – der Kunde kauft entweder, oder er lässt es bleiben. Ein wenig komplizierter wird es hingegen, wenn andere Metriken ins Spiel kommen, wie z.B. Revenue – für die Optimierung von E-Commerce-Angeboten Pflicht – oder auch ein Engagement Score.",{"type":42,"content":1196},[1197],{"text":1198,"type":513},"Die Formeln in den Testing-Tools werden hierbei ein klein wenig geringer – das ist für den nächsten Post spannend – die ausgegebenen Werte sind aber im Grunde die gleichen.",{"type":42,"content":1200},[1201],{"text":1202,"type":513},"Es wird lediglich zusätzlich ein weiterer Wert angegeben: „Revenue per Conversion“ – oder „Average Order Value“. Eine Größe, die durchaus ebenso optimierenswert ist, wie die Conversion-Rate, aber leider oft vernachlässigt wird.",{"type":42,"content":1204},[1205],{"text":1206,"type":513},"Das Resultat beider Größen ist die „Revenue per Visitor“ – also die Angabe, wieviel durchschnittlich mit einem Besucher (egal, ob er bestellt, oder nicht) verdient wird.",{"type":42,"content":1208},[1209],{"text":1210,"type":513,"marks":1211},"„Conversion Rate“  * „Revenue per Conversion“ = „Revenue per Visitor“",[1212],{"type":1035},{"type":42,"content":1214},[1215],{"text":1216,"type":513},"Diese steigt bei steigender Conversion Rate, aber auch bei steigendem durchschnittlichen Bestellwert. Es ist die wirklich wichtige Metrik für einen Shop, die onsite noch ermittelbar ist, ohne Zahlungsausfälle und Retouren zu berücksichtigen.",{"type":42,"content":1218},[1219],{"text":1220,"type":513},"Die Revenue-basierten Angaben (Uplift, CTBO usw.) werden um so schneller valide, je weniger die Revenues der einzelnen Conversions auseinander liegen. Oder umgekehrt: Wenn man im gleichen Shop Socken und komplette Einbauküchen kaufen kann, und man alle Kunden in den gleichen Test schickt, sollte man davon ausgehen, dass man den Testergebnissen nicht so schnell trauen kann. Da die Software nämlich nach einer Woche Socken und Blusen noch nicht wissen kann, dass morgen ausnahmsweise jemand eine Küche bestellen wird, wird sie brav heute noch ein hohes Konfidenzniveau zeigen, das morgen komplett zunichte ist.",{"type":42,"content":1222},[1223],{"text":1224,"type":513},"Einige Testing-Tools bieten eine Funktion an, mit der extrem hohe oder auch extrem niedrige Bestellwerte aus der Berechnung eliminiert werden. Sie zählen dann zwar noch als Conversion, aber als Bestellwert wird der Mittelwert der restlichen Bestellungen eingesetzt. Das kann das Ergebnis verfälschen – man optimiert auf ein Mal nur noch für Nutzer mit „normalen“ Warenkörben und nicht für die Küchenkäufer – aber wenn man andererseits das Ziel hat, einen Shop auf den Kauf von Küchen zu optimieren, sollte man vielleicht zunächst nachrechnen, ob man nach einer entsprechenden Segmentierung noch genügend Conversions hat, um den Test valide zu bekommen – ich fürchte, kaum jemand verkauft so viele Einbauküchen online…",{"type":983,"attrs":1226,"content":1227},{"level":985},[1228],{"text":1229,"type":513},"Wie lange muss der Test laufen?",{"type":42,"content":1231},[1232],{"text":1233,"type":513},"Wie lange ein Test laufen muss, hängt von unterschiedlichen Faktoren ab.",{"type":42,"content":1235},[1236],{"text":1237,"type":513},"Der einfachste Faktor wird von der Software während des Tests permanent berechnet und lässt sich auch mit einem „Test Duration Calculator“ prognostizieren: Die statistische Konfidenz. Diese wird erst erreicht, wenn eine gewisse Anzahl von Conversions vorliegt – abhängig vom „Kontrast“ und der Anzahl der Varianten im Test.",{"type":42,"content":1239},[1240],{"text":1241,"type":513},"Test duration calculator von Visual Website Optimizer:",{"type":42,"content":1243},[1244],{"text":1245,"type":513,"marks":1246},"http://visualwebsiteoptimizer.com/ab-split-test-duration/",[1247],{"type":951,"attrs":1248},{"href":1245,"uuid":118,"anchor":118,"target":118,"linktype":136},{"type":42,"content":1250},[1251],{"text":1252,"type":513},"Allerdings gibt es noch einige weitere Faktoren zu beachten:",{"type":1254,"attrs":1255,"content":1256},"bullet_list",{"tight":51},[1257,1264,1270,1276,1282,1288],{"type":1258,"content":1259},"list_item",[1260],{"type":42,"content":1261},[1262],{"text":1263,"type":513},"Ein Test sollte nicht zu kurz laufen, damit die periodischen Schwankungen (zumindest Uhrzeit, Wochentage) abgedeckt sind. Hat man zwei Wochenenden im Test, aber nur eine Woche dazwischen, betont man das Wochende über.",{"type":1258,"content":1265},[1266],{"type":42,"content":1267},[1268],{"text":1269,"type":513},"Ein Test sollte auch nicht zu lange laufen. Wer so wenig Traffic hat, dass zwei Monate nicht ausreichen, sollte über andere Mittel nachdenken.",{"type":1258,"content":1271},[1272],{"type":42,"content":1273},[1274],{"text":1275,"type":513},"Revenue wird i.d.R. weniger schnell valide als Conversion Rate.",{"type":1258,"content":1277},[1278],{"type":42,"content":1279},[1280],{"text":1281,"type":513},"Die äußeren Rahmenbedingungen eines Tests haben oft mehr Einfluss auf die Ergebnisse, als man zunächst erwartet. Wenn ich den gleichen Test im Weihnachtsgeschäft und im Frühjahr starte, kann ich mit Unterschieden rechnen. Eventuell kann ich aus diesen aber interessante Erkenntnisse für das nächste Weihnachtsgeschäft ableiten.",{"type":1258,"content":1283},[1284],{"type":42,"content":1285},[1286],{"text":1287,"type":513},"Wird für den Stopp eines Tests bewusst ein Zeitpunkt gewählt, bei dem eine gewünschte Variante eine besonders hohe oder niedrige CTBO anzeigt, hat man den Test bereits dadurch manipuliert.",{"type":1258,"content":1289},[1290],{"type":42,"content":1291},[1292],{"text":1293,"type":513},"Je früher der Test im Entscheidungsprozess eingreift, desto wahrscheinlicher ist es, dass eine gewisse Zeit verstreichen muss, um Kunden mit längeren Customer Journeys sauber zu erfassen. Wieviel Tage verstreichen im Durchschnitt vom ersten Site-Kontakt zur Conversion?",{"_uid":1295,"image":1296,"caption":1300,"component":1084},"99b604f3-8eef-46a5-99f7-5d9bef2a1471",{"alt":1297,"src":1298,"name":30,"focus":30,"title":118,"source":30,"filename":1298,"copyright":30,"fieldtype":49,"meta_data":1299,"is_external_url":81},"Verlaufskurve","https://storage.googleapis.com/kk-website-assets/b1Ew0GwJ_Verlaufskurve-610x273.png",{"alt":1297,"title":118,"source":30,"copyright":30},{"type":39,"content":1301},[1302],{"type":42,"content":1303},[1304],{"text":1305,"type":513},"Typischer Testverlauf mit vergleichsweise wenig Traffic. Hier ist eine eindeutige Aussage fraglich, selbst wenn das Testing-Tool schon eine hohe CTBO zeigt.",{"_uid":1307,"text":1308,"component":1071},"3e7dc885-97f3-4ce7-b26c-a3074305b56b",{"type":39,"content":1309},[1310,1315,1390,1396],{"type":983,"attrs":1311,"content":1312},{"level":985},[1313],{"text":1314,"type":513},"Sieben vermeidbare Testing-Fallstricke",{"type":1254,"attrs":1316,"content":1317},{"tight":51},[1318,1330,1340,1350,1360,1370,1380],{"type":1258,"content":1319},[1320],{"type":42,"content":1321},[1322,1326,1328],{"text":1323,"type":513,"marks":1324},"Erstens: Achten Sie darauf, dass der Test unter den Bedingungen erfolgt, für die auch optimiert werden soll.",[1325],{"type":1035},{"type":1327},"hard_break",{"text":1329,"type":513},"Nur so sind seine Ergebnisse verwertbar. Wenn Sie Werbung für Grillzubehör im November testen, sagt das nichts über deren Wirkung im Juni aus. Läuft ein Test auf der Startseite, nachdem ein Katalog an Bestandskunden versendet wurde, sagt das nichts über die Resultate für Neukunden aus, die über SEA auf dem Shop landen.",{"type":1258,"content":1331},[1332],{"type":42,"content":1333},[1334,1338],{"text":1335,"type":513,"marks":1336},"Die CTBO garantiert Ihnen keinesfalls den angezeigten Uplift, sondern sagt nur etwas darüber aus, welche Variante überhaupt die bessere ist.",[1337],{"type":1035},{"text":1339,"type":513}," Schauen Sie sich das Konfidenzintervall an, um den zu erwartenden Uplift abzuschätzen.",{"type":1258,"content":1341},[1342],{"type":42,"content":1343},[1344,1348],{"text":1345,"type":513,"marks":1346},"Verwechseln Sie nicht CTBO mit Konfidenz.",[1347],{"type":1035},{"text":1349,"type":513}," Die Konfidenz kann hoch sein, auch wenn der Test ergibt, dass die Varianten sich wenig voneinander unterscheiden.",{"type":1258,"content":1351},[1352],{"type":42,"content":1353},[1354,1358],{"text":1355,"type":513,"marks":1356},"Unterschiedliche Tools rechnen mit unterschiedlichen Konfidenzniveaus",[1357],{"type":1035},{"text":1359,"type":513},". – die Resultate lassen sich nur bedingt vergleichen.",{"type":1258,"content":1361},[1362],{"type":42,"content":1363},[1364,1368],{"text":1365,"type":513,"marks":1366},"Die Conversion Rate ist meist nicht die wichtigste Metrik,",[1367],{"type":1035},{"text":1369,"type":513}," wird aber schneller valide und zeigt daher in vielen Fällen früher Trends an.",{"type":1258,"content":1371},[1372],{"type":42,"content":1373},[1374,1378],{"text":1375,"type":513,"marks":1376},"Die Testdauer sollte nicht ausschließlich davon abhängig gemacht werden, welche Konfidenz das Testing-Tool anzeigt.",[1377],{"type":1035},{"text":1379,"type":513}," Wenn trotz viel Traffic unerklärliche Schwankungen im zeitlichen Verlauf der Conversion Rates zu sehen sind, könnten äußere Einflüsse schuld sein.",{"type":1258,"content":1381},[1382],{"type":42,"content":1383},[1384,1388],{"text":1385,"type":513,"marks":1386},"Will ein Test partout keinen validen Uplift bringen, hat man wohl daneben gelegen.",[1387],{"type":1035},{"text":1389,"type":513}," Man sollte nicht ewig warten, sondern lieber abbrechen und andere Varianten ins Rennen schicken.",{"type":42,"content":1391},[1392],{"text":1393,"type":513,"marks":1394},"Und das wichtigste zum Schluss: Stets das Ganze im Auge behalten und das Denken nicht der Software überlassen! In diesem Sinn viel Erfolg beim Testen!",[1395],{"type":1035},{"type":42,"content":1397},[1398],{"text":1399,"type":513},"In weiteren Artikeln werde ich demnächst darauf eingehen, wie man die Berechnungen selbst (z.B in Excel) durchführen kann, wenn man z.B. nicht alle Daten zentral in der Testing-Software vorliegen hat – und wo auch dort Fallstricke liegen können.",{"alt":903,"src":1401,"name":30,"focus":30,"title":118,"source":30,"filename":1401,"copyright":30,"fieldtype":49,"meta_data":1402},"//a.storyblok.com/f/328018/f7720336c6/testing-statistik-konfidenz-grundlagen-html-2de5ffc7-verlaufskurve-e1361984030796.png",{"alt":903,"title":118,"source":30,"copyright":30},[1404],{"name":1405,"created_at":1406,"published_at":1407,"updated_at":1408,"id":1409,"uuid":1410,"content":1411,"slug":1424,"full_slug":1425,"sort_by_date":118,"position":1426,"tag_list":1427,"is_startpage":51,"parent_id":1428,"meta_data":118,"group_id":1429,"first_published_at":1430,"release_id":118,"lang":124,"path":118,"alternates":1431,"default_full_slug":118,"translated_slugs":118,"_stopResolving":81},"Thorsten Barth","2025-10-10T20:11:07.514Z","2026-02-06T09:23:44.241Z","2026-02-06T09:23:44.255Z",100095866981756,"c72c5706-0bbe-4696-a315-306d74788e0d",{"_uid":1412,"name":1405,"role":30,"about":1413,"email":1419,"avatar":1420,"component":1423,"social_link_x":30,"social_link_dribbble":30,"social_link_facebook":30,"social_link_linked_in":30},"3f07f59a-06fe-45b1-8cf4-28c0513a1b9c",{"type":39,"content":1414},[1415],{"type":42,"content":1416},[1417],{"text":1418,"type":513},"Thorsten Barth hat einen Hintergrund als Software-Entwickler und arbeitet mit Leidenschaft an der Schnittstelle zwischen Menschen, Daten und Prozessen. Als Vorstand von konversionsKRAFT ist er zuständig für alle Themen der Softwareintegration – Analytics, Testing, Targeting, Recommendations, Search, E-Commerce-Plattformen, Content Management Systeme uvm. Aktuelle Interessensgebiete sind u.a. Big Data, RTB, User Profiling und die damit verbundenen Targeting-Möglichkeiten.","thorsten.barth@konversionskraft.de",{"alt":1405,"src":1421,"name":30,"focus":30,"title":1405,"source":30,"filename":1421,"copyright":30,"fieldtype":49,"meta_data":1422,"is_external_url":81},"https://storage.googleapis.com/kk-website-assets/b9SrkF-T_thorsten-barth.png",{"alt":1405,"title":1405,"source":30,"copyright":30},"page-author","thorsten-barth","de/autoren/thorsten-barth",-210,[],677009943,"3cd24791-bc57-4fd2-b8a9-e5c52249caec","2025-11-17T10:34:46.245Z",[],"1636063d-dc1d-4c5f-88ac-f883cb3898e4","page-blog-post",[1435,1451,1464,1477],{"name":1436,"created_at":1437,"published_at":1438,"updated_at":1437,"id":1439,"uuid":1432,"content":1440,"slug":1443,"full_slug":1444,"sort_by_date":118,"position":1445,"tag_list":1446,"is_startpage":51,"parent_id":1447,"meta_data":118,"group_id":1448,"first_published_at":1449,"release_id":118,"lang":124,"path":118,"alternates":1450,"default_full_slug":118,"translated_slugs":118,"_stopResolving":81},"Data Analytics","2025-10-13T20:21:57.932Z","2025-11-27T08:54:46.522Z",101160214285780,{"_uid":1441,"component":1442},"c19807d9-938a-4832-8817-95fdbbea26dc","document-blog-category","data-analytics","de/_categories/data-analytics",-160,[],101158655217801,"be2d51cd-41e0-4d6a-a93e-7fa3982ca36c","2025-11-17T10:34:46.494Z",[],{"name":1452,"created_at":1453,"published_at":1438,"updated_at":1453,"id":1454,"uuid":1455,"content":1456,"slug":1458,"full_slug":1459,"sort_by_date":118,"position":1460,"tag_list":1461,"is_startpage":51,"parent_id":1447,"meta_data":118,"group_id":1462,"first_published_at":1449,"release_id":118,"lang":124,"path":118,"alternates":1463,"default_full_slug":118,"translated_slugs":118,"_stopResolving":81},"Data Sciences","2025-10-13T20:21:58.568Z",101160216886741,"f449697d-cbdd-4d7b-ab3d-634c234ec9f8",{"_uid":1457,"component":1442},"b8acba9f-933f-484d-91d4-b188b9fe42ce","data-sciences","de/_categories/data-sciences",-170,[],"b502c3bd-1699-45dc-a7e2-262bf092a90f",[],{"name":1465,"created_at":1466,"published_at":1438,"updated_at":1466,"id":1467,"uuid":1468,"content":1469,"slug":1471,"full_slug":1472,"sort_by_date":118,"position":1473,"tag_list":1474,"is_startpage":51,"parent_id":1447,"meta_data":118,"group_id":1475,"first_published_at":1449,"release_id":118,"lang":124,"path":118,"alternates":1476,"default_full_slug":118,"translated_slugs":118,"_stopResolving":81},"Tipps","2025-10-13T20:20:33.468Z",101159868312978,"7d09034d-64bf-41b8-9118-48f96001172e",{"_uid":1470,"component":1442},"1f4cfb7a-1ab1-4396-931a-ce9bd0e013e8","tipps","de/_categories/tipps",-20,[],"e20b3508-a9a0-4d4a-a437-3193d59f8824",[],{"name":1478,"created_at":1479,"published_at":1438,"updated_at":1479,"id":1480,"uuid":1481,"content":1482,"slug":1484,"full_slug":1485,"sort_by_date":118,"position":1486,"tag_list":1487,"is_startpage":51,"parent_id":1447,"meta_data":118,"group_id":1488,"first_published_at":1449,"release_id":118,"lang":124,"path":118,"alternates":1489,"default_full_slug":118,"translated_slugs":118,"_stopResolving":81},"Data Science","2025-11-12T16:13:50.397Z",111716066946451,"6abe50ea-afe8-4615-ade1-71e924bd54a7",{"_uid":1483,"component":1442},"07fd1964-f6bf-4e90-9575-819994d2bfb8","data-science","de/_categories/data-science",-410,[],"24621a2c-fe9b-4061-8e92-aeb0d17534f7",[],[],[1492,1498,1505],{"_uid":1493,"link":1494,"text":1497,"component":59},"9cfa98f5-046a-4ae5-8934-bc45e35ac060",{"id":1495,"url":1496,"linktype":31,"fieldtype":32,"cached_url":1496},632563185,"de","Home",{"_uid":1499,"link":1500,"text":442,"component":59},"cd0e9835-3999-494d-98c7-1bf2b72a6fe8",{"id":1501,"url":1502,"linktype":31,"fieldtype":32,"cached_url":1502,"story":1503},"7cc26d60-883e-42a6-8af9-9c1241ebd4eb","de/blog",{"name":442,"id":1504,"uuid":1501,"slug":440,"url":1502,"full_slug":1502,"_stopResolving":81},99774720228859,{"_uid":1506,"link":1507,"text":903,"component":59},"075fa889-b91b-4e20-ae98-2d8325d651d8",{"id":908,"url":1508,"linktype":31,"fieldtype":32,"cached_url":1508,"story":1509},"de/blog/data-science/testing-statistik-konfidenz-grundlagen",{"name":903,"id":907,"uuid":908,"slug":1510,"url":1511,"full_slug":1511,"_stopResolving":81},"testing-statistik-konfidenz-grundlagen","de/data-science/testing-statistik-konfidenz-grundlagen",[1513],{"_uid":1514,"caption":30,"headline":1515,"component":1516,"subheadline":1517,"action_buttons":1531},"ddc457ba-c9a5-4d73-b118-f0ea019dc224","Endlich kein Kopfzerbrechen mehr bei Testauswertungen","item-cta",{"type":39,"content":1518},[1519,1526],{"type":42,"attrs":1520,"content":1521},{"textAlign":118},[1522],{"text":1523,"type":513,"marks":1524},"E-Book und Präsentations-Folien im Doppelpack",[1525],{"type":1035},{"type":42,"attrs":1527,"content":1528},{"textAlign":118},[1529],{"text":1530,"type":513},"Du willst sicher sein, was dein Test wirklich aussagt und deinem Team helfen, dieselbe Klarheit zu gewinnen? Dieses Bundle gibt dir alles, was du brauchst, um souverän mit Statistik im Testing-Alltag umzugehen.",[1532],{"_uid":1533,"icon":27,"link":1534,"text":1539,"intent":35,"component":36,"icon_position":37},"60dd12fb-7cb9-4bcc-9560-e10775b1c20d",{"id":404,"url":30,"linktype":31,"fieldtype":32,"cached_url":405,"story":1535},{"name":1536,"id":1537,"uuid":404,"slug":1538,"url":405,"full_slug":405,"_stopResolving":81},"Statistik E-Book und Basic Wissen für A/B-Testing",79432354030905,"statistik-e-book-und-basic-wissen-fuer-a-b-testing","Statistik-Bundle erhalten","11",[],[],[1544],"CTBO",101807473516336,"3e6eb18b-8e9c-4e85-8c9c-7fce71f0cede","2013-02-28T08:00:24.000Z",[],[1550,1554,1558,1562,1573],{"name":1436,"created_at":1437,"published_at":1438,"updated_at":1437,"id":1439,"uuid":1432,"content":1551,"slug":1443,"full_slug":1444,"sort_by_date":118,"position":1445,"tag_list":1552,"is_startpage":51,"parent_id":1447,"meta_data":118,"group_id":1448,"first_published_at":1449,"release_id":118,"lang":124,"path":118,"alternates":1553,"default_full_slug":118,"translated_slugs":118},{"_uid":1441,"component":1442},[],[],{"name":1478,"created_at":1479,"published_at":1438,"updated_at":1479,"id":1480,"uuid":1481,"content":1555,"slug":1484,"full_slug":1485,"sort_by_date":118,"position":1486,"tag_list":1556,"is_startpage":51,"parent_id":1447,"meta_data":118,"group_id":1488,"first_published_at":1449,"release_id":118,"lang":124,"path":118,"alternates":1557,"default_full_slug":118,"translated_slugs":118},{"_uid":1483,"component":1442},[],[],{"name":1465,"created_at":1466,"published_at":1438,"updated_at":1466,"id":1467,"uuid":1468,"content":1559,"slug":1471,"full_slug":1472,"sort_by_date":118,"position":1473,"tag_list":1560,"is_startpage":51,"parent_id":1447,"meta_data":118,"group_id":1475,"first_published_at":1449,"release_id":118,"lang":124,"path":118,"alternates":1561,"default_full_slug":118,"translated_slugs":118},{"_uid":1470,"component":1442},[],[],{"name":1405,"created_at":1406,"published_at":1407,"updated_at":1408,"id":1409,"uuid":1410,"content":1563,"slug":1424,"full_slug":1425,"sort_by_date":118,"position":1426,"tag_list":1571,"is_startpage":51,"parent_id":1428,"meta_data":118,"group_id":1429,"first_published_at":1430,"release_id":118,"lang":124,"path":118,"alternates":1572,"default_full_slug":118,"translated_slugs":118},{"_uid":1412,"name":1405,"role":30,"about":1564,"email":1419,"avatar":1569,"component":1423,"social_link_x":30,"social_link_dribbble":30,"social_link_facebook":30,"social_link_linked_in":30},{"type":39,"content":1565},[1566],{"type":42,"content":1567},[1568],{"text":1418,"type":513},{"alt":1405,"src":1421,"name":30,"focus":30,"title":1405,"source":30,"filename":1421,"copyright":30,"fieldtype":49,"meta_data":1570,"is_external_url":81},{"alt":1405,"title":1405,"source":30,"copyright":30},[],[],{"name":1452,"created_at":1453,"published_at":1438,"updated_at":1453,"id":1454,"uuid":1455,"content":1574,"slug":1458,"full_slug":1459,"sort_by_date":118,"position":1460,"tag_list":1575,"is_startpage":51,"parent_id":1447,"meta_data":118,"group_id":1462,"first_published_at":1449,"release_id":118,"lang":124,"path":118,"alternates":1576,"default_full_slug":118,"translated_slugs":118},{"_uid":1457,"component":1442},[],[],[1578,1579,1580,1581,1582],{"name":1536,"id":1537,"uuid":404,"slug":1538,"url":405,"full_slug":405},{"name":391,"id":973,"uuid":389,"slug":974,"url":390,"full_slug":390},{"name":903,"id":907,"uuid":908,"slug":1510,"url":1511,"full_slug":1511},{"name":442,"id":1504,"uuid":1501,"slug":440,"url":1502,"full_slug":1502},{"name":956,"id":957,"uuid":312,"slug":958,"url":313,"full_slug":313},"\u003Csvg width=\"1em\" height=\"1em\" viewBox=\"0 0 24 24\" fill=\"currentColor\" xmlns=\"http://www.w3.org/2000/svg\">\n\u003Cpath d=\"M9.70697 16.9496L15.414 11.2426L9.70697 5.53564L8.29297 6.94964L12.586 11.2426L8.29297 15.5356L9.70697 16.9496Z\" fill=\"currentColor\"/>\n\u003C/svg>\n","\u003Csvg xmlns=\"http://www.w3.org/2000/svg\" width=\"1em\" height=\"1em\" fill=\"currentColor\" viewBox=\"0 0 256 256\">\u003Cpath d=\"M224,48H32a8,8,0,0,0-8,8V192a16,16,0,0,0,16,16H216a16,16,0,0,0,16-16V56A8,8,0,0,0,224,48Zm-96,85.15L52.57,64H203.43ZM98.71,128,40,181.81V74.19Zm11.84,10.85,12,11.05a8,8,0,0,0,10.82,0l12-11.05,58,53.15H52.57ZM157.29,128,216,74.18V181.82Z\">\u003C/path>\u003C/svg>","\u003Csvg width=\"1em\" height=\"1em\" viewBox=\"0 0 16 16\" fill=\"currentColor\" xmlns=\"http://www.w3.org/2000/svg\">\n\u003Cpath d=\"M13.5893 0.458984L7.93196 6.11498L2.27596 0.458984L0.390625 2.34432L6.04662 8.00032L0.390625 13.6563L2.27596 15.5417L7.93196 9.88565L13.5893 15.5417L15.4746 13.6563L9.81863 8.00032L15.4746 2.34432L13.5893 0.458984Z\" fill=\"currentColor\"/>\n\u003C/svg>\n",{"stories":1587,"total":3535},[1588,2094,2935],{"name":1589,"created_at":1590,"published_at":905,"updated_at":1591,"id":1592,"uuid":1593,"content":1594,"slug":2082,"full_slug":2083,"sort_by_date":118,"position":2087,"tag_list":2088,"is_startpage":51,"parent_id":1545,"meta_data":118,"group_id":2091,"first_published_at":2092,"release_id":118,"lang":124,"path":118,"alternates":2093,"default_full_slug":118,"translated_slugs":118},"Warum erfolgreiche A/B-Tests eine saubere statistische Testplanung brauchen (plus neues Testplaner-Tool)","2025-10-15T16:26:37.517Z","2026-10-04T09:56:23.390Z",101810165859050,"64a00144-ea1c-46b0-a1cc-5a85414d4a00",{"seo":1595,"_uid":1597,"body":1598,"text":1596,"image":2036,"authors":2039,"category":2041,"headline":1589,"component":1433,"categories":2042,"bottom_head":2068,"breadcrumbs":2069,"seo_noindex":51,"sidebar_cta":2084,"reading_time":2085,"seo_nofollow":51,"seo_canonical":30,"bottom_buttons":2086,"sidebar_cta_enabled":81,"sidebar_toc_enabled":81},{"title":1589,"plugin":912,"og_image":30,"og_title":1589,"description":1596,"twitter_image":30,"twitter_title":1589,"og_description":1596,"twitter_description":1596},"Eine methodisch und statistisch saubere Testplanung ist die Grundlage für ein erfolgreiches Testing-Programm. Nutze dafür den neuen Testplaner.","2b391d85-fd51-4d68-95b8-17d9188a16f7",[1599],{"_uid":1600,"text":1601,"component":1071},"aead8f6f-2188-42a1-9fbd-b597082d780c",{"type":39,"content":1602},[1603,1613,1621,1626,1701,1707,1711,1715,1720,1724,1734,1739,1751,1760,1769,1773,1778,1782,1798,1808,1813,1832,1836,1853,1858,1868,1872,1876,1897,1901,1917,1922,1926,1930,1936,1944,1956,1960,1964,1968,1972,1976,1980,1985,2004,2008,2012,2016,2020,2028],{"type":42,"content":1604},[1605,1607,1611],{"text":1606,"type":513},"Um die Grundlage für ein erfolgreiches Testing-Programm zu legen, ist ein methodisch – und das heißt vor allem statistisch – sauberes Vorgehen bei der Testplanung unerlässlich. Mit der Berechnung von p-Werten, CTBC-Scores und Konfidenzintervallen können wir ",{"text":1608,"type":513,"marks":1609},"unser Risiko für Fehlentscheidungen kontrollieren",[1610],{"type":1035},{"text":1612,"type":513}," und valide Ableitungen über unsere getesteten Varianten treffen. Und dabei natürlich hoffentlich viele „Gewinner“ ermitteln. 😉",{"type":42,"content":1614},[1615,1619],{"text":1616,"type":513,"marks":1617},"Statistik ist allerdings schon lange vor der Testauswertung relevant.",[1618],{"type":1035},{"text":1620,"type":513}," Bereits bei der Planung eines A/B-Tests wird mit der Beschreibung eines Testdesigns das Fundament für den späteren Erfolg gelegt. Und genau darauf geht dieser Artikel ein; und genau dafür haben wir ein neues Tool, den „Testplaner“, entwickelt!",{"type":983,"attrs":1622,"content":1623},{"level":985},[1624],{"text":1625,"type":513},"Woraus besteht ein statistisches Testdesign?",{"type":1627,"attrs":1628,"content":1630},"ordered_list",{"order":1629,"tight":51},1,[1631,1641,1651,1661,1671,1681,1691],{"type":1258,"content":1632},[1633],{"type":42,"content":1634},[1635],{"text":1636,"type":513,"marks":1637},"Die Population / Stichproben-Einheit",[1638],{"type":951,"attrs":1639},{"href":1640,"uuid":118,"anchor":118,"target":118,"linktype":136},"#die-population-stichproben-einheit",{"type":1258,"content":1642},[1643],{"type":42,"content":1644},[1645],{"text":1646,"type":513,"marks":1647},"Die Stichprobezuordnung",[1648],{"type":951,"attrs":1649},{"href":1650,"uuid":118,"anchor":118,"target":118,"linktype":136},"#die-stichprobezuordnung",{"type":1258,"content":1652},[1653],{"type":42,"content":1654},[1655],{"text":1656,"type":513,"marks":1657},"Hypothese (Nullhypothese und Alternativhypothese)",[1658],{"type":951,"attrs":1659},{"href":1660,"uuid":118,"anchor":118,"target":118,"linktype":136},"#hypothese-nullhypothese-und-alternativhypothese",{"type":1258,"content":1662},[1663],{"type":42,"content":1664},[1665],{"text":1666,"type":513,"marks":1667},"Die Zielmetrik(en)",[1668],{"type":951,"attrs":1669},{"href":1670,"uuid":118,"anchor":118,"target":118,"linktype":136},"#die-zielmetrik-en",{"type":1258,"content":1672},[1673],{"type":42,"content":1674},[1675],{"text":1676,"type":513,"marks":1677},"Risiko für False Positives: (Alpha-Fehler & Konfidenzniveau)",[1678],{"type":951,"attrs":1679},{"href":1680,"uuid":118,"anchor":118,"target":118,"linktype":136},"#risiko-fur-false-positives-alpha-fehler-konfidenzniveau",{"type":1258,"content":1682},[1683],{"type":42,"content":1684},[1685],{"text":1686,"type":513,"marks":1687},"Risiko für False Negatives (Beta-Fehler & Testpower)",[1688],{"type":951,"attrs":1689},{"href":1690,"uuid":118,"anchor":118,"target":118,"linktype":136},"#risiko-fur-false-negatives-beta-fehler-testpower",{"type":1258,"content":1692},[1693],{"type":42,"content":1694},[1695],{"text":1696,"type":513,"marks":1697},"Testlaufzeit",[1698],{"type":951,"attrs":1699},{"href":1700,"uuid":118,"anchor":118,"target":118,"linktype":136},"#testlaufzeit",{"type":983,"attrs":1702,"content":1705},{"id":1703,"level":1704},"die-population-stichproben-einheit",3,[1706],{"text":1636,"type":513},{"type":42,"content":1708},[1709],{"text":1710,"type":513},"Die für einen Test relevante Population wird darüber definiert, dass Nutzer:innen durch den Test beeinflusst werden können. Wird bspw. in einem Experiment die Produktdetailseite (PDS) verändert, besteht die Population aus allen Nutzer:innen, die eine PDS besucht haben. Im Experiment versuchen wir dann anhand einer Stichprobe zu überprüfen, ob sich das Verhalten dieser Population durch eine unserer Testvarianten signifikant verändern würde.",{"type":42,"content":1712},[1713],{"text":1714,"type":513},"Stichproben bestehen meistens aus eindeutigen Nutzern (genau genommen Nutzer-IDs). Möglich, aber selten, sind auch andere Einheiten, wie Sitzungen oder Pageviews.",{"type":983,"attrs":1716,"content":1718},{"id":1717,"level":1704},"die-stichprobezuordnung",[1719],{"text":1646,"type":513},{"type":42,"content":1721},[1722],{"text":1723,"type":513},"Bei A/B-Tests werden die Testteilnehmer:innen nahezu immer zufällig einer Testvariante zugewiesen. Bei einer ausreichend großen Stichprobe wird dadurch gewährleistet, dass diese über den Testzeitraum repräsentativ ist.",{"type":42,"content":1725},[1726,1728,1732],{"text":1727,"type":513},"Relevant ist auch das Verhältnis der Stichprobengrößen zwischen den einzelnen Varianten: ",{"text":1729,"type":513,"marks":1730},"üblich ist eine Gleichverteilung auf alle Varianten",[1731],{"type":1035},{"text":1733,"type":513},". Andere Verteilungen, um etwa das Risiko unterlegener Varianten zu minimieren, sind aber ebenfalls möglich.",{"type":983,"attrs":1735,"content":1737},{"id":1736,"level":1704},"hypothese-nullhypothese-und-alternativhypothese",[1738],{"text":1656,"type":513},{"type":42,"content":1740},[1741,1743,1749],{"text":1742,"type":513},"Die ",{"text":1744,"type":513,"marks":1745},"Hypothese",[1746],{"type":951,"attrs":1747},{"href":1748,"uuid":118,"anchor":118,"target":118,"linktype":136},"https://www.konversionskraft.de/conversion-whiteboard/conversion-whiteboard-17-das-hypothesen-template-fuer-erfolgreichere-ab-tests.html",{"text":1750,"type":513}," beschreibt als zentrale Aussage, was wir mit unserem Experiment nachweisen möchten.",{"type":42,"content":1752},[1753,1754,1758],{"text":1742,"type":513},{"text":1755,"type":513,"marks":1756},"Alternativhypothese",[1757],{"type":1035},{"text":1759,"type":513}," beschreibt die durch die optimierte Variante zu erwartenden Veränderung(en) in der Zielmetrik, damit diese als Erfolg bewertet wird. Das kann ganz simpel ein grundsätzlicher Uplift in der Conversion Rate sein, aber auch ein spezifischer Mindest-Uplift, zum Beispiel in Höhe von zwei Prozent.",{"type":42,"content":1761},[1762,1763,1767],{"text":1742,"type":513},{"text":1764,"type":513,"marks":1765},"Nullhypothese",[1766],{"type":1035},{"text":1768,"type":513}," beschreibt das Gegenteil unserer Alternativhypothese. Sie besagt also, dass es keinen Unterschied zwischen der Control und der Variante gibt – im Beispiel oben also keinen (Mindest-)Uplift in der Conversion Rate.",{"type":42,"content":1770},[1771],{"text":1772,"type":513},"Ein signifikantes Ergebnis bedeutet, dass wir die Nullhypothese verwerfen und stattdessen unsere Alternativhypothese annehmen.",{"type":983,"attrs":1774,"content":1776},{"id":1775,"level":1704},"die-zielmetrik-en",[1777],{"text":1666,"type":513},{"type":42,"content":1779},[1780],{"text":1781,"type":513},"Anhand der Zielmetrik als zentrale Messgröße vergleichen wir die Leistung der verschiedenen Varianten. Die Wahl der richtigen Zielmetrik ist entscheidend, da sie den Fokus des Tests festlegt und direkten Einfluss auf die Schlussfolgerungen und Entscheidungen hat.",{"type":42,"content":1783},[1784,1786,1790,1792,1796],{"text":1785,"type":513},"Die Zielmetrik sollte möglichst nahe an der Business-relevanten Metrik liegen und muss zum erwarteten Verhalten der Hypothese passen. ",{"text":1787,"type":513,"marks":1788},"Idealerweise hat ein Experiment genau eine Zielmetrik",[1789],{"type":1035},{"text":1791,"type":513}," (",{"text":1793,"type":513,"marks":1794},"Primary Goal",[1795],{"type":1106},{"text":1797,"type":513},"), um zu entscheiden, ob eine Variante ein Gewinner ist oder nicht.",{"type":42,"content":1799},[1800,1802,1806],{"text":1801,"type":513},"Das soll aber nicht grundlegend die Zahl der in einem Experiment gemessenen Metriken beschränken. ",{"text":1803,"type":513,"marks":1804},"Secondary Goals",[1805],{"type":1106},{"text":1807,"type":513}," sind essenziell, um das Verhalten der Nutzer:innen im Test zu verstehen und möglichst viel aus jedem Experiment zu lernen. Diese zusätzlichen Ziele sollten aber nicht herangezogen werden, um zu entscheiden, ob eine Variante ein Gewinner ist oder nicht.",{"type":983,"attrs":1809,"content":1811},{"id":1810,"level":1704},"risiko-fur-false-positives-alpha-fehler-konfidenzniveau",[1812],{"text":1676,"type":513},{"type":42,"content":1814},[1815,1817,1821,1823,1828],{"text":1816,"type":513},"Mit dem Signifikanzniveau bzw. dem Konfidenzniveau bestimmen wir vor dem Test, wie sehr die Daten gegen die Nullhypothese sprechen müssen, um einen Effekt als signifikant zu bewerten. ",{"text":1818,"type":513,"marks":1819},"Dadurch wird das",[1820],{"type":1035},{"text":1822,"type":513}," ",{"text":1824,"type":513,"marks":1825},"Alpha-Fehler",[1826,1827],{"type":1106},{"type":1035},{"text":1829,"type":513,"marks":1830},"****-Risiko für falsch-positive Ergebnisse begrenzt.",[1831],{"type":1035},{"type":42,"content":1833},[1834],{"text":1835,"type":513},"Ein wichtiger Aspekt dabei ist, eine mögliche Alpha-Fehler-Kumulierung (Multiple Testing Problem) zu berücksichtigen. Diese tritt immer dann auf, wenn anhand einer Stichprobe mehrere Auswertungen durchgeführt werden, beispielsweise bei einem Test mit einer Control-Gruppe und zwei weiteren Varianten. Hier wird nicht nur ein Test durchgeführt (Control vs. Variante), sondern direkt zwei (Control vs. Variante 1 und Control vs. Variante 2). Damit erhöhen wir das Gesamtrisiko, dass in einem der beiden Tests ein falsch-positives Ergebnis vorliegen könnte. Es gibt eine Vielzahl von Methoden, um diesem Effekt entgegenzuwirken, beispielsweise eine Anpassung des Konfidenzniveaus. Dies sollte unbedingt bereits im Experiment-Design berücksichtigt und dokumentiert werden.",{"type":1254,"attrs":1837,"content":1838},{"tight":51},[1839],{"type":1258,"content":1840},[1841],{"type":42,"content":1842},[1843,1845,1851],{"text":1844,"type":513},"Siehe dazu auch mein ",{"text":1846,"type":513,"marks":1847},"Artikel über paralleles Testing und die verschiedenen Testmodelle",[1848],{"type":951,"attrs":1849},{"href":1850,"uuid":118,"anchor":118,"target":118,"linktype":136},"https://www.konversionskraft.de/experimentation/paralleles-testen.html",{"text":1852,"type":513},".",{"type":983,"attrs":1854,"content":1856},{"id":1855,"level":1704},"risiko-fur-false-negatives-beta-fehler-testpower",[1857],{"text":1686,"type":513},{"type":42,"content":1859},[1860,1862,1866],{"text":1861,"type":513},"Auch der umgekehrte Fall eines falsch-negativen Resultats ist möglich, bei dem das Ergebnis nicht signifikant ist, obwohl die Alternativhypothese zutrifft. Dieses _Beta-Fehler-_Risiko versuchen wir durch die ",{"text":1863,"type":513,"marks":1864},"Testpower",[1865],{"type":1035},{"text":1867,"type":513}," zu kontrollieren.",{"type":42,"content":1869},[1870],{"text":1871,"type":513},"Die statistische Power ist die Wahrscheinlichkeit mittels eines Experiments einen Uplift nachweisen zu können, wenn dieser tatsächlich auch existiert. Die Power wird daher auch als Teststärke bezeichnet und gibt an, wie gut ein Test in der Lage ist, einen Unterschied signifikant nachzuweisen. Sie beschreibt also die Gegenwahrscheinlichkeit des zum Beta-Fehler.",{"type":42,"content":1873},[1874],{"text":1875,"type":513},"Die Power können wir beeinflussen, indem wir",{"type":1254,"attrs":1877,"content":1878},{"tight":51},[1879,1885,1891],{"type":1258,"content":1880},[1881],{"type":42,"content":1882},[1883],{"text":1884,"type":513},"das Konfidenzniveau anpassen: Je niedriger das Konfidenzniveau, umso größer die Power, sofern alle anderen Parameter konstant bleiben.",{"type":1258,"content":1886},[1887],{"type":42,"content":1888},[1889],{"text":1890,"type":513},"den Kontrast der Varianten erhöhen: Dadurch steigt der erwartete Effekt („Minimal Detectable Effect“, kurz MDE oder auf Deutsch MEI) und stärkere Effekte führen häufiger zu signifikanten Ergebnissen.",{"type":1258,"content":1892},[1893],{"type":42,"content":1894},[1895],{"text":1896,"type":513},"die Stichprobengröße anpassen: Die Chance einen Effekt signifikant nachzuweisen steigt mit der Stichprobengröße.",{"type":42,"content":1898},[1899],{"text":1900,"type":513},"Da der MEI nicht ohne weitere Anpassung der Testvariante erfolgen kann und das Konfidenzniveau durch unser toleriertes Risiko für falsch-positive Resultate bestimmt werden sollte, ist die Stichprobengröße die eigentliche Stellschraube für die Power.",{"type":1254,"attrs":1902,"content":1903},{"tight":51},[1904],{"type":1258,"content":1905},[1906],{"type":42,"content":1907},[1908,1910,1916],{"text":1909,"type":513},"Siehe dazu auch ",{"text":1911,"type":513,"marks":1912},"Julia Engelmanns Artikel zur Testpower",[1913],{"type":951,"attrs":1914},{"href":1915,"uuid":118,"anchor":118,"target":118,"linktype":136},"https://www.konversionskraft.de/data-analytics/statistik-fehler-beim-a-b-testing-vermeiden.html",{"text":1852,"type":513},{"type":983,"attrs":1918,"content":1920},{"id":1919,"level":1704},"testlaufzeit",[1921],{"text":1696,"type":513},{"type":42,"content":1923},[1924],{"text":1925,"type":513},"Die geschätzte Testlaufzeit kann man als Endergebnis einer vollständigen Testplanung betrachten. Durch die Varianz in der Zielmetrik in der Population (wird z. B. durch die aktuelle Conversion Rate geschätzt), dem benötigten Konfidenzniveau und Power und dem erwarteten Effekt (MEI) wird die benötigte Stichprobengröße für eine bestimmte Nullhypothese berechnet.",{"type":42,"content":1927},[1928],{"text":1929,"type":513},"Teilen wir diese Stichprobengröße durch die wöchentlich zu erwartenden Nutzer:innen im Experiment (wird durch Traffic-Daten für die für den Test relevanten Seiten geschätzt), erhalten wir die erwartete Testlaufzeit.",{"type":983,"attrs":1931,"content":1933},{"id":1932,"level":985},"warum-braucht-es-eine-solide-testplanung",[1934],{"text":1935,"type":513},"Warum braucht es eine solide Testplanung?",{"type":42,"content":1937},[1938,1942],{"text":1939,"type":513,"marks":1940},"Mit einer sorgfältigen Testplanung wird sowohl die Effektivität, als auch die Effizienz eines Testingprogramms optimiert.",[1941],{"type":1035},{"text":1943,"type":513}," Durch eine relevante Nullhypothese, einem angemessenen Konfidenzniveau und dem damit verbundenen begrenzten Risiko für falsch-positive Ergebnisse sowie einer ausreichend großen Stichprobe können wir sicherstellen, relevante Effekte überhaupt zu erkennen. Durch die Bestimmung einer optimalen Stichprobengröße für eine gewünschte Testpower stellen wir sicher, einen Test nicht zu lange laufen zu lassen – aber auch nicht zu früh zu beenden.",{"type":926,"content":1945},[1946,1950],{"type":42,"content":1947},[1948],{"text":1949,"type":513},"Wir beobachten häufig bei Kunden, dass Tests immer genau eine oder zwei Wochen laufen, unabhängig von geschätzten Effekten. Dadurch können insbesondere kleinere Effekte übersehen werden.",{"type":42,"content":1951},[1952],{"text":1953,"type":513,"marks":1954},"Dr. René Gilster, Principal Behavioral Science",[1955],{"type":1106},{"type":42,"content":1957},[1958],{"text":1959,"type":513},"Wie entscheidend eine solide Testplanung, insbesondere eine valide Schätzung der benötigten Testlaufzeit für den Erfolg und ROI eines Testing-Programms ist, zeigt folgendes hypothetisches Szenario:",{"type":42,"content":1961},[1962],{"text":1963,"type":513},"Angenommen, du generierst im Jahr 100 Hypothesen und testest diese in einzelnen A/B-Tests. Nun nehmen wir zusätzlich an, dass von diesen 100 Hypothesen die Hälfte in Wahrheit zutreffen und die zugehörigen Varianten eigentliche Gewinner wären. Das bedeutet, du hättest in diesem Jahr 50 Gewinner und 50 Verlierer, welche wir durch A/B-Tests möglichst als solche erkennen wollen.",{"type":42,"content":1965},[1966],{"text":1967,"type":513},"Bei 50 Gewinnern bedeutet das:",{"type":42,"content":1969},[1970],{"text":1971,"type":513},"\u003Cfigure class=\"wp-block-table\">\u003Cp>\u003Ctable>\u003Ctbody> \u003Ctr> \u003Ctd>\u003Cstrong>Erzielte Power\u003C/strong>\u003C/td> \u003Ctd class=\"has-text-align-center\" data-align=\"center\">90 %\u003C/td> \u003Ctd class=\"has-text-align-center\" data-align=\"center\">80 %\u003C/td> \u003Ctd class=\"has-text-align-center\" data-align=\"center\">60 %\u003C/td> \u003C/tr> \u003Ctr> \u003Ctd>\u003Cstrong>Erkannte Gewinner (True Positives)\u003C/strong>\u003C/td> \u003Ctd class=\"has-text-align-center\" data-align=\"center\">45\u003C/td> \u003Ctd class=\"has-text-align-center\" data-align=\"center\">40\u003C/td> \u003Ctd class=\"has-text-align-center\" data-align=\"center\">30\u003C/td> \u003C/tr> \u003Ctr> \u003Ctd>\u003Cstrong>Falsch erkannte Gewinner (False Negatives)\u003C/strong>\u003C/td> \u003Ctd class=\"has-text-align-center\" data-align=\"center\">5\u003C/td> \u003Ctd class=\"has-text-align-center\" data-align=\"center\">10\u003C/td> \u003Ctd class=\"has-text-align-center\" data-align=\"center\">20\u003C/td> \u003C/tr> \u003C/tbody>\u003C/table> \u003C/p> \u003Cfigcaption class=\"wp-element-caption\">Tabelle 1: Je niedriger die Testpower, desto mehr tatsächliche Gewinner bleiben unerkannt.\u003C/figcaption>\u003C/figure>",{"type":42,"content":1973},[1974],{"text":1975,"type":513},"Das Beispiel verdeutlicht, welchen Effekt die tatsächlich erzielte Power auf unsere Effektivität hat, tatsächliche Gewinner als solche zu erkennen. Selbst bei einer Power von 90 %, was häufig zu ambitioniert ist und in der Praxis zu unnötig langen Testlaufzeiten führt, würden im Schnitt 5 echte Gewinner unerkannt bleiben. Der vermeintliche Standardwert für die Power von 80 % führt im Durchschnitt dazu, dass 10 überlegene Varianten, durch einen A/B-Test nicht erkannt worden wären. Wenn zusätzlich noch unsauber geplant wurde (bspw. durch eine Überschätzung des MEIs) und die tatsächliche Power dadurch auf 60 % sinkt, werden 20 der echten Gewinner zu keinem signifikanten Ergebnis führen und die potenziell gewinnbringenden Varianten nicht ausgerollt. Und das nur, weil die Testplanung zu stark von der Wirklichkeit abweicht.",{"type":42,"content":1977},[1978],{"text":1979,"type":513},"Ein vollständiger und gut dokumentierter Testplan gibt zudem Sicherheit beim Anlegen, Durchführen und Analysieren von Experimenten. Entwickler haben eine Vorgabe, welche Zielgruppen, welche Traffic-Verteilung und welche Zielmetriken angelegt werden müssen. Die berechnete Testlaufzeit und Stichprobengröße legt eindeutig fest, wann der Test abgeschaltet werden soll und die Dokumentation der statistischen Nullhypothese, sowie des gewünschten Konfidenzniveaus legt schon vor Testbeginn genau fest, wie die Auswertung der Testresultate zu erfolgen hat. Die Testplanung ermöglicht dadurch also auch eine reibungslose Übergabe von Tests an Kolleg:innen ohne große Absprachen.",{"type":983,"attrs":1981,"content":1982},{"level":985},[1983],{"text":1984,"type":513},"Wie erstelle ich ein statistisch valides Testdesign?",{"type":42,"content":1986},[1987,1991,1992,1999,2000],{"text":1988,"type":513,"marks":1989},"Mit unserem neuen",[1990],{"type":1035},{"text":1822,"type":513},{"text":1993,"type":513,"marks":1994},"kostenlosen Testplaner-Tool",[1995,1996],{"type":1035},{"type":951,"attrs":1997},{"href":1998,"uuid":118,"anchor":118,"target":118,"linktype":136},"https://www.konversionskraft.de/tools/testplaner",{"text":1822,"type":513},{"text":2001,"type":513,"marks":2002},"kannst du alle relevanten Aspekte der Testplanung einheitlich, ansprechend und (auch für Nicht-Statistiker) leicht verständlich dokumentieren.",[2003],{"type":1035},{"type":42,"content":2005},[2006],{"text":2007,"type":513},"Im Kern hat der Testplaner die Aufgabe, die Testlaufzeit für eine konkrete Hypothese zu errechnen. Einzigartig ist dabei die Möglichkeit, eine konkrete Nullhypothese zu definieren. Damit ist die Planung für Non-Inferiority-Tests oder Tests mit spezifischen Mindest-Uplifts genauso einfach möglich, wie für den normalen Standard-Case eines A/B-Tests auf einfache Überlegenheit.",{"type":42,"content":2009},[2010],{"text":2011,"type":513},"Zusätzlich kann eine individuelle Traffic-Verteilung auf die einzelnen Varianten berücksichtigt werden, wodurch automatisch auch eine Alpha-Fehler-Kumulierung bei mehreren Varianten berücksichtigt und dokumentiert wird. Ergänzend zu den Tipps direkt im Tool findest du zudem auf der Tool-Seite eine ausführliche Bedienungsanleitung mit Erklärungen aller Elemente.",{"type":42,"content":2013},[2014],{"text":2015,"type":513},"Viel Spaß beim Planen deiner Tests!",{"type":42,"content":2017},[2018],{"text":2019,"type":513},"Wenn du Fragen dazu hast oder Unterstützung bei deiner Testplanung brauchst, dann melde dich jederzeit gerne bei mir und meinen Kolleg:innen.",{"type":42,"content":2021},[2022,2026],{"text":2023,"type":513,"marks":2024},"Schon gewusst …?!",[2025],{"type":1035},{"text":2027,"type":513}," Wir haben noch mehr Statistik- & Testing-Tools entwickelt, die uns tagtäglich dabei unterstützen, A/B-Tests richtig zu planen und valide auszuwerten. Nutze auch du sie, um deinen Optimierer-Alltag zu erleichtern und vertrauenswürdige Resultate zu erzielen.",{"type":42,"content":2029},[2030],{"text":2031,"type":513,"marks":2032},"Zur Tool-Übersicht",[2033],{"type":951,"attrs":2034},{"href":2035,"uuid":118,"anchor":118,"target":118,"linktype":136},"https://www.konversionskraft.de/tools",{"alt":1589,"src":2037,"name":30,"focus":30,"title":1589,"source":30,"filename":2037,"copyright":30,"fieldtype":49,"meta_data":2038,"is_external_url":81},"https://storage.googleapis.com/kk-website-assets/0w2rOS1H_solide-testplanung-blogpost-1620x500.png",{"alt":1589,"title":1589,"source":30,"copyright":30},[2040],"b348a411-f216-46f2-919b-f1dea40ec1c5","451fd8a8-e3fa-4c9e-a31f-e3ce43a13ea1",[2043,2056,2060,2064],{"name":956,"created_at":2044,"published_at":2045,"updated_at":2046,"id":2047,"uuid":2041,"content":2048,"slug":2050,"full_slug":2051,"sort_by_date":118,"position":2052,"tag_list":2053,"is_startpage":51,"parent_id":1447,"meta_data":118,"group_id":2054,"first_published_at":1449,"release_id":118,"lang":124,"path":118,"alternates":2055,"default_full_slug":118,"translated_slugs":118,"_stopResolving":81},"2025-10-15T15:37:26.765Z","2026-10-08T05:55:38.668Z","2026-10-08T05:55:38.683Z",101798079589699,{"_uid":2049,"component":1442},"5e6300bc-4c12-4474-989f-2407f81dd510","a-b-testing","de/_categories/a-b-testing",-220,[],"b7cb275d-1f95-495f-b237-934a8392e6f4",[],{"name":1436,"created_at":1437,"published_at":1438,"updated_at":1437,"id":1439,"uuid":1432,"content":2057,"slug":1443,"full_slug":1444,"sort_by_date":118,"position":1445,"tag_list":2058,"is_startpage":51,"parent_id":1447,"meta_data":118,"group_id":1448,"first_published_at":1449,"release_id":118,"lang":124,"path":118,"alternates":2059,"default_full_slug":118,"translated_slugs":118,"_stopResolving":81},{"_uid":1441,"component":1442},[],[],{"name":1452,"created_at":1453,"published_at":1438,"updated_at":1453,"id":1454,"uuid":1455,"content":2061,"slug":1458,"full_slug":1459,"sort_by_date":118,"position":1460,"tag_list":2062,"is_startpage":51,"parent_id":1447,"meta_data":118,"group_id":1462,"first_published_at":1449,"release_id":118,"lang":124,"path":118,"alternates":2063,"default_full_slug":118,"translated_slugs":118,"_stopResolving":81},{"_uid":1457,"component":1442},[],[],{"name":1478,"created_at":1479,"published_at":1438,"updated_at":1479,"id":1480,"uuid":1481,"content":2065,"slug":1484,"full_slug":1485,"sort_by_date":118,"position":1486,"tag_list":2066,"is_startpage":51,"parent_id":1447,"meta_data":118,"group_id":1488,"first_published_at":1449,"release_id":118,"lang":124,"path":118,"alternates":2067,"default_full_slug":118,"translated_slugs":118,"_stopResolving":81},{"_uid":1483,"component":1442},[],[],[],[2070,2073,2077],{"_uid":2071,"link":2072,"text":1497,"component":59},"dd407a7b-4f75-4c00-a5ea-c0582e7b28df",{"id":1495,"url":1496,"linktype":31,"fieldtype":32,"cached_url":1496},{"_uid":2074,"link":2075,"text":442,"component":59},"f3c94dcb-bb2d-40e9-8456-dfcdd317571b",{"id":1501,"url":1502,"linktype":31,"fieldtype":32,"cached_url":1502,"story":2076},{"name":442,"id":1504,"uuid":1501,"slug":440,"url":1502,"full_slug":1502,"_stopResolving":81},{"_uid":2078,"link":2079,"text":1589,"component":59},"d8ce9e47-ed91-4b56-81d8-37b35141da23",{"id":1593,"url":2080,"linktype":31,"fieldtype":32,"cached_url":2080,"story":2081},"de/blog/data-science/statistische-testplanung",{"name":1589,"id":1592,"uuid":1593,"slug":2082,"url":2083,"full_slug":2083,"_stopResolving":81},"statistische-testplanung","de/data-science/statistische-testplanung",[],"8",[],-120,[2089,2090],"statistik","Tools","f4672058-f062-47a9-afd4-00f531436d01","2023-08-09T09:19:36.000Z",[],{"name":2095,"created_at":2096,"published_at":905,"updated_at":2097,"id":2098,"uuid":2099,"content":2100,"slug":2905,"full_slug":2906,"sort_by_date":118,"position":2930,"tag_list":2931,"is_startpage":51,"parent_id":1545,"meta_data":118,"group_id":2932,"first_published_at":2933,"release_id":118,"lang":124,"path":118,"alternates":2934,"default_full_slug":118,"translated_slugs":118},"70% deiner A/B-Tests sind “underpowered”: So rockst du die Statistik","2025-10-15T16:26:00.758Z","2026-10-04T09:56:23.340Z",101810015302367,"32ca65ce-636f-4a92-b44e-fafed59d7c2a",{"seo":2101,"_uid":2104,"body":2105,"text":2103,"image":2830,"footer":30,"header":30,"authors":2833,"category":2041,"headline":2095,"component":1433,"categories":2835,"bottom_head":2891,"breadcrumbs":2892,"seo_noindex":51,"sidebar_cta":2907,"reading_time":2927,"seo_nofollow":51,"seo_canonical":30,"bottom_buttons":2928,"additional_slot":2929,"sidebar_cta_enabled":81,"sidebar_toc_enabled":81},{"title":2102,"plugin":912,"og_image":30,"og_title":2102,"description":2103,"twitter_image":30,"twitter_title":2102,"og_description":2103,"twitter_description":2103},"70% deiner A/B-Tests sind \"underpowered\": So rockst du die Statistik","Viele A/B-Tests werden zu früh abgebrochen und sind nicht valide. Steigere den Testerfolg und berechne Mindestlaufzeiten mit dem Sample Size Tool!","57423c1c-dfa7-4359-b4be-8fd387d6a515",[2106,2114,2125,2300,2311,2341,2352,2411,2421,2500,2511,2537,2548,2736,2747],{"_uid":2107,"text":2108,"component":1071},"fc9663c9-e12e-4dde-9386-c85ac25583d6",{"type":39,"content":2109},[2110],{"type":42,"content":2111},[2112],{"text":2113,"type":513},"Schon wieder ein Test ohne Uplift. Auch dieses Mal kannst du nicht verstehen was schief gelaufen ist? Und wie sollst du das bloß deinem Chef erklären?",{"_uid":2115,"image":2116,"caption":2119,"component":1084},"1feaa7fe-ecee-4ef6-854a-c5d43e03c120",{"alt":118,"src":2117,"name":30,"focus":30,"title":118,"source":30,"filename":2117,"copyright":30,"fieldtype":49,"meta_data":2118,"is_external_url":81},"https://storage.googleapis.com/kk-website-assets/Af8A9PEE_image-11-Kopie-1024x174.png",{"alt":118,"title":118,"source":30,"copyright":30},{"type":39,"content":2120},[2121],{"type":42,"content":2122},[2123],{"text":2124,"type":513},"Quelle: konversionsKRAFT (2020)",{"_uid":2126,"text":2127,"component":1071},"b407a3d8-588c-4051-b470-e739b544b9e5",{"type":39,"content":2128},[2129,2134,2164,2175,2188,2200,2220,2235,2242,2266,2283,2290,2295],{"type":42,"attrs":2130,"content":2131},{"textAlign":118},[2132],{"text":2133,"type":513},"Es gibt viele Gründe warum der Uplift eines A/B-Tests ausbleibt:",{"type":1254,"content":2135},[2136,2143,2150,2157],{"type":1258,"content":2137},[2138],{"type":42,"attrs":2139,"content":2140},{"textAlign":118},[2141],{"text":2142,"type":513},"Ein Konzept, das an den Bedürfnissen der Zielgruppe vorbei geht",{"type":1258,"content":2144},[2145],{"type":42,"attrs":2146,"content":2147},{"textAlign":118},[2148],{"text":2149,"type":513},"Eine ungenaue oder gar keine richtige Testhypothese",{"type":1258,"content":2151},[2152],{"type":42,"attrs":2153,"content":2154},{"textAlign":118},[2155],{"text":2156,"type":513},"Eine unzureichende Qualität im Design. Technische Bugs in der Umsetzung.",{"type":1258,"content":2158},[2159],{"type":42,"attrs":2160,"content":2161},{"textAlign":118},[2162],{"text":2163,"type":513},"Und so weiter…",{"type":42,"attrs":2165,"content":2166},{"textAlign":118},[2167,2169,2173],{"text":2168,"type":513},"In unserem Optimierer-Alltag beobachten wir aber immer wieder ein ganz anderes Problem, das eigentlich nichts mit dem Konzept an sich zu tun hat: ",{"text":2170,"type":513,"marks":2171},"Falsche Statistik und Fehler im quantitativen Vorgehen",[2172],{"type":1035},{"text":2174,"type":513}," beim A/B Testings führen zu invaliden Test und statistisch insignifikanten Ergebnissen oder unschlüssigen Tests.",{"type":42,"attrs":2176,"content":2177},{"textAlign":118},[2178,2180,2186],{"text":2179,"type":513},"Dabei könnte man das eigentlich ganz einfach verhindern, indem man sich an wichtige ",{"text":2181,"type":513,"marks":2182},"Grundregeln der Statistik beim A/B Testing",[2183],{"type":951,"attrs":2184},{"href":2185,"uuid":118,"anchor":118,"target":954,"linktype":136},"https://a.storyblok.com/f/328018/x/27a68e02bf/e-book_statistik-spickzettel-fuer-optimierer.pdf",{"text":2187,"type":513}," hält. Dazu gehört zum Beispiel, bereits vor dem Teststart die benötigte Testdauer zu bestimmen und den Test ausreichend lange laufen zu lassen.",{"type":42,"attrs":2189,"content":2190},{"textAlign":118},[2191,2193,2199],{"text":2192,"type":513},"Wie ein A/B-Test insgesamt abläuft, zeigt unser ",{"text":2194,"type":513,"marks":2195},"Leitfaden zum A/B-Testing",[2196],{"type":951,"attrs":2197},{"href":953,"uuid":312,"anchor":118,"target":954,"linktype":31,"story":2198},{"name":956,"id":957,"uuid":312,"slug":958,"url":313,"full_slug":313,"_stopResolving":81},{"text":1852,"type":513},{"type":42,"attrs":2201,"content":2202},{"textAlign":118},[2203,2205,2211,2212,2218],{"text":2204,"type":513},"In einer Studie von 115 durchgeführten A/B Tests hat der erfahrene Marketer und Gründer von ",{"text":2206,"type":513,"marks":2207},"Analytics-Toolkit.com",[2208],{"type":951,"attrs":2209},{"href":2210,"uuid":118,"anchor":118,"target":118,"linktype":136},"https://www.analytics-toolkit.com",{"text":1822,"type":513},{"text":2213,"type":513,"marks":2214},"Georgi Georgiev",[2215],{"type":951,"attrs":2216},{"href":2217,"uuid":118,"anchor":118,"target":118,"linktype":136},"https://www.linkedin.com/in/geoprofi/",{"text":2219,"type":513}," herausgefunden, dass fast 70% dieser Tests “underpowered” waren (Mehr zum Begriff der Power findest du später im Artikel). Letztendlich bedeutet das, dass mehr als zwei Drittel der Tests eine unzureichende Stichprobengröße hatten und einfach zu früh abgeschaltet wurden um Uplifts valide nachweisen zu können. Diese Tests sind lapidar gesagt, eigentlich für die Tonne.",{"type":42,"attrs":2221,"content":2222},{"textAlign":118},[2223,2225,2234],{"text":2224,"type":513},"Wenn du mit einer Agentur testest, frag deshalb vor dem Start, wie sie Stichprobe und Laufzeit plant. Weitere Prüffragen stehen in unserem Ratgeber ",{"text":2226,"type":513,"marks":2227},"CRO-Agentur finden",[2228],{"type":951,"attrs":2229},{"href":2230,"uuid":318,"anchor":118,"target":954,"linktype":31,"story":2231},"/de/cro-agentur-finden",{"name":2226,"id":2232,"uuid":318,"slug":2233,"url":319,"full_slug":319,"_stopResolving":81},226605306714828,"cro-agentur-finden",{"text":1852,"type":513},{"type":42,"attrs":2236,"content":2237},{"textAlign":118},[2238],{"text":2239,"type":513,"marks":2240},"In diesem Beitrag erfährst du:",[2241],{"type":1035},{"type":1627,"attrs":2243,"content":2244},{"order":1629},[2245,2252,2259],{"type":1258,"content":2246},[2247],{"type":42,"attrs":2248,"content":2249},{"textAlign":118},[2250],{"text":2251,"type":513},"Warum wir A/B-Tests häufig zu früh abbrechen",{"type":1258,"content":2253},[2254],{"type":42,"attrs":2255,"content":2256},{"textAlign":118},[2257],{"text":2258,"type":513},"Wie du statistische Testpower sicherstellst",{"type":1258,"content":2260},[2261],{"type":42,"attrs":2262,"content":2263},{"textAlign":118},[2264],{"text":2265,"type":513},"Wie dir das Sample Size Tool hilft, bessere Tests zu starten",{"type":42,"attrs":2267,"content":2268},{"textAlign":118},[2269,2273,2275,2281],{"text":2270,"type":513,"marks":2271},"📺 Keine Angst vor der Kultur des Experimentierens!",[2272],{"type":1035},{"text":2274,"type":513}," Oft ist es sehr hilfreich, sich mit anderen Fach- und Führungskräften auszutauschen, um häufig auftretende Fehler im A/B-Testing zu vermeiden. Das Ambassador Programm bietet dir eine solche Plattform. Neben regelmäßigen Meetups mit der Community kannst du dein Wissen zudem durch lehrreiche Videos erweitern. ",{"text":2276,"type":513,"marks":2277},"Bewirb dich jetzt",[2278],{"type":951,"attrs":2279},{"href":971,"uuid":389,"anchor":118,"target":954,"linktype":31,"story":2280},{"name":391,"id":973,"uuid":389,"slug":974,"url":390,"full_slug":390,"_stopResolving":81},{"text":2282,"type":513},", um dein digitales Wachstumspotenzial auszuschöpfen!",{"type":983,"attrs":2284,"content":2285},{"level":985,"textAlign":118},[2286],{"text":2287,"type":513,"marks":2288},"Ein typischer A/B-Test Fail aus der Praxis",[2289],{"type":1035},{"type":42,"attrs":2291,"content":2292},{"textAlign":118},[2293],{"text":2294,"type":513},"Was mit einem A/B Test passieren kann, wenn man sich nicht an eine ausreichende Testlaufzeit hält, zeigt folgendes Beispiel:",{"type":42,"attrs":2296,"content":2297},{"textAlign":118},[2298],{"text":2299,"type":513},"Angenommen, ein Test läuft auf der Website und die Variante zeigt einen Uplift von 10% auf die Conversion Rate. Die Ergebnisse sind nach zehn Tagen signifikant (Konfidenz >95%) und der Conversion Optimierer möchte den Test abschalten.",{"_uid":2301,"image":2302,"caption":2306,"component":1084},"3310332a-fc37-427a-8dbf-4df890e75c3e",{"alt":2303,"src":2304,"name":30,"focus":30,"title":118,"source":30,"filename":2304,"copyright":30,"fieldtype":49,"meta_data":2305,"is_external_url":81},"laufzeit10tage","https://storage.googleapis.com/kk-website-assets/yv82dxGS_laufzeit10tage.png",{"alt":2303,"title":118,"source":30,"copyright":30},{"type":39,"content":2307},[2308],{"type":42,"content":2309},[2310],{"text":2124,"type":513},{"_uid":2312,"text":2313,"component":1071},"968e9d33-968e-4393-b651-3a68a756a815",{"type":39,"content":2314},[2315,2319,2323,2327,2337],{"type":42,"content":2316},[2317],{"text":2318,"type":513},"Um ganz sicher zu gehen, hält er nochmal Rücksprache mit der Kollegin aus dem Data Team.",{"type":42,"content":2320},[2321],{"text":2322,"type":513},"Die Kollegin erinnert ihn daran, dass sie vor dem Teststart ja gemeinsam eine Schätzung der benötigten Dauer durchgeführt haben. Basierend darauf ergab sich eine benötigte Testlaufzeit von 4 Wochen, welche noch längst nicht erreicht ist.",{"type":42,"content":2324},[2325],{"text":2326,"type":513},"Zudem rät sie davon ab, regelmäßig ins Tool zu schauen bevor diese Grenze erreicht ist. Das erhöht die Fehlerrate enorm, also eine höhere Wahrscheinlichkeit, zufällig einen Uplift zu finden, der in Wahrheit gar nicht existiert und nur zufällig entstanden ist.",{"type":42,"content":2328},[2329,2331,2335],{"text":2330,"type":513},"Der Conversion Manager willigt ein: ",{"text":2332,"type":513,"marks":2333},"“Dann warten wir halt noch ein paar Tage. Was soll sich schon ändern”",[2334],{"type":1106},{"text":2336,"type":513},", denkt er sich….",{"type":42,"content":2338},[2339],{"text":2340,"type":513},"Ein paar Tage später dann die Ernüchterung. Tatsächlich ist der Effekt immer weiter zurückgegangen und die CTBC („Chance to Beat Control“) auf unter 80% gesunken.",{"_uid":2342,"image":2343,"caption":2347,"component":1084},"3266ce9e-3e28-493a-a9c3-a9f2765c67a3",{"alt":2344,"src":2345,"name":30,"focus":30,"title":118,"source":30,"filename":2345,"copyright":30,"fieldtype":49,"meta_data":2346,"is_external_url":81},"laufzeit18Tage","https://storage.googleapis.com/kk-website-assets/fAT19xnw_laufzeit18Tage.png",{"alt":2344,"title":118,"source":30,"copyright":30},{"type":39,"content":2348},[2349],{"type":42,"content":2350},[2351],{"text":2124,"type":513},{"_uid":2353,"text":2354,"component":1071},"783e05e0-16db-4d8a-8239-7892c78e338e",{"type":39,"content":2355},[2356,2363,2368,2387,2392,2397,2402],{"type":42,"attrs":2357,"content":2358},{"textAlign":118},[2359],{"text":2360,"type":513,"marks":2361},"Was ist bei dem Test passiert?",[2362],{"type":1035},{"type":42,"attrs":2364,"content":2365},{"textAlign":118},[2366],{"text":2367,"type":513},"Was wir in der Praxis oft beobachten ist folgendes: Während der Test läuft, wird immer wieder ein Blick ins Tool geworfen ob bereits ein signifikanter Uplift vorliegt. Oft findet dieser Blick statt, bevor die Mindestlaufzeit erreicht wurde oder es mangelt überhaupt an solch einer Schätzung. Sobald ein signifikanter Uplift vorliegt, wird der Test vorzeitig abgeschaltet.",{"type":42,"attrs":2369,"content":2370},{"textAlign":118},[2371,2373,2385],{"text":2372,"type":513},"Beim ",{"text":2374,"type":513,"marks":2375},"frequentistischen",[2376],{"type":951,"attrs":2377},{"href":2378,"uuid":2379,"anchor":118,"target":954,"linktype":31,"story":2380},"/de/data-science/signifikanz-im-testing-tool","962637b1-6e4e-4c11-80f3-b972cf8f9316",{"name":2381,"id":2382,"uuid":2379,"slug":2383,"url":2384,"full_slug":2384,"_stopResolving":81},"Testing Insights: Was steckt hinter der Signifikanz in meinem Testing Tool?",101807704907648,"signifikanz-im-testing-tool","de/data-science/signifikanz-im-testing-tool",{"text":2386,"type":513}," Ansatz zum A/B Testing ist eine wichtige Voraussetzung für valide Ergebnisse, dass man VOR dem Test eine möglichst genaue Schätzung des zu erwartenden Impacts vornimmt und so zu einer Abschätzung der Testlaufzeit findet.",{"type":42,"attrs":2388,"content":2389},{"textAlign":118},[2390],{"text":2391,"type":513},"Der regelmäßige Blick in das Tool, vor Ablauf der Testdauer, ist hier grundsätzlich zu vermeiden!",{"type":42,"attrs":2393,"content":2394},{"textAlign":118},[2395],{"text":2396,"type":513},"Dadurch erhöht sich die Fehlerwahrscheinlichkeit, zwischendurch einen signifikanten Uplift zu beobachten der rein zufällig entstanden ist. Wenn man dann den Test abschaltet, identifiziert man fälschlicherweise einen Uplift, der aber eigentlich gar keiner ist.",{"type":42,"attrs":2398,"content":2399},{"textAlign":118},[2400],{"text":2401,"type":513},"Im Beispiel beruhte der zwischenzeitliche Effekt von 10% und die hohe CTBC nicht auf einem validen Ergebnis mit ausreichend langer Testlaufzeit sondern waren nur eine zufällige, kurzweilige Erscheinung die aber nicht auf eine signifikante Verbesserung der tatsächlichen Conversion Rate schließen ließ.",{"type":42,"attrs":2403,"content":2404},{"textAlign":118},[2405,2409],{"text":2406,"type":513,"marks":2407},"Anmerkung:",[2408],{"type":1035},{"text":2410,"type":513}," Dieser Fall kann natürlich auch andersherum eintreten: Während des Tests beobachtet man zwar einen Uplift, der aber nicht signifikant erst. Erst nach Ablauf der berechneten Testdauer wird das Ergebnis signifikant.",{"_uid":2412,"image":2413,"caption":2416,"component":1084},"4272fca3-72ac-45d0-8b6e-776f1411aba2",{"alt":118,"src":2414,"name":30,"focus":30,"title":118,"source":30,"filename":2414,"copyright":30,"fieldtype":49,"meta_data":2415,"is_external_url":81},"https://storage.googleapis.com/kk-website-assets/hD2UaJgo_Bildschirmfoto-2020-02-24-um-11.37.51-820x456.png",{"alt":118,"title":118,"source":30,"copyright":30},{"type":39,"content":2417},[2418],{"type":42,"content":2419},[2420],{"text":2124,"type":513},{"_uid":2422,"text":2423,"component":1071},"8f811df6-22ee-448c-94da-d415b5002bbd",{"type":39,"content":2424},[2425,2437,2444,2448,2452,2458,2464,2468,2480,2496],{"type":42,"content":2426},[2427,2432,2433],{"text":2428,"type":513,"marks":2429},"Fazit:",[2430,2431],{"type":1106},{"type":1035},{"text":1822,"type":513},{"text":2434,"type":513,"marks":2435},"Führe eine Testdauerschätzung durch, BEVOR du den Test startest und vermeide, ständig in das Tool zu schauen bevor die Mindestlaufzeit erreicht ist. Es sei denn, es gibt gute Gründ__e das zu tun: Ein Blick ins Tool ist immer dann ratsam, wenn man einen starken Downcast beobachtet, der geschäftsschädigend sein kann und dazu führt, dass man den Test frühzeitig abschalten sollte.",[2436],{"type":1106},{"type":983,"attrs":2438,"content":2439},{"level":985},[2440],{"text":2441,"type":513,"marks":2442},"Statistische Testpower: Wie du den Uplift deiner Variante sicher nachweist",[2443],{"type":1035},{"type":42,"content":2445},[2446],{"text":2447,"type":513},"Um diese Fehler zu vermeiden, muss man vor dem Teststart eine saubere Abschätzung der benötigten Testlaufzeit durchführen.",{"type":42,"content":2449},[2450],{"text":2451,"type":513},"Man spricht in diesem Zusammenhang auch von dem Begriff der statistischen Testpower:",{"type":42,"content":2453},[2454],{"text":2455,"type":513,"marks":2456},"Die statistische Power ist die Wahrscheinlichkeit mittels eines Experiments einen Uplift nachweisen zu können, wenn dieser tatsächlich auch existiert. Die Power wird daher auch als Teststärke bezeichnet und gibt an, wie gut ein Test in der Lage ist, einen Unterschied signifikant nachzuweisen.",[2457],{"type":1106},{"type":42,"content":2459},[2460],{"text":2461,"type":513,"marks":2462},"Wenn die Power eines Tests mindestens 80% beträgt, würde man von einem starken Test sprechen.",[2463],{"type":1035},{"type":42,"content":2465},[2466],{"text":2467,"type":513},"Der Wert von 80% ist ein Standardwert, den man für das Power-Level beim A/B Testing verwendet.",{"type":42,"content":2469},[2470,2472,2478],{"text":2471,"type":513},"Das bedeutet, dass die Wahrscheinlichkeit bei 80% liegt, einen Uplift nachzuweisen, der auch tatsächlich existiert. Im Umkehrschluss besteht also immer noch ein 20 %iges Risiko, dass wir einen Uplift der in Wirklichkeit existiert nicht nachweisen. Vielleicht hast du schon von dem sogenannten „Beta-Fehler” oder einem „False Negative“ gehört (",{"text":2473,"type":513,"marks":2474},"Fehler 2. Art",[2475],{"type":951,"attrs":2476},{"href":2477,"uuid":118,"anchor":118,"target":118,"linktype":136},"https://de.wikipedia.org/wiki/Fehler_1._und_2._Art",{"text":2479,"type":513},").",{"type":42,"content":2481},[2482,2484,2488,2490,2495],{"text":2483,"type":513},"Ist die Power des Experiments zu niedrig, laufen wir Gefahr, reelle Uplifts nicht zu finden. Noch schlimmer: ",{"text":2485,"type":513,"marks":2486},"Wir schalten ein Experiment ab, weil es einen signifikanten Gewinner ausweist, der in Wirklichkeit gar keiner ist.",[2487],{"type":1035},{"text":2489,"type":513}," Wenn so etwas auftritt, spricht man von einem „Alpha-Fehler“ oder einem „False-Positive“ (",{"text":2491,"type":513,"marks":2492},"Fehler 1. Art",[2493],{"type":951,"attrs":2494},{"href":2477,"uuid":118,"anchor":118,"target":118,"linktype":136},{"text":2479,"type":513},{"type":42,"content":2497},[2498],{"text":2499,"type":513},"Hier eine kleine Merkhilfe wie du die beiden Fehlerarten beim statistischen Testing unterscheiden kannst:",{"_uid":2501,"image":2502,"caption":2505,"component":1084},"2e8dbfb5-3674-47aa-a016-10240ea5dab7",{"alt":118,"src":2503,"name":30,"focus":30,"title":118,"source":30,"filename":2503,"copyright":30,"fieldtype":49,"meta_data":2504,"is_external_url":81},"https://storage.googleapis.com/kk-website-assets/NTg6ZoVK_Bildschirmfoto-2020-02-24-um-11.44.45-820x446.png",{"alt":118,"title":118,"source":30,"copyright":30},{"type":39,"content":2506},[2507],{"type":42,"content":2508},[2509],{"text":2510,"type":513},"Quelle: MatheGuru.com (2020)",{"_uid":2512,"text":2513,"component":1071},"e899f420-0292-423c-bca0-f905c027a27f",{"type":39,"content":2514},[2515,2520,2524],{"type":983,"attrs":2516,"content":2517},{"level":985},[2518],{"text":2519,"type":513},"Berechne die benötigte Testdauer mit unserem Sample Size Tool",{"type":42,"content":2521},[2522],{"text":2523,"type":513},"Um die benötigte Testdauer zu berechnen, braucht es eine statistische Formel auf Basis der oben beschriebenen Power-Betrachtung.",{"type":42,"content":2525},[2526,2528,2535],{"text":2527,"type":513},"Wir haben dafür ein ",{"text":2529,"type":513,"marks":2530},"Tool",[2531],{"type":951,"attrs":2532},{"href":2533,"title":2534},"https://www.konversionskraft.de/tools/testlaufzeitrechner","Zum Testlaufzeitrechner von konversionsKRAFT",{"text":2536,"type":513}," entwickelt, das dir hilft, deine Uplifts sicher nachzuweisen und eine bessere Einschätzung für den nachweisbaren Effekt vornehmen zu können.",{"_uid":2538,"image":2539,"caption":2542,"component":1084},"16f77a85-3944-4ba4-97f2-810af0bd90c5",{"alt":118,"src":2540,"name":30,"focus":30,"title":118,"source":30,"filename":2540,"copyright":30,"fieldtype":49,"meta_data":2541,"is_external_url":81},"https://storage.googleapis.com/kk-website-assets/ppeb_Qcd_Planung-eines-frequentistischen-AB-Tests-konversionsKRAFT-2024-820x383.png",{"alt":118,"title":118,"source":30,"copyright":30},{"type":39,"content":2543},[2544],{"type":42,"content":2545},[2546],{"text":2547,"type":513},"Planung eines frequentistischen A/B-Tests (konversionsKRAFT 2024)",{"_uid":2549,"text":2550,"component":1071},"59a59d29-d9e4-4f4a-8850-6a99c55e9dd7",{"type":39,"content":2551},[2552,2556,2569,2575,2581,2594,2600,2606,2631,2637,2652,2656,2660,2667,2672,2676,2680,2690,2694,2699,2709,2715,2719,2723,2728,2732],{"type":42,"content":2553},[2554],{"text":2555,"type":513},"Zur Berechnung der Testdauer benötigt das Tool folgende Informationen von dir, welche du auf der linken Seite in die Felder eingibst:",{"type":1254,"attrs":2557,"content":2558},{"tight":51},[2559],{"type":1258,"content":2560},[2561],{"type":42,"content":2562},[2563,2567],{"text":2564,"type":513,"marks":2565},"Visitors pro Monat",[2566],{"type":1035},{"text":2568,"type":513}," – Die durchschnittliche monatliche Anzahl der Unique Visitors auf dem Seitentyp, der vertestet werden soll.",{"type":42,"content":2570},[2571],{"text":2572,"type":513,"marks":2573},"Planst du zum Beispiel einen Test auf der Produktdetailseite, so verwendet man hier die Anzahl der unique Visitors pro Monat, die die Produktdetailseite besucht haben.",[2574],{"type":1106},{"type":42,"content":2576},[2577],{"text":2578,"type":513,"marks":2579},"Wir empfehlen hier einen Durchschnittswert über mehrere Monate in der Berechnung zu bilden, um Einflüsse von Werbekampagnen oder saisonale Schwankungen abzufangen.",[2580],{"type":1106},{"type":1254,"attrs":2582,"content":2583},{"tight":51},[2584],{"type":1258,"content":2585},[2586],{"type":42,"content":2587},[2588,2592],{"text":2589,"type":513,"marks":2590},"Aktuelle Conversion Rate (in %) –",[2591],{"type":1035},{"text":2593,"type":513}," Der Anteil der Visitors auf dem Seitentyp, der vertestet werden soll, mit mindestens einer Conversion an allen Visitors auf dem Seitentyp.",{"type":42,"content":2595},[2596],{"text":2597,"type":513,"marks":2598},"Wichtig ist, dass sich die Conversion Rate auf die Visitors bezieht, die die zu vertestende Seite besucht haben. Für den Test auf der Produktdetailseite verwendest du dann die Conversion Rate der Besucher, die überhaupt eine Produktdetailseite besucht haben (Tipp: Für die Berechnung empfehlen wir, ein entsprechendes Segment im Web Analytics Tool anzulegen, in dem die relevante Besucherbasis für den Seitentyp erfasst wird).",[2599],{"type":1106},{"type":42,"content":2601},[2602],{"text":2603,"type":513,"marks":2604},"Auch hier empfehlen wir, Werte über mehrere Monate zu einer durchschnittlichen Conversion Rate zu aggregieren.",[2605],{"type":1106},{"type":1254,"attrs":2607,"content":2608},{"tight":51},[2609,2619],{"type":1258,"content":2610},[2611],{"type":42,"content":2612},[2613,2617],{"text":2614,"type":513,"marks":2615},"Die Anzahl der Varianten",[2616],{"type":1035},{"text":2618,"type":513}," – Das ist die Anzahl der Varianten (inklusive Control), die vertestet werden sollen.",{"type":1258,"content":2620},[2621],{"type":42,"content":2622},[2623,2625,2629],{"text":2624,"type":513},"Die Eingaben zum ",{"text":2626,"type":513,"marks":2627},"Konfidenzlevel und Power",[2628],{"type":1035},{"text":2630,"type":513}," sind standardmäßig zur Berechnung auf 95 % für das Konfidenzlevel und 80% für die Power eingestellt. Du kannst diese natürlich trotzdem anpassen wenn du andere Werte verwenden möchtest.",{"type":42,"content":2632},[2633],{"text":2634,"type":513,"marks":2635},"Anmerkung: Die Berechnungen zur benötigten Testlaufzeit basieren auf einem einseitigen Hypothesentest.",[2636],{"type":1106},{"type":1254,"attrs":2638,"content":2639},{"tight":51},[2640],{"type":1258,"content":2641},[2642],{"type":42,"content":2643},[2644,2646,2650],{"text":2645,"type":513},"Das Feld ",{"text":2647,"type":513,"marks":2648},"Conversion-Wert in EUR ist ein optionales Feld",[2649],{"type":1035},{"text":2651,"type":513},", das dir helfen soll, eine bessere Einschätzung des zu erwartenden Uplifts vorzunehmen und deinen Test besser priorisieren zu können. Es zeigt dir, welchen zusätzlichen Umsatz das Testkonzept auf Basis deiner Eingaben und eines bestimmten Uplifts generiert, wenn du das erfolgreiche Testkonzept ausrollen würdest.",{"type":42,"content":2653},[2654],{"text":2655,"type":513},"Das Feld musst du nicht zwingend ausfüllen um eine Testdauerschätzung durchführen zu können.",{"type":42,"content":2657},[2658],{"text":2659,"type":513},"Wir haben mehrere statistische Tools entwickelt, die uns tagtäglich dabei unterstützen zahlreiche A/B-Tests richtig zu planen und valide auszuwerten. Wir teilen gern unsere Schatzkiste mit dir, die deinen Optimierer-Alltag erleichtern wird und dabei hilft, vertrauensvolle Ergebnisse zu liefern.",{"type":42,"content":2661},[2662],{"text":2663,"type":513,"marks":2664},"Hier geht’s zur Tool-Schatzkiste",[2665],{"type":951,"attrs":2666},{"href":2035,"uuid":118,"anchor":118,"target":118,"linktype":136},{"type":983,"attrs":2668,"content":2669},{"level":985},[2670],{"text":2671,"type":513},"A/B-Testing mit dem Sample Size Tool richtig interpretieren",{"type":42,"content":2673},[2674],{"text":2675,"type":513},"Wie dir sicher schon aufgefallen ist, benötigt das Tool keine Eingabe von dir, welchen Uplift du eigentlich aus dem Test erwartest, obwohl dies doch eigentlich eine relevante Einflussgröße aus die Testlaufzeit ist. In vielen online verfügbaren Tools wird dieser Wert als Input vom Nutzer gefordert um eine Testdauerberechnung durchführen zu können.",{"type":42,"content":2677},[2678],{"text":2679,"type":513},"Wir möchten dir diese schwierige Einschätzung ein Stück weit abnehmen, indem das Tool dir in der Ausgabemaske rechts unterschiedliche Testdauerschätzungen für unterschiedliche Uplift-Szenarien anzeigt.",{"type":42,"content":2681},[2682,2684,2688],{"text":2683,"type":513},"Die dargestellten Uplifts bezeichnen den ",{"text":2685,"type":513,"marks":2686},"minimal nachweisbaren Uplift (MDE = Minimum detectable Effekt)",[2687],{"type":1035},{"text":2689,"type":513}," auf Basis deiner Eingaben. Er gibt an, welchen Uplift du nachweisen kannst, wenn der Test zum Beispiel 1, 2 oder 3 Wochen laufen kann. Andersherum: Für unterschiedliche Uplifts die du nachweisen möchtest, wird die entsprechende benötigte Testlaufzeit (in vollen Wochen) bestimmt.",{"type":42,"content":2691},[2692],{"text":2693,"type":513},"Leider können wir dir damit die Einschätzung, wie hoch dieser nachweisbare Uplift denn nun eigentlich ist, nicht ganz abnehmen. Folgende zwei Fragestellungen können dir aber bei der Schätzung helfen:",{"type":983,"attrs":2695,"content":2696},{"level":1704},[2697],{"text":2698,"type":513},"1. Welche Uplifts sind realistisch?",{"type":42,"content":2700},[2701,2703,2707],{"text":2702,"type":513},"Das Tool gibt dir die Möglichkeit, unterschiedliche ",{"text":2704,"type":513,"marks":2705},"Uplift-Szenarien",[2706],{"type":1035},{"text":2708,"type":513}," durchzurechnen: Was wäre ein Best-Case und was ein Worst-Case-Szenario?",{"type":42,"content":2710},[2711],{"text":2712,"type":513,"marks":2713},"Wir empfehlen dabei, den Uplift, den man erzielen kann, eher konservativer einzuschätzen um sicherzugehen, dass die Testdauer auch sicher ausreicht, wenn er doch etwas geringer ausfällt als du hoffst.",[2714],{"type":1106},{"type":42,"content":2716},[2717],{"text":2718,"type":513},"Oft ist es auch so, dass die Testdauer die man zur Verfügung hat, der begrenzende Faktor ist. Aussagen wie: “Wir müssen in 2 Wochen Ergebnisse haben” hat wahrscheinlich jeder Optimierer schon einmal gehört.",{"type":42,"content":2720},[2721],{"text":2722,"type":513},"Durch diese Betrachtungsweise in unserem Tool, bekommt man eine bessere Einschätzung, ob der Uplift, den man in zwei Wochen statistisch nachweisen kann, mit dem Testkonzept überhaupt realistisch zu erreichen ist. Mit einer sauberen Testdauerberechnung hat man eine gute Argumentationsgrundlage, um den Zeitraum zu verlängern, das Konzept zu überarbeiten oder sogar ein anderes, erfolgsversprechenderes Konzept in der Priorisierung vorzuziehen.",{"type":983,"attrs":2724,"content":2725},{"level":1704},[2726],{"text":2727,"type":513},"2. Wann ist ein Uplift im A/B-Test überhaupt Business relevant?",{"type":42,"content":2729},[2730],{"text":2731,"type":513},"Der minimal nachweisbare Uplift ist derjenige Uplift, den man auf Basis einer bestimmten Testdauer mindestens nachweisen möchte, um a) ein statistisch valides Ergebnis zu erzielen und b) zu zeigen, dass der Test ein Erfolg gewesen ist und man das Konzept nun ausrollen würde.",{"type":42,"content":2733},[2734],{"text":2735,"type":513},"Abgesehen von der statistischen Validität; ab wann würde man eigentlich sagen, dass ein Test aus Business Sicht erfolgreich war?",{"_uid":2737,"image":2738,"caption":2741,"component":1084},"33fabc89-5c26-4922-81ad-f5c586bbbaaa",{"alt":118,"src":2739,"name":30,"focus":30,"title":118,"source":30,"filename":2739,"copyright":30,"fieldtype":49,"meta_data":2740,"is_external_url":81},"https://storage.googleapis.com/kk-website-assets/gEeEK7lF_Planung-eines-frequentistischen-AB-Tests-mit-Wert-konversionsKRAFT-2024-820x377.png",{"alt":118,"title":118,"source":30,"copyright":30},{"type":39,"content":2742},[2743],{"type":42,"content":2744},[2745],{"text":2746,"type":513},"Planung eines frequentistischen A/B-Tests mit Wert (konversionsKRAFT 2024",{"_uid":2748,"text":2749,"component":1071},"81bc7c17-baf6-42d8-a3c7-de6cea24d3fc",{"type":39,"content":2750},[2751,2755,2759,2763,2767,2771,2775,2779,2783,2792,2797],{"type":42,"content":2752},[2753],{"text":2754,"type":513},"Dafür ist es hilfreich, im Vorfeld eine Kosten-Nutzen-Betrachtung im Rahmen der Testplanung einfließen zu lassen und sich die Frage zu stellen: Welchen zusätzlichen Umsatz müsste das Konzept eigentlich erzielen, um die Kosten der Implementierung mindestens zu decken oder im besten Fall darüber hinaus signifikanten Gewinnzuwachs zu generieren?",{"type":42,"content":2756},[2757],{"text":2758,"type":513},"Wenn du dich schon einmal mit dem Thema ROI – Berechnungen von A/B Tests beschäftigt hast, weißt du vielleicht, dass es methodisch schwierig ist, den Wert eines Uplifts aus einem A/B Test in die Zukunft zu prognostizieren.",{"type":42,"content":2760},[2761],{"text":2762,"type":513},"Um aber überhaupt eine Schätzung des Umsatzwertes vornehmen zu können, wählen wir in diesem Rahmen einen pragmatischen Ansatz:",{"type":42,"content":2764},[2765],{"text":2766,"type":513},"Zum Einen werden dir im Tool die zusätzlichen Conversions angezeigt, die du auf Basis eines bestimmten Uplifts pro Monat erzielst, wenn das Testkonzept ausgerollt werden würde (Der Einfachheit halber werden hier keine Gewöhnungseffekte in Form von “Abschreibungsfaktoren” inkludiert, die den Uplift über die Zeit hinweg schmälern).",{"type":42,"content":2768},[2769],{"text":2770,"type":513},"Wenn du zusätzlich im Tool die optionale Angabe machst, wie hoch der Wert einer Conversion (in EUR) auf deiner Website aktuell ist (auf Basis einer monatlichen Durchschnittsbetrachtung), bekommst du im Ausgabefenster Informationen zur monetären Bewertung des Uplifts.",{"type":42,"content":2772},[2773],{"text":2774,"type":513},"Für unterschiedliche Uplift Szenarien wird dir angezeigt, welchen zusätzlichen Umsatz du erzielen würdest, wenn ein bestimmter Uplift eintritt und das Konzept auf alle Nutzer ausgerollt werden würde (auch hier gelten die vereinfachten ROI-Berechnungsregeln).",{"type":42,"content":2776},[2777],{"text":2778,"type":513},"Die zusätzlichen Conversions bzw. der zusätzliche Revenue dienen als Hilfestellung dafür, Kosten-Nutzen-Betrachtungen bereits bei der Testplanung einzubeziehen und eine vereinfachte ROI-Betrachtung durchzuführen. Indem die Business Relevanz schon in die Test-Roadmap-Planung mit einfließt, lassen sich Tests besser priorisieren.",{"type":42,"content":2780},[2781],{"text":2782,"type":513},"Unser Tool kann dir durch diese Betrachtungsweise helfen, wichtige Fragen bei der Testplanung besser einzuschätzen und zu beantworten. Die Entscheidung, welche Uplifts wirklich realistisch sind, können wir damit final nicht genau beantworten. A/B Testing ist letztendlich die Anwendung des Konzepts “Lernen, Validieren und Anpassen”. Das gilt auch bei der Testplanung. Je mehr Erfahrung man hierbei sammelt, desto hochwertiger werden die Tests.",{"type":926,"content":2784},[2785],{"type":42,"content":2786},[2787,2789,2790],{"text":2788,"type":513},"„Es ist besser, unvollkommene Entscheidungen durchzuführen, als beständig nach vollkommenen Entscheidungen zu suchen, die es niemals geben wird.”",{"type":1327},{"text":2791,"type":513},"– Charles de Gaulle",{"type":983,"attrs":2793,"content":2794},{"level":985},[2795],{"text":2796,"type":513},"5 Schritte für eine erfolgreiche Testplanung",{"type":1627,"attrs":2798,"content":2799},{"order":1629,"tight":51},[2800,2806,2812,2818,2824],{"type":1258,"content":2801},[2802],{"type":42,"content":2803},[2804],{"text":2805,"type":513},"Gehe unterschiedliche Uplift-Szenarien durch und versuche so gut es geht eine realistische Einschätzung vorzunehmen. Plane besser konservativ als zu positiv.",{"type":1258,"content":2807},[2808],{"type":42,"content":2809},[2810],{"text":2811,"type":513},"Definiere für dich, wie viel Uplift deine Variante mindestens erreichen muss, damit du von einem erfolgreichen Test sprichst.",{"type":1258,"content":2813},[2814],{"type":42,"content":2815},[2816],{"text":2817,"type":513},"Eine Kosten-Nutzen Analyse hilft dir dabei herauszufinden, ab welchem Uplift ein Test wirklich erfolgreich ist.",{"type":1258,"content":2819},[2820],{"type":42,"content":2821},[2822],{"text":2823,"type":513},"Berechne die Mindestlaufzeit und behalte diese fest im Auge.",{"type":1258,"content":2825},[2826],{"type":42,"content":2827},[2828],{"text":2829,"type":513},"Schalte den Test erst ab, wenn du die Mindestlaufzeit erreicht hast.",{"alt":2095,"src":2831,"name":30,"focus":30,"title":2095,"source":30,"filename":2831,"copyright":30,"fieldtype":49,"meta_data":2832,"is_external_url":81},"https://storage.googleapis.com/kk-website-assets/buU3lWX4_post-2-1620x500.jpg",{"alt":2095,"title":2095,"source":30,"copyright":30},[2834],"b1e9fb36-53ba-46c6-9df5-477eaee9d271",[2836,2840,2852,2866,2879,2883,2887],{"name":956,"created_at":2044,"published_at":2045,"updated_at":2046,"id":2047,"uuid":2041,"content":2837,"slug":2050,"full_slug":2051,"sort_by_date":118,"position":2052,"tag_list":2838,"is_startpage":51,"parent_id":1447,"meta_data":118,"group_id":2054,"first_published_at":1449,"release_id":118,"lang":124,"path":118,"alternates":2839,"default_full_slug":118,"translated_slugs":118,"_stopResolving":81},{"_uid":2049,"component":1442},[],[],{"name":2841,"created_at":2842,"published_at":1438,"updated_at":2842,"id":2843,"uuid":2844,"content":2845,"slug":2847,"full_slug":2848,"sort_by_date":118,"position":494,"tag_list":2849,"is_startpage":51,"parent_id":1447,"meta_data":118,"group_id":2850,"first_published_at":1449,"release_id":118,"lang":124,"path":118,"alternates":2851,"default_full_slug":118,"translated_slugs":118,"_stopResolving":81},"Conversion Analysen","2025-10-13T20:17:46.577Z",101159184727040,"6f75b37f-06c3-4a3a-bfe6-09e9700bcc50",{"_uid":2846,"component":1442},"ab193dc1-9f27-43af-8851-e06db679cba6","analysen","de/_categories/analysen",[],"a5ad7910-90ad-4fb5-b67d-700b3ebc9037",[],{"name":58,"created_at":2853,"published_at":2854,"updated_at":2855,"id":2856,"uuid":2857,"content":2858,"slug":2860,"full_slug":2861,"sort_by_date":118,"position":2862,"tag_list":2863,"is_startpage":51,"parent_id":1447,"meta_data":118,"group_id":2864,"first_published_at":1449,"release_id":118,"lang":124,"path":118,"alternates":2865,"default_full_slug":118,"translated_slugs":118,"_stopResolving":81},"2025-10-13T20:20:52.315Z","2026-10-08T05:47:03.890Z","2026-10-08T05:47:03.903Z",101159945518502,"364d2727-911e-41c4-b15c-1205edcf07ef",{"_uid":2859,"component":1442},"bfad03a7-f1bb-465f-b8c8-f0265d8805ad","conversion-optimierung","de/_categories/conversion-optimierung",-100,[],"fa5d4a3d-d28d-4392-bcf9-0a27d7ee893e",[],{"name":2867,"created_at":2868,"published_at":1438,"updated_at":2868,"id":2869,"uuid":2870,"content":2871,"slug":2873,"full_slug":2874,"sort_by_date":118,"position":2875,"tag_list":2876,"is_startpage":51,"parent_id":1447,"meta_data":118,"group_id":2877,"first_published_at":1449,"release_id":118,"lang":124,"path":118,"alternates":2878,"default_full_slug":118,"translated_slugs":118,"_stopResolving":81},"Conversion Tools","2025-10-15T15:49:48.693Z",101801118559674,"e3c30648-101e-4e4d-bdab-af6f4422677a",{"_uid":2872,"component":1442},"4e72548c-4236-42e8-975f-65e8c73c35fb","conversion-tools","de/_categories/conversion-tools",-290,[],"e77b6435-62b6-4b6d-8c2f-9f78e9a2b15f",[],{"name":1436,"created_at":1437,"published_at":1438,"updated_at":1437,"id":1439,"uuid":1432,"content":2880,"slug":1443,"full_slug":1444,"sort_by_date":118,"position":1445,"tag_list":2881,"is_startpage":51,"parent_id":1447,"meta_data":118,"group_id":1448,"first_published_at":1449,"release_id":118,"lang":124,"path":118,"alternates":2882,"default_full_slug":118,"translated_slugs":118,"_stopResolving":81},{"_uid":1441,"component":1442},[],[],{"name":1452,"created_at":1453,"published_at":1438,"updated_at":1453,"id":1454,"uuid":1455,"content":2884,"slug":1458,"full_slug":1459,"sort_by_date":118,"position":1460,"tag_list":2885,"is_startpage":51,"parent_id":1447,"meta_data":118,"group_id":1462,"first_published_at":1449,"release_id":118,"lang":124,"path":118,"alternates":2886,"default_full_slug":118,"translated_slugs":118,"_stopResolving":81},{"_uid":1457,"component":1442},[],[],{"name":1478,"created_at":1479,"published_at":1438,"updated_at":1479,"id":1480,"uuid":1481,"content":2888,"slug":1484,"full_slug":1485,"sort_by_date":118,"position":1486,"tag_list":2889,"is_startpage":51,"parent_id":1447,"meta_data":118,"group_id":1488,"first_published_at":1449,"release_id":118,"lang":124,"path":118,"alternates":2890,"default_full_slug":118,"translated_slugs":118,"_stopResolving":81},{"_uid":1483,"component":1442},[],[],[],[2893,2896,2900],{"_uid":2894,"link":2895,"text":1497,"component":59},"a1a1b98e-75cf-4256-97ec-c541b543da1e",{"id":1495,"url":1496,"linktype":31,"fieldtype":32,"cached_url":1496},{"_uid":2897,"link":2898,"text":442,"component":59},"6db2839b-13d5-4205-8838-97a43f26fb77",{"id":1501,"url":1502,"linktype":31,"fieldtype":32,"cached_url":1502,"story":2899},{"name":442,"id":1504,"uuid":1501,"slug":440,"url":1502,"full_slug":1502,"_stopResolving":81},{"_uid":2901,"link":2902,"text":2095,"component":59},"a6c2172d-c238-4188-9367-c2433c1db9fd",{"id":2099,"url":2903,"linktype":31,"fieldtype":32,"cached_url":2903,"story":2904},"de/blog/data-science/statistik-fehler-beim-a-b-testing-vermeiden",{"name":2095,"id":2098,"uuid":2099,"slug":2905,"url":2906,"full_slug":2906,"_stopResolving":81},"statistik-fehler-beim-a-b-testing-vermeiden","de/data-science/statistik-fehler-beim-a-b-testing-vermeiden",[2908],{"_uid":2909,"caption":30,"headline":1515,"component":1516,"subheadline":2910,"action_buttons":2922},"e3a0f03d-591c-4f5b-88fc-cfb4300d3f4f",{"type":39,"content":2911},[2912,2918],{"type":42,"attrs":2913,"content":2914},{"textAlign":118},[2915],{"text":1523,"type":513,"marks":2916},[2917],{"type":1035},{"type":42,"attrs":2919,"content":2920},{"textAlign":118},[2921],{"text":1530,"type":513},[2923],{"_uid":2924,"icon":27,"link":2925,"text":1539,"intent":35,"component":36,"icon_position":37},"1dc878e2-93a4-45ab-b015-c789b83c645d",{"id":404,"url":30,"linktype":31,"fieldtype":32,"cached_url":405,"story":2926},{"name":1536,"id":1537,"uuid":404,"slug":1538,"url":405,"full_slug":405,"_stopResolving":81},"13",[],[],-110,[],"dc725de4-7f2c-4773-85e5-4aaabe9c53b6","2023-02-28T10:15:11.000Z",[],{"name":2936,"created_at":2937,"published_at":2938,"updated_at":2939,"id":2940,"uuid":2941,"content":2942,"slug":3523,"full_slug":3524,"sort_by_date":118,"position":3529,"tag_list":3530,"is_startpage":51,"parent_id":3531,"meta_data":118,"group_id":3532,"first_published_at":3533,"release_id":118,"lang":124,"path":118,"alternates":3534,"default_full_slug":118,"translated_slugs":118},"Paralleles Testen: 3 Vorteile, von denen die innovativsten Unternehmen bereits profitieren","2025-10-15T16:25:51.777Z","2026-10-04T09:55:58.981Z","2026-10-04T09:56:03.560Z",101809978520285,"a13ee94f-a175-41f3-985e-710e8d228ed4",{"seo":2943,"_uid":2944,"body":2945,"text":30,"image":3466,"footer":30,"header":30,"authors":3469,"category":2041,"headline":2936,"component":1433,"categories":3470,"bottom_head":3509,"breadcrumbs":3510,"seo_noindex":51,"sidebar_cta":3525,"reading_time":3526,"seo_nofollow":51,"seo_canonical":30,"bottom_buttons":3527,"additional_slot":3528,"sidebar_cta_enabled":81,"sidebar_toc_enabled":81},{"title":2936,"plugin":912,"og_image":30,"og_title":2936,"description":30,"twitter_image":30,"twitter_title":2936,"og_description":30,"twitter_description":30},"ae1a8929-3efe-45a2-9046-b131afb2820e",[2946,3030,3042,3055,3067,3096,3108,3181,3193,3260,3272,3284,3296,3333,3345],{"_uid":2947,"text":2948,"component":1071},"cc0fe16a-6fb8-4ce9-bfb6-4918ce842559",{"type":39,"content":2949},[2950,2961,2965,2969,2973,2985,2991,3012,3016,3021,3026],{"type":42,"content":2951},[2952,2954,2960],{"text":2953,"type":513},"Was unterscheidet innovative, wachstumsstarke Unternehmen wie Amazon, Microsoft, Uber, Airbnb oder booking.com von anderen? Sie führen, unter anderem, Tausende Experimente parallel durch",{"text":2955,"type":513,"marks":2956},"¹",[2957],{"type":951,"attrs":2958},{"href":2959,"uuid":118,"anchor":118,"target":118,"linktype":136},"https://partner.booking.com/en-gb/click-magazine/industry-perspectives/role-experimentation-bookingcom",{"text":1852,"type":513},{"type":42,"content":2962},[2963],{"text":2964,"type":513},"Sie tun das, weil sie den (strategischen) Wert von Experimentation Programmen verstanden haben und wissen, dass die Anzahl der durchgeführten Tests – neben dem Anteil der positiven Ergebnisse und dem durchschnittlich erzeugten Uplift – ein entscheidender Erfolgsfaktor ist².",{"type":42,"content":2966},[2967],{"text":2968,"type":513},"Und sie sind bereit in Testing zu investieren, weil sie sich vor allem eines Vorteils bewusst sind: paralleles Testing liefert schnell Insights, die in allen Bereichen der Organisation verwendet werden können.",{"type":42,"content":2970},[2971],{"text":2972,"type":513},"Aber ist paralleles Testing tatsächlich der heilige Gral der Skalierbarkeit? Lässt sich dadurch wirklich Zeit sparen?",{"type":42,"content":2974},[2975,2977,2983],{"text":2976,"type":513},"So einfach wie das klingt, ist es jedoch nicht, wie teils ",{"text":2978,"type":513,"marks":2979},"kontroverse Diskussionen",[2980],{"type":951,"attrs":2981},{"href":2982,"uuid":118,"anchor":118,"target":118,"linktype":136},"https://cxl.com/blog/can-you-run-multiple-ab-tests-at-the-same-time/",{"text":2984,"type":513}," zeigen. “Die Durchmischung von Nutzer:innen führt zu einer viel höheren Wahrscheinlichkeit eines Fehlers, sowie zu einer größeren täglichen und durchschnittlichen Varianz, was bedeutet, dass es schwieriger ist, verwertbare Ergebnisse zu erhalten”, mahnt Andrew Anderson, Head of Optimization bei Malwarebytes. Aber heißt das, parallele Tests liefern verwässerte oder gar falsche Ergebnisse?",{"type":42,"content":2986},[2987],{"text":2988,"type":513,"marks":2989},"Im Kontext von parallelem Testing gibt es einige Bedenken:",[2990],{"type":1035},{"type":1254,"attrs":2992,"content":2993},{"tight":51},[2994,3000,3006],{"type":1258,"content":2995},[2996],{"type":42,"content":2997},[2998],{"text":2999,"type":513},"Ist es nötig, parallel laufende Tests voneinander zu isolieren, um ihre Ergebnisse nicht zu verwässern?",{"type":1258,"content":3001},[3002],{"type":42,"content":3003},[3004],{"text":3005,"type":513},"Ist paralleles Testing überhaupt geeignet, um valide Ergebnisse zu generieren?",{"type":1258,"content":3007},[3008],{"type":42,"content":3009},[3010],{"text":3011,"type":513},"Oder bremst die Komplexität von parallelen Tests sogar Innovation?",{"type":42,"content":3013},[3014],{"text":3015,"type":513},"Um diese Bedenken zu adressieren [Spoiler: und aufzulösen], müssen wir uns zunächst der Alternativen bewusst sein, ergo ein Verständnis für die verschiedenen Testmodelle entwickeln.",{"type":983,"attrs":3017,"content":3018},{"level":985},[3019],{"text":3020,"type":513},"Übersicht verschiedener Testmodelle",{"type":983,"attrs":3022,"content":3023},{"level":1704},[3024],{"text":3025,"type":513},"1. Serielles Testen",{"type":42,"content":3027},[3028],{"text":3029,"type":513},"Beim seriellen Testen laufen die Tests hintereinander ab. Du startest mit Test 1, wartest bis dieser abgeschlossen ist und beginnst dann Test 2. Beide Tests laufen auf beliebig wählbaren Anteilen des gesamten Traffics.",{"_uid":3031,"image":3032,"caption":3036,"component":1084},"a8e84851-07da-4611-9583-85f638ce9303",{"alt":3033,"src":3034,"name":30,"focus":30,"title":118,"source":30,"filename":3034,"copyright":30,"fieldtype":49,"meta_data":3035,"is_external_url":81},"Serielles Testen","https://storage.googleapis.com/kk-website-assets/7k9bbyvg_serielles-testen-schema-820x165.png",{"alt":3033,"title":118,"source":30,"copyright":30},{"type":39,"content":3037},[3038],{"type":42,"content":3039},[3040],{"text":3041,"type":513},"Beim seriellen Testen laufen die Tests mit demselben Traffic getrennt nacheinander.",{"_uid":3043,"text":3044,"component":1071},"fd4e1d37-4598-4a23-8b3c-73092d8e62e3",{"type":39,"content":3045},[3046,3051],{"type":983,"attrs":3047,"content":3048},{"level":1704},[3049],{"text":3050,"type":513},"2. Isoliertes Testen",{"type":42,"content":3052},[3053],{"text":3054,"type":513},"Beim isolierten Testen finden Test 1 und Test 2 im gleichen Zeitraum statt. Vorher wurde jedoch definiert, dass ein Teil der Nutzer:innen in Test 1 und der andere Teil in Test 2 landen. Diese Tests laufen zeitgleich, jede:r Nutzer:in sieht allerdings nur einen Test.",{"_uid":3056,"image":3057,"caption":3061,"component":1084},"ea55b2ca-1b52-46d8-b9e0-810f8d79d8ad",{"alt":3058,"src":3059,"name":30,"focus":30,"title":118,"source":30,"filename":3059,"copyright":30,"fieldtype":49,"meta_data":3060,"is_external_url":81},"Isoliertes Testen","https://storage.googleapis.com/kk-website-assets/jn96Gi6O_isoliertes-testen-schema-820x394.png",{"alt":3058,"title":118,"source":30,"copyright":30},{"type":39,"content":3062},[3063],{"type":42,"content":3064},[3065],{"text":3066,"type":513},"Bei isolierten Tests wird der Traffic beliebig aufgeteilt. “Control” beschreibt jeweils den Status quo, “Variante” die veränderte Version",{"_uid":3068,"text":3069,"component":1071},"3bc617cc-f164-4d63-9a49-dc53b822b5a4",{"type":39,"content":3070},[3071,3075,3079,3084,3088,3092],{"type":42,"content":3072},[3073],{"text":3074,"type":513},"Für Organisationen mit viel Traffic auf ihrer Website kann das ein echter Wettbewerbsvorteil sein, da sie (fast) beliebig viele Tests parallel durchführen können. Um dabei mit derselben Testpower testen zu können, müssen in dem Fall aber die Testlaufzeiten entsprechend verlängert werden.",{"type":42,"content":3076},[3077],{"text":3078,"type":513},"Vereinfacht ausgedrückt: Bei der doppelten Anzahl an Tests halbiert sich die Stichprobengröße, wodurch sich die Testlaufzeit verdoppelt.",{"type":983,"attrs":3080,"content":3081},{"level":1704},[3082],{"text":3083,"type":513},"3. Paralleles Testen",{"type":42,"content":3085},[3086],{"text":3087,"type":513},"Beim parallelen Testen laufen Experimente tatsächlich parallel, wodurch jede:r Nutzer:in gleichzeitig an Test 1 und Test 2 teilnehmen kann und dementsprechend mit den jeweils ausgelösten Zielen auch in beiden Tests mitgezählt wird.",{"type":42,"content":3089},[3090],{"text":3091,"type":513},"So würden sich also beispielsweise 100.000 Nutzer:innen zu je 50.000 Nutzer:innen in der Control und in der Variante des ersten Tests und in die Control und Variante des zweiten Tests aufteilen (siehe Abbildung unten). Wenn keine außergewöhnliche Abhängigkeit zwischen den Tests besteht und die Randomisierung des Testingtools funktioniert wie erwartet, sollten sich die Nutzer in jeder Variante des einen Tests ungefähr gleich auf die Varianten des zweiten Tests verteilen.",{"type":42,"content":3093},[3094],{"text":3095,"type":513},"Das bedeutet: In der Kontrollgruppe von Test 1 befinden sich zu ca. 50 % Nutzer:innen aus der Control des zweiten Tests sowie 50 % aus der Variante des zweiten Tests, ebenso wie sich in der Variante des ersten Tests gleich viele Nutzer:innen aus der Control und der Variante des zweiten Tests befinden. Dadurch sollten alle Effekte, die ein paralleler Test auf das Nutzerverhalten hat, im gleichen Maß in allen Varianten auftreten, wodurch die Vergleichbarkeit grundsätzlich gegeben ist.",{"_uid":3097,"image":3098,"caption":3102,"component":1084},"c3ac3623-d339-4148-a061-75935e2b864d",{"alt":3099,"src":3100,"name":30,"focus":30,"title":118,"source":30,"filename":3100,"copyright":30,"fieldtype":49,"meta_data":3101,"is_external_url":81},"Paralleles Testen","https://storage.googleapis.com/kk-website-assets/2WYexMGm_paralleles-testen-schema-820x574.png",{"alt":3099,"title":118,"source":30,"copyright":30},{"type":39,"content":3103},[3104],{"type":42,"content":3105},[3106],{"text":3107,"type":513},"Beim parallelen Testen wird der Traffic jeweils pro Test aufgeteilt, sodass einzelne Nutzer:innen Teil beider Tests sind – entweder in der Control oder der Variante.",{"_uid":3109,"text":3110,"component":1071},"9e8c9077-0d2f-4b99-a243-265b0062d8f7",{"type":39,"content":3111},[3112,3117,3122,3127,3132,3137,3142,3147,3152,3157,3162,3167,3172],{"type":42,"attrs":3113,"content":3114},{"textAlign":118},[3115],{"text":3116,"type":513},"Vor diesem theoretischen Hintergrund können wir nun die eingangs erwähnten Kritikpunkte diskutieren und klären, inwieweit diese tatsächlich als Nachteil von parallelen Tests zu verstehen sind. Demgegenüber stehen ohnehin verschiedene Vorteile, die paralleles Testing unserer Meinung nach zu einem überlegenen Ansatz machen.",{"type":983,"attrs":3118,"content":3119},{"level":985,"textAlign":118},[3120],{"text":3121,"type":513},"Vorteile von parallelem Testing",{"type":983,"attrs":3123,"content":3124},{"level":1704,"textAlign":118},[3125],{"text":3126,"type":513},"1. Wir können unbegrenzt viele Tests durchführen",{"type":42,"attrs":3128,"content":3129},{"textAlign":118},[3130],{"text":3131,"type":513},"Können Tests einfach parallel laufen, gibt es keine logische Grenze für die Anzahl an Tests, die ein Unternehmen durchführen kann. Egal ob im seriellen oder im isolierten Testing, der zur Verfügung stehende Traffic begrenzt die Anzahl an Tests in einem bestimmten Zeitraum (unabhängig vom Betrachtungszeitraum).",{"type":42,"attrs":3133,"content":3134},{"textAlign":118},[3135],{"text":3136,"type":513},"Mit parallelen Tests können Organisationen selbst auf Webseiten mit relativ wenig Traffic unbegrenzt experimentieren und dadurch die gleichen Wachstumstreiber nutzen, wie die eingangs genannten Marktführer. Da alle Hypothesen getestet werden können, verbreitet sich dadurch ein echtes Innovation-Mindset. Können aufgrund von Traffic Beschränkungen nur einige wenige Tests im Jahr durchgeführt werden und werden deswegen zahlreiche Ideen niemals getestet, sinkt die Motivation, kontinuierlich nach neuen Optimierungsmöglichkeiten (auch und gerade den kleinen) zu suchen.",{"type":42,"attrs":3138,"content":3139},{"textAlign":118},[3140],{"text":3141,"type":513},"Trotz des Hypes um grenzenloses Testing kann es aber durchaus technische Grenzen geben, die die Anzahl der gleichzeitig laufenden Tests in der Praxis beschränken kann. Müssen beispielsweise clientseitig beim Seitenaufruf zu viele Skripte des Testingtools ablaufen, kann dies Einfluss auf die Performance der Website haben und somit die UX grundsätzlich verschlechtern.",{"type":983,"attrs":3143,"content":3144},{"level":1704,"textAlign":118},[3145],{"text":3146,"type":513},"2. Hypothesen können sofort getestet werden",{"type":42,"attrs":3148,"content":3149},{"textAlign":118},[3150],{"text":3151,"type":513},"Wie viel einfacher fällt die Planung aus, wenn zunächst keine Rücksicht auf andere Tests genommen werden muss, um ein Experiment zu starten? Kein Warten darauf, bis der aktuelle Test beendet ist! Keine Diskussionen darüber, welcher Test eine höhere Relevanz hat! Keine Kompromisse bei der Testlaufzeit und damit auch der statistischen Power, weil der nächste Test nicht so lange warten kann!",{"type":42,"attrs":3153,"content":3154},{"textAlign":118},[3155],{"text":3156,"type":513},"Wenn alle Tests parallel laufen können, muss ein Experiment “nur” entwickelt und qualitätsgesichert werden, bevor er starten kann. Natürlich kann es gelegentlich Gründe dafür geben, mit dem Start eines Tests zu warten, bis ein anderer abgeschlossen ist; nämlich genau dann, wenn die Tests inhaltlich nicht zusammen passen bzw. sich widersprechen.",{"type":42,"attrs":3158,"content":3159},{"textAlign":118},[3160],{"text":3161,"type":513},"Ein plakatives Beispiel hierfür wäre, wenn Test 1 die Farbe Spacegrey als neue Hintergrundfarbe testet und ein weiterer Test 2 dieselbe Farbe als Schriftfarbe oder zum Einfärben von Icons benutzen möchte. Etwas praxisbezogener ist die Vorstellung, dass in einem Test ein Element (bspw. eine Menüleiste) entfernt wird, um das Layout zu vereinfachen, während ein weiterer Test Änderungen am Inhalt oder Design eben dieses Elements überprüft.",{"type":983,"attrs":3163,"content":3164},{"level":1704,"textAlign":118},[3165],{"text":3166,"type":513},"3. Einflüsse (Interferenzen) können sichtbar gemacht werden",{"type":42,"attrs":3168,"content":3169},{"textAlign":118},[3170],{"text":3171,"type":513},"Wenn wir in der Praxis Tests parallel laufen lassen möchten, hören wir häufig die Bedenken darüber, dass man ja nicht wissen kann, ob und wie die parallel laufenden Tests einander beeinflussen. Vielleicht funktionieren die Veränderungen aus Test 1 nur deswegen, weil Nutzer:innen einen bestimmten Reiz aus einem anderen Test erhalten haben (oder sie funktionieren gegenteilig genau deswegen nicht)? Vielleicht (dazu gleich mehr), aber gerade durch paralleles Testing und einer anschließenden segmentierten Auswertung nach Varianten-Zugehörigkeit in anderen Tests können wir diese Interferenzen wirklich sichtbar machen! Das ist also weniger ein Argument gegen paralleles Testen, sondern vielmehr eines dafür.",{"type":42,"attrs":3173,"content":3174},{"textAlign":118},[3175,3179],{"text":3176,"type":513,"marks":3177},"Ein Beispiel:",[3178],{"type":1035},{"text":3180,"type":513}," Angenommen, es liefen zwei Tests mit jeweils einer Control und einer Variante parallel und wir möchten analysieren, ob die Variante des zweiten Tests das Ergebnis des ersten Tests beeinflusst hat. Zu diesem Zweck können in Test 1 zwei Segmente gebildet werden. Segment 1 enthält alle Nutzer:innen, die parallel in der Control-Gruppe des zweiten Tests waren und Segment 2 umfasst alle Nutzer:innen aus der Variante des zweiten Tests (siehe Abbildung unten). Unterscheiden sich die Effekte in beiden Segmenten deutlich, kann es sich um eine Interferenz der beiden Tests handeln, die ggf. weiter untersucht wird oder mit einem Folgetest evaluiert werden kann.",{"_uid":3182,"image":3183,"caption":3187,"component":1084},"65334158-6fe3-43c4-9a82-3503de0a1de0",{"alt":3184,"src":3185,"name":30,"focus":30,"title":118,"source":30,"filename":3185,"copyright":30,"fieldtype":49,"meta_data":3186,"is_external_url":81},"Segmentbildung beim parallelen Testen","https://storage.googleapis.com/kk-website-assets/JK3HpHi0_paralleles-testen-ergebnis-1-820x491.png",{"alt":3184,"title":118,"source":30,"copyright":30},{"type":39,"content":3188},[3189],{"type":42,"content":3190},[3191],{"text":3192,"type":513},"Segmentbildung in Test 1. Die Segmente beinhalten Teilnehmer in Varianten eines anderen Tests",{"_uid":3194,"text":3195,"component":1071},"2105d64e-5b14-4ac8-81df-a9c91c3de07b",{"type":39,"content":3196},[3197,3204,3209,3213,3217,3221,3226,3230,3234,3252,3256],{"type":42,"content":3198},[3199,3201,3202],{"text":3200,"type":513},"Würden wir die Tests unabhängig voneinander durchführen, also durch serielles oder isoliertes Testing, haben wir keine Möglichkeit, diesen Vergleich anzustellen.",{"type":1327},{"text":3203,"type":513},"Grundsätzlich sei jedoch erwähnt, dass sich bei erwarteten Interferenzen ein MVT-Setup (Multivariates Testing) besser eignet als unabhängige Tests, die post hoc in einzelne Kombinationen segmentiert werden.",{"type":983,"attrs":3205,"content":3206},{"level":985},[3207],{"text":3208,"type":513},"(Vermeintliche) Nachteile von parallelem Testing",{"type":42,"content":3210},[3211],{"text":3212,"type":513},"Wie zu Beginn erwähnt, gibt es in der A/B-Testing-Community einige Stimmen, die vor einer erhöhten Fehlerwahrscheinlichkeit durch paralleles Testing warnen.",{"type":42,"content":3214},[3215],{"text":3216,"type":513},"Aber was ist denn überhaupt der Grundgedanke des Experimentierens?",{"type":42,"content":3218},[3219],{"text":3220,"type":513},"Wir setzen in einer Gruppe von Nutzer:innen einen Stimulus (Variante) und in der anderen nicht (Control). Abgesehen von dieser Änderung sollen sich Nutzer:innen aus beiden Gruppen identisch zusammensetzen, was in der Regel durch eine randomisierte Zuteilung in die Testgruppen sichergestellt wird. Dadurch leiten wir mit einer gewissen Konfidenz ab, dass alle “signifikanten” Unterschiede im Nutzerverhalten der Testgruppen ursächlich mit dem gesetzten Stimulus zusammenhängen.",{"type":983,"attrs":3222,"content":3223},{"level":1704},[3224],{"text":3225,"type":513},"1. Parallele Tests verwässern die Stichprobe und machen diese unbrauchbar",{"type":42,"content":3227},[3228],{"text":3229,"type":513},"Kritisiert wird, dass diese Grundprinzip beim parallelen Testing nicht mehr eingehalten wird. Die Befürchtung ist, dass Nutzer:innen durch gleichzeitig laufende Tests eine Website unterschiedlich erleben und somit die Ergebnisse des einzelnen Experiments verwässern, bei dem wir ja eigentlich versuchen, die Auswirkungen auf das Nutzerverhalten durch die Veränderung(en) in einer Variante isoliert zu bewerten.",{"type":42,"content":3231},[3232],{"text":3233,"type":513},"Dem würden wir entgegnen, dass es sich bei kontrollierten Online-Experimenten grundsätzlich nicht um Experimente unter Laborbedingungen handelt, sondern um sogenannte Feldexperimente, die von einer Vielzahl an externen Einflussfaktoren “gestört” werden können. Auch ohne einen zusätzlichen parallelen Test können wir nicht sicherstellen, dass alle Nutzer:innen in den Varianten dieselbe User Experience machen und derselben User Journey folgen.",{"type":42,"content":3235},[3236,3238,3250],{"text":3237,"type":513},"Manche Nutzer:innen gehen direkt zum Check-out, nachdem sie alle Produkte in den Warenkorb gelegt haben, andere sehen sich den Warenkorb zunächst nochmal an. Einige Nutzer:innen lesen die sorgsam erstellte und mit allerlei ",{"text":3239,"type":513,"marks":3240},"konsumpsychologischen Triggern optimierte Produktbeschreibung",[3241],{"type":951,"attrs":3242},{"href":3243,"uuid":3244,"anchor":118,"target":954,"linktype":31,"story":3245},"/de/behavior-patterns/content-optimierung-ist-mehr-als-seo-einsatz-von-verhaltensmustern-in-webtexten","25e04ffc-0843-4adf-8981-692052e391fb",{"name":3246,"id":3247,"uuid":3244,"slug":3248,"url":3249,"full_slug":3249,"_stopResolving":81},"Content Optimierung ist mehr als SEO – Über den Einsatz von Verhaltensmustern in Webtexten",101807901720497,"content-optimierung-ist-mehr-als-seo-einsatz-von-verhaltensmustern-in-webtexten","de/behavior-patterns/content-optimierung-ist-mehr-als-seo-einsatz-von-verhaltensmustern-in-webtexten",{"text":3251,"type":513},", während andere nur am Preis interessiert sind und anhand dessen entscheiden, ob sie ein Produkt kaufen oder nicht.",{"type":42,"content":3253},[3254],{"text":3255,"type":513},"Die Varianz in den Daten eines Online Experiments ist also ohnehin groß. Der Einfluss durch eine (oder auch mehrere) zusätzliche Varianten aus parallelen Tests ist nur ein weiterer Faktor von vielen. Durch eine randomisierte Aufteilung der Nutzer:innen in die einzelnen Testsegmente und einer ausreichend großen Stichprobe können wir dennoch sicherstellen, dass sich die beobachtbaren Veränderungen in der User-Experience gleichmäßig über alle Testvarianten verteilen und somit eine Vergleichbarkeit gegeben ist.",{"type":42,"content":3257},[3258],{"text":3259,"type":513},"Das gilt auch bei parallelen Tests, da die Varianten-Zuteilung in beiden Tests unabhängig voneinander geschieht. Heißt: Wenn ein:e Nutzer:in bereits in einem Test ist und nun an einem zweiten Test teilnimmt, hat die Variante des ersten Tests keinen Einfluss darauf, welche Variante diese:r Nutzer:in im zweiten Test erlebt (siehe Abbildung unten). Control und Variante bleiben vergleichbar.",{"_uid":3261,"image":3262,"caption":3266,"component":1084},"63ce62d7-d5be-4892-9ac1-a08eae22116a",{"alt":3263,"src":3264,"name":30,"focus":30,"title":118,"source":30,"filename":3264,"copyright":30,"fieldtype":49,"meta_data":3265,"is_external_url":81},"Ein Case für paralleles Testen","https://storage.googleapis.com/kk-website-assets/jdn3l8Ac_paralleles-testen-case-820x418.png",{"alt":3263,"title":118,"source":30,"copyright":30},{"type":39,"content":3267},[3268],{"type":42,"content":3269},[3270],{"text":3271,"type":513},"Normale (unabhängige) Aufteilung der Nutzer:innen in die Varianten von zwei parallelen Tests",{"_uid":3273,"text":3274,"component":1071},"05addd9f-9b05-4e82-8cac-389972203d65",{"type":39,"content":3275},[3276],{"type":42,"content":3277},[3278,3282],{"text":3279,"type":513,"marks":3280},"Ausnahmen bestimmen die Regel:",[3281],{"type":1035},{"text":3283,"type":513}," Zum Beispiel, wenn in einem Test untersucht wird, ob der Besuch des Warenkorbs vor dem Check-out verpflichtend sein soll, und in einem zweiten Test der Inhalt der Warenkorb-Seite optimiert wird (siehe Abbildung unten).",{"_uid":3285,"image":3286,"caption":3290,"component":1084},"9513d7cd-f134-439e-bab0-bb77d2354bfa",{"alt":3287,"src":3288,"name":30,"focus":30,"title":118,"source":30,"filename":3288,"copyright":30,"fieldtype":49,"meta_data":3289,"is_external_url":81},"Ausnahmefall beim parallelen Testen","https://storage.googleapis.com/kk-website-assets/RCtaWvHv_paralleles-testen-beispiel-820x414.png",{"alt":3287,"title":118,"source":30,"copyright":30},{"type":39,"content":3291},[3292],{"type":42,"content":3293},[3294],{"text":3295,"type":513},"Beispiel für eine ungleiche Verteilung von Nutzer:innen bei abhängigen parallelen Tests",{"_uid":3297,"text":3298,"component":1071},"06b170d3-126a-48f9-b602-e16a402e01c3",{"type":39,"content":3299},[3300,3304,3308,3312,3316,3321,3325,3329],{"type":42,"content":3301},[3302],{"text":3303,"type":513},"Die Variante, in der der Warenkorb verpflichtend ist, werden alle 50.000 Nutzer:innen auch am zweiten Test teilnehmen und sich zu jeweils 25.000 auf die beiden Varianten des zweiten Tests verteilen.",{"type":42,"content":3305},[3306],{"text":3307,"type":513},"Gleichzeitig werden die Nutzer:innen aus der Control des ersten Tests, welche sich dafür entscheiden, den Warenkorb zu überspringen und direkt zum Check-out zu gehen (hier: 30.000 Nutzer:innen), gar nicht am zweiten Test teilnehmen. Lediglich die 20.000 Nutzer:innen, welche freiwillig zum Warenkorb gehen, werden auch in den zweiten Test gelangen und sich dort zu jeweils 10.000 auf die beiden Varianten verteilen.",{"type":42,"content":3309},[3310],{"text":3311,"type":513},"Wenn die Variante des verpflichtenden Warenkorbs nun besser (oder schlechter) abschneidet, muss dies nicht am verpflichtenden Besuch des Warenkorbs liegen, sondern kann auch dadurch getrieben sein, dass in dieser Variante viel mehr (hier: 15.000) Nutzer:innen den optimierten Warenkorb gesehen haben.",{"type":42,"content":3313},[3314],{"text":3315,"type":513},"Das sind jedoch Edge Cases, die wir in der Regel antizipieren und durch ein alternatives Testing-Modell (seriell oder isoliert) umgehen können.",{"type":983,"attrs":3317,"content":3318},{"level":1704},[3319],{"text":3320,"type":513},"2. Die Validität der Ergebnisse wird beeinträchtigt",{"type":42,"content":3322},[3323],{"text":3324,"type":513},"Weitere Kritik zu einer vermeintlich erhöhten Fehlerquote bei parallelen Tests bezieht sich auf die möglichen Interferenzen zwischen den Testvarianten (siehe oben).",{"type":42,"content":3326},[3327],{"text":3328,"type":513},"Die Befürchtung ist, dass wenn parallel durchgeführte Experimente unabhängig voneinander ausgewertet werden und für jeden Test ein Gewinner bestimmt wird, Interferenzen nicht berücksichtigt werden. Das könnte dazu führen, dass eine unterlegene Kombination von Varianten ausgerollt wird.",{"type":42,"content":3330},[3331],{"text":3332,"type":513},"Im untenstehenden Diagramm haben wir beispielhafte Daten für so einen Fall skizziert (erste und zweite Spalte). In Test 1 erzielt die Control eine Conversion Rate (CR) von 6 %, die Variante eine CR von 5,5 %. In Test 2 erzielt die Variante eine höhere Conversion Rate als die Control (6,2 % > 5 %) und würde dementsprechend ausgerollt werden – zur Vereinfachung nehmen wir einen signifikanten Effekt an.",{"_uid":3334,"image":3335,"caption":3339,"component":1084},"c52c3527-1d9b-49f3-8100-a161eb5d3625",{"alt":3336,"src":3337,"name":30,"focus":30,"title":118,"source":30,"filename":3337,"copyright":30,"fieldtype":49,"meta_data":3338,"is_external_url":81},"Auswertung aller Varianten-Kombinationen von zwei parallelen Tests","https://storage.googleapis.com/kk-website-assets/ZziKgzY1_paralleles-testen-ergebnis-2-820x456.png",{"alt":3336,"title":118,"source":30,"copyright":30},{"type":39,"content":3340},[3341],{"type":42,"content":3342},[3343],{"text":3344,"type":513},"Beispiel für eine Auswertung aller Varianten-Kombinationen von zwei parallelen Tests mit möglichen Interferenzen.",{"_uid":3346,"text":3347,"component":1071},"57732f30-18bc-4307-9a2a-e48e86fda793",{"type":39,"content":3348},[3349,3353,3357,3384,3388,3396,3404,3408,3414,3419,3423,3427,3432,3442,3446,3450,3454,3462],{"type":42,"content":3350},[3351],{"text":3352,"type":513},"Sowohl die Unterlegenheit der V1 als auch die Überlegenheit der V2 kommen jedoch möglicherweise nur durch die Kombination der beiden Tests zustande, so die Bedenken aus der Community. Oder anders formuliert: Bei einem isolierten Test 1 hätte die Variante gewonnen, weil nur die Interferenz mit Test 2 zu einem Downcast führte.",{"type":42,"content":3354},[3355],{"text":3356,"type":513},"Diese These können wir allerdings leicht überprüfen, indem wir die Tests segmentiert auswerten, sprich alle Varianten-Kombinationen einzeln bewerten:",{"type":1627,"attrs":3358,"content":3359},{"order":1629,"tight":51},[3360,3366,3372,3378],{"type":1258,"content":3361},[3362],{"type":42,"content":3363},[3364],{"text":3365,"type":513},"Segment: User aus Test 1 Control und Test 2 Control (C-C)",{"type":1258,"content":3367},[3368],{"type":42,"content":3369},[3370],{"text":3371,"type":513},"Segment: C-V",{"type":1258,"content":3373},[3374],{"type":42,"content":3375},[3376],{"text":3377,"type":513},"Segment: V-C",{"type":1258,"content":3379},[3380],{"type":42,"content":3381},[3382],{"text":3383,"type":513},"Segment: V-V",{"type":42,"content":3385},[3386],{"text":3387,"type":513},"Wie im Beispiel oben (dritte Spalte) kann dabei tatsächlich herauskommen, dass unsere ursprüngliche Entscheidung für Kombination C-V suboptimal war. Die insgesamt höchste Conversion Rate ergab sich nämlich aus der Kombination V-V.",{"type":42,"content":3389},[3390,3392],{"text":3391,"type":513},"Wir können nicht ausschließen, dass ein solcher Fall tatsächlich auftreten kann. ",{"text":3393,"type":513,"marks":3394},"Aber ohne paralleles Testing (oder MVT) wüssten wir davon ja auch gar nichts.",[3395],{"type":1035},{"type":42,"content":3397},[3398,3400],{"text":3399,"type":513},"Unsere Erfahrung bestätigt zudem, dass solche Effekte extrem selten auftreten und auch nie mit dem Ergebnis, dass die “falsche” Kombination zu einem Downcast führt. ",{"text":3401,"type":513,"marks":3402},"In der Praxis ergibt Plus mal Plus sozusagen niemals Minus.",[3403],{"type":1035},{"type":42,"content":3405},[3406],{"text":3407,"type":513},"Und ganz abgesehen davon gilt: Wenn in deiner Organisation bereits seriell oder isoliert getestet wird, dann wurden daraus bestimmt schon einige Varianten in den Live-Betrieb ausgerollt; und andere wurden verworfen. Dadurch fehlt uns schlichtweg die Möglichkeit zu vergleichen, ob ebendiese verworfenen Varianten in Kombination mit Varianten aus zukünftigen Tests nicht vielleicht doch Gewinner geworden wären.",{"type":42,"content":3409},[3410],{"text":3411,"type":513,"marks":3412},"Genau genommen gibt es durch vergangene Tests also unzählige mögliche Kombinationen mit der aktuellen Variante, die wir überhaupt nicht testen. Wieso sollten dann die möglichen Interferenzen aus “heute” parallel laufenden Tests überhaupt relevant sein?",[3413],{"type":1035},{"type":983,"attrs":3415,"content":3416},{"level":1704},[3417],{"text":3418,"type":513},"3. Die Komplexität wird erhöht",{"type":42,"content":3420},[3421],{"text":3422,"type":513},"Der Anspruch, wirklich alle parallel laufenden Tests immer segmentiert auszuwerten, um Interferenzen zu bemerken und stets die optimale Kombination von Varianten zu finden, würde sicherlich einen erheblichen Mehraufwand bedeuten und die Komplexität eines Testing-Programms erhöhen. Dieser Aufwand lohnt sich unserer Erfahrung nach aber nur selten (nämlich dann, wenn solche Interferenzen vorab als sehr wahrscheinlich eingeschätzt wurden).",{"type":42,"content":3424},[3425],{"text":3426,"type":513},"Vernachlässigen wir diesen Aspekt, reduziert eine parallele Testing-Strategie also sogar die Komplexität des ganzen Programms, denn hinzukommt, dass es letztlich keine klassische Roadmap-Planung mehr braucht, um zu definieren, wann welcher Test durchgeführt werden kann. Auch auf ein Scoring oder die Priorisierung von Testideen könnten wir dann verzichten, wenn sowieso jede Idee jederzeit getestet werden kann. Vergesst aber deshalb bitte niemals die Qualitätssicherung und die Prüfung von Test-Konzepten auf Sinnhaftigkeit. 😉",{"type":983,"attrs":3428,"content":3429},{"level":985},[3430],{"text":3431,"type":513},"Fazit: Beim parallelen Testen überwiegen die Vorteile!",{"type":42,"content":3433},[3434,3436,3440],{"text":3435,"type":513},"Die Vorteile von parallelem Testing ",{"text":3437,"type":513,"marks":3438},"in der Praxis",[3439],{"type":1106},{"text":3441,"type":513}," überwiegen die – vorwiegend theoretischen oder irrelevanten – Gegenargumente unserer Meinung nach deutlich.",{"type":42,"content":3443},[3444],{"text":3445,"type":513},"Kann es passieren, dass ein Testergebnis durch einen anderen parallelen Test beeinflusst wird? Ja, sicher.",{"type":42,"content":3447},[3448],{"text":3449,"type":513},"Kann es sein, dass dadurch ein tatsächlicher Verlierer fälschlicherweise als Gewinner erscheint? Sehr unwahrscheinlich.",{"type":42,"content":3451},[3452],{"text":3453,"type":513},"Wenn es solche Effekte gibt und sie erwartet werden, möchten wir dann nicht die Möglichkeit haben, diese auch zu analysieren? Wenn ja, dann sind parallele Tests neben MVT die einzige Möglichkeit dazu.",{"type":42,"content":3455},[3456,3460],{"text":3457,"type":513,"marks":3458},"Paralleles Testing bietet die Möglichkeit, das eigene Testing-Programm beinahe nach Belieben zu skalieren.",[3459],{"type":1035},{"text":3461,"type":513}," Das Potenzial, das die enorme Geschwindigkeit, mit der wir dadurch Ideen testen und umsetzen können, darstellt, überwiegt sämtliche Risiken.",{"type":42,"content":3463},[3464],{"text":3465,"type":513},"Sogar kleine und mittlere Unternehmen, die nicht mit sieben- bis achtstelligem Traffic arbeiten können, haben durch paralleles Testing die Möglichkeit zu optimieren wie die Großen!",{"alt":2936,"src":3467,"name":30,"focus":30,"title":2936,"source":30,"filename":3467,"copyright":30,"fieldtype":49,"meta_data":3468,"is_external_url":81},"https://storage.googleapis.com/kk-website-assets/uL66WjHt_paralleles-testen-konversionskraft-1620x500.png",{"alt":2936,"title":2936,"source":30,"copyright":30},[2040],[3471,3475,3479,3483,3496],{"name":956,"created_at":2044,"published_at":2045,"updated_at":2046,"id":2047,"uuid":2041,"content":3472,"slug":2050,"full_slug":2051,"sort_by_date":118,"position":2052,"tag_list":3473,"is_startpage":51,"parent_id":1447,"meta_data":118,"group_id":2054,"first_published_at":1449,"release_id":118,"lang":124,"path":118,"alternates":3474,"default_full_slug":118,"translated_slugs":118,"_stopResolving":81},{"_uid":2049,"component":1442},[],[],{"name":1436,"created_at":1437,"published_at":1438,"updated_at":1437,"id":1439,"uuid":1432,"content":3476,"slug":1443,"full_slug":1444,"sort_by_date":118,"position":1445,"tag_list":3477,"is_startpage":51,"parent_id":1447,"meta_data":118,"group_id":1448,"first_published_at":1449,"release_id":118,"lang":124,"path":118,"alternates":3478,"default_full_slug":118,"translated_slugs":118,"_stopResolving":81},{"_uid":1441,"component":1442},[],[],{"name":1452,"created_at":1453,"published_at":1438,"updated_at":1453,"id":1454,"uuid":1455,"content":3480,"slug":1458,"full_slug":1459,"sort_by_date":118,"position":1460,"tag_list":3481,"is_startpage":51,"parent_id":1447,"meta_data":118,"group_id":1462,"first_published_at":1449,"release_id":118,"lang":124,"path":118,"alternates":3482,"default_full_slug":118,"translated_slugs":118,"_stopResolving":81},{"_uid":1457,"component":1442},[],[],{"name":956,"created_at":3484,"published_at":3485,"updated_at":3486,"id":3487,"uuid":3488,"content":3489,"slug":3491,"full_slug":3492,"sort_by_date":118,"position":119,"tag_list":3493,"is_startpage":51,"parent_id":1447,"meta_data":118,"group_id":3494,"first_published_at":1449,"release_id":118,"lang":124,"path":118,"alternates":3495,"default_full_slug":118,"translated_slugs":118,"_stopResolving":81},"2025-10-13T20:20:36.242Z","2026-10-08T05:55:32.229Z","2026-10-08T05:55:32.241Z",101159879683477,"430ab7d7-8d03-4995-856e-478aa05dd33e",{"_uid":3490,"component":1442},"f510a510-df14-4dd3-b179-909017021494","experimentation","de/_categories/experimentation",[],"27b82645-0fb7-46c1-85f9-4056d28d1b36",[],{"name":3497,"created_at":3498,"published_at":1438,"updated_at":3498,"id":3499,"uuid":3500,"content":3501,"slug":3503,"full_slug":3504,"sort_by_date":118,"position":3505,"tag_list":3506,"is_startpage":51,"parent_id":1447,"meta_data":118,"group_id":3507,"first_published_at":1449,"release_id":118,"lang":124,"path":118,"alternates":3508,"default_full_slug":118,"translated_slugs":118,"_stopResolving":81},"Strategie","2025-10-13T20:22:01.645Z",101160229498327,"d6cacac1-62c8-4c5e-a461-bf37484bf658",{"_uid":3502,"component":1442},"a5014570-7c3f-4ea6-8b89-7193ed38ddc8","strategie","de/_categories/strategie",-180,[],"bad80fce-e56e-480b-a1dc-fa97486f5db4",[],[],[3511,3514,3518],{"_uid":3512,"link":3513,"text":1497,"component":59},"857cbdc8-f147-4ef2-908b-b20a9a6a28cf",{"id":1495,"url":1496,"linktype":31,"fieldtype":32,"cached_url":1496},{"_uid":3515,"link":3516,"text":442,"component":59},"58e6d456-51a3-4a29-95fb-6a44a4631299",{"id":1501,"url":1502,"linktype":31,"fieldtype":32,"cached_url":1502,"story":3517},{"name":442,"id":1504,"uuid":1501,"slug":440,"url":1502,"full_slug":1502,"_stopResolving":81},{"_uid":3519,"link":3520,"text":2936,"component":59},"d3c1aa98-0692-4162-9c36-ef5e9ae930de",{"id":2941,"url":3521,"linktype":31,"fieldtype":32,"cached_url":3521,"story":3522},"de/blog/experimentation/paralleles-testen",{"name":2936,"id":2940,"uuid":2941,"slug":3523,"url":3524,"full_slug":3524,"_stopResolving":81},"paralleles-testen","de/experimentation/paralleles-testen",[],"14",[],[],-470,[],101806310923808,"da021ff1-e0e2-4bff-b9a8-eff2e819c431","2023-02-14T16:27:23.000Z",[],18,1791547897555]