{"id":1940,"date":"2020-02-11T17:28:26","date_gmt":"2020-02-11T17:28:26","guid":{"rendered":"https:\/\/keepler.io\/2020\/02\/11\/ab-testing-que-es-para-que-y-cuando-utilizarlo\/"},"modified":"2023-09-12T13:13:40","modified_gmt":"2023-09-12T13:13:40","slug":"ab-testing-que-es-para-que-y-cuando-utilizarlo","status":"publish","type":"post","link":"https:\/\/keepler.io\/es\/2020\/02\/11\/ab-testing-que-es-para-que-y-cuando-utilizarlo\/","title":{"rendered":"A\/B Testing: qu\u00e9 es, para qu\u00e9 y cu\u00e1ndo utilizarlo"},"content":{"rendered":"<p><em>\u201cMe considero una fan de la cocina, por lo que hace un tiempo decid\u00ed hacer mi propia p\u00e1gina web y compartir mis recetas pero quer\u00eda ir m\u00e1s all\u00e1 y abr\u00ed mi propio canal de cocina para que los usuarios se suscriban y seguir compartiendo recetas pero monetizando el contenido, pero con el tiempo he visto que cada d\u00eda recibo menos visitas y la tasa de conversi\u00f3n (CR) estaba disminuyendo notablemente, el motivo no lo s\u00e9 exactamente por lo que he decidido hacer una nueva p\u00e1gina cambiando el dise\u00f1o pero con el mismo contenido y probar si con esta nueva versi\u00f3n consigo captar m\u00e1s usuarios\u201d.<\/em><\/p>\n<p>El caso anterior es hipot\u00e9tico, pero asumiendo que es una realidad: \u00bfC\u00f3mo puedo hacer el cambio de p\u00e1gina de una manera controlada y comprobar si la nueva p\u00e1gina es mejor que la anterior? B\u00e1sicamente quiero evitar cometer un error al cambiar de p\u00e1gina sin estar completamente segura y que el resultado sea a\u00fan peor del que tengo ahora, es aqu\u00ed cuando entra en juego un tipo de test que se conoce como <strong>A\/B Testing<\/strong> y es muy utilizado en el mundo de marketing para probar la efectividad de alg\u00fan cambio que se desea realizar en una p\u00e1gina web.<\/p>\n<p><img data-recalc-dims=\"1\" loading=\"lazy\" decoding=\"async\" class=\"aligncenter wp-image-29537\" src=\"https:\/\/i0.wp.com\/keepler.io\/wp-content\/uploads\/2020\/02\/ab-testing.png?resize=300%2C149&#038;ssl=1\" alt=\"\" width=\"300\" height=\"149\" \/><\/p>\n<p><span style=\"font-size: inherit;\">Cuando se comienza a realizar este tipo de test se parte de 2 hip\u00f3tesis, la hip\u00f3tesis nula (H0) la cual se trata de anular o rechazar en favor de la hip\u00f3tesis alternativa (H1). Pero \u00bfc\u00f3mo se puede interpretar la hip\u00f3tesis nula y la alternativa en este caso?, ser\u00eda de la siguiente manera:<\/span><\/p>\n<p><em><strong>H0<\/strong>: La nueva versi\u00f3n no es mejor o inclusive peor que la versi\u00f3n anterior.<br \/>\n<strong>H1<\/strong>: La nueva versi\u00f3n es mejor que la versi\u00f3n anterior.<\/em><\/p>\n<p>Para comprobar las hip\u00f3tesis se utilizan m\u00e9tricas o indicadores claves de rendimiento (KPI), con los cuales vamos a medir el desempe\u00f1o o el resultado obtenido de cada p\u00e1gina al hacer el test, en nuestro caso el KPI a medir es el CR, y \u00bfqu\u00e9 es el CR?<\/p>\n<p><em><strong>CR<\/strong> = es el n\u00famero de usuarios que realizan una suscripci\u00f3n a mi canal de cocina entre el total de usuarios \u00fanicos que la han visitado.<\/em><\/p>\n<p>Una vez establecidas las hip\u00f3tesis se comienza con las pruebas, se establecen 2 grupos de usuarios, uno de ellos es el <strong>grupo de control<\/strong> al cual se le mostrar\u00e1 la p\u00e1gina actual y el <strong>grupo de experimento<\/strong> el cual ver\u00e1 la nueva p\u00e1gina, y en base al resultado en la tasa de conversi\u00f3n para cada grupo se tomar\u00e1 una decisi\u00f3n.<\/p>\n<p>Ahora \u00bfc\u00f3mo se aplica toda esta teor\u00eda en la pr\u00e1ctica?, es decir \u00bfc\u00f3mo se ejecuta el <strong>A\/B Testing<\/strong> en realidad?, actualmente en el mercado existen herramientas que permiten hacer este tipo de test muy f\u00e1cilmente, otra manera es utilizando algoritmos de Machine Learning, por ejemplo aplicando un algoritmo de <strong>Regresi\u00f3n Log\u00edstica<\/strong>.<\/p>\n<p>Antes de aplicar un modelo de regresi\u00f3n log\u00edstica hay que identificar las variables de entradas o independientes (x) ya sean cuantitativas o categ\u00f3ricas, y en base a las variables de entrada se predice una variable salida o dependiente con 2 posibles valores (0 \u00f3 1). Un ejemplo de variables de entrada pueden ser el grupo de prueba, pa\u00eds, edad de los participantes o cualquier otra variable significativa que pueda influir en el resultado, y la variable a predecir en nuestro caso ser\u00eda <em>convierte<\/em> o <em>no convierte<\/em> (1 \u00f3 0).<\/p>\n<p><img data-recalc-dims=\"1\" loading=\"lazy\" decoding=\"async\" class=\"aligncenter wp-image-29542\" src=\"https:\/\/i0.wp.com\/keepler.io\/wp-content\/uploads\/2020\/10\/regresion-logistica.png?resize=300%2C201&#038;ssl=1\" alt=\"\" width=\"300\" height=\"201\" \/><\/p>\n<p>Una vez aplicado y ajustado el modelo de regresi\u00f3n log\u00edstica, se puede analizar el resultado contrastando con la hip\u00f3tesis nula, esta misma se puede aceptar o rechazar en favor de la hip\u00f3tesis alternativa, el cual ser\u00eda nuestro objetivo ya que queremos cambiar de p\u00e1gina con la finalidad de aumentar la tasa de conversi\u00f3n.<\/p>\n<p>Existen varias inconvenientes al aplicar una prueba A\/B, por ejemplo que el periodo de tiempo en que se hizo la prueba fue muy corto y no se obtuvo un resultado significativo o que se interrumpa el proceso de la prueba sin ning\u00fan motivo, esto puede alterar el resultado obteniendo FP (<em>falsos positivos<\/em>) o FN (<em>falsos negativos<\/em>).<\/p>\n<p>Otro motivo puede ser que los grupo de control y experimento sean muy peque\u00f1os,\u00a0es imprescindible hacer el test a una muestra suficientemente significativa que permita obtener resultados v\u00e1lidos. Adicionalmente hay que tener en cuenta dos posibles obst\u00e1culos con los grupos de control y experimento:<\/p>\n<ul>\n<li><strong>Aversi\u00f3n al cambio<\/strong>, existen usuarios que rechacen el cambio por lo que pueda dar una opini\u00f3n sesgada de la p\u00e1gina actual.<\/li>\n<li><strong>Efecto novedad<\/strong>, al contrario del anterior son usuarios que est\u00e1n a favor del cambio por lo que dan una opini\u00f3n favorecedora de la nueva p\u00e1gina web, sin tener en cuenta que la nueva p\u00e1gina web puede ser peor que la actual.<\/li>\n<\/ul>\n<p>Tambi\u00e9n es importante establecer consistencia entre los grupos de control y experimento, un desequilibrio en la poblaci\u00f3n de cada grupo puede conducir situaciones como la <strong><em>Paradoja de Simpson<\/em><\/strong>. La Paradoja de Simpson es cuando los grupos muestran una tendencia pero al agruparlos o combinarlos muestra una tendencia contraria.<\/p>\n<p>Es necesario tener en cuenta que <strong>la prueba de A\/B no aplica a cualquier cambio que se quiera realizar<\/strong>, se puede utilizar este tipo de prueba para probar una nueva funci\u00f3n, una nueva p\u00e1gina web, cambios de dise\u00f1os y colores.<\/p>\n<p>Por \u00faltimo es recomendable tener en cuenta <strong>otras m\u00e9tricas<\/strong>, a la hora de tomar la decisi\u00f3n de cambiar la p\u00e1gina o no, que no solamente se base en la tasa de conversi\u00f3n, se puede dar el caso que al cambiar la p\u00e1gina incremente el CR pero los ingresos disminuyan o que el porcentaje de usuarios que se dan de baja aumente perjudicando el porcentaje de retenci\u00f3n.<\/p>\n<p>Imagen: unsplash | @halgatewood<\/p>\n","protected":false},"excerpt":{"rendered":"<p>\u201cMe considero una fan de la cocina, por lo que hace un tiempo decid\u00ed hacer mi propia p\u00e1gina web y compartir mis recetas pero quer\u00eda ir m\u00e1s all\u00e1 y abr\u00ed mi propio canal de cocina para que los usuarios se suscriban y seguir compartiendo recetas pero monetizando el contenido, pero con el tiempo he visto [&hellip;]<\/p>\n","protected":false},"author":134360170,"featured_media":33903,"comment_status":"open","ping_status":"closed","sticky":false,"template":"","format":"standard","meta":{"_seopress_titles_title":"","_seopress_titles_desc":"","_seopress_robots_index":"","_seopress_robots_follow":"","_seopress_robots_imageindex":"","_seopress_robots_snippet":"","_seopress_robots_primary_cat":"","_seopress_robots_breadcrumbs":"","_seopress_robots_freeze_modified_date":"","_seopress_robots_custom_modified_date":"","_seopress_robots_canonical":"","_seopress_social_fb_title":"","_seopress_social_fb_desc":"","_seopress_social_fb_img":"","_seopress_social_fb_img_attachment_id":0,"_seopress_social_fb_img_width":0,"_seopress_social_fb_img_height":0,"_seopress_social_twitter_title":"","_seopress_social_twitter_desc":"","_seopress_social_twitter_img":"","_seopress_social_twitter_img_attachment_id":0,"_seopress_social_twitter_img_width":0,"_seopress_social_twitter_img_height":0,"_seopress_redirections_value":"","_seopress_redirections_enabled":"","_seopress_redirections_enabled_regex":"","_seopress_redirections_logged_status":"","_seopress_redirections_param":"","_seopress_redirections_type":0,"_seopress_analysis_target_kw":"","_et_pb_use_builder":"","_et_pb_old_content":"","_et_gb_content_width":"","content-type":"","_jetpack_newsletter_access":"","_jetpack_dont_email_post_to_subs":false,"_jetpack_newsletter_tier_id":0,"_jetpack_memberships_contains_paywalled_content":false,"_wpcom_ai_launchpad_first_post":false,"_jetpack_feature_clip_id":0,"_jetpack_memberships_contains_paid_content":false,"footnotes":"","jetpack_publicize_message":"{title}\n\n{excerpt}\n\n{url}","jetpack_publicize_feature_enabled":true,"jetpack_social_post_already_shared":true,"jetpack_social_options":{"image_generator_settings":{"template":"highway","default_image_id":0,"font":"","enabled":false},"version":2},"_wpas_customize_per_network":false,"jetpack_post_was_ever_published":false},"categories":[227],"tags":[299,281,270],"class_list":["post-1940","post","type-post","status-publish","format-standard","has-post-thumbnail","hentry","category-ciencia-de-datos","tag-datos-es","tag-herramientas","tag-metodologias"],"jetpack_publicize_connections":[],"jetpack_shortlink":"https:\/\/wp.me\/p9CeZw-vi","jetpack_sharing_enabled":true,"jetpack_featured_media_url":"https:\/\/i0.wp.com\/keepler.io\/wp-content\/uploads\/2020\/02\/ab-testing.jpg?fit=850%2C350&ssl=1","_links":{"self":[{"href":"https:\/\/keepler.io\/es\/wp-json\/wp\/v2\/posts\/1940","targetHints":{"allow":["GET"]}}],"collection":[{"href":"https:\/\/keepler.io\/es\/wp-json\/wp\/v2\/posts"}],"about":[{"href":"https:\/\/keepler.io\/es\/wp-json\/wp\/v2\/types\/post"}],"author":[{"embeddable":true,"href":"https:\/\/keepler.io\/es\/wp-json\/wp\/v2\/users\/134360170"}],"replies":[{"embeddable":true,"href":"https:\/\/keepler.io\/es\/wp-json\/wp\/v2\/comments?post=1940"}],"version-history":[{"count":1,"href":"https:\/\/keepler.io\/es\/wp-json\/wp\/v2\/posts\/1940\/revisions"}],"predecessor-version":[{"id":2429,"href":"https:\/\/keepler.io\/es\/wp-json\/wp\/v2\/posts\/1940\/revisions\/2429"}],"wp:featuredmedia":[{"embeddable":true,"href":"https:\/\/keepler.io\/es\/wp-json\/wp\/v2\/media\/33903"}],"wp:attachment":[{"href":"https:\/\/keepler.io\/es\/wp-json\/wp\/v2\/media?parent=1940"}],"wp:term":[{"taxonomy":"category","embeddable":true,"href":"https:\/\/keepler.io\/es\/wp-json\/wp\/v2\/categories?post=1940"},{"taxonomy":"post_tag","embeddable":true,"href":"https:\/\/keepler.io\/es\/wp-json\/wp\/v2\/tags?post=1940"}],"curies":[{"name":"wp","href":"https:\/\/api.w.org\/{rel}","templated":true}]}}