De technische cultuur ziet falen vaak als essentieel. Facebook-oprichter Mark Zuckerberg beschreef de mentaliteit als "beweeg snel en breek dingen".

Maar helpt die mantra van snel experimenteren bedrijven echt om te slagen?

Om die vraag te beantwoorden, Sharique Hasan en Aaron "Ronnie" Chatterji, beide strategieprofessoren aan de Fuqua School of Business van Duke University, studeerde meer dan 35, 000 hightech startups opgericht tussen 2008 en 2013. Ze vatten hun bevindingen samen in "Experimentation and Startup Performance:Evidence from A/B Testing, " die binnenkort in het journaal verschijnt Bestuurswetenschappen en co-auteur van Rem Koning van Harvard Business School.

De onderzoekers ontdekten dat startups die een reeks gerandomiseerde gecontroleerde onderzoeken gebruiken om opties voor productfuncties te testen, ook wel bekend als A/B-testen, succesvoller zijn. gemiddeld, dan startups die dit soort datagedreven aanpak niet volgen, Hasan zei in een live discussie over het onderzoek op Fuqua's LinkedIn-pagina.

Verder gaan dan je instinct

"Om eerlijk te zijn, de meeste startups en de meeste kleine bedrijven hebben een vrij standaard raamwerk voor het nemen van beslissingen, dat is 'vertrouw op je gevoel', ' zei Hasan. 'Misschien wat gegevens verzamelen. Maar gewoonlijk, ondernemers hebben een overtuiging over iets dat [hun] startup zou moeten doen, en ze streven ernaar en ze volgen door, " hij zei.

A/B-testen zorgen voor meer kwantitatieve besluitvorming die ook de ontdekking versnelt van wat werkt en wat niet, zei Hasan.

"Als een idee aanslaat, je kunt het sneller schalen, en als het nergens heen gaat, je kunt het sneller doden, " hij zei.

Voor hun analyse de onderzoekers bestudeerden de kenmerken, webstatistieken en productinnovaties van duizenden startups die wel en geen gebruik maakten van A/B-testen om te bepalen of en hoe testen hen hielp hun producten en bedrijven op te schalen.

Bedrijven die A/B-testen toepast, verbeterden hun prestaties, zoals gemeten door paginaweergaven, met 30 tot 100 procent na een jaar gebruik. Degenen die A/B-testen gebruikten, introduceerden ook nieuwe producten met een hoger percentage (9 tot 18 procent) dan bedrijven die niet experimenteerden, volgens het onderzoek.

Een strategie die schaalt

Een algemene opvatting onder bedrijven is dat A/B-testen alleen effectief is voor incrementele veranderingen of kleinschalige vragen, Hasan zei, zoals Google's test van 41 tinten blauw om de beste kleur voor zijn zoekwerkbalk te identificeren.

Liever, hij zei, het kwalitatieve onderzoek en de gegevens in de paper toonden aan dat A/B-testen ook belangrijkere beslissingen kunnen sturen als onderdeel van de algemene strategie van een bedrijf, en dat testen de kans vergroot dat die beslissingen slagen, zei Hasan.

"De wetenschappelijke methode die wordt toegepast op zakelijke besluitvorming kan een zeer krachtig hulpmiddel zijn, Hasan zei. "A/B-testen is slechts één instantie van daadwerkelijke datagestuurde besluitvorming door bedrijven die een krachtig effect kunnen hebben op de kwaliteit van een beslissing die een startup neemt."

Een onderbenut hulpmiddel

Wat de onderzoekers verraste, was dat, ondanks deze duidelijke voordelen, minder dan een vijfde van de bedrijven gebruikte A/B-testen. Er werd vaker getest in Silicon Valley, waar bedrijven het ongeveer een kwart van de tijd gebruikten, vergeleken met 19 procent bij bedrijven buiten de San Francisco Bay Area. Bedrijven met 10 of meer werknemers maakten vaker gebruik van de strategie dan kleinere bedrijven.

De gegevens suggereerden ook dat in een eerder stadium, kleine startups zonder financiering zouden het meest kunnen profiteren van A/B-testen, maar helaas, Hasan merkte op, deze bedrijven gebruikten testen het minst - slechts 13 procent van de tijd vergeleken met 25 procent voor meer gevestigde bedrijven die werden gefinancierd door angels of durfkapitaalinvesteerders.

"Dit ondersteunt het idee dat besluitvorming een belangrijk knelpunt kan zijn voor het succes van een startup, en dat met behulp van een meer wetenschappelijke, rigoureuze aanpak om de besluitvorming te starten, kan de kwaliteit van de prestaties van een startup echt verbeteren, " hij zei.

De eerdere bedrijven kunnen een manier implementeren om honderden potentiële ideeën te beheren, hoe groter hun kans op succes, zei Hasan.

"[A/B-testen] opent ideeën binnen een startup, " zei Hasan. "Met technologische vooruitgang waarmee startups mogelijk duizenden verschillende opties kunnen testen, A/B-testen is zowel een kosteneffectieve als snelle methode om de levensvatbaarheid van startup-producten te ontdekken."