4 月 20 日消息，字節跳動副總裁、算法和數據技術負責人楊震原表示，火山引擎是字節跳動旗下為企業服務的智能科技品牌，字節跳動的 A/B 測試工具也已通過火山引擎開放給企業客戶。
A/B 測試是指對不同策略進行對比實驗，根據結果選擇最優方案。在互聯網時代，A/B 測試被谷歌等巨頭廣泛使用在產品開發和運營中，有研究者也把 A/B 測試視為字節跳動快速增長的重要因素。
據楊震原介紹，公司成立之初，今日頭條就在做策略推薦類的 A/B 測試。2016 年，字節跳動建立了支持大規模產品實驗的 A/B 測試平臺，之后陸續接入抖音、西瓜視頻等全線業務，把 A/B 測試應用在產品命名、交互設計、推薦算法、用戶增長、廣告優化和市場活動等方方面面的決策上。
最新數據顯示，字節跳動每天同時進行的 A/B 測試達到上萬場，單日新增實驗數量超過 1500 個，覆蓋 400 多個大大小小的業務。隨著公司發展，這些數字還在不斷擴大。截至今年 3 月底，字節跳動累計已經做了 70 多萬次 A/B 測試。
楊震原表示，字節跳動積累的技術能力和增長方法，會通過火山引擎提供給企業客戶。火山引擎產品體系包括基礎服務、技術中臺、智能應用和行業解決方案，字節跳動的視頻編輯、特效、文字識別、圖像識別、個性化推薦等技術能力，都已在火山引擎上為企業服務，A/B 測試也是其中一款重要的數據產品，能夠幫助企業提高決策質量，促進業務增長。
據相關產品負責人介紹，火山引擎 A/B 測試支持客戶端、服務端、推送、網頁、可視化建站等多種實驗形式，具有功能全面、高度自動化的特點，即使不會編程的人也能輕松做實驗，而且有內容豐富的實驗報表，可智能產出實驗結論，讓決策鏈清晰完備。
據了解，以悟空租車為例，該公司已通過火山引擎進行了 70 多次 A/B 測試，約有 60% 為正向實驗，提升產品轉換率約 40%，更直觀地量化了需求價值，極大地提升了效率。
與此同時，楊震原也表示 A/B 測試并不是萬能的，它也有很多局限性，比如提高商品推薦門檻、不推薦評分低的商品，如果做 A/B 測試，短期內交易量肯定會降低，但長期來看結論有可能逐漸反轉，這是長周期影響和目標設定的問題。此外，獨立的實驗條件、統計置信度等問題都是做 A/B 測試需要考慮的。
楊震原表示，企業應充分意識到 A/B 測試的優勢和缺陷，對目標選擇適合的評估方法。比如戰略型決策，需要專家角色進行長期的思考;很多細節的決策，如果能做 A/B 測試，要盡量做 A/B 測試，并且要關注到量化分析的執行能力，真正做到數據驅動科學決策。
