TikTok

TikTok 分組測試怎麼設定:可測變數、測試力與結果判讀

11 分鐘

TikTok 分組測試是 Ads Manager 內建的 A/B 測試工具。它英文叫 Split Test,作為官方版的 TikTok 廣告 A/B 測試,讓每組受眾只看到其中一個廣告組,比自己複製廣告來測更容易看出差異從哪來。這篇依 TikTok 官方說明頁原文,整理可測變數、建立步驟、測試力(Estimated Testing Power)跟信心水準的差別,以及 Smart+ 目前能確認的相容範圍。

  • 官方變數說明頁列出 8 類可測變數,每次測試只能選 1 個;總覽頁的清單另外列了 Smart+。
  • 官方建議至少測 7 天,分組測試最長可以跑 30 天。
  • 開跑前看測試力,官方建議預算要讓 power value 至少 80%。
  • 跑完看結果頁,勝出與否以 90% 信心水準判定,跟測試力是兩件事。
  • Smart+ 能搭配哪些測試,依測試類型與預算設定而異,細節以介面顯示為準。

資料來源說明:本文的核心事實都引用 TikTok Ads Manager 官方說明頁,每處附原文連結與查證日期(2026-09-26),引用原文每處只取一句,其餘為我們依原文整理的說明。TikTok 會不定期調整介面與規則,實際操作請以你帳戶當下的 Ads Manager 畫面為準。

TikTok 分組測試跟自己複製廣告來測,差在哪?

TikTok 分組測試會讓每組受眾只看到其中一組廣告,自己複製廣告組合則可能兩組搶同一批人。官方總覽頁的說法是:「Split testing ensures that each audience group will exclusively see one ad group to prevent Group A and B from competing directly for mutual audiences.」(分組測試確保每個受眾群只會看到其中一個廣告組,避免 A、B 兩組直接搶同一批受眾。查證日期 2026-09-26,來源:TikTok Ads Manager Help — About Split Testing)

自己手動複製廣告組合來測,兩個廣告組通常落在同一個競價環境。受眾設定又差不多時,同一個人兩組都可能看到。這樣跑出來的差距,很難分清楚是你改的那個變數造成的,還是受眾重疊、投放分配不均帶來的雜訊。

官方工具把受眾分開投放,比較結果時就能把焦點放回你要測的那一個變數。它還多做了一件事:建立測試時你要先選定一個比較指標,系統依這個指標和固定的信心水準判定勝負,第五節會拆開講。手動測試的判定標準通常是人看數字決定,兩個人看同一份報表,可能得出不同結論。

要提醒的是,官方工具處理的是「受眾重疊」和「判定標準」這兩件事。測試題目設計得好不好,還是要回到你想驗證的那一句假設。動手之前,先用一句話寫下「如果把 X 換成 Y,我預期哪個指標會變好」,後面選變數、選關鍵指標都會比較好決定。

TikTok 分組測試可以測哪些變數?

官方變數說明頁列出 8 類,每次 TikTok 分組測試只能選 1 個。原文寫得很直接:「You can only select one variable for each split test.」(每次分組測試只能選擇一個變數。查證日期 2026-09-26,來源:TikTok Ads Manager Help — Split Testing Variables)以下依同一頁整理各類能比較的內容:

  • Targeting(定向):廣泛與精準定向、自訂受眾與一般定向、人口屬性、興趣與行為、裝置或地區。
  • Placement(版位):自動版位與手動選擇的版位。
  • Creative(創意):廣告格式、影片、行動呼籲文案或說明文案。
  • Budget Strategy(預算策略):CBO(活動預算優化)與廣告組層級預算(非 CBO)兩種分配方式。
  • Creative Assets(素材資產):圖片、影片、廣告格式,以及影片開頭 2 到 3 秒的鉤子。
  • Catalog(商品目錄):商品目錄廣告與一般非目錄廣告。
  • Bidding and Optimization(出價與優化):出價策略、優化目標、出價金額。
  • Custom(自訂):用分組測試比較兩個廣告活動。

官方總覽頁的可測清單,比變數說明頁多列了 Smart+ 這一項(查證日期 2026-09-26,來源:About Split Testing)。兩頁寫法沒有完全對齊,Smart+ 的部分我們放在最後一節整理。

並不是每種活動都能開分組測試。變數說明頁列出的不相容類型有 Branded Mission、Reach & Frequency、TopView、TikTok Pulse、Search campaign、App pre-registration、Paid content、Automotive ads、TikTok Shop;格式方面,Reservation 類廣告格式與 TikTok instant messaging ads 也不相容。官方只列出清單,沒有逐一說明原因,實際能不能開,以當下 Ads Manager 介面顯示為準。

選變數時,回到前一節那句假設。假設是「換一種出價方式,轉換成本會比較低」,就選出價與優化;假設是「換一批受眾,點擊率會比較高」,就選定向。一次只動一個變數,結果才講得清楚是哪個改動帶來的差異。

在 Ads Manager 怎麼開一個 TikTok 分組測試?

建立廣告活動、選好廣告目標後,打開「Create a split test」開關就能開始。官方建立流程頁的步驟整理如下(查證日期 2026-09-26,來源:TikTok Ads Manager Help — How to create a split test):

  1. 進入 TikTok Ads Manager 的 Campaign 分頁,點 Create 建立廣告活動。
  2. 選擇廣告目標,打開「Create a split test」開關,再點 Continue。
  3. 完成廣告組設定,測試排程至少設 7 天。
  4. 完成廣告層級的設定。
  5. 到 Split test 分頁選擇測試變數,從上一節的類別擇一。
  6. 選一個 Key metric(關鍵指標),系統會用它比較兩個廣告組。
  7. 設定測試廣告組(Test ad group),最後點 Complete。

官方要求排程至少 7 天,理由是讓系統有足夠時間收集有用的樣本。你在前面步驟設好的那個廣告組就是對照組(control ad group),官方說明它已經設定完成,會在排定的開始日照常投放;你要另外設定的是測試廣告組。

Key metric 的選法,建議跟你的廣告目標和那句假設對齊。測出價就看轉換成本,測受眾就看點擊或轉換,指標選錯了,就算系統判出勝負,也回答不了你原本想問的問題。

開跑之後盡量別動設定。官方最佳做法頁的提醒是:「Making changes to your ad group after your Split Test started running may impact its results or cause the ad group to go into review again.」(測試開跑後修改廣告組,可能影響結果,或讓廣告組重新進入審核。查證日期 2026-09-26,來源:TikTok Ads Manager Help — Split Test Best Practices)另外依官方編輯說明頁,測試變數與廣告內容在開跑後無法修改,其他廣告組設定可以改,但系統要多花時間與預算重新學習(查證日期 2026-09-26,來源:How to edit a split test)。

TikTok 分組測試的預算和天數要抓多少才夠?

官方建議至少測 7 天、最長 30 天,預算要讓測試力達 80% 以上。天數這一半比較單純,最佳做法頁寫:「We recommend testing for a minimum of 7 days to obtain the most reliable results.」(建議至少測 7 天,以取得最可靠的結果。)同一頁也寫明分組測試最長可以跑 30 天(查證日期 2026-09-26,來源:Split Test Best Practices)。

預算這一半,要先認識第一個統計概念:測試力(power)。官方定義是:「Power value is the likelihood of detecting potential differences in your ad group, which helps determine your chances of finding a winning result.」(測試力是偵測出廣告組之間潛在差異的機率,用來評估找到勝出組的機會。查證日期 2026-09-26,來源同上)

建立測試時,系統會依你設的預算給出 Estimated Testing Power,也就是預估測試力。官方建議把預算設到測試力至少 80%。白話講,測試力回答的是「這個預算和受眾規模,夠不夠讓我看出兩組之間真的存在的差異」。它是開跑前就要看的數字。測試力偏低時,就算兩組真的有差,也可能因為樣本不夠而判不出勝出者。

受眾規模也會影響樣本量。官方建議擴大受眾範圍,避免分組測試出現樣本數不足的狀況。設定時可以照這個順序檢查:先確認受眾沒有切得太窄,再調整預算讓預估測試力到 80%,最後排天數,至少 7 天、不超過 30 天。

這個順序的用意,是把「夠不夠測」的問題留在開跑前解決。預估測試力卡在 80% 以下時,與其硬開一個判不出結果的 TikTok 分組測試,不如先把受眾放寬,或把這輪要測的題目縮小成更值得花預算的一個。

TikTok 分組測試結果頁怎麼判讀哪一組勝出?

結果頁以 90% 信心水準判定勝出組,沒達到就顯示沒有勝出組。這是第二個統計概念:信心水準(confidence)。官方總覽頁寫:「Split testing is scientifically designed to perform an accurate A/B test with a 90% confidence rate to determine which ad group performs better.」(分組測試以 90% 信心水準進行 A/B 測試,判定哪一個廣告組表現較好。查證日期 2026-09-26,來源:About Split Testing)

測試結束後,結果頁會出現兩種狀態之一:「Winning ad group found (90% confidence level)」或「No winning ad group found (90% confidence level)」(查證日期 2026-09-26,來源:TikTok Ads Manager Help — About Split Test Results)。比較的依據,是你建立測試時選的那個 Key metric,其他指標不列入勝負判定。官方總覽頁也說明,系統只有在結果達到統計顯著時,才會選出並確認勝出的廣告組。

把兩個概念並排看會比較清楚:

比較項目測試力(power)信心水準(confidence)
什麼時候看開跑前,建立測試時測試結束後,看結果頁
回答的問題預算與樣本夠不夠偵測出差異觀察到的差異是否達統計顯著
官方數字建議至少 80%以 90% 判定勝出

兩者分開看,能避開兩種常見的誤讀。第一種是測試力不到 80% 就開跑,最後沒有勝出組,這時很難分辨是變數本身沒差,還是樣本不夠。第二種是看到某組的關鍵指標數字比較好看,就直接宣布它贏;如果結果頁沒有判定勝出,代表這個差距在 90% 信心水準下並不顯著,把它當結論風險很高。

Smart+ 活動能搭配 TikTok 分組測試嗎?

部分測試可以搭配,但能選的類型有限制,最終以 Ads Manager 介面為準。目前官方頁面讀得到三條線索,彼此沒有整理成一句是非結論:

  1. 分組測試總覽頁的可測清單列有 Smart+ 這一項(查證日期 2026-09-26,來源:About Split Testing)。
  2. 官方介紹活動層級分組測試的說明文寫:「Automated Smart+ campaign creation: The system automatically generates a Smart+ campaign based on the advertiser's manual campaign for an accurate comparison.」(系統會依廣告主的手動活動,自動產生一個 Smart+ 活動來做比較。查證日期 2026-09-26,來源:Campaign-Level Split Testing in TikTok Ads Manager)
  3. 自訂分組測試的資格表,適用欄寫「Campaign budget optimization (compatible with Smart+ and custom tests)」;同一張表的不適用欄,則寫活動預算優化不相容定向、創意、出價與優化這幾類測試(查證日期 2026-09-26,來源:TikTok Ads Manager Help — Custom Split Testing)。

三條放在一起看,比較穩的讀法有兩點。第一,想比較「手動活動」和「Smart+ 活動」哪個表現好,官方有對應的測試方式。第二,活動如果開了活動預算優化(CBO),能搭配的是 Smart+ 測試和自訂測試,定向、創意、出價與優化這三類測試就不適用。

還沒確認的部分我們直接標出來。一個已經在跑的 Smart+ 活動,能不能在裡面再針對單一變數開 TikTok 分組測試,官方頁面沒有明確的是非結論,本文列為未確認。分組測試與 Smart+ 在台灣廣告帳戶的開放範圍,官方頁面也沒有查到明確聲明,同樣列為未確認。實際操作時,建立測試的畫面會列出當下設定能選的變數,以那個畫面為準。

常見問題 FAQ

Q1:TikTok 分組測試跟 TikTok 廣告 A/B 測試是同一件事嗎?

是,分組測試就是官方內建的 A/B 測試工具,英文介面叫 Split Test。它跟手動拆預算測試的差別,在於系統會讓每組受眾只看到其中一個廣告組,並用你選的關鍵指標與 90% 信心水準判定勝負。

Q2:分組測試一定要跑滿 7 天嗎?

官方建議至少 7 天,建立流程也寫明排程要設到 7 天以上。天數太短,系統可能來不及收集足夠樣本;上限則是 30 天。

Q3:測試力不到 80%,縮短天數可以嗎?

不建議。測試力反映的是預算與樣本能不能偵測出差異,縮短天數通常只會讓樣本更少。比較合理的做法是照官方建議擴大受眾或提高預算,讓預估測試力回到 80% 以上再開跑。

Q4:結果顯示「No winning ad group found」代表測試失敗嗎?

這代表兩組在你選的關鍵指標上,差距沒有達到 90% 信心水準。它本身也是一個結果:在這次的預算與樣本下,這個變數沒有造成可以確認的差異。如果開跑前測試力就偏低,下一輪先把測試力補到 80% 再重測。

Q5:分組測試開跑後可以改設定嗎?

測試變數與廣告內容開跑後不能改,其他廣告組設定可以改,但官方不建議頻繁修改,因為系統要多花時間與預算重新學習。官方編輯說明頁也提醒,如果改了對照條件,兩個廣告組都要一起套用,並預留額外 7 天與預算來判定勝出組。

結論 測試力夠不夠測,信心水準才算不算數

TikTok 分組測試的重點,是把開跑前的測試力和跑完後的信心水準分開看。測試力回答「夠不夠測」,信心水準回答「差異算不算數」,兩個問題混在一起,就容易把一個預算不足的測試,誤讀成變數本身沒有效果。

設定上記住幾個官方數字:一次只測一個變數、排程至少 7 天、最長 30 天、預估測試力至少 80%、勝出以 90% 信心水準判定。Smart+ 的相容範圍官方各頁說法沒有完全對齊,以介面顯示為準。

如果你想把 A/B 測試框架放進素材製作流程,FlowBeat Ads 的短影音腳本企劃與製作服務包含 A/B 測試框架與影片製作。想先聊聊素材怎麼準備,可以加 LINE @732xtlll。

延伸閱讀:同一支 TikTok 素材要搬到 IG Reels 投放時怎麼重做,可以參考「IG 演算法改版後,TikTok 廣告素材怎麼重做」。

想把 A/B 測試框架放進素材製作流程

如果你想把 A/B 測試框架放進素材製作流程,短影音腳本企劃與製作服務 包含 A/B 測試框架與影片製作,想先聊聊素材怎麼準備,歡迎加 LINE。

加 LINE 聊素材 A/B 測試

LINE 官方帳號 ID:@732xtlll(搜尋時請含 @)

FlowBeat Ads LINE 官方帳號 QR Code

手機掃碼加好友

標籤:#TikTok 分組測試#Split Test#A/B 測試#測試力#信心水準#Smart+ 分組測試
分享:

同系列文章

繼續探索相關主題

TikTok