A/Bテスト有意差判定ツール
A/Bテスト各パターンの訪問数とCV数を入れると、統計的に有意な差があるかを比率のz検定（カイ二乗検定と同等）でその場で判定します。 p値・選択した信頼水準に応じた信頼区間・相対リフトに加え、有意差が出ない場合には「あとどれくらいデータが必要か」の目安も表示します。
計算はすべてブラウザ内で処理され、データはサーバーに送信されません。最初はサンプルの数値を表示しているので、お手元のテスト結果に置き換えてご利用ください。
差が偶然生じる確率（p値）が有意水準5%（α=0.05）を下回りました。
差が偶然である確率はp = 0.015と小さく、有意水準5%を下回っています。勝ちパターンを本番に反映し、次の改善テストに進める段階です。ただし、テスト期間中に何度も結果を確認して「有意になった瞬間に止めた」場合は偽陽性の可能性が高まるため、事前に決めた期間・サンプルサイズを満たしているかを確認してください。
LP・フォーム・CTAの改善テストを継続的に回す体制づくりはWeb運用代行サービス「TANTOU」で支援しています。
結果の読み方のポイント
p値
要するに：「この差がただのまぐれである可能性はどれくらいか」を表す数字。小さいほど、まぐれでは説明しにくい＝本物の差らしい、と読みます。
「本当は差がない」と仮定したときに、観測された差（またはそれ以上の差）が偶然生じる確率です。p値が有意水準（通常5%）を下回れば「偶然とは考えにくい＝有意差あり」と判断します。p値は差の大きさや重要性を表す指標ではないため、相対リフトや信頼区間と必ず併せて見てください。
有意水準と信頼区間
要するに：有意水準は「p値がどこまで小さければ、まぐれではないと認めるか」の合格ライン。信頼区間は「本当の差はだいたいこの範囲にありそう」という幅で、この幅が0をまたいでいたら「差がない可能性も残っている」という意味です。
有意水準（α）は「本当は差がないのに有意と誤判定してよい確率の上限」で、慣例的に5%を使います。選んだ信頼水準での信頼区間が0をまたがないことと、その水準で有意であることは概ね対応します（95%信頼区間なら5%水準、99%信頼区間なら1%水準）。信頼区間は「差がどの範囲にありそうか」を示すため、意思決定にはp値より役立つ場面が多い指標です。
検出力とサンプルサイズ
要するに：「小さい差を見つけたいほど、たくさんのデータが必要になる」ということ。差が半分なら必要なデータは4倍です。
検出力は「本当に差があるときに、検定がそれに気づける確率」で、慣例的に80%を使います。検出したい差が小さいほど必要なサンプル数は二次関数的に増えます（差を半分にすると4倍）。テスト開始前に必要サンプル数を見積もり、現実的な期間で集まるかを確認するのがA/Bテスト設計の基本です。
覗き見（ピーキング）
要するに：「結果を毎日チェックして、良くなった瞬間にテストをやめる」と、まぐれを実力と勘違いしやすくなる、ということ。判定は決めた期日まで我慢するのが基本です。
テスト期間中に何度も結果を確認し、有意になった瞬間に止める運用のことです。検定を繰り返すのと同じことになり、偽陽性率が名目の有意水準を大きく上回ります。事前に決めた期間・サンプルサイズまで待ってから判定してください。
よくある質問
Q. どんな数字を入力すればよいですか？
A. 各パターンに割り当てた訪問数（ユニークユーザー数またはセッション数）と、そのうちCV（コンバージョン）した件数を入力します。同じ期間にランダムに振り分けたデータであることが前提です。A/Bの訪問数が想定の振り分け比率から大きくずれている場合は、集計や実装に問題がある可能性（SRM）があるため先にそちらを確認してください。
Q. どんな計算方法で判定していますか？
A. 2標本の比率のz検定（分散はプール、両側検定）です。これはイェーツ補正なしのカイ二乗検定（自由度1）と同等で、χ² = z² が成り立ちます。あわせて選択した信頼水準に応じた差の信頼区間（分散はプールしない方式）と、正規近似によるBがAに勝つ確率を参考値として表示します。期待度数が5未満のセルがある小サンプルでは近似精度が落ちるため警告を表示します。その場合はFisherの正確検定の利用を検討してください。
Q. 「有意な差があるとは言えません」はどう解釈すればよいですか？
A. 「差がない」ことの証明ではなく、判断するにはまだデータが足りない状態です。このツールでは、観測された差を選択した有意水準・検出力80%で検出するために必要な1パターンあたりの訪問数の目安を表示するので、テストを続けるか、差が小さすぎるとして打ち切るかの判断に使ってください。
Q. テスト期間中に毎日このツールで判定してもよいですか？
A. 途中経過の確認自体は問題ありませんが、「有意になった瞬間にテストを止める」運用は偽陽性（本当は差がないのに有意と誤判定する確率）を大きく増やします。テスト開始前にサンプルサイズと期間を決め、その時点まで待ってから判定するのが基本です。
Q. 入力したデータはどこかに送信されますか？
A. 送信されません。計算はすべてブラウザ内のJavaScriptで処理されます。
関連記事
- A/Bテスト設計の基礎｜サンプルサイズ・MDE・カイ二乗とt検定の使い分け
- A/Bテストの必要サンプル数とサンプルサイズ設計｜検出力・MDE・αから逆算する
- 統計的仮説検定の基礎｜p値・有意水準・第一種/第二種の過誤・信頼区間の読み方
- コンバージョン率（CVR）とは｜目安の考え方・分解（ロジックツリー）・改善インパクトの試算
基礎知識集
他の無料ツール
マーケティング分析
CV逆算電卓（必要セッション数・CVRシミュレーター）
月間セッション数・CV数・目標CV数を入れるだけで、必要なセッション数とCVRを逆算。CVR改善と流入増の組み合わせ早見表、SEO記事で賄う場合の必要記事数の目安、どちらに伸びしろがあるかの診断を表示します。
ドル円換算ツール（API・クラウドのトークン課金を日本円で計算）
米ドルと日本円を毎日更新の為替レートで相互換算。AIのAPIでよくあるトークン課金（100万トークンあたりの単価）を、入力と出力の単価を分けて日本円まで計算します。トークン制の動画生成にも対応しています。
CPA/ROAS逆算電卓（広告費用対効果シミュレーター）
CPC・CVR・客単価・粗利率を入れるだけで、CPA・損益分岐CPA・ROASと黒字/赤字判定をその場で計算。目標CV数から必要な広告予算、目標ROASを保てる上限CPCの早見表も表示します。
UTM・広告計測タグ作成ツール
UTMパラメータ付きURLとGoogleタグマネージャー用の成果イベントを作成。広告媒体が発行するクリックIDの欠落確認と、Cookie規制に備えた計測体制のセルフチェックもできます。
ブラウザ・端末シェアモニター
日本と世界のPC・スマホ・タブレットアクセス比率と、全端末・PC・スマホ別のChrome・Safari・Edge・Firefox・Braveのシェア推移を図解します。
EFO診断・入力フォームチェックツール
問い合わせ・申込フォームのURLを入力するかHTMLを貼り付けるだけで、入力項目数・label紐付け・type/inputmode/autocomplete・必須指定・入力欄の分割などEFO（入力フォーム最適化）の観点を100点満点で簡易採点。離脱につながる改善点をその場で一覧表示します。解析結果は保存しません。
ファネル分析電卓（ステップ別離脱率・ボトルネック診断）
各ステップの到達人数を入れるだけで、通過率・離脱率を計算してファネル図で図解。最も落ちている段階（ボトルネック）の特定と、改善した場合のコンバージョン増加の試算を表示します。
バイラル係数シミュレーター（K-factor・ユーザー数推定）
招待数・転換率・サイクルタイム・観測期間を入れるだけで、バイラル係数（K-factor）とサイクル別の累積ユーザー数の推移を計算。有料獲得と組み合わせたときのブレンド獲得倍率も表示する無料ツールです。
複利・成長シミュレーター（MAU/WAU成長予測・複利計算）
初期値・成長率・期間を入れるだけで、複利での到達規模・投入分・成長分を計算し、推移をグラフと表で表示。資産運用の複利（CAGR）から、WebサービスのMAU/WAU成長まで、成長率の減衰や上限つきの飽和（ロジスティック）モデルも選べます。すべてブラウザ内で計算され、データはサーバーに送信されません。
A/Bテスト サンプルサイズ計算ツール（必要サンプル数を逆算）
A/Bテストに必要なサンプル数を、ベースラインCVR・検出したい差（MDE）・有意水準・検出力から逆算。1群あたりと合計の必要件数に加え、1日あたりの想定流入を入れればテスト期間（日数）の目安も表示します。MDEを変えたときの必要数の増減も一覧でき、すべてブラウザ内で計算されデータはサーバーに送信されません。
薬機法・景品表示法 広告表現 簡易チェックツール（無料）
広告文・バナーコピーを貼り付けるだけで、薬機法（医薬品的な効能効果の標榜）と景品表示法（優良誤認・有利誤認）のリスクフレーズをその場で簡易検出。網羅的・完璧なチェックリストではないため、ステルスマーケティング規制の自己点検チェックリストもあわせて表示します。すべてブラウザ内で処理され、入力内容はサーバーに送信されません。より高精度な確認はTANTOUで承っております。
SEO・AIクローラー対策
SEO・AI検索（GEO）診断ツール
サイトURLを入力するだけで、技術的SEO・コンテンツ・AI検索対応（GEO/LLMO）を無料で診断。タイトルや構造化データ、AI検索クローラーの許可状況などをスコア化し、改善ポイントを提示します。被リンク・順位を含む詳しい分析はコンサルティングでご案内します。
robots.txt メーカー（AIクローラー対応）
GPTBot・ClaudeBot などのAIクローラーから検索エンジン・SEO分析ツールまで、クローラーごとに許可/拒否を選ぶだけで robots.txt を生成。コピー・ダウンロードしてそのまま使えます。
GA4 AI流入 正規表現ジェネレーター（カスタムチャネルグループ用）
ChatGPT・Gemini・Claude・Perplexity などのAIサービスを選ぶだけで、GA4のカスタムチャネルグループや探索レポートで使う「セッションの参照元」一致の正規表現を生成。標準の「AIアシスタント」チャネルで取りこぼすAI流入を自前で拾えます。
robots.txt チェッカー（AIクローラー対応）
サイトURLを入力するだけで robots.txt を取得し、AIクローラー・検索エンジン・SEO分析ツールごとのアクセス可否を診断。AI検索（LLMO）への影響も警告します。
OGP確認・チェックツール
URLを入力するだけでOGPタグを取得し、Google検索結果・X・Facebook/LINE風のプレビューと改善チェックリストを表示。シェア時の見え方を公開前に確認できます。
Search Console CTR診断ツール（順位別CTR目安と比較）
Search Console のクエリ別・ページ別データを貼り付けるだけで、各行のCTRが掲載順位ごとの一般的な目安より高いか低いかをその場で判定。改善余地の大きいクエリと、目安まで上げたときのクリック増の概算も表示します。すべてブラウザ内で処理され、データはサーバーに送信されません。
ネットワーク・サーバー
アクセス情報確認（IP・ホスト名・ブラウザ・OS判定）
今アクセスしている自分のグローバルIPアドレス・逆引きホスト名・接続元の国・回線（ASN/プロバイダ）・ブラウザ・OS・画面解像度・タイムゾーンなどをまとめて表示。サポート問い合わせ時の環境確認や、サーバーへ渡るリクエスト情報の確認に使えます。
IPアドレス確認（自分のグローバルIPアドレス）
今アクセスしている自分のグローバルIPアドレスを大きく表示。逆引きホスト名・接続元の国・回線（ASN/プロバイダ）も合わせて確認でき、ワンクリックでコピーできます。リモートワークの固定IP確認やアクセス許可リスト登録に。
nslookup（DNSレコード確認・A/AAAA/MX/NS/TXT/CNAME/SOA/PTR）
ドメイン名やIPアドレスを入力するだけで、A・AAAA・MX・NS・TXT・CNAME・SOA・PTR（逆引き）などのDNSレコードを確認。DNS-over-HTTPSでサーバー側から問い合わせるため、社内・自宅のDNSキャッシュに左右されず、DNS設定の反映確認やメール・SPF設定の調査に使えます。
テキスト・データ整形
文字数カウント（高機能・テキスト変換つき）
文字数・行数・バイト数・原稿用紙換算・読了時間・文字種の内訳をリアルタイム表示。markdownの記法やHTMLタグを除いた「ウェブ記事の表示文字数」も数えられます。任意の上限設定やSNS投稿の上限との比較に加え、全角半角・大文字小文字・ひらがなカタカナ変換、余分な空白/改行の削除、重複行削除・並べ替え、markdown/HTML除去などテキスト変換もできる無料の高機能文字数カウンターです。
半角カナ変換（全角カタカナ⇄半角カナ）
全角カタカナを半角カナに、半角カナを全角カタカナに一括変換。カナ・英字・数字・記号・スペースを文字種ごとに選んで変換でき、ひらがな⇄カタカナや小さいカナ（ャュョッ）の大文字化にも対応します。どの文字がどう変わったかを1文字ずつ確認でき、すべてブラウザ内で処理され入力はサーバーに送信されません。
テキスト・文章・文字の比較／差分(diff)チェックツール（校正・送信なし）
2つのテキスト・文章を貼り付けるだけで、追加・削除・変更箇所を色分け表示する無料の差分（diff）チェックツール。文字・単語・行の単位で比較でき、変更箇所の抽出、修正前後の文字数・読了時間の増減比較、無視オプション（空白・大文字小文字・全角半角）、一致度の表示、左右2画面/インライン切り替えにも対応。記事の校正やファイル比較にも使え、すべてブラウザ内で処理されサーバーに送信されません。
JSON整形・チェックツール
JSONの整形（インデント幅を選択可）・圧縮・キーのABC順ソート・構文エラー位置の特定をすべてブラウザ内で実行。データはサーバーに送信されません。
Mermaid ライブエディタ・図ビューア（オンライン・無料）
Mermaid記法を貼り付けるだけで、フローチャート・シーケンス図・ガントチャート・クラス図・円グラフなどをその場でリアルタイム描画。SVG・PNGでダウンロードでき、サンプルから記法も確認できます。すべてブラウザ内で処理され、図のコードはサーバーに送信されません。
ダミー画像ジェネレーター
幅・高さ・色・文字を指定するだけで、モックアップやレイアウト確認用のダミー画像（プレースホルダー画像）をその場で生成。PNG・JPEG・WebP・SVGでダウンロードでき、すべてブラウザ内で処理されます。
画像形式変換ツール（WebP・PNG・JPEG 相互変換）
PNG・JPEG・WebP・GIF・SVGなどの画像を、WebP・PNG・JPEGへその場で一括変換。変換後のファイルサイズと削減率を表示し、まとめてダウンロードできます。すべてブラウザ内で処理され、画像はサーバーに送信されません。
画像圧縮ツール（無料・一括）
PNG・JPEG・WebPなどの画像を、画質を保ったまま圧縮（軽量化）。元の形式のまま、または高圧縮なWebPへ変換でき、リサイズにも対応。圧縮前後のサイズと削減率を見ながら一括処理できます。すべてブラウザ内で処理され、画像はサーバーに送信されません。
ファビコン作成ツール（favicon.ico 生成）
画像や文字から favicon.ico と各サイズのPNG（apple-touch-icon・PWA用含む）をまとめて生成し、<head>に貼るHTMLも出力。すべてブラウザ内で処理され、画像はサーバーに送信されません。
データ分析・統計
オッズ比→確率変換シミュレーター（ロジスティック回帰）
ベース確率とオッズ比を入れるだけで、ロジスティック回帰の係数から実際の確率と確率の倍率をその場で計算。オッズ比を確率の倍率と勘違いしやすい誤解を、具体的な数値で確かめられる無料ツールです。
バスケット分析計算機（support・confidence・lift）
全取引数とアイテムA・Bの件数を入れるだけで、アソシエーション分析（バスケット分析）のsupport・confidence・liftをその場で計算。lift値から偶然以上に一緒に売れているかを判定できる無料ツールです。
協調フィルタリング シミュレーター（レコメンドの仕組み体験）
ユーザー×商品の評価表を編集するだけで、協調フィルタリング（アイテムベース）のレコメンドスコアをその場で計算。コサイン類似度から『あなたへのおすすめ』がどう決まるかを体験できる無料ツールです。
基本統計量の計算ツール
ExcelやCSVの数値データを貼り付けるだけで、平均・中央値・標準偏差・四分位数・外れ値をまとめて計算し、ヒストグラムも自動作成。すべてブラウザ内で処理され、データはサーバーに送信されません。
類似度・距離の計算ツール（コサイン類似度・ジャッカード係数）
2つの数値ベクトルやタグ・単語を入力するだけで、コサイン類似度・ユークリッド距離・マンハッタン距離・ジャッカード係数を、似ている度合いの判定と図解つきでその場で計算。RAG・検索・クラスタリング・重複検知での指標選びに使えます。すべてブラウザ内で処理され、データはサーバーに送信されません。
単回帰分析ツール
広告費と売上のような2列の数値データを貼り付けるだけで、散布図・回帰直線・回帰式・相関係数・決定係数を自動計算。回帰式を使った予測値の計算もできる無料の簡易回帰分析ツールです。
相関係数の計算ツール（ピアソン・スピアマン・相関行列）
2列以上の数値データを貼り付けるだけで、ピアソン相関係数とスピアマン順位相関係数を同時に計算し、散布図も自動作成。3列以上なら全組み合わせの相関行列をヒートマップで表示します。すべてブラウザ内で処理され、データはサーバーに送信されません。
簡易未来予測ツール（トレンド予測）
月次売上や日別アクセス数などの時系列データを貼り付けるだけで、トレンドから先の期間を予測しグラフと95%予測区間つきで表示。ExcelやCSVのコピーをそのまま使える無料の予測ツールです。
サンキーダイアグラム作成ツール（無料・日本語）
「元 [数値] 先」と書くだけで、量の流れを帯の太さで表すサンキーダイアグラムをその場で描画。家計の収支・損益計算書（PL）・サイト流入・エネルギーフローの可視化に。色変更・背景透過に対応し、SVG・PNGでダウンロードできます。すべてブラウザ内で処理され、データはサーバーに送信されません。
グラフ作成ツール（無料・日本語）｜棒・折れ線・円・帯・ヒストグラム・散布図
数値を貼り付けるだけで、棒グラフ・折れ線グラフ・円グラフ・帯グラフ・ヒストグラム・散布図をその場で描画。Excel・スプレッドシートのコピー（タブ区切り）もそのまま使えます。色変更・背景透過に対応し、SVG・PNGでダウンロードできます。すべてブラウザ内で処理され、データはサーバーに送信されません。