測定方法
通信速度の数字ができるまで。
このサイトにあるすべての速度、ティア、サンプル数の背後にある方法のすべてを、私たち自身の数字が悪く見える部分も含めて説明します。
この記事の担当者
Mara Ellison, 計測責任者
方法ページで説明しているパッシブ計測の仕組みをつくり、公開前にすべてのカバレッジ行を確認しています。
担当範囲
- カバレッジの計測方法
- 国ごとの速度とサンプル数
- 公開しているカバレッジデータ
確認者 Jonah Reyes
受動測定であり、スピードテストではありません
合成的なスピードテストは接続を開き、そこにデータを流し込んでピーク値を記録します。誰かが見ている数秒間にネットワークが出せる最高の性能を測るもので、しかもあなたのデータ通信量を使います。私たちはこれを行いません。
代わりに、すでに起きたことを記録します。あなたのスマートフォンが地図タイルを読み込んだり、ページを開いたり、通話をしたりするとき、OSはすでに何バイトがどれだけの時間で移動したかを把握しています。私たちが取得するのはそれだけです。バイト数、所要時間、接続していたネットワーク、使用した無線方式、そして大まかな位置情報。パケットの中身も、アドレスも、ページ名も取得しません。
この結果ははっきり言っておく価値があります。私たちの数値はスピードテストより低く出ます。同じネットワーク、同じ通りでのスピードテストはもっと大きな数値を出しますが、それは測っているものが違うからです。私たちが公開するのは、あなたが普段どおりスマートフォンを使っているときに実際に得られたスループットであり、それこそがビデオ通話が持つかどうかを左右する数値です。
位置情報は保存前にぼかされます
セッションの位置は、スマートフォン上で一辺およそ1 kmのグリッドに丸められてから、はじめてどこかに書き込まれます。正確な座標は端末上で破棄され、外に出ることはないので、漏えいしたり、開示要求されたり、売られたりするような細かい足跡は存在しません。
だからこそ私たちは国と都市までを公開し、通りは公開しません。東京中心部の1 kmのセルには数万人がいるので、ネットワークについて何かを言うには十分でありながら、あなた個人については何も言えません。
その上に集計があります。1行のデータが成立するには25台の異なる端末が必要なので、ある旅行者の1週間がそのまま小さな町についての公開数値になることはありません。
測定値を捨てるルール
この方法の大部分は削除で成り立っています。何が生き残るかを決めるルールは4つあり、それぞれデータを残すと公開される数値が誤ったものになるために存在します。
これらのルールはすべて、私たちの主要な数値を下げる方向に働きます。それがフィルターが誠実かどうかの試金石です。自分の数値を上げる方向にしか働かないフィルターは、フィルターではなく選別です。
- 移動量が2 MB未満のセッションは除外します。それほど小さい転送は無線が立ち上がる前に終わってしまうため、ネットワークではなく立ち上がりを測ることになります。
- スマートフォンがネットワークに接続してから最初の60秒は除外します。接続、認証、最初のベアラ設定は設計上遅く、あなたの午後を代表するものではありません。
- 25台未満の異なる端末から作られた行は公開しません。セッション数ではなく端末数で判断するので、一人のヘビーユーザーが一つの国になってしまうことはありません。
- スマートフォンでノートパソコンをテザリングしているセッションは残します。旅行者は実際にそうするからです。ただしタグ付けして、それが市場の数値を押し上げているか押し下げているかを確認できるようにしています。
各フィルターと、それぞれが使うしきい値
| ルール | しきい値 | 存在理由 |
|---|---|---|
| 最小セッションサイズ | 2 MB | これより小さい転送は無線が立ち上がる前に終わる |
| ウォームアップ期間 | 接続後60秒 | 接続と認証は設計上遅い |
| 最小の異なる端末数 | 25 | 一人のヘビーユーザーが一つの国になってはならない |
| 位置情報の精度 | 約1 km | ネットワークを語るには十分だが、個人を語るには粗すぎる |
| 公開期間 | 90日間 | 安定するには十分長く、正しさを保つには十分短い |
毎月再計算しています。しきい値を満たさなくなった行は、凍結ではなく取り下げられます。
中央値より下位10パーセンタイルが重要な理由
中央値はあなたの1日の真ん中です。セッションの半分はそれより速く、半分はそれより遅かったということです。公平な要約ではありますが、あなたが体感する数値ではありません。
あなたが体感するのは、うまくいかなかった10分間です。タクシーの中で途切れた通話、搭乗口で読み込めなかった搭乗券、交差点で止まった地図。これらは分布の下位10パーセントに存在し、中央値ではまったく見えません。二つの国が同じ中央値でも、まったく違う体感になることがあります。一方には長く遅い裾野があり、もう一方にはないからです。
そのため、すべての行に両方の数値を載せています。下位10パーセンタイルは、速さよりも接続が機能することが必要なときに見るべき数値です。10回に1回のセッションはこれより遅かった、という意味です。この二つの数値が大きく離れているとき、そのネットワークは遅いのではなく不安定であり、それは別の問題であり、たいていより厄介な問題です。
これは私たちにとって最も都合の悪い数値でもあります。だからこそ公開する理由になります。
75,333
公開されている数値の元になったセッション数
145
測定のある目的地数
25
1行を公開するために必要な異なる端末数
1 km
保存前の位置情報のグリッドサイズ
公開される1行に含まれるもの
1行は、90日間にわたるある国とキャリアの組み合わせです。両方の数値、両方のサンプル数、無線方式の内訳を含みます。サンプル数のない数値は意見にすぎないからです。
公開される各行に含まれる項目
| 項目 | 意味 |
|---|---|
| 中央値 Mbps | 計測されたセッションの半分がこれより速かった |
| 下位10パーセンタイル Mbps | 10回に1回のセッションがこれより遅かった |
| 異なる端末数 | この行の元になった個別のスマートフォンの台数 |
| セッション数 | フィルターを通過した計測済み転送の数 |
| キャリア | その国で私たちが接続している上流ネットワーク |
| 期間 | この行が対象とする期間。現在は90日間 |
この方法で見えないもの
受動測定は私たちの顧客の姿をそのまま受け継ぎます。顧客がどこへ行き、いつ行き、そこで何をしたかは見えますが、それ以外の場所には何も見えません。以下の死角は構造的なものなので、通信量をいくら増やしても解消されません。
- 私たちの顧客が行かない場所。2つの都市を厚く測っていても、3つ目の都市については何もわかりません。
- 契約のないネットワーク。私たちが接続しているキャリアしか測定しないので、同じ国の別のネットワークの方が優れている可能性があっても、それはわかりません。
- ネットワークの上限。誰もそれを見つけるほど激しくダウンロードしていなければ、私たちの数値はネットワークの限界ではなく下限を示すにすぎません。
- 屋内か屋外か。あなたが地下にいたかどうかはわかりませんが、地下は数値が低く出る主な原因の一つです。
- 私たちに顧客がいなかった時期。先月始まったばかりの目的地は測定期間が短くサンプルも少なく、その両方がページに明記されています。
- 私たちの顧客が居合わせなかった混雑。キックオフの瞬間にスタジアムに私たちの旅行者が誰もいなければ、そのスタジアムはデータに含まれません。
この方法が最も弱い部分
3つの弱点があり、それぞれが1行の数値の読み方を変えます。脚注ではなくここに書くべき内容です。
1つ目は薄い市場です。私たちの145の目的地のうち5は単一の上流ネットワークで動いており、そこでの数値は国というより1つのキャリアを表しています。2つ目は端末の構成です。iOSとAndroidは計測のタイミングがわずかに異なり、その差を補正する処理は測定ではなく推定なので、片方のプラットフォームに大きく偏った市場は、サンプル数から想像される以上に誤差を含みます。3つ目は時間帯です。私たちは時間帯による調整をせずに90日間のデータを公開しているので、旅行者の多くが週末の夜に到着する国は、火曜の朝に到着する国より遅く見えることがあります。
これらはどれもサンプルを増やせば直る種類のものではありません。設計上の限界であり、限界を明記した数値の方が、明記しない数値より価値があります。
同意と、そのやめ方
測定はデフォルトでオンになっていますが、アプリのプライバシー設定からワンタップでオフにできます。オフにしても、サービス内容、料金、サポートの対応には何の変化もありません。
オプトアウトした端末は、粗い位置情報を含め何も送信しなくなり、それまでに送信されたデータも削除します。私たちはこのデータを一切販売しません。集計データは誰でも無料で利用でき、これはデータビジネスの逆であり、意図的にそうしています。このデータセットは、私たちにとって非公開の資産としてよりも、公開された議論の材料としての方が価値があるからです。
この数値の引用方法と異議の申し立て方
このページが引用先です。カバレッジページの数値を引用する場合は、そのページと閲覧した日付を明記してください。データは毎月再計算され、数値は変動します。
完全なデータセットは/api/coverageでJSON形式で公開されており、キーもレート制限もありません。機械可読な要約は/llms.txtにあります。求めるクレジット表記は、数値の出どころとなったページへのリンクのみです。それがライセンスのすべてです。
ある数値が誤っていることを示せる場合は、ぜひ教えてください。修正は、その修正が私たちにとって都合が良いかどうかにかかわらず、日付と変更内容とともに真実レポートに掲載します。それが、公開された数値に意味を持たせる唯一の方法です。