1月のネットワーク状況について
mineoの技術系業務担当。
お久しぶりです。マイネ王 運営事務局の気まぐれトラベラーです。今回より通信品質評価基準を従来の「スピードテストアプリによるスピード測定」から、「Webページ表示完了時間」に変更しました。新しい評価基準で1月のトラフィック状況をご報告します。
Webページ表示完了時間による通信品質評価について
今回より通信品質評価基準を変更します。これまでは、スピードテストアプリによる測定結果を用いてトラフィック状況をお伝えしておりました。しかし、スピードテストアプリはアプリによって測定手法が異なるため、アプリによって測定結果に乖離がある(あるアプリでの測定結果が1Mbpsであっても、他のアプリでは違う値となる)ことがございました。また、「通信速度」という客観的に分かりづらい(アプリでの測定結果が1Mbpsであれば、それが正しいと信じてしまう)指標で評価していたことも問題だと考えております。今後は、より分かりやすい「時間」という指標で実際の使用環境に近い「Webページ表示完了時間」を測定し評価しようと思います。
Webページの表示には上図のようなステップがありますが、今回から測定するのは④の完全に表示が完了するまでの時間となります。Webブラウザが④までの時間を保持しており、この時間を抽出して評価します。なお、④になっていない状態でもスマホの画面で見えている部分は表示が完了していて、見た目上は数値ほどの不都合を感じない場合もあると考えられます。
1月のWebページ表示完了時間測定結果について
【測定対象】 Yahoo!のトップページ(https://m.yahoo.co.jp)
【測定時間】 (お昼休み)12:15~12:45
(夕方) 18:15~18:45
※各時間で3回測定し平均値を採用。
【測定場所】 ケイ・オプティコム本社 付近 (大阪市中央区)
【測定端末】 arrows M02 (mineo端末) ※ブラウザはChromeを使用
【運用目標】 10秒以内に表示完了
※運用目標は暫定です。適宜見直しを行います。
※今回は測定に用いた回線に「通信の最適化」が適用されています。
1月のトラフィック状況について
運用目標は暫定で10秒としました。10秒という指標はMM総研様のネットワーク品質調査結果を参考にしました。運用目標については、今後の測定結果を踏まえながら見直しをしていきたいと思います。
お昼休みの結果では、Aプラン、Dプランともに20秒程度かかってしまうことが多く、月の後半から15秒を下回るようになりました。月の前半は混雑が大きく、後半になるにつれて混雑が解消されることが表れていると思います。逆にSプランでは、前半は10秒を切れていたのが、後半は15秒近くかかっています。こちらは、加入者の増加が追いついてきた影響が出ているものと思われます。
夕方の結果では、1/10にAプラン、Dプランで10秒を超えてしまいましたが、それ以外の日は10秒以下となりました。12月の大幅増強の効果が出ており、夕方は快適な状態が続いていると考えています。今後もこの水準をキープできるように調整していきたいと思います。なお、Sプランはすべての日で10秒を切ることができました。
最後に
今回から通信品質評価基準を変更しました。基準の変更や運用目標については賛否あると思いますが、試行錯誤をしながら進めていきたいと思います。ご意見、コメントをよろしくお願いします。
これからもmineoをよろしくお願いします。
大変かと思いますが、1秒でも早く表示出来るよう(笑)増強お願いします!
前回は通信の最適化を非適用にされていたみたいですが、今回は適用したりと条件にばらつきがあるのが気になります。
今後の大幅増強期待してます!
目標値を緩和した前例に倣わないように願っています。
いろいろ試行錯誤お疲れ様です。
ちなみに、ネットワークがすいているときは、どのくらいの時間で表示できるのでしょうか?
参考まで、よろしくお願いします。
ただ、20秒かかってしまうと、タイムアウトしてしまうことがあるので、ぜひ10秒まで持ってきてほしいです。
そしてちょっと興味深かったのがグラフの推移で、プランや時間によって、だんだん右肩下がりになって(速くなって)急に跳ね上がる(遅くなる)タイプと、だんだん右肩上がりになって(遅くなって)急に落ちる(速くなる)タイプがあるんですね。もしかしたらここにユーザー層の特徴が現れているのかもと思いました。
これは今日(2019/02/19)の昼休みにコンビニ弁当を食いながら計測した実測です。
左からDプラン、Aプラン、Sプランです。DとAは大体1Mを下回るのですが今日は超えました。測定したロケーションが郊外で海に近いからだと思います。
Sもサービス開始当初から比べるとかなり混雑してきました。でもブラウジングはまだサクサクしてます。
一緒に弁当をつついていた同僚のLINEモバイル(ドコモプラン)と比べると1/3以下の速度でめげました。
測定場所:大阪府泉佐野市りんくう公園
ただ、Yahoo!のトップページだけでなく、例えばmineoのホームページや気象庁のホームページなど2、3箇所で計測して頂けるとよりよくなると思います。
特にマジョリティをターゲットにするならmineoのトップページに記載してみてはどうですか? もちろんグラフではなく平日お昼はWEB表示は平均○○秒と。マジョリティならキズモノ効果で安心感を得られるのではないでしょうか。
測定値については、ブラウザのプログレスバーはあてにならないので、きちんとパケットキャプチャで測った方がいいかと思います。
また、ヤフーのトップページは日によってサイズが違う為、通信量も公表した方がいいですね。
ありがとうございます。
引き続き、よろしくお願いします。
次の増強がどんな感じに現れるか、今から楽しみです。
漫画アプリとかで、何回もタイムアウトになって何回もリロードしても結局表示されずデータ量だけは消費しているというパターン。
通信の最適化で通信量が減ってるせいで、アプリが規定のデータ量を受信できずに通信が終了するからエラーになってるのかもしれませんが。
これからも、頑張って下さい
マイネ王アプリトップページの表示時間がユーザーさんに分かりやすい気もしますが…
多少の改善は必要だと思いますが、今回の測定方法は理解しやすくなりましたよ(* 'ᵕ' )
ただこれまでの比較が難しくなるので、従来の方法も一定期間併用する方がよりわかりやすいと思います。(テストする方は大変ですが(⌒-⌒; ))
色々と工夫されていて、有り難うございます。
これからもFanに向き合ったご対応をお願い致します。
以下は、要望と言うか、思い付きですが、参考になれば。
・毎月の「ユーザが感じる性能」の評価指標としては、秒数で良いと思う
・継続的な「poiのパフォーマンス成績」の傾向追跡用として、例えば
ページデータ量(MB)/表示秒数(s)とかの数字を履歴として残すのは如何
Dプランに切り替えて4ヶ月ですが違和感全く無いです。ご苦労絶えないと思いますが、より一層の改善を焦らずお願いします。応援してます。
これはシンプルで分かりやすいですね。(^^
全体的に見てAプランはPOIの帯域がやや足りない様な印象を受けましたが、
全体的には1月後半は改善してきている様に感じました。
mineoの土台となる業務として大変かとは思いますが、これからも
よろしくお願いします。(^^
コメントありがとうございます。
「分かりやすくなった」と満足いただいている意見が多くてよかったです。
運用し始めたばかりで実績が少ないため、懸念点が多数出てくると思いますが、がんばって対処していきたいと思います。
複数のサイトで測定することは有用だと考えますが、かなりの手間になることとデータが複雑になるので、今回はシンプルに1つのサイトとしました。
これからもmineoをよろしくお願いします。
A ,D, Sの各プランについて
運用目標時間(10秒)に対する各月と当月毎日の実測時間の・・・
最高時間、平均時間、最低時間を表にして開示して貰えたらです。
過去からの毎月のデーターはmineoさんの運用努力の結果を表し、
当月毎日のデーターはアクセスの輻輳をmineoユーザーが避ける指標
となり、システムの効率的な運用に資するメリットがあると思います。
また、代表測定ポイントに、アクセス時間数が遅い地点の追加が可能
ならトライして下さい。(出来ることなら支援をします)
推察ですが大家である3キャリアの企業戦略に翻弄されるのでは?
負けないように、2~3年縛りに胡坐をかく大家からユーザーを取り
込む努力を含め・・・
今後のmineoさんのトラフィック維持改善に対応する積極的な運用に
期待します。
Kevin58 拝
最初からこれでよかったのになぁって思うくらい。
“そりゃ20秒かかれば文句も出るな”とある意味で納得。
業務に使用している人は地獄かも。
私は昼使用派じゃないし、現実を始めて知りました。
(天井さんが指摘するようにキャッシュ削除も必須ですね)