本月早些时候,我们发布了一批新的结果VPN速度测试包含了一个令人惊讶的结果:一个VPN出现在纸上,实际上改善网络的性能。和大多数事情一样,这个奇迹般的结果可能好得令人难以置信,但它给了我们一个机会,解释我们在COVID-19时代是如何进行VPN测试的,以及这对未来意味着什么。
我们旧的测试方法
当站在距离另一个人不到6英尺的地方还被认为是一个好主意时,PCMag对vpn的测试非常不同。在这一点上,VPN测试是一场马拉松式的背靠背会话,以结果立即发布而结束。你可以在我们的如何测试vpn文章——至少直到我们本月晚些时候更新它。
这种测试方法来自于控制尽可能多的变量的愿望,这是所有PCMag分析的支柱。对于VPN测试,我们使用相同的机器、相同的网络和相同的工具来评估性能。
消除所有关于速度测试vpn的变量一直是一个持续的斗争。我们长期以来都在处理停机、信号丢失和不得不莫名其妙地重启路由器的问题。我们确实将网络与其他设备隔离,但它总是受到来自PCMag实验室中随时活跃的数百台设备的大量干扰。
当然,总有我们无法解决的大问题。纽约市整个人口的使用差异意味着我们将在一天的不同时间看到基线吞吐量的微小但明显的变化。我们还知道,即使是同一个国家的不同地区,也可能有更多或更少的VPN服务器,这取决于需求。这只是我们说你们的结果可能与我们不同的几个原因。
大量测试VPN速度是造成这一切的部分原因。通过将所有测试分组在一起,数据将来自相同的时间框架。它是一个特定时间和地点的快照,让我们可以比较单个产品。总的来说,测试通常需要10天左右的时间,分成两周的工作时间。分析和抽查会增加一周的时间,之后我们会发布更新的VPN最快篇文章。
根据时代调整测试
2020年3月中旬,PCMag全体员工开始工作在家工作全职工作。这意味着不再有千兆PCMag实验室测试网络。我自己的互联网太不可靠了(尤其是在最初的WFH危机下),而且由于我们当地ISP的垄断,没有更好的替代方案。
很明显,我们需要PCMag实验室来保持我们的高标准,但即使在我们被允许回到办公室后,这也是一个个案的基础,需要与许多人协调。错过进入实验室的时间意味着要等好几天才能再打一针。这还不包括早年乘坐地铁需要戴两个口罩和橡胶手套两个小时,担心沿途感染。
我们的解决方案是放弃一次性测试模型。我们没有在几周内评估大约40个产品的结果,而是分批测试产品,并在全年更新结果。大多数过程都是一样的:同样的机器,同样的数学,同样的工具。
我们还做了另外两个更改。首先,我们决定,如果供应商能够证明需要进行另一轮速度测试,我们将在可行的情况下尽快进行。虽然我们一直对重新测试VPN速度持开放态度,但我们承诺降低重新测试的门槛。其次,我们会在任何可能的地方一次性呈现所有结果。为此,我们从静态图表转向交互式Infogram图表。你可以滚动甚至搜索任何产品,在这个图表出现的地方。事实上,你可以在这里看到:
一个令人惊讶的结果
到目前为止,我们对结果都很满意。我们的数据更新鲜,更容易更新,希望对您更有用,温柔的读者。
这种新的时效性也意味着我们也可以在工作发生时对其进行评论。最新一批测试的一个不同寻常的结果来自于协会VPN.通常,当您使用VPN时,您应该预料到延迟会增加。仔细想想,这个期望是有道理的。你的网络流量必须到达另一台机器——VPN服务器,然后才能通过互联网回到正常的路径上。当VPN打开时,数据的传输时间应该更长,从而增加延迟。HMA VPN通过提高-0.02%的延迟打破了预期。
我们使用Ookla Speedtest工具进行所有的VPN测试,所以我将我的测试结果展示给Ookla软件工程副总裁Marc von Holzen,以获得他的想法。Holzen同意HMA VPN的结果并不是非常重要。“潜伏期往往有很大的变化,”他说。“这使得在没有大样本量的情况下,很难确定两个延迟结果之间的小差异是否显著。”
(编者注:Ookla隶属于PCMag的母公司Ziff Davis。)
我们的结果中的最后一个数字是两个中值结果之间的百分比变化,以便更清楚地比较服务之间的差异。我们在使用VPN时运行10个测试,在不使用VPN时运行10个测试,百分比的变化是从两组测试的中位数计算的。如果你看看实际的结果,奇迹就消失了。当我们测试HMA VPN时,连接的中值基线延迟为4.66毫秒,而使用VPN时的中值基线延迟为4.64毫秒。
HMA VPN可能不会提高你的网速,但似乎很明显,它在不显著降低网速方面做得很好。这是值得肯定的,如果延迟是你的主要关注点,这可能是一个最佳选择——例如,你正在玩快速抽动电脑游戏.这将反映在其审查中,我们将在本月晚些时候更新。
速度不是万能的
正如我多年来在每一个VPN评论中所写的那样:速度不应该是你唯一关心的问题。很难进行可靠的测量,而且根据测量时间和地点的不同会有很大的不同。把我们的速度测试结果放在脑后,但仔细看看VPN服务的成本、功能和隐私保护。世界上最快的VPN如果太贵,不值得信赖,或者使用起来很痛苦,那它就是无用的。