(source journal du net  http://www.journaldunet.com/  )
 

 
Un tout nouveau classement basé sur les performances en 1024 Kbit/s et l'incorportation attendue de Free dans le panel des FAI testés :  le nouveau "benchmarking des FAI" mesuré et calculé par Witbe pour le JDN et L'Internaute Magazine vous propose de suivre mois après mois les performances haut débit des fournisseurs d'accès.
 
- Lire la méthodologie de mesure et de calcul -
 
Pour ce premier classement, valable pour le mois de mars, Free décroche, avec 97 points, une nette première place qu'il n'est pas près de quitter pour des raisons qui tiennent à l'originalité de son offre qui compte deux particularités : le débit et la connexion véritablement permanente (adresse IP fixe). Ces deux particularités concernent l'offre du FAI exclusivement en zone dite "dégroupée", sur laquelle Free opère directement au plus près des abonnés. Un abonné Free en zone non dégroupée n'enregisrera pas des performances aussi spectaculaires.
Tiscali et Easyconnect viennent ensuite avec des indices très satisfaisants (supérieurs à 90) grâce à des résultats corrects sur les usages et surtout sur la connexion. Enfin, Nerim, Wanadoo et 9 Online ferment la marche, pénalisés par des problèmes de connexion.
 
Comment expliquer la performance de Free ? En zone dégroupée (comme l'endroit d'où Witbe réalise ses tests) le débit annoncé par le FAI n'est pas de 1 024K mais de 2 048 K. Dans les faits, avec la Free Box, ce débit peut monter jusqu'à 5 Mbit/s ! Ceci induit donc naturellement un avantage significatif pour Free notamment dans les tests de téléchargement pour lesquels il assure (en bonne logique) 100 % du débit théorique annoncé de 1024 K ! "Cette asymétrie des tests peut être critiquable car, dans l'absolu, nous ne comparons pas des prestations comparables. Toutefois, dans la mesure où l'offre Free Box est d'un tarif équivalent aux offres 1024K des autres FAI, il nous apparaît logique d'intégrer cet avantage de Free qui va dans le sens d'une plus grande satisfaction des clients", explique Eric Le Tréhour, responsable des études de Witbe.
 
Pas mal pour une entré !

lol je rentre pas dans les statistiques, j'ai souvent des déco sous free...

ben si, tu es le "1" a echec de connexion !

http://www.journaldunet.com/witbe/ [...] dsl.shtml)
 
=> Page non dispo.
 
"Cette asymétrie des tests peut être critiquable car, dans l'absolu, nous ne comparons pas des prestations comparables.
Toutefois, dans la mesure où l'offre Free Box est d'un tarif équivalent aux offres 1024K des autres FAI, il nous apparaît logique d'intégrer cet avantage de Free qui va dans le sens d'une plus grande satisfaction des clients"
 
Euh, ya 1 probleme la, car la comparaison devrait, AMHA,  
se faire a prestations techniques equivalentes et non sur  
1 autre critere tq le prix. Apres tout, tout le monde, et
loin de la, n'est pas encore degroupé. Pour etre plus
juste, la comparaison devrait comporter 1 critere de  
repartition geographique...
 

le lien  http://www.linternaute.com/interne [...] itbe/adsl/

Free ça déchire tout

Pour info voici le protocole de test :
 
Comparatif des fournisseurs d'accès : méthodologie Le banc d'essai mensuel des fournisseurs d'accès Internet est réalisé par Witbe pour Le Journal du Net et L'Internaute Magazine. Voici les détails de la méthode et des techniques utilisées pour arriver aux résultats publiés.   (03/04/2004)     Qui est Witbe ?
Witbe (www.witbe.net) édite pour les entreprises les solutions logicielles complètes qui permettent de gérer la performance des systèmes d'information.
Les outils Witbe mesurent de bout en bout la qualité délivrée à l'utilisateur, alertent et diagnostiquent en cas de dysfonctionnement, fournissent des indicateurs adaptés aux directions informatiques et aux maîtrises d'ouvrage pour les aider dans leurs prises de décisions stratégiques.
Plus de 300 grandes entreprises utilisent quotidiennement les technologies Witbe pour contrôler et optimiser la qualité de leur système d'information dans le monde entier.
 
Objectif de l'étude
   
 
L'objectif du banc d'essai des FAI Witbe-Le Journal du Net-L'Internaute Magazine est de fournir aux internautes des indicateurs objectifs sur la qualité des services d'accès des principaux fournisseurs d'accès Internet du marchéfrançais.
La qualité d'un FAI est évaluée suivant deux axes :
· La qualité de la connexion : disponibilité de la connexion et temps d'établissement de la connexion,
· La qualité des usages les plus courants au travers de cette connexion : websurfing, téléchargement de fichiers, et prochainement messagerie.
 
Les FAI sont classés en fonction d'un indice de performance globale (sur 100) synthétisant la qualité de la connexion et des usages constatés par Witbe. La qualité mesurée ne vaut naturellement que pour la période de temps concerné et ne présage en aucune façon de la qualité permanente des fournisseurs d'accès testés.
La technologie Witbe, sa méthodologie de test (cibles, fréquences etc) et les grilles de scoring utilisées pour le classement sont reconnus et validés par les principaux fournisseurs d?accès.
 
Panels et offres testées
Le banc d'essai porte sur deux catégories d'accès :
les accès par modem RTC (V92, 56k)
les accès ADSL à 1024K.
 
Dans le cadre du banc d'essai modem, Witbe teste les forfaits des FAI en utilisant un modem V92 générique.
 
Pour les tests ADSL 1024K, Witbe teste les Pack Modem des FAI. Dans le cas de Free, Witbe teste la FreeBox sans utilisation de la fonction télévision.
Les différents FAI testés ont été sélectionnés en fonction de leur importance sur le marché mais aussi de la faisabilité technique des mesures. Aussi dans le cas spécifique d'AOL et de son environnement propriétaire, Witbe travaille en collaboration avec les équipes techniques du FAI afin d'adapter sa technologie de test. AOL rejoindra donc prochainement nos bancs d'essai modem et ADSL 1024K, une fois la technologie de test validée.
 
Périmètre géographique des tests
Les tests sont réalisés depuis un point de mesure unique situé à Courbevoie (92). Les Robots Witbe sont installés dans un data center « carrier class ». Courbevoie est en zone dégroupable pour tous les FAIs.
 
Procédure générale des tests
Les tests sont conduits de manière automatique, 24 heures sur 24 et 7 jours sur 7, par les robots Witbe (sous Windows XP).
 
Toutes les 15 minutes en ADSL et toutes les 30 minutes en RTC, les robots se connectent aux FAIs au moyen du service d?accès réseau à distance de Windows :
- Ils analysent le processus de mise en communication (PPP/PPoE) et détectent les éventuels échecs de connexion ; Une connexion est réputée disponible si nous avons pu nous connecter et que nous disposons d?un accès opérationnel à l?internet, c'est-à-dire si nous pouvons sortir du réseau du FAI.
- Ils reproduisent les usages prévus pour le test et en mesurent les performances : téléchargement d'un fichier type, chargement de pages web etc.
A la fin de chaque session de test, le robot se déconnecte ... sauf dans le cas de Free DSL (FreeBox) où l?accès est véritablement permanent (adresse IP fixe).
 
Panel de sites web et Serveur Référent AFNIC pour le téléchargement
 
Les tests de websurfing consistent dans le chargement successif des homepages d'un panel de sites web de renom au travers d'Internet Explorer 6. Avant chaque visite sur les sites, le cache du navigateur et les cookies sont vidés. L?utilisateur Witbe profite uniquement des éventuels systèmes de cache transparents du FAI.
- en RTC, 5 homepages : tf1.fr, google.fr, sncf.com,download.com et microsoft.com/france.
- en ADSL, 10 homepages : les 5 chargées en RTC auxquelles s'ajoutent lemonde.fr, real.com, fnac.com, boursorama.com, yahoo.fr
 
Test de téléchargement sur le "périmètre de responsabilité des FAI + 1 saut" grâce à l'AFNIC. En matière de bande passante (débit) ou temps de réponse, la responsabilité du FAI porte sur le périmètre qu?il peut maîtriser à savoir son infrastructure nationale et ce jusqu?à l?internet global (pouvant être matérialisé par un n?ud d?échange par exemple).
Pour ce banc d'essai, nous souhaitions mesurer le débit délivré sur un périmètre national incluant la sortie Internet. Aussi, dans le cadre d?un accord de partenariat, Witbe a installé un serveur de référence sur un réseau également accessible de tous les FAIs : le réseau de l?Association Française de Nommage Internet en Coopération (AFNIC, www.afnic.fr) qui est présent sur les principaux n?uds d?échange français.
 
Ainsi nous mesurons les performances délivrées sur le périmètre de responsabilité des FAI + 1 saut.
Dans le cadre des tests de téléchargement RTC, le poids du fichier est de 300 Ko. Dans le cadre des tests ADSL, il est de 3,5 Mo.
 
Composition de l'indice de performance globale
Le classement des FAI se base sur l'indice de performance globale P de chaque FAI. L'indice maximum est de 100.
P = C + U où :
C = indice de qualité de la connexion (sur 50)
U = indice de qualité des usages (sur 50)
Plus P est élevé, meilleur est, d'un point de vue technique et dans les conditions de nos tests, le service proposé par le FAI.
 
Les principes d'évaluation et de notation des FAI présentés ci-après sont le fruit d'un travail collaboratif entre Witbe, Le Journal du Net et les FAI.
 
La méthode de scoring utilisée est relative. Pour la plupart des critères les résultats d'un FAI sont évalués en comparaison avec les résultats du meilleur et les résultats moyens du panel. Dans le cadre de l'évaluation de la performance en matière de téléchargement, nous ajoutons une 3ème composante essentielle : le taux d'atteinte des débits théoriques.
Cette approche permet ainsi d'évaluer la qualité de chaque FAI en prenant en compte à la fois l'objectif ultime d'être le meilleur et l'état de l'art du marché en matière de performance.
 
Composition de l'indice de performance (P) sur 100 :
 
Critère

 
Principes de calcul des scores des FAI sur chacun des critères
 
Indice "Disponibilité" ( /47,5 ou /50)
Le calcul de cet indice est indépendant des résultats des autres FAIs. Il s'obtient par la formule suivante :
- en RTC  = 0,475 * (taux de réussite);
- en ADSL = 0,5 * (taux de réussite).
Important : Si le taux de réussite est inférieur au seuil fatidique de 98,5%, des malus forfaitaires sont appliqués sur cet indice :
- 4 points si le taux est compris entre 95% et 98,5%;
- 8 points si le taux est compris entre 90% et 95%;
- 12 points si le taux est inférieur à 90%.
 
Indice "Temps d'établissement de la connexion" (/2,5 en RTC)
Ce critère n'est pris en compte que dans la catégorie modem. Il dépend de l'écart du FAI par rapport au meilleur du panel (pour 80%) et par rapport à la moyenne (20%).
- Ecart au meilleur : le meilleur obtient le maximum de points soit : [80%*2,5]. Les points obtenus par les autres dépendent de leur écart relatif au meilleur.
- Respect de l?état de l?art : un FAI se connectant en un temps égal à la moyenne du panel obtiendra la moitié des points associés au critère soit : [(20%*2,5)/2]. Les points obtenus dépendent de l?écart relatif à la moyenne.
 
Indice Web (/25)
Il dépend de l'écart du FAI par rapport au meilleur du panel (pour 80%) et par rapport à la moyenne (20%).
- Ecart au meilleur : le meilleur obtient le maximum de points soit : [80%*25]. Les points obtenus par les autres dépendent de leur écart relatif au meilleur.
- Respect de l?état de l?art : un FAI affichant un temps de chargement égal à la moyenne du panel obtiendra la moitié des points associés au critère soit : [(20%*25)/2]. Les points obtenus dépendent de l?écart relatif à la moyenne.
 
Indice Téléchargement (/25)
En matière de débit, nous considérons que le critère essentiel est l'atteinte du débit théorique de la ligne, "le respect de la promesse marketing". Cette composante compte ainsi pour 75% de l'indice Téléchargement. Les comparaisons aux résultats du meilleur et à l'état de l'art comptent chacune pour 12,5% de cet indice.
- Atteinte du débit théorique : Le nombre de points obtenus dépend du taux d'atteinte du débit théorique. Un FAI offrant 100% du débit théorique obtient le maximum de points soit : [75%*25].
- Respect de l?état de l?art : un FAI offrant un débit égal à la moyenne du panel obtiendra la moitié des points associés au critère soit : [(12,5%*25)/2]. Les points obtenus dépendent de l?écart relatif à la moyenne.
- Ecart au meilleur : le meilleur obtient le maximum de points soit : [12,5%*25]. Les points obtenus par les autres dépendent de leur écart relatif au meilleur.
 
Remarques :
- Dans le cadre des tests modem, la vitesse maximale théorique prise en compte est la vitesse d'accroche modem maximale constatée sur le panel pour la période (56k, généralement entre 48 et 50k).
- Dans le cadre des tests ADSL, la vitesse maximale retenue est 1024K y compris pour Free dont le débit réel est supérieur à 1024K. Ce FAI obtient  ainsi toujours (sauf accident majeur) 100%des points associés au respect du débit théorique.
 
Les indicateurs délivrés
Le nombre d?échecs de connexion correspond au nombre de fois où il a été impossible de se connecter au FAI. Une connexion est réputée réussie si la connexion technique est effective (réception de l'adresse IP) et que nous avons de la bande passante internet. Dans le cas de Free DSL, dans la mesure où nous avons une adresse IP fixe, nous testons simplement le fait que nous avons de la bande passante internet.
 
Le taux de réussite des connexions  correspond au rapport entre le nombre de tentatives ayant abouti sur le nombre total de tentatives (4 par heure en ADSL et 2 par heure en RTC, 24h/24 et 7j/7).
 
Le temps de déroulement de la navigation de référence correspond au temps nécessaire au chargement consécutif de toutes les pages constituant le scénario de test.
 
Le temps d'établissement de la connexion correspond au temps nécessaire pour pouvoir disposer d'une connexion "utile". Au delà des habituelles notions techniques qui arrêtent la mesure de temps à la réception de l'adresse IP, nous avons opté pour une optique "utilisateur" en nous basant sur les messages renvoyés par Windows et indiquant que nous sommes effectivement connectés.
 
Enfin, le débit (Kb/s) correspond à la vitesse de transfert en download du fichier chargé depuis le serveur référent hébergé par l'AFNIC.

-1.
 
Perso depuis le passage en 1024K chez Free, j'ai beaucoup trop de problemes a mon gout, bien que ca semble s'arranger depuis quelques jours.
 
Mais bon, je sais pas trop pourquoi, mais impossible d'avoir une connection ADSL le lundi depuis deux semaines.
 
Les autres jours ca marche, enfin, en theorie, je testerai ce soir...

Metterais-tu en doute la veracité de ce test ?
 
enfin...il suffit que je mette ce sondage pour avoir un coup de telephone de mon bof qui a perdu sa connexion parceque la maj du firm de sa freebox V3 a plantée...
Le pire c'est que c'est vrai  !'j'ai fais un autre post)...
 Ils ont du faire leur test pendant une durée où il n'y avait de maj des firm ...  
(D'ailleur je comprend pas cette manie qu'a Free a vouloir faire des maj des firm a tt bout de champs !  
Chez nousse il devait y en avoir une au plus une fois l'an. )
 
Je veux pas critiquer, mais il ne doit pas être le seul dans ce cas là ...
Comme quoi, il faut toujours prendre les resultats de ces "test" avec des pincettes !

 
Merci a king_ping pour le protocole de test, qui est pas mal du tout
hormis le critere geographique. Il n'y a qu'un seul point de
connexion, situé a la Defense, ce qui fausse les resultats.
 
 

certe...

1 seul echec de connexion??
 
Je devrais p'tete leur envoyer les log de mon modem-routeur...

je doute de la fiabilité du test
mais bon s'il a été fait à la Défense je peux comprendre
puis ils ne testent pas des connexions de même niveau non plus  
 
dur dur de comparer le lièvre et la tortue

iznogoud_23 : ils testent avec la freebox ...

Depuis Novembre 2003 chez Free Adsl en 512 et depuis 2 mois en 1024 pas de PB , je dis bravo à FREE qui porte bien son nom .
Depuis ma campagne (53) je surf à la vitesse de l'éclair et en suis ben aise , pourvu qu'ça dure !
PS : He M. Free , la Freebox chez nous c'est quand ????
 
L'essentiel et quand même de communiquer

2 ans que je suis chre Free, toujours pas degroupé (mais depuis peu je suis passé a 1024). Certes, il y a eu des soucis au tout debut. Mais depuis au moins 1 an et demi, c'est un vrai bonheur. Merci Free.

 
Ben en même temps, c'est la connexion effective dont dispose plus de 40% des freenautes, alors pourquoi l'ignorer ?

oui et surtout que la politique normal serait que les autre FAI suivent free et non pas que free regresse vers les autres FAI .. sans free wanadoo serait tjs a 45? / mois ..

Bizarre dans le tableau il parle pas de la hotline
Car chez free il investisse dans des repondeur

 
   
 
tiens mais qui voila !

up niki