Testé mon anti aspirateur de site web [regarder dernier message] - PHP - Programmation
Marsh Posté le 08-08-2002 à 17:38:43
je te pompe tout ça sans problème dès ce soir, et avec grand plaisir
Marsh Posté le 08-08-2002 à 17:42:44
--greg-- a écrit a écrit : je te pompe tout ça sans problème dès ce soir, et avec grand plaisir |
vas y molo quand même je pay chere le dépassement du trafique
par conte n'oublie pas de me dire comment tu as fais! Merci :-)
Marsh Posté le 08-08-2002 à 17:43:11
berceker a écrit a écrit : vas y molo quand même je pay chere le dépassement du trafique par conte n'oublie pas de me dire comment tu as fais! Merci :-) |
j'ai un aspi fait maison
Marsh Posté le 08-08-2002 à 17:48:52
Zion va se faire une joie d'essayer de contourner ça
Marsh Posté le 08-08-2002 à 17:54:01
ReplyMarsh Posté le 08-08-2002 à 17:54:46
ReplyMarsh Posté le 08-08-2002 à 17:56:43
comemnt peux tu eviter ce genre de truc???
en limitant le nombre de connection en meme temps ???
ca rallonge le temps de recupération d'un site !
mais si t'empèche qq'un de voir tes pages pour les aspirer
comment fait tu la différence avec un garrs qui navigue ..
j'ai deja utilisé des aspi web et une fois bien configuré je vois pas comment tu peux les différentier de navigateurs !!
par contre si t'as pas mal d'images comme tu dis je sais que les aspirateurs web ne supportent pas les formulaires ( du moins ce que je connais !
donc pour la navigation c ce que tu peux utiliser !!
sinon explique ca m'interesse !!
Marsh Posté le 08-08-2002 à 17:57:19
wget --user-agent --referer, ça donne quoi
Marsh Posté le 08-08-2002 à 17:58:34
http://seb.akretio.be/bikini.png
Désolé, c'était trop simple
Pas besoin d'aspirateur, j'ai pas aspiré une seule page, mais toute une catégorie d'image ca oui
http://www.kapere.com
Batch Download
Marsh Posté le 08-08-2002 à 18:05:21
C'est simple, y a un paquet de solutions.
1. Tu peux limiter le nombre de connexions, mais y a moyen de le contourner en utilisant des proxys pour chaque connexion (ca va être ajouté dans Kapere ). Mais c'est chiant pour l'utilisateur, de plus si tu fais du connection Tunneling (Kapere le fait), il garde toujours la même connexion donc ca marchera pas.
2. Tu peux foutre des protections avec des cookies, mais la aussi, la plupart des apirateurs supportent les cookies et c'est chiant pour les users classiques.
3. Tu peux bloquer les navigateurs que tu connais pas, mais c'est aussi chiant pour les utilisateurs et un bon aspi te permet de modifier l'useragent
4. Tu peux chequer les referer, mais la aussi pas de bol, les aspis récupèrent les referers
5. Les formulaires, faut déjà y aller pour que ce soit pas supporté, si c'est un bête select ce sera analysé par les aspis, mais si c'est une recherche ca passera pas... mais je vois mal une recherche dans ton cas, et ca empeche tjs pas le batch download.
Y a des solutions à appliquer directement au serveur, mais de nouveaux, en passant par plusieurs proxys ca marchera pas, désolé.
A moins de faire un truc de porc dans tes scripts, de donner des noms aléatoires à tes images, et d'avoir de la chance que personne trouve une parade, y a pas de solution, tu t'emebetes et tu embetes l'utilisateur pour rien.
Fait comme d'autres sites, un accès payant aux zips avec toutes les images à downloader, les amateurs purs paieront ptre pour la bande passante comme ca
Marsh Posté le 08-08-2002 à 18:10:55
Zion a écrit a écrit : http://seb.akretio.be/bikini.png Désolé, c'était trop simple Pas besoin d'aspirateur, j'ai pas aspiré une seule page, mais toute une catégorie d'image ca oui http://www.kapere.com Batch Download |
Cool tu m'a prouvé que tu avais reussi...
peut tu m'expliqué comment tu affefctué la manoeuvre techniquement ce qu'il c'est passé? je vais expliqué a tous comment je fais de mon coté + tard
Marsh Posté le 08-08-2002 à 18:13:03
Ah ouai, plutot que de te tuer sur les protections, fait un menu en flash, y a qu'un seul aspirateur qui va encore fonctionner, c'est Kapere
Marsh Posté le 08-08-2002 à 18:14:14
berceker a écrit a écrit : Cool tu m'a prouvé que tu avais reussi... peut tu m'expliqué comment tu affefctué la manoeuvre techniquement ce qu'il c'est passé? je vais expliqué a tous comment je fais de mon coté + tard |
Bah c'est trop simple, tes images ont toutes un nom similaire, j'en ai regardé 3, la première, la deuxième et la dernière, puis j'ai demander à Kapere de générer les urls et zoupla
un gosse de 5 ans peut le faire
Marsh Posté le 08-08-2002 à 18:19:31
Zion a écrit a écrit : C'est simple, y a un paquet de solutions. 1. Tu peux limiter le nombre de connexions, mais y a moyen de le contourner en utilisant des proxys pour chaque connexion (ca va être ajouté dans Kapere ). Mais c'est chiant pour l'utilisateur, de plus si tu fais du connection Tunneling (Kapere le fait), il garde toujours la même connexion donc ca marchera pas. 2. Tu peux foutre des protections avec des cookies, mais la aussi, la plupart des apirateurs supportent les cookies et c'est chiant pour les users classiques. 3. Tu peux bloquer les navigateurs que tu connais pas, mais c'est aussi chiant pour les utilisateurs et un bon aspi te permet de modifier l'useragent 4. Tu peux chequer les referer, mais la aussi pas de bol, les aspis récupèrent les referers 5. Les formulaires, faut déjà y aller pour que ce soit pas supporté, si c'est un bête select ce sera analysé par les aspis, mais si c'est une recherche ca passera pas... mais je vois mal une recherche dans ton cas, et ca empeche tjs pas le batch download. Y a des solutions à appliquer directement au serveur, mais de nouveaux, en passant par plusieurs proxys ca marchera pas, désolé. A moins de faire un truc de porc dans tes scripts, de donner des noms aléatoires à tes images, et d'avoir de la chance que personne trouve une parade, y a pas de solution, tu t'emebetes et tu embetes l'utilisateur pour rien. Fait comme d'autres sites, un accès payant aux zips avec toutes les images à downloader, les amateurs purs paieront ptre pour la bande passante comme ca |
en fait j'utilise plusieur moyen
je calcule la difference de temps ou il à consulté une image a partir de l'ip et du cookie -->pas de cookie ? au revoir
si jamais la difference est inferieur a XXX il y a un temps de latence qui sera de 100sec le script dor 100sec.
Je place un piège dans mon site ou seul les aspi tombe dedans. si jamais il tombe j'enregistre l'ip et je le bloque. par contre j'ai ouvert une legere faille car je donne le lien de mes images mais si vous attender 20h00 heure Paris je peux cacher le lien de mes image : defaut si quelqu'un veut copier l'image il n'auras pas le choix du .bmp
de plus je sais que les aspi ouvre plusieur connection. donc c'est mon prochain projet de coincé les aspis
Marsh Posté le 08-08-2002 à 18:20:46
Protection inutile en utilisant des proxys publiques aléatoires.
Désolé
Marsh Posté le 08-08-2002 à 18:23:52
d'ailleurs ton site à un moment il m'a jete une grosse fenetre à la gueule en me disant que je refusais les cookies, ce qui est completement faux
Marsh Posté le 08-08-2002 à 18:26:36
Je vous remerci à tous d'avoir testé mon script c'est claire que je sais qu'il n'est pas parfait mais mon but c'est que je préfere me faire aspirer par un pro que par un simple débutant le but rechercher c'est de rendre la tache difficile de plus je voudrais faire migré cette fonction en PERL ou JAVA pour l'instant c'est en PHP et db.
Problème que j'ai c'est que je suis sur un hebergeur et je n'ai donc pas acces à la config du serveur.
Note: comme je l'ai dit a Zion il y a une 2ème manche a 20H
Merci à tous et tentot pour la second manche....
Marsh Posté le 08-08-2002 à 18:27:42
berceker a écrit a écrit : je peux cacher le lien de mes image |
Tu vas emmerder tout tes utilisateurs pour 1% de mecs qui vont aspirer.
Donne leur directement un zip sur un host gratos, et perds pas ton temps inutilement... Ces photos t'en a à la pelle sur les newsgroups, c'est totalement inutile désolé
Marsh Posté le 08-08-2002 à 19:56:58
si tu veux emmerder simplement les mec qui von faire de l'aspi :
1- met un limiteur au niveau des communication
2- met des noms aléatoire au niveau de tes repertoires ( comme ca pas moyen de le faire en recursif !
3- regarde si tu peux pas feinter un formulaire en html
(avec un select - g pas fait gaffe si kapere prenais ca...)
apres tu bloque des utilisateurs pour rien je pense !!
Marsh Posté le 08-08-2002 à 20:01:59
Zion a écrit a écrit : Tu vas emmerder tout tes utilisateurs pour 1% de mecs qui vont aspirer. Donne leur directement un zip sur un host gratos, et perds pas ton temps inutilement... Ces photos t'en a à la pelle sur les newsgroups, c'est totalement inutile désolé |
non je vais pas trop emmerdé les utilisateurs car il verrons quand même les images sauf que le chemin complet des images seront caché bref c'est claire qu'avoir les images en BMP n'est pas forcement tres top.
Marsh Posté le 09-08-2002 à 16:45:20
Une idée à creuser, un petit pixel quelque part qu'aucun internaute ne peux cliquer, par contre un aspirateur fait une requête dessus et on le bloque ... faisable ?
Marsh Posté le 09-08-2002 à 16:50:12
frogg a écrit a écrit : Une idée à creuser, un petit pixel quelque part qu'aucun internaute ne peux cliquer, par contre un aspirateur fait une requête dessus et on le bloque ... faisable ? |
Ca c'est méchant
Pas con, mais méchant
Mais de nouveau, si l'aspirateur utilise des proxys publiques, tu le bloqueras pas, c'est toujours pareil, tu sais pas le différencier
Marsh Posté le 09-08-2002 à 17:24:24
g une question (peut-être stupide, mais bon...) :
les sessions ne savent pas bloquer les aspirateurs ??
ex:
ecran de login
-> post login/pwd, création d'une entrée dans une bd liée à un num de session passé dans un cookie (pour la protection des pages).
-> accès aux fichiers dans un rep protégé par un .htaccess (là je sais pas trop comment ça ftc).
Marsh Posté le 09-08-2002 à 17:28:24
Non, les aspirateurs gèrent très bien les login/pass en htaccess ainsi que les sessions (cookies ou par urls).
Mais tu peux par exemple afficher une image avec un texte aléatoire et demander au mec de tapper le texte pour entrer sur ton site, ca c'est possible... Mais chiant pour l'utilisateur, tu te prends qd même pas souvent un aspirateur dans la tronche
Marsh Posté le 09-08-2002 à 17:32:38
de toutes façons quelle différence entre un user qui va faire un clickdroit/save as sur toutes les images et un autre qui va les aspirer???
ou bien entre un user qui a une cnx permanente et un autre qui va aspirer le site pour le mater offline
Marsh Posté le 09-08-2002 à 17:40:50
moi qui cherchais un aspi puissant je crois que je l'ai trouvé
edit: windows only
Marsh Posté le 09-08-2002 à 17:51:49
TBone a écrit a écrit : moi qui cherchais un aspi puissant je crois que je l'ai trouvé edit: windows only |
Kapere?
Ouaip...
Marsh Posté le 09-08-2002 à 17:59:21
ne serait ce pas un moyen de faire de la pub sur un site de balancer ce genre de topic
Marsh Posté le 10-08-2002 à 02:45:36
grosmethos a écrit a écrit : ne serait ce pas un moyen de faire de la pub sur un site de balancer ce genre de topic |
Non c'est pas de la pub que je fais.
Pour repondre au autre j'ai fais effectivement un image piege qui fait que l'aspirateur tombe dedans : vous pouvez voir car il se prenome omano.html si jammais vous executé cette page vous ne pourrez pas voir les image car cela signigie que vous etes un aspirateur.
Pour la connection effectivement les aspi gere les login mot de pass donc inutile.
Si je fait cela c'est pour [g]d'une:[/g]
je n'aime pas faire un site si c'est pour pas qu'il soit visité car je me suis fait chier a faire le graphisme alors que je ne luis pas.
deux:
C'est pour testé s'il etais possible de le faire afin qu'un jour cela puisse etre proposé a d'autre personne.
Trois:
cela m'amuse
donnez moi vos idée c'est la bienvenu
Marsh Posté le 10-08-2002 à 03:16:30
Non, sérieux, la protection la plus simple, c'est comme je l'ai expliqué plus haut, un texte affiché sur une image que tu dois retapper pour entrer, et qu'on puisse pas afficher une page si on est pas passé par la.
Pas besoin de faire des attrapes nigauds, c'est quasi impossible de passer à travers ca
Marsh Posté le 10-08-2002 à 13:41:18
Zion a écrit a écrit : Non, les aspirateurs gèrent très bien les login/pass en htaccess ainsi que les sessions (cookies ou par urls). |
ok c bon a savoir
il a l'air très bien ton kapere en tout cas
combien d'exemplaire as-tu déjà vendu (si c pas indiscret)?
Marsh Posté le 10-08-2002 à 14:44:30
monokrome> Allez, wget c'est très bien, mais faut arrêter la propagande, ca gère pas tout, loin de la
ethernal> Pas assez... Suffisemment pour payer la plupart des frais chaque mois, mais c'est loin de pouvoir être rentable encore
Marsh Posté le 11-08-2002 à 12:19:02
Zion a écrit a écrit : monokrome> Allez, wget c'est très bien, mais faut arrêter la propagande, ca gère pas tout, loin de la ethernal> Pas assez... Suffisemment pour payer la plupart des frais chaque mois, mais c'est loin de pouvoir être rentable encore |
t'inquiettte ^pas ça va venir mais c'est un tres bon produit
Marsh Posté le 11-08-2002 à 13:17:22
Tout ceci est bien beau (au passage, Zion => . J'essaie Kapere et je te l'achète, clair !!!), mais avez vous pensé à un truc très simple ? Le cache du navigateur ! Les images y seront stockées après consultation...
Marsh Posté le 11-08-2002 à 13:23:48
Zion a écrit a écrit : monokrome> Allez, wget c'est très bien, mais faut arrêter la propagande, ca gère pas tout, loin de la ethernal> Pas assez... Suffisemment pour payer la plupart des frais chaque mois, mais c'est loin de pouvoir être rentable encore |
donne moi un truc que wget peut pas faire, et meme si c le cas jmen fout, il est libre et tres stable
Marsh Posté le 11-08-2002 à 13:46:05
Harkonnen a écrit a écrit : Tout ceci est bien beau (au passage, Zion => . J'essaie Kapere et je te l'achète, clair !!!), mais avez vous pensé à un truc très simple ? Le cache du navigateur ! Les images y seront stockées après consultation... |
non j'ai trouvé une parade contre cela !...
VIVE LE PHP
Marsh Posté le 11-08-2002 à 13:52:57
monokrome a écrit a écrit : donne moi un truc que wget peut pas faire |
aspirer un site fait en Flash ?
Marsh Posté le 11-08-2002 à 14:15:27
Je vais peut-être dire n'importe quoi menfin ...
En faisant un lien en Javascript, l'aspi se fait baiser non ?
Marsh Posté le 08-08-2002 à 17:37:43
Bonjours.
J'ai monté un script qui empeche les aspirateurs de site de venir aspirer les images [grande taile] de mon site.
Par contre je n'ai pas tout testé car je ne possède pas beaucoup de d'apirateur de plus chacun à son comportement. Alors je voudrais savoir s'il y en a qui peuve testé mon systeme et me le prouvé en faisant un screenshoot et me dire comment vous avez fait et si vous avez une solution me dire comment et si vous n'arriver pas a piquer mes images ne le prenez pas mal mais dite le moi et avec quelle aspirateur.
Merci
PS: Si je n'aime pas les aspirateurs juste que je me fais chier a faire un beau site sachant que je ne suis pas graphiste et que je tien un minimum a ce qu'il soit vu de plus c'est pour testé mes connaissance en PHP et serré le boulot afin que ce script soit proposé gratis a tous ceux qui veule.
PITIER NE NIQUER PAS MON SERVEUR
Le site est http://www.stars-asian.com
Merci a tous
Message édité par berceker le 18-03-2003 à 18:32:54
---------------
Si je suis près de toi c'est soit pour t'embrasser ou te croquer, alors à ce moment là rappelle toi de ce que tu m'as fait. du bien ou du mal?