Descargar parte de una web

[*Emilio*]

Empezado por Bicho

Ya lo habia visto, pero no pone que sea dual-core no? Lo es?, Esta disponible?

Los otros son un socket anterior al AM2 i me interesa ahora mismo el nuevo.

Con socket AMD2 sólo hay disponibles el 3200 y el 3500

http://www.brico-pc.com/tienda/artic...AMD3200/AM2BOX
http://www.brico-pc.com/tienda/artic...AMD3500/AM2BOX

De todas formas todavía no tengo nada en stock, la tienda todavía no está abierta, pero se pueden pedir.

[[Bicho]]

Pero esto no son dual-core (estoy exigente hoy eh? ya lo sé)
de todas maneras el 3200 tiene buena pinta.

Creo que sino llega el mio a principios de septiembre me dicidiré por este y ya más adelante lo cambiaré

Esta gente de AMD saca el procesador nuevo (socket AM2 y dual-core) a mediados de Julio, el que quiero vale 130€ y en agosto cierran por vacaciones o no producen los suficientes o que, la cuestión es que por todo me ponen como escusa que al distribuidor no le llega

En fin ya veremos...

Saludos

[roman]

Empezado por Emilio

Muy pocas veces hago uso del foro para emitir preguntas y realmente estoy sorprendido de la cantidad de respuestas válidas que he obtenido, seguramente alguna vez habéis preguntado estando en una ciudad desconocida por una calle y el nativo no sólo se ha limitado en indicarte el trayecto sino que además se ha tomado la molestia de acompañarte para que no te pierdas, pues algo así creo estar sintiendo, INCREIBLE, gracias a todos

¡Hombre, Emilio! ¡Qué estás descubriendo al ClubDelphi! Y no sabes, tiene un administrador estupendo que día con día renueva y mantiene el sitio. ¡Ah! Pero si tú eres el administrador!

// Saludos

[[Lepe]]

Emilio, Ese sentimiento es el que hace perdurar a tu criatura (ClubDelphi)

Saludos

[chelox]

Hola, acavo de poner un mensaje de ayuda en este foro de internet, pero leyendo este tema creo que acá esta mi solución, y era algo tan simple como lo que puso bicho

MEMO1.Text := WebBrowser1.OleObject.Document.body.innerHTML;

Mi problema lo resolvería con este compenente creo yo porque al sitio que estoy consultando tiene algunos redireccionamientos.
Ahora lo que yo necesito es abrir el sitio, pero enviando algunos parámetros por POST.
Me parece que esto si se puede con este componente. Veo que por aca la tienen reclara con este tema, asi que espero alguna ayuda.
Luego una vez que trajo los datos y haga todos los redireccionamientos que quiera recién ahí examinaría el código HTML que con eso ya estaría resuelto el problema.

Aca está lo que quiero, que puse en otro mensaje:
Necesito hacer una consulta a un sitio web publico, donde envio unas variables por POST y recibo todo un HTML con los resultados.
Estuve renegando un poco con DELPHI hasta que lo logré unsando un componente IdHTTP.
Aparentemente funciona pero no me trae resultados, es como que hace una consulta nula.
Gracias a este componte me detecta que tiene un redireccionamiento no se si esto pude influir, yo creo que no. Porque a esto mismo lo hice con flash, envio y recibe todo bien, me trae la consulta correcta, pero me corta el HTML, no me lo trae completo.
Yo creo que es posible hacerlo, pero no se si estoy lejos o cerca, lo que se me había ocurrido era como hacer un internet explorer propio, donde yo pueda tener acceso al codigo html.
Pero no manejo casi nada los componente de internet de delphi, yo creo que a esto un experto lo saca al instante.
Espero que alguien me pueda ayudar.

Aca pongo el ejemplo hecho con delphi 7, por si alguien quiere investigar.
Gracias.

www.dbhost.com.ar/pruebaindy.zip

[Roger007]

Wenas.

Vi este hilo y me intereso el tema de poder sacar información directamente de una Web. Hice pruebas con los ejemplos que pusisteis y funcionaban perfectamente. (incluso poniendo parámetros para hacer las búsquedas, no sabia que se podía hacer)

Ahora llega mi problema: Llevo una temporada jugando al Travian (juego por Web de gestionar los recursos de tu aldea y hacer soldados, como un civilization pero mas sencillito y en Web). Tiene una opción de sacar un pequeño mapa de tu zona con tu aldea en el centro y poder ver las aldeas que tienes mas cercanas. Además puedes ver algo de información de las aldeas vecinas. Esta seria la información que me interesaría para sacar unas estadísticas. Ya he visto la estructura del html y creo que no tendré problemas para coger esos datos.

El problema es que para entrar en la Web me pide usuario y password y no consigo pasar de ahí al usar vuestro ejemplos (cambiando los parámetros por supuesto, poniendo mi usuario y mi password). (creo que tal vez sea algo de las cookies pero no se entrar en ese tema)

He creado una aldea de pruebas por si queréis ver como es la web y los datos pide.

Web: http://s3.travian.net/login.php
Usuario: prueba_roger
Password: 12345678

procedure TForm1.Button2Click(Sender: TObject);
var
data: TIdMultiPartFormDataStream;
begin
data := TIdMultiPartFormDataStream.Create;
try
{ add the used parameters for the script }
data.AddFormField('e7a9175','prueba_roger');
data.AddFormField('e9cb9d1','12345678');

Memo1.Lines.Text := IdHTTP1.Post('http://s3.travian.net/dorf1.php', data);
finally
data.Free;
end;
end;

Un Saludo, Roger.

[dec]

Hola,

Mirando un poco por encima el código HTML de la página que comentas, para empezar, se incluyen más campos además del "login" y el "password", aunque, ciertamente, no sé si estos serán "obligatorios" para una correcta autentificación.

Por otro lado, alguno de los campos que digo que se incluyen (aunque ocultos al usuario) tienen un valor aleatorio, es decir, parece que no siempre es el mismo, incluso los propios campos "login" y "password" tienen nombres un tanto extraños, da la impresión que acaso también aleatorios.

Todo esto puede ser para complicar el login a usuarios, precisamente, que traten de hacerlo desde fuera de la página Web, es decir, justo lo que tratas de conseguir tú. No sé. Tal vez no, tal vez sea por otro motivo que se nos escape.

No sé... sería cuestión de hacer una serie de pruebas,... y a lo peor no tener el éxito esperado, claro.

[[seoane]]

Además, creo que se usan cookies. ¿Indy maneja las cookies?

[dec]

Hola,

Sí; creo que Indy cuenta con componentes para manejar las Cookies, empero, no sé si en este caso se trata de esto, puesto que las Cookies parecen utilizarse (en este caso) para almacenar datos relativos a la autentificación, pero, para lograr cierta "persistencia" de la misma, es decir, lo que es "entrar" en el sistema me parece que no tiene que ver con las "Cookies", en este caso.

De todas, todas, las pruebas que he dicho tratarían de ver qué pasa con las Cookies de marras, pero, teniendo en cuenta que hay más campos que el "login" y el "password"; que dichos campos parecen variar aleatoriamente en cada carga de la página... no sé, no sé. Me parece una especie de "sistema" para impedir, precisamente, lo que trata de hacerse.

¿Entonces estoy diciendo que no puede hacerse? Bueno. Acaso eso es lo que tratan los desarrolladores de conseguir... pero esto no quiere decir que no pueda hacerse, imagino.

[[Crandel]]

Empezado por dec

Sí; creo que Indy cuenta con componentes para manejar las Cookies, empero, no sé si en este caso se trata de esto, puesto que las Cookies parecen utilizarse (en este caso) para almacenar datos relativos a la autentificación, pero, para lograr cierta "persistencia" de la misma, es decir, lo que es "entrar" en el sistema me parece que no tiene que ver con las "Cookies", en este caso.

a mi me dice que el problema de acceso son las cookies

Empezado por dec

teniendo en cuenta que hay más campos que el "login" y el "password"; que dichos campos parecen variar aleatoriamente en cada carga de la página... no sé, no sé. Me parece una especie de "sistema" para impedir, precisamente, lo que trata de hacerse.

lo que hice fue descargar la pagina principal http://s3.travien.net/login.php y de ahi sacas los campos de login para intentar de acceder y generas automaticamente el pedido de login, pero no me funciona

Existe otra forma mas facil de hacerse, con lo que yo solucione el problema, pero con Indy quedaria mejor resuelto.

Fue utilizar el componente TWebBrowser y lo manejas desde ahi, el se encarga de las cookies y demas problemas.

Pero igual esteria bueno aprender a manejarla sesion con Indy, y estuve leyendo recien que los ICS tambien permiten cookies pero tampoco encontre un ejemplo sencillo.

[dec]

Hola,

Empezado por Ángel

lo que hice descargar la pagina principal http://s3.travien.net/login.php y de ahi sacas los campos de login para intentar de acceder.

Sí; pero, ahí se pueden ver campos cuyos valores son aleatorios, es decir, cada vez que descargas dicha página Web los valores de algunos campos cambian también. ¿Cómo vas a proporcionar los valores correctos si no sabes los que son? Ahora,... no sé si no me estoy liando...

A ver...

Paso 1: descargamos la página Web, esto es, su código fuente

Paso 2: "parseamos" el código en busca de todos los campos del formulario

Paso 3: Preparamos el "HTTP POST" y procedemos a su envío...

Tiene su lógica, ¿no? Tal vez me haya liado antes con lo de los campos... Pero, en cualquier caso, no basta con los campos "login" y "password", o... ¿también en esto me he liado?

Empezado por Ángel

Existe otra forma mas facil de hacerse, con lo que yo solucione el problema, pero con Indy quedaria mejor resuelto.

¿Entonces pudiste acceder al código fuente de la página Web una vez autentificado? ¿Y sólo utilizaste los campos "login" y "password"? Pues lo dicho, no probé lo suficiente el tema, por lo que se ve, o no supe hacerlo, vaya.

[[Crandel]]

Empezado por dec

¿Entonces pudiste acceder al código fuente de la página Web una vez autentificado? ¿Y sólo utilizaste los campos "login" y "password"? Pues lo dicho, no probé lo suficiente el tema, por lo que se ve, o no supe hacerlo, vaya.

de la unica forma de acceder que logre fue con el TWebBrowser.

Con indy, no pude lograr loguerme ya sea enviando solo los campos usuario y pass o todos juntos

Si queres te paso el codigo con el que estoy probando

[dec]

Hola,

Empezado por Ángel

Si queres te paso el codigo con el que estoy probando

Hombre, probablemente, ése código interese a más gente. Cópialo por aquí y le echamos un vistazo Ángel.

[[Crandel]]

aca esta lo que probe, yo me voy a dormir si alguien sigue mañana lo veo.

[dec]

Hola,

El primer método no funciona porque tratas de pasar las variables mediante la URL, mientras que para autentificarte en el sistema es preciso enviar dichas variables vía "HTTP POST".

Ninguno de los otros métodos funciona, es decir, siempre acaba uno recibiendo el código HTML correspondiente a la página de "login", no el de la página de entrada para los usuarios autentificados, que es lo que se pretende, si ya no es que se quiere ir más allá...

Desde luego te lo has currado, como suele decirse, y tal vez sea cuestión de eso, de ir probando varias cosas así...

[Roger007]

Ya lo conseguí, muchas gracias por vuestra ayuda.

Hoy he estado comparando los nombres de los campos con los html que saque ayer y vi lo que me dijisteis que algunos nombres de campos cambiaban. Y que adema había mas campos que debía poner.

He hecho que primero llame a la web http://s3.travian.net/login.php donde puedo ver los nombres de los campos y luego llamo a http://s3.travian.net/dorf1.php ya con los nombres actualizados.

data.AddFormField('w','');
data.AddFormField('login',campo_contador_login);
data.AddFormField(nombre_campo_usuario,'prueba_roger');
data.AddFormField(nombre_campo_password,'12345678');
data.AddFormField('ef19b32','');

Muchas gracias por la ayuda, ahora me pondré a sacar la información para hacer mis estadísticas.

Un Saludo, Roger.

[[Crandel]]

Muy bien Roger, podrias compartir con nosotros como lo resolviste al final?

que componente usaste? o de que forma hiciste la petición.

o un ejemplo basico.

[Roger007]

Por supuesto que os pongo mi practica.

El sistema de búsqueda es cutre pero efectivo. Con el ejemplo que habéis puesto me pondré para que la búsqueda sea mas elegante.

Un Saludo, Roger.

[[Crandel]]

Muy bien Roger, me baje el tuyo y lo veia tan parecido a lo que hice anoche que no entendia que no me funcionaba.

Estuve recien media hora para descubrir que el nombre de los parametros debe ir si o si en minuscula

con un LowerCase se soluciono todo

aclaración: el que anduvo de mi ejemplo fue mi metodo 3.

[[Al González]]

¡Hola a todos!

Empezado por mamcx (sobre el tema de expresiones regulares)

...Y no hay razones para no usarlas en Delphi!

http://regexpstudio.com/TRegExpr/TRegExpr.html...

Al parecer ya no está disponible ese enlace, ¿tendrás otra dirección Web que conduzca a esos componentes? Gracias de antemano.

Empezado por mamcx

...Otro camino es usar un parser de html, ya sabemos que el html puede ser invalido asi que necesitarias buscar un tag parser...

Tal vez les sea útil este enlace, donde hay varios de esos componentes:
http://www.torry.net/pages.php?id=216

Un abrazo regular.

Al González.