Problema ejecución consulta

[ecfisa]

Anduve lento en preguntar por la base de datos y los componentes....
Ya respondieron más arriba: Acces y TADOQuery..

Saludos.

[nena_yei]

Este enlace pinta muy bien! Pero no sé muy bien como aplicarlo.. Lo del CustomConstraint lo tengo que poner en el componente TQuery donde hago el open y falla? En la propiedad Constraints pongo lo de FIELD IS NOT NULL?

Muchísimas gracias, espero que me expliqueis un poco como hacerlo y que sea la solución!

Un saludo

[nena_yei]

Suena surrealista y yo soy la primera en sorprenderme en el número de carácteres de la consulta..pero he copiado la consulta en el word (despues de almacenarla en un Archivo.txt tal y como me explicasteis) y la consulta con 4 bloques son 26864 carácteres y no falla y la de 5 bloques son 33947 carácteres. No sé si el problema viene cuando pasa de 30000.
La consulta es así de larga porque es una aplicación que está creando una universidad, el departamento de filología hispánica, y la consulta lo que hace es buscar un conjunto de condiciones que indica el usuario dentro de muchos registros, entonces por ejemplo la consulta que estoy ejecutando alctualmente es cuando el usuario pone que quiere buscar: (árbol o arbusto) Y España. Y claro..el problema es que tiene que buscar la palabra árbol pero que tiene que encontrar todas las palabras árbol que estan seguidas de cualquier signo de puntuación, entonces he tenido que hacer "parches", una condición para cada tipo.. en plan:
"tabla.campo like "% ('+palabra+' %" OR tabla.campo like "%''('+palabra+' %" OR tabla.campo like "% ('+palabra+') %" or ...."
Y así teniendo en cuenta un montón de combinaciones con símbolos. Intenté hacerlo con expresiones regulares, pero se ve que en Delphi no se puede con sql, porque intente convertir una consulta que tenía en Acces para que funcionara a través del TQuery y no hubo manera (como "tabla.campo like "%[^a-z]'+palabra+'[^a-z]%").
Así que no me quedó más remedio que hacer todos los parches, entonces la consulta queda infinita, pero son los parches que ha indicado y que necesita el cliente.

Es desesperante.. Qué puedo hacer?
He probado de poner en el TQuery eso de FIELD IS NOT NULL en el Constraints pero no da resultado, sigue fallando, leyendo bien el link pone esto: The bug occurs and is reproducable by just setting one DefaultExpression on any DataSet. Y no debe ser el caso por el que salta mi error.

Gracias, un saludo

[nena_yei]

Más pistas.. acabo de quitar varias condiciones de cada bloque y he probado con 5 y NO me ha saltado el error! Y he mirado el número de carácteres y son 28163, ahora voy a ir descomentando las condiciones que he comentado temporalmente para ver si realmente el problema son los 30000 carácteres.
Ahora os informo.
Gracias de nuevo

[nena_yei]

Con la consulta con 31832 carácteres funciona sin problema, sin embargo, si añado algunas condiciones más y la consulta pasa a tener 33092 entonces salta el error. Con todas estas comprobaciones..creo que está claro que el problema es que el TQuery se vuelve loco cuando la consulta tiene más de 32000 o 33000 carácteres. Como podría solucionarlo? Fragmentar la consulta me seria casi imposible, porque son condiciones que tienen que estar enlazadas. Todo esto se arreglaría si pudiera utilizar expresiones regulares en la consulta sql

Alguna sugerencia?

Gracias, un saludo

[Neftali [Germán.Estévez]]

Yo más que por 30000 caracteres apostaría por: 2^15=32768 caracteres.

No se qué consulta estás generando y si es correta, pero hasta cierto punto tiene lógica.
Pensar que una consulta va a ocupar más 400 líneas de texto (32000 caracteres a unos 80 caracteres por línea) tampoco es descabellado.

¿Exactamente qué estructura tiene tu consulta? ¿Cómo puede ser que estés generando una consuta de 400 líneas? ¿Puedes explicar qué condiciones estás utilizando?

[Neftali [Germán.Estévez]]

Ok, este mensaje no lo había leído antes de mi última respuesta.

Empezado por nena_yei

por ejemplo la consulta que estoy ejecutando alctualmente es cuando el usuario pone que quiere buscar: (árbol o arbusto) Y España. Y claro..el problema es que tiene que buscar la palabra árbol pero que tiene que encontrar todas las palabras árbol que estan seguidas de cualquier signo de puntuación, entonces he tenido que hacer "parches", una condición para cada tipo.. en plan:
"tabla.campo like "% ('+palabra+' %" OR tabla.campo like "%''('+palabra+' %" OR tabla.campo like "% ('+palabra+') %" or ...."

Para mí, está claro que tal y como estás realizando la consulta hay algo que no es correcto desde el punto de diseño. O la estructura está mal planteada o estás generando mal la consulta.

Dejando este comentario aparte, creo que hay otra solución, que te puede resultar más rápida.

Empezado por nena_yei

...porque intente convertir una consulta que tenía en Acces para que funcionara a través del TQuery y no hubo manera (como "tabla.campo like "%[^a-z]'+palabra+'[^a-z]%").

Has comentado que tienes la consulta en Access que te funciona.
Bueno, lo más sencillo y rápido, es utilizar esa misma consulta (por ahora). No se si sabes que utilizando ADO puedes utilizar o llamar a las consultas que tienes almacenadas en Access. Para ello síolo tienes que usar el componente de TADOStoredProc y llamar a esas consultas como si fueran procedimientos almacenados.

A parte de esto, comentar 2 cosas:

1º) Si hubieras explicado de principio algo más sobre esta consulta, seguramente hubiéramos llegado antes hasta aquí.
2º) Supongo que esto te funcionará, de todas formas creo que deberías replantearte algo el diseño y la estrucura de los datos; Teniendo en cuenta las consultas a las que tienes que atender.

Un saludo. Ya dirás si te ha funcionado.

[nena_yei]

Te pongo las condiciones de las combinaciones de símbolos, y esto se repite por cada palabra y por cada apartado señalado.

con:=con+'tabla.campo LIKE "% '+campo+' %" OR ';
con:=con+'tabla.campo LIKE "% '+campo+') %" OR tabla.campo LIKE "%'''+palabra+') %" OR tabla.campo LIKE "% '+palabra+')'' %" OR tabla.campo LIKE "% ,'+palabra+') %" OR tabla.campo LIKE "% '+palabra+'), %" OR tabla.campo LIKE "% .'+palabra+') %" OR tabla.campo LIKE "% '+palabra+'). %" OR ';
con:=con+'tabla.campo LIKE "% '+palabra+'. %" OR tabla.campo LIKE "%'''+palabra+'. %" OR tabla.campo LIKE "% '+paraula+'.'' %" OR tabla.campo LIKE "% ,'+palabra+'. %" OR tabla.campo LIKE "% '+palabra+'., %" OR tabla.campo LIKE "% .'+palabra+'. %" OR tabla.campo LIKE "% '+palabra+'... %" OR ';
con:=con+'tabla.campo LIKE "% '+palabra+', %" OR tabla.campo LIKE "%'''+palabra+', %" OR tabla.campo LIKE "% '+palabra+''', %" OR tabla.campo LIKE "% '''+palabra+''' %" OR tabla.campo LIKE "% '''+palabra+''', %" OR tabla.campo LIKE "% '''+palabra+'''. %" OR tabla.campo LIKE "% '+palabra+','' %" OR tabla.campo LIKE "% ,'+palabra+', %" OR tabla.campo LIKE "% .'+palabra+', %" OR tabla.campo LIKE "% ,'+palabra+'. %" OR ';
con:=con+'tabla.campo LIKE "% '+palabra+'> %" OR tabla.campo LIKE  "%'''+palabra+'> %" OR tabla.campo LIKE "% '+palabra+'>'' %" OR  tabla.campo LIKE "%>'+palabra+'<%" OR tabla.campo LIKE "%>'+palabra+' %" OR tabla.campo LIKE "% ,'+palabra+'> %" OR tabla.campo LIKE "% '+palabra+'>, %" OR tabla.campo LIKE "% .'+palabra+'> %" OR tabla.campo LIKE "% '+palabra+'>. %" OR ';
con:=con+'tabla.campo LIKE "% ('+palabra+' %" OR tabla.campo LIKE  "%''('+palabra+' %" OR tabla.campo LIKE "% ('+palabra+') %" OR tabla.campo LIKE "% ('+palabra+''' %" OR tabla.campo LIKE "% ('+palabra+', %" OR tabla.campo LIKE "% ('+palabra+'. %" OR tabla.campo LIKE "% ('+palabra+'). %" OR ';
con:=con+'tabla.campo LIKE "% <'+palabra+'> %" OR tabla.campo LIKE  "%''<'+palabra+' %" OR tabla.campo LIKE "% <'+palabra+' %" OR tabla.campo LIKE "% ,'+palabra+'> %" OR tabla.campo LIKE "% '+palabra+'>, %" OR tabla.campo LIKE "% .'+palabra+'> %" OR tabla.campo LIKE "% '+palabra+'>. %" OR ';
con:=con+'tabla.campo LIKE "% ¿'+palabra+'? %" OR tabla.campo LIKE  "%¿'+palabra+' %" OR tabla.campo LIKE "% '+palabra+'?%" OR tabla.campo  LIKE "%¡'+palabra+' %" OR tabla.campo LIKE "%'+palabra+'!%" OR  tabla.campo LIKE "%/'+palabra+'/%" OR tabla.campo LIKE "% '+palabra+'/%" OR tabla.campo LIKE "%/'+palabra+'%" OR tabla.campo LIKE "«'+palabra+' %" OR ';

Como os comentaba antes, al ser algo de etimología y cosas relacionadas con la filología, pues todas las condiciones son necesarias porque el buscador tiene que funcionar a la perfección.
Este trozo de código, como he comentado antes, se repite para cada palabra y por cada apartado (campo).
Tiene sentido eso de los 2^15=32768 caracteres, tiene toda la pinta.

[nena_yei]

La cuestión es que yo hace unos 6 meses que he "adoptado" el proyecto, pero que la programación que ya está hecha es de otra persona que lo desarrolló todo, y que es una aplicación que lleva años haciéndose, y por ese motivo no puedo tocar nada de estructura o reeplantearlo.

Entonces, lo que me comentas del TADOStoredProc, el problema es que la consulta no es siempre la misma.. es decir si la persona pone "(palabra1 O palabra2) Y palabra3" no será la misma consulta sql que si pone "(palabra1 O palabra2) O palabra3" o "(palabra1 Y palabra2)". Entonces, con el TADOStoredProc puedo "enviarle" de alguna manera todo el código de la consulta? No he utilizado nunca el componente TADOStoredProc y alomejor por eso no me aclaro.

Gracias, un saludo

[Neftali [Germán.Estévez]]

Se supone que en una consulta de Access puesdes utilizar parámetors.
Se trata de hacerla con parámetros y si no recuerdo mal, esos parámetros son los que le pasas al StoredProcedure.

[nena_yei]

Sí, he visto que se le pueden pasar parametros al StoredProcedure, pero es que mi consulta no es siempre la misma, no es que cambien los parámetros es que según los apartados que elija hay más código o menos. Por esa razón no puedo hacer una consulta en Access fija donde le pase parámetros porque la consulta cambia según lo que elija el usuario, no solo cambian los parametros de búsqueda sino la estructura de la consulta sql.

[Neftali [Germán.Estévez]]

Empezado por nena_yei

...pero es que mi consulta no es siempre la misma, no es que cambien los parámetros es que según los apartados que elija hay más código o menos.

Cierto, cierto, no recordaba ese detalle....

Sigo pensando que debe haber otra forma de obrener los datos, pero bueno...

Otra opción que se me ocurre es que utilices Alias para las tablas, eso tal vez te permita reducir el tamaño de la consulta, sobretodo si tienes muchos criterios.

Esta consulta, por ejemplo:

Código SQL [-]
SELECT * from country where country.area>1000 and country.area<2000

Si utilizas Alias para la tabla puedes convertirla en algo así:

Código SQL [-]
SELECT * from country as C1 where C1.area>1000 and C1.area<2000

Aunque añades carateres al definir el Alias (...AS C1...) te los ahorrarás al poder utilizar un Alias más corto en los criterios (C1.Area<...)

[nena_yei]

Bien pensado Neftali! Voy a comer y después lo pruebo, ojalá funcione!

Te digo algo esta tarde. Mil gracias, un saludo!

[[fjcg02]]

Menuda matraca de aplicación.

Lo normal es en este tipo de cassos, que un procedimiento extraiga las palabras. Luego las palabras se añaden a una tabla, y en otra se almacenan los registros que la contienen.

Es decir, tengo una tabla con cuatro campos de texto.
Cuando grabo, meto un procedimiento que analiza el texto, extrae cada palabra y mira si existe en la tabla de palabras. Luego, en otra tabla, relaciono las palabras con los registros que las contienen.

Luego , la búsqueda se realiza en estas tablas, de esta manera se extraen los registros que tienen las palabras buscadas.

Espero que te sirva de ayuda, y te quites ese marrón de encima.

Saludos

[Neftali [Germán.Estévez]]

Eso es lo normal; Generar un índice de palabras. Además las búsquedas en esos índices son mucho más rápidas que buscar en la tabla por LIKE, que no se en este caso cómo va a resultar.

El roblema es que segun dice, no puede "tocar" ese diseño.

Tal vez deberías plantear, a quien corrresponda, el rediseñar esa parte, por vuestro bien, y por el futuro de la aplicación. El sólo hecho de tener una consulta con 32000 caracteres, ya debería hacer "saltar" las alarmas de mucha gente.

[nena_yei]

Miiiiil graciassss!!! Neftali he hecho lo de ponerle a la tabla un alias, y de esa manera he reducido considerablemente los carácteres y funciona!!! Muchísimas gracias de verdad. Y gracias a todos los que han aportado cosas en este hilo

Os entiendo perfectamente, la aplicación necesitaria un rediseño y un cambio de estructura estricto, lo sé y soy totalmente consciente, pero esta aplicación se empezó a desarrollar hace casi 6 años, y yo la llevo desde hace solo 6-8 meses, y por órdenes del jefe y del cliente no se puede rediseñar ni plantear de nuevo nada. Qué le vamos a hacer...

Un saludo y de nuevo, GRACIAS!!