Bueno, he encontrado otra forma de encontrar los registros duplicados de una manera muchísimo mas Eficiente. La anterior era totalmente ineficiente con bases de datos grande.

Al principio sirvió Fantástico pero he llegado al punto que se vuelve eterno esperar la respuesta del servidor MySQL ya que la información a crecido muy rápidamente, ahora estoy hablando de ~45K aproximadamente.

Generaré 50K registros con el siguiente codigo en C:

#include<stdio.h>
 
int main()	{
	srandomdev();
	unsigned short i=0;
	unsigned char a,b;
	while(i < 50000)	{
		a = (unsigned char) random();
		b = (unsigned char) random();
		printf("%d,%d\n",a,b);
		i++;
	}
	return 0;
}
 
 

Despues de compilarlo y ejecutarlo

Anon@localhost % gcc csvCrandom.c -o csvCrandom
Anon@localhost % ./csvCrandom
 

Nos devuelve una salida muy extensa asi:


Asi unas 50K veces, lo comprobamos con:

Anon@localhost % ./csvCrandom | wc -l
   50000
 

Despues de Mandar la salida al archivo:

Anon@localhost % ./csvCrandom > ./csvRandom.csv
Anon@localhost % wc -l csvRandom.csv 
   50000 csvRandom.csv
 

Vemos que tiene nuestras 50K Lineas entonces desde MySQL empezamos desde 0 con el codigo que mistre anteriormente Modificado:

DROP DATABASE IF EXISTS `db`;
CREATE DATABASE  `db`;
USE db;
 
DROP TABLE IF EXISTS `tabla`;
 
CREATE TABLE tabla (
	id VARCHAR(10) NULL,
	grupo  VARCHAR(10) NULL
);
 
LOAD DATA INFILE '/path/to/file/csvRandom.csv' INTO TABLE tabla FIELDS TERMINATED BY ',' LINES TERMINATED BY '\n';
 

Una vez cargada la información comprobábamos en MySQL que se carge correctamente con count


Vemos que todo esta bien, ahora si llamamos al primer escript para comparar vemos que podría tardar horas y muchos se desesperarían.

Primer script:

SELECT * FROM tabla
WHERE(id, grupo)
IN(
SELECT id, grupo FROM tabla
GROUP BY id, grupo
HAVING COUNT(*)>1);

Ahora si lo reducimos a una línea y sin subconsulta queda asi:

Segundo script

SELECT *,COUNT(*) AS 'Veces Repetido' FROM tabla GROUP BY concat(id,grupo) HAVING COUNT(*)>1;

Vemos que no dura mas de 2 Segundos en ejecutarse Y encuentra la misma cantidad registros duplicados.

Tal vez ya lo hubiesen pensado, sin embargo como no lo encontré publicado en el foro, lo pongo. Espero y le sirva a alguien mas.

Saludos.

Igualmente muchas gracias por el aporte.

Lo estare descargando, con la esperanza de algun dia resubirlo a MU

Saludos.

Perfectisimo, pero Rapid ???

Me gustaria mas Megaupload.

Saludos.

Precisamente estaba pensando en buscar un codigo así.

Saludos.

Obvio que muchos de los de este foro lo usan, sin embargo has podido saltar ese Query ?

Saludos.

Perfecto, yo me los practicare bajo linux, en esta semana que me lo instale, también voy a instalar el windows, para testear algunas vulnerabilidades bajo el.

Saludos.

---

Que esto no estaba en Bugs y exploits ?

  lol

Obvio que limpio es virgen, igual buena observacion ya que parece que no conoce muy bien esos terminos.

Saludos.

 

LOL

Virus en el procesador hahaha.

Saludos.

Abres nero de ser posible el nero express Después te vas a "Image,Project, Copy" después de eso te aparece una lista con 3 opciones, de las en "Disc Image or Saved Project" Buscas tu archivos nrg, y después de eso lo quemas.

Saludos

---

Tienes que tener un CD Limpio para que lo puedes quemar bien.

Tienes que Abrirlo con el Nero y quemarlo desde el, tambien puedes ponerlo virtualmente en tu computadora y abrilo como si nada.

Saludos.