Oprydning af database (jeg vil kun have hver post en gang)

Kan du ikke lave en søgning i phpmyadmin?

Jo, det kan jeg sikkert, men hvordan?

phpMyAdmin er for database-arbejde -
du kan lige så godt lære det nu som senere.

du må vel vide hvordan din database ser ud, - ellers er det da svært at hjælpe dig.
Det er ikke mange oplysninger du kommer med.

Hvad har du egentlig selv gjort for at rette fejlen?

Rettet cronejobbet så det kun kører en gang i døgnet.

Jeg ved 100% hvordan min database ser ud. Det jeg spørger om er hvordan jeg laver en søgning som returnerer alle poster som indeholder dubletter inde for det samme døgn hvorefter jeg så kan slette dem eller alternativt noget ala...

DELETE * FROM tabel1 WHERE "der findes dubletter".

Jeg har et felt som hedder added som indeholder TIMESTAMP (xxxx-xx-xx 00:00:00).

For hver ID er der et added felt og hvis der er to identiske ID'er inde for samme døgn skal de resterende findes og slettes så der kun forefindes en post for hver ID inde for samme døgn.

Jeg kan godt tælle hvormange punkter der er i databasen, men kunne ikke se relevansen i forhold til mit spørgsmål.

Databasen indeholder pt. ca. 1.000.000 poster.

Jamen det er jo meget nemt!

Du skal ind i phpmyadmin og lave/køre en SQL'er der rydder op.

*sikkerhedskopi* og atter *sikkerhedskopi*

Men for din egen skyld og sikkert en masse andre, øv dig først på en kopi så du er sikker på at oprydningen bliver korrekt.

Da du selv ved 100% hvordan din database ser ud er det også kun dig selv der kan lave den korrekt SQL'er.

mvh

Hvis jeg vidste hvordan ville jeg ikke spørge.

Jeg kan stadig ikke se at tabellens opbygning har betydning udover jeg har oplyst at de styrende felter er ID og ADDED. Alt der imellem følger med om der så var 100 punkter hvis kan laver en SQL som udvælger *, eller er det mig der tager fejl der.

Jeg skal gerne oplyse tabellens opbygning hvis det har en betydning...

Ved du hvordan det kan gøres eller?

er det noget i denne retning du mener?
før:
id | a | b
1 | 1 | 2
2 | 1 | 2
3 | 2 | 3
5 | 3 | 4

efter:
id | a | b
2 | 1 | 2
3 | 2 | 3
5 | 3 | 4


http://www.cyberciti.biz/faq/howto-removing-eliminating-duplicates-from-a-mysql-table/#comment-37556

nærmere:
id | a | added
1 | 1 | 2008-10-10 10:10:10
1 | 1 | 2008-10-10 10:12:00
2 | 1 | 2008-10-10 10:10:10
3 | 2 | 2008-10-10 10:10:10
4 | 3 | 2008-10-10 10:10:10

efter:
id | a | added
1 | 1 | 2008-10-10 10:12:00
2 | 1 | 2008-10-10 10:10:10
3 | 2 | 2008-10-10 10:10:10
4 | 3 | 2008-10-10 10:10:10

Nå sådan, id er altså unikt?
men a og added må godt indeholde identiske.

jeg har ikke den eksakte løsning på det, håber der er andre der sidder og "fintænker"

Nu dapper jeg i seng, godnat.

Hvis du har en nyere MySQL bør:

SELECT *
FROM tabel t1
WHERE NOT EXISTS (SELECT * FROM tabel t2 WHERE t1.id=t2.id AND t2.added > t1.added)

vil returnere de rækker du skal bruge og det kan du udnytte til at lave
en ny tabel med samme struktur og så lave en:

INSERT INTO nytabel SELECT ...

Umiddelbart vil dit forslag tage * fra tabel 1 og sammenlige det med * fra tabel 2 hvor id'et i tabel 1 og 2 er ens og added i tabel 2 er større end i tabel 1.

Jeg har kun en tabel hvor det hele ligger i og jeg har samme id med mange forskellige datoer (problemet er der hvor jeg har samme id med samme dato).

id er ikke unikt i tabellen men unikt i forhold til datoen. Jeg bruger id'et til at se ændringer i dataen forhold til dagen før.

Hej igen
Uden at have en løsning på problemet vil jeg lige komme med nogle betragtninger.

Først drejer det vel sig om at få de rigtige rækker ud, tømme tabellen og lægge de rigtige ind.

Det kunne f.eks være noget der lignede dette: (DET ER TOTAL UTESTET)
INSERT INTO dinTabel (id, a, added) SELECT DISTINCT id, a, added FROM kopidinTabel

Men her er lige en ting der skal huskes på, det er TIMESTAMP.
Timestamp feltet skal ændres til DATETIME før de rigtige lægges ind og derefter ændres tilbage, fordi timestamperen den gør som den skal.

Får jeg så ikke blot de unikke ID'er?

Jeg skal bruge de unikke ID'et sammenholdt med added feltet, altså er der gået 10 dage har jeg 10 ens id'er og 10 forskellige dage.

Problemet er bare at jeg pt. har måske 20 id'er og 10 datoer i en 10 dages periode, da added tages via timestamp og scriptet er kørt 2 dange i døgnet og nogle gange flere.

Prøv lige og kør min query !

Den returnerer alle rækker i tabellen hvor der ikke er en række i samme tabel
med samem ud og nyere tid.

Hvilket udfra din beskrivelse er hvad du skal bruge.

t1 og t2 er to aliaser for samme tabelnavn !

Hvor mange timer bør/skal den køre før den er færdig?

1. time er tilsyneladende ikke nok.

Der er pt. 1.735.706 poster i tabellen

Hvis der ikke er index på id og added, så kan den tage meget lang tid.

det er sgu ikke sikkert der er det ;(

det havde jeg ikke lige tænkt på.

Nå jeg lader den køre til den er færdig og vender tilbage med resultatet her

og ??

Sorry, jeg havde helt glemt at vende tilbage ;(

Der var som du var inde på ingen index på id og added og den kører mere eller mindre i et døgn så vidt jeg husker.

Men det korte af det lange er, at jeg tilføjede index på de to hvorefter jeg kørte den igen og så tog det kun 5-10 min.

Så skriv svar og du skal få dine point.

svar