gleiche dateien auf versch. servern ausfindig machen

hallo hallo!

gibt es eine möglichkeit, gleiche dateien ausfindig zu machen, die auf drei versch servern gelagert sind? die server sind über vpn miteinander verbunden. Ich will die halt ein wenig freiräumen, und ich weiß dass auf allen drein zt gleiche dateien vorhanden sind. hab nur keine lust die alle einzeln zu suchen

danke euch

Ich würde auf einem Server einen aktuellen Datenbestand erstellen, in dem sämtliche Dateien der aktuellesten Version liegen, die anderen beiden Server plattmachen bzw. eben die Dateien da löschen und dann wieder trennen, was auf srv1, srv2 und srv3 muss. Setzt jede Menge Bandbreite voraus was erfahrungsgemäß bei VPNs nicht so gegeben ist

also gehts nur manuell?

Theoretisch schon, die Frage ist nur, was für Server das sind und wie du Zugriff darauf hast.

Um z.B. drei FTP Server abzugleichen, bei denen du keine Möglichkeit hast direkt im Dateisystem zu werkeln oder irgendwelche 'dupecheck' (...) Erweiterungen einzubauen: du würdest einen Tabelle mit allen Dateien auf allen Servern erstellen, verdächtige, z.B. Dateien mit gleicher Größe zu dir transferieren und lokal vergleichen, dann Duplikate löschen.

Wenn du direkt im Dateisystem arbeiten und auf den Servern auch Programme ausführen kannst musst du nicht alle verdächtigen Dateien übertragen und dann vergleichen, sondern nur die jeweilige Tabelle:

Dazu würdest du in diese Tabelle in allen Fällen die Position jeder getesteten Datei schreiben, - wenn für diese Dateien die Gefahr besteht, dass sie zwischen der Erstellung deiner Tabelle und dem Löschen der Duplikate, geändert werden: auch die Zeit der letzten Änderung, - ihre Größe und eine Prüfsumme über die Datei. In Verbindung mit der Dateigröße dürfte für den letzten Eintrag CRC32, besser MD5 hinreichend geeignet sein. "Cryptographic strength" wäre overkill1ldeluxe.
x Einträge mit gleicher Prüfsumme und Größe sind Duplikate, x-1 der Dateien werden gelöscht.

Natürlich würdest du sicherstellen, dass das nicht mit Betriebssystemdateien oder ähnlichem passiert..


Weg von der Theorie, hin zu bestehenden Implementierungen: ich weiß nicht was da im Moment für verschiedene Betriebssysteme kursiert..
Irgendeines davon, hiervon, oder aus früheren Threads? Oder du wartest auf Empfehlungen hier, wofür es praktisch wäre zu wissen, auf welchen Betriebssystemen und über welche Zugriffsarten du das veranstalten willst.

Über einen reinen FTP Zugang ist das sicher am grausamsten zu realisieren und die einmalige Arbeit, alle lokal zu laden, mit einem Programm zu vergleichen und bereinigt wieder zurückzuschieben noch die geringste. Sollte es nicht schon ein Programm geben, das Absatz 2 automatisiert. Keine Ahnung *g.

Würd ich auch so machen. Angenommen linux (oder bsd oder was in der art) läuft auf dem server lassen sich die Prüfsummen so erstellen:

find /diesen/ordner/durchsuchen -type f -exec md5sum "{}" > /home/sid/log.txt \;

/home/sid ist da natürlich durch das verzeichnis in dem du die dateiliste dann haben willst zu ersetzen. /diesen/ordner usw. ist der ordner den du durchsuchen willst, _nicht_ / weil wenn du die gesamte festplatte durchsuchst wirst du sicher dateien haben (configs, kernel, systemprogramme, libs) die auf zwei der server gleich sind und wenn du die löschst ist ziemlich viel kaputt.

Die gleichen md5summen suchen, ist auch einfach, wenn du willst schreib ich dir auch dafür nen kleines skript, aber ich hab jetzt keine lust das zu machen und dann brauchts niemand.

hey, danke, aber das is mir ehrlich gesagt ein bißchen kompliziert. gibt es nicht einfach ein programm, welches mir alle identischen ordner/dateien anzeigt, welche ich wiederrum dann manuel löschen kann?

ach ja, bs is hier überall xp, bzw windows server 2003 glaub ich...

ein einzelner kommandozeilenbefehl ist kompliziert?!? ja dann viel spass beim klickibuntisuchen...

mein ansatz wäre rsync gewesen, aber auch nur, weil ich davon weiss, dasses einen schnellen prüfalgorithmus hat...