debdelta für schnelle Upgrades

[Saxman]

Ich suche hier kein Programm sondern stelle, da sich bisher im Forum fast nichts dazu findet, mal ein kleines nützliches tool vor. Der Titel verrät es schon, das Programm heißt debdelta.

debdelta lädt die Änderungen (deltas) von debian Paketen runter und lädt nur die notwendigen veränderten Dateien herunter und paketiert die debs lokal. Das schöne daran ist dass gerade bei testing oder sid bei denen die updates häufig statt finden die Download Geschwindigkeit bei mir im Schnitt verdoppelt bis verdreifacht wird (Tatsächlich wird natürlich nicht der eigentliche Download beschleunigt sondern die Zeit bis das upgegradete Paket lokal vorliegt) . Das spart eine ganze Menge Zeit.

Das upgrade ist zum normalen upgrade mit aptitude nur einen Schritt länger.

Code: Alles auswählen

aptitude update
debdelta-upgrade
aptitude full-upgrade

Ich hab das jetzt seit einiger Zeit hier problemlos im Einsatz deswegen hier von mir an alle testing/sid user. Probiert es mal aus.

[ThorstenS]

Ich hänge zwar an einer flotten Standleitung, finde die Idee aber gut.
Hat eben einwandfrei funktioniert - danke für den Tipp

[hikaru]

Ich habe auch schon ein paar mal über deb-Deltas nachgedacht ohne jedoch debdelta zu kennen. Wie beeinflusst die lokale Paketierung den Zeitaufwand für das Upgrade? Ich vermute mal auf einem 12 Jahre alten Rechner mit schneller Internetverbindung dürfte debdelta eher kontraproduktiv sein, oder?

[Saxman]

Ich habe auch schon ein paar mal über deb-Deltas nachgedacht ohne jedoch debdelta zu kennen. Wie beeinflusst die lokale Paketierung den Zeitaufwand für das Upgrade? Ich vermute mal auf einem 12 Jahre alten Rechner mit schneller Internetverbindung dürfte debdelta eher kontraproduktiv sein, oder?

debdelta zeigt dir nach einem Durchlauf die virtuelle Geschwindigkeit an. Probiere es einfach mal aus. Dann siehst du ob es sich lohnt. Auf einem Doppelkern liegt das Paketieren in der Regel im Sekundenbruchteile-Bereich. Bei größeren Paketen aber auch mal länger.

[jue]

Geht das auch so:

apt-get update
debdelta-upgrade
apt-get dist-upgrade

???

[Saxman]

Geht das auch so:

apt-get update
debdelta-upgrade
apt-get dist-upgrade

???

Ja, die Pakete liegen ja dann lokal vor. Es ist egal ob apt oder aptitude genutzt wird.

[cirrussc]

Gibts ja sogar schon für Lenny.
Muss ich ein Weilchen testen. Danke für den Tipp.

[Teddybear]

Aber jetzt mal ehrlich.....
Bei den heutigen Internetanschlüssen, finde ich, ist es doch nicht sooooo schlimm mal ein paar MB zu laden.
Klar, es gibt Pakete die was länger dauern (Oo und diverse Spiele Daten) aber das kann man auch verschmerzen.

Wo ich debdelta für absolut sinnvoll halte wären mobile Verbindungen, sowie good old Modem und lahme Hinterland-DSL-Anschlüsse.

[hikaru]

Bei den heutigen Internetanschlüssen, finde ich, ist es doch nicht sooooo schlimm mal ein paar MB zu laden.

Manch einer sitzt noch mit 56k-Modem oder bestenfalls ISDN auf dem platten Land. Mit UMTS ist da meist auch nichts.

[Teddybear]

Bei den heutigen Internetanschlüssen, finde ich, ist es doch nicht sooooo schlimm mal ein paar MB zu laden.

Manch einer sitzt noch mit 56k-Modem oder bestenfalls ISDN auf dem platten Land. Mit UMTS ist da meist auch nichts.

Sagte ich doch...

Wo ich debdelta für absolut sinnvoll halte wären mobile Verbindungen, sowie good old Modem und lahme Hinterland-DSL-Anschlüsse.

[hikaru]

Überlesen.

[yeti]

Überlesen.

...ist mir auch beinahe passiert.
Das kann kein Zufall sein!
Schieben wir's auf's Wetter!

[Saxman]

Ob man das verschmerzen kann ist das eine, ob man warten will das andere. Wenn das update statt in zwei Minuten in 50 Sekunden durch ist bin ich froh darüber. So toll finde Ich die updaterei nun auch nicht.

Das liegt aber sicher auch daran dass unter testing/sid die updates quasi täglich eintrudeln. Da sind es nicht einmal 100 MB gespart sondern jeden zweiten Tag. Das macht in meinen Augen schon einen Unterschied und das unabhängig von der Leitung. Aber sicher ist der Gewinn umso größer je langsamer die Leitung an sich ist.

[deberik]

Ein großer Vorteil von debdelta ist meiner Meinung nach doch auch die Entlastung der Server. Wenn bei einer Aktualisierung von großen Pakten von nur 10 Leuten statt 100 Mb nur 10 Mb heruntergeladen wird, dann wird am Server schon fast 1 Gb Bandbreite gespart. Das macht sich ziemlich schnell bezahlt.

Grüße, Erik

[yeti]

Ein großer Vorteil von debdelta ist meiner Meinung nach doch auch die Entlastung der Server. Wenn bei einer Aktualisierung von großen Pakten von nur 10 Leuten statt 100 Mb nur 10 Mb heruntergeladen wird, dann wird am Server schon fast 1 Gb Bandbreite gespart. Das macht sich ziemlich schnell bezahlt.

Das Internet ist mittlerweile doch auch unter den Top-Klimakillern... und von den Gamer-PCs und den Täglich-Halb-Gentoo-Kompilierern will ich mal garnich anfangen...
Ein Vergleich ob der Mehr-Transfer oder die gebrauchte Umpackerei auf dem lokalen PC den heftigeren CO₂-Impakt hat muß her...
...andernfalls bleibt mir nur mein Amethystpendel...

[deberik]

Ein Vergleich ob der Mehr-Transfer oder die gebrauchte Umpackerei auf dem lokalen PC den heftigeren CO₂-Impakt hat muß her...
...andernfalls bleibt mir nur mein Amethystpendel...

Das müsste doch zu berechnen sein, wenn man den Stromverbrauch misst. Zuerst am eigenen Computer, ob es einen Unterschied beim Stromverbrauch macht, wenn man mit debdelta neu packt oder nur herunterladet. Falls debdelta mehr verbraucht: herausfinden, ob Debian (bzw. Mirrors) Server einsparen kann, wenn alle debdelta verwenden (grob geschätzt nur mehr 10% Bandbreite). Vom eigenen Mehrverbrauch (am Besten gemittelt über verschiedene Notebooks und PCs) auf den Mehrverbrauch aller Debian-Benutzer hochrechnen (verlässliche Zahlen für die Anzahl gibt es wohl nicht :/) und mit dem Stromverbrauch der eingesparten Server vergleichen
Falls effektiv am eigenen Computer kein Unterschied beim Stromverbrauch gibt, dann ist wohl debdelta (vom CO₂-Einfluss her) sinnvoller.

Und zum Datenverkehr alleine: Einmal googlen entspricht einer Stunde Licht
und 20 Milligramm/Sekunde im Internet. Beides sicher stark vereinfacht und schwer nachzuprüfen. Vielleicht ist dein Amethystpendel doch sinnvoller

[Tintom]

Frage: Laut Beschreibung lädt debdelta nur die Änderungen am Quelltext runter, d.h. muss ich dann wenn ich bspw. Openoffice aktualisieren will, die Quellen + alle benötigten dev-Pakete auf dem Rechner haben und dann Openoffice komplett neu übersetzen?

[Saxman]

Frage: Laut Beschreibung lädt debdelta nur die Änderungen am Quelltext runter, d.h. muss ich dann wenn ich bspw. Openoffice aktualisieren will, die Quellen + alle benötigten dev-Pakete auf dem Rechner haben und dann Openoffice komplett neu übersetzen?

Nein, das brauchst du nicht. debdelta vergleicht und verarbeitet nur die Unterschiede in den Debian Paketen. Es wird nicht alles von Grund auf neu gebaut.

[AxelMD]

Hi Gemeinde,

heute habe ich ein

Code: Alles auswählen

aptitude update
debdelta-upgerade 

ausgeführt. Es wurden mit als Download 83,4 MB angezeigt.

Bei Test, wie folgt

Code: Alles auswählen

aptitude update
aptitude full-upgrade

wurden mir auch als Download 83,4 MB angezeigt.

Wo liegt der Erfolg?
Hatte ich zuvor die "debdelta-upgrade" initialisierung löschen müssen, um ein Erfolg zu sehen?
Wenn ja, wie?


Danke Saxmann allgemein für den Hinweis, ich lerne gerne dazu.


MfG

Axel

[yeti]

Wo liegt der Erfolg?
Hatte ich zuvor die "debdelta-upgrade" initialisierung löschen müssen, um ein Erfolg zu sehen?
Wenn ja, wie?

Benutzt Du Lenny?

Diese Suite enthält »debdelta-upgrade«, das debdeltas abruft und mit diesen alle für ein »apt-get upgrade« erforderlichen Debian-Pakete erstellt. Es kann in Debian/unstable-Rechnern (zur Beschleunigung des Downloads neuer Pakete) oder in Debian/stable-Rechnern (für Sicherheits-Updates) eingesetzt werden.

[AxelMD]

Hallo Yeti,

ich benutze Debian Testing (Squeeze).

Dort steht in der Paket beschreibung:

Paket: debdelta (0.39trl)

Die Programmsammlung »debdelta« wurde entwickelt, um Veränderungen zwischen Debian-Paketen zu erkennen. Diese Änderungen (Deltas) ähneln insofern der Ausgabe des »diff«-Programms, als dass sie zur Speicherung und Übermittlung lediglich der Unterschiede zwischen unterschiedlichen Versionen eines Debian-Pakets verwendet werden können.

Diese Suite enthält »debdelta-upgrade«, das Deltas abruft und mit diesen alle für ein »apt-get upgrade« erforderlichen Debian-Pakete erstellt. Es kann in Debian/unstable-Rechnern (zur Beschleunigung des Downloads neuer Pakete) oder in Debian/stable-Rechnern (für Sicherheits-Updates) eingesetzt werden.

Ebenso wird, wenn dieses Paket installiert ist, die Paketverwaltung »cupt« für ein Upgrade des Rechners Deltas verwenden.

So richtig schlauer bin ich trotzdem nicht.
Ob das evtl. mit dem jetzigen Freeze zusammenhängt?


MfG

AxelMD

[Saxman]

Du wirst schon den kompletten Output hier posten müssen um dazu was sagen zu können.
Aus deiner Aussage werde Ich leider nicht ganz schlau.

Der Output schaut normalerweise so aus.
Ich hab jetzt fast nichts zum upgraden deswegen unspektakulär.

Code: Alles auswählen

[...]Delta-upgrade statistics:
 total resulting debs size 357 k time 3sec virtual speed: 116 k/sec

Aber wie du siehst müssen diese 357k nicht mehr heruntergeladen werden.

Code: Alles auswählen

#aptitude full-upgrade 
Die folgenden Pakete werden aktualisiert:     
  libquicktime1 
1 Pakete aktualisiert, 0 zusätzlich installiert, 0 werden entfernt und 2 nicht aktualisiert.
Muss 0 B/357 kB an Archiven herunterladen. Nach dem Entpacken werden 0 B zusätzlich belegt sein.

/Edit

Und nochmal am Rande. Als zur Geschwindigkeit schreibt der Autor selbst.

All in all, I still cannot obtain high speeds: so people that have a
ADSL Internet connection faster than 300kB/sec usually are better
downloading all the debs, and ignoring "debdelta-upgrade" alltogether.
Anyway, the best way to know is to try "debdelta-upgrade -v" and
read the final statistics.

[AxelMD]

Hallo Saxmann,

ich habe heute keine Verminderung des Download durch Verwendung von "debdelta-upgrade" festellen können.
Das Output habe ich leider nicht gespeichtert.

Beim nächten Update werde ich es tun.

MfG

AxelMD

[deberik]

Ich hab ein Mischsystem aus Squeeze/Sid (und 1, 2 Pakete aus Experimental). Bei der Verwendung von debtags sehe ich jetzt leider nicht mehr, ob ein Paket aus Squeeze, Sid oder Experimental kommt. Hat jemand ne Ahnung ob und wie man das wieder in die Ausgabe einbauen kann?

Erik

[Saxman]

Laut Readme wird der Ursprung wohl nicht festgehalten..

--- The archive

Consider a package that is currently installed. It is characterized by
name installed_version architecture
(unfortunately there is no way to tell from which archive it came
from, but this does not seem to be a problem currently)[...]

mehr unter:

Code: Alles auswählen

zcat /usr/share/doc/debdelta/README.upgrade.gz