Kategoriearchive: Snippets

Ein kleines quick-and-dirty Script, um die Datei dpkg.log mit PHP auszuwerten.
Zu sehen sind die X zuletzt installierten- sowie entfernten Pakete.

Die Logs rotieren in der Regel jeden Monat!

Getestet unter Debian Wheezy und Ubuntu 12.04 mit DPKG 1.16.x sowie PHP >= 5.3.

Falls „open_basedir“ via PHP-Option gesetzt ist, muss „/var/log“ freigegeben werden.

Einstellungsmöglichkeiten sind in den ersten 3 Variablen gegeben.








Installierte Pakete (max. )
";
	echo "";
	echo "";
	echo "";
	$at++;
  }
}
?>

Installiert am Name Arch. Version
", $date->format('d.m.Y H:i:s'), " ", $pkgdetails[0], " ", $pkgdetails[1], " ", $lines_ex[5], "

Entfernte Pakete (max. )
";
	echo "";
	echo "";
	echo "";
	$at++;
  }
}
?>

Entfernt am Name Arch. Version
", $date->format('d.m.Y H:i:s'), " ", $pkgdetails[0], " ", $pkgdetails[1], " ", $lines_ex[4], "

Installiert am	Name	Arch.	Version
", $date->format('d.m.Y H:i:s'), "	", $pkgdetails[0], "	", $pkgdetails[1], "	", $lines_ex[5], "

Entfernt am	Name	Arch.	Version
", $date->format('d.m.Y H:i:s'), "	", $pkgdetails[0], "	", $pkgdetails[1], "	", $lines_ex[4], "

Apt-fast in Debian

30. Januar 2014, 19:23

André P.

Debian Snippets Keine Kommentare

Kurz und knapp, da meine Zeit momentan begrenzt ist: Ich möchte aufzeigen, wie Debian um den Helfer „apt-fast“ erweitert werden kann.
Vorab werde ich die schnellsten Debian Mirrors in meiner Nähe ermitteln und konfigurieren.

Kurze Beschreibung via „ubuntuusers.de“:

apt-fast ist ein von Matt Parnell und einigen Mitwirkenden geschriebener Shell-Wrapper für die Kommandozeilentools apt-get und aptitude. Mithilfe des Downloadhelfers aria2 werden die Debianpakete zur Aktualisierung oder Installation über mehrere Verbindungen heruntergeladen. Somit können je nach eigener Bandbreite erhebliche Geschwindigkeitsvorteile erzielt werden.

Für die Ermittlung der Mirrors verwende ich „netselect-apt“. Der Download-Manager „aria2“ wird direkt mitinstalliert:

sudo apt-get install netselect-apt aria2

„netselect-apt“ ausführen und die zehn schnellsten Mirrors ermitteln:

netselect-apt -t 10

Die Ausgabe der letzten Zeilen ist später wichtig, zum Beispiel:

The fastest 10 servers seem to be:
http://ftp.freenet.de/debian/
http://ftp.freenet.de/debian/
http://ftp.plusline.de/debian/
http://mirror.nl.leaseweb.net/debian/
http://ftp.surfnet.nl/os/Linux/distr/debian/
http://debian.netcologne.de/debian/
http://artfiles.org/debian/
http://mirror.de.leaseweb.net/debian/
http://mirror.1und1.de/debian/
http://ftp.informatik.uni-frankfurt.de/debian/

Das Script „apt-fast“ von Github herunterladen und installieren.
Gleichzeitig installiere ich die Datei für das Bash-Autocomplete, welches jedoch erst nach einem Neustart der Bash wirksam wird:

wget -O /etc/bash_completion.d/apt-fast https://raw.github.com/ilikenwf/apt-fast/master/completions/bash/apt-fast
wget -O /usr/bin/apt-fast https://raw.github.com/ilikenwf/apt-fast/master/apt-fast && chmod +x /usr/bin/apt-fast

Zum Abschluss die Konfiguration anlegen. Die Parameter für die Einstellung eines Proxys lasse ich weg, falls benötigt, bitte hier klicken.

Unter MIRRORS definiere ich die von „netselect-apt“ vorgeschalgenen Mirrors.
Achtung: Unbedingt auf die Syntax achten.

sudo nano /etc/apt-fast.conf

Mit Inhalt:
/etc/apt-fast.conf

# Pakete ohne Zustimmung direkt herunterladen (nicht installieren)
DOWNLOADBEFORE=true
# Gleichzeitges herunterladen von X Paketen
_MAXNUM=10
# "apt-get" benutzen, Alternative: "aptitude"
_APTMGR=apt-get
# Mirrors, "netselect-apt" Auswahl
MIRRORS=( 'http://ftp.plusline.de/debian/,http://ftp.freenet.de/debian/,http://mirror.nl.leaseweb.net/debian/'
	'http://ftp.freenet.de/debian/,http://ftp.nluug.nl/pub/os/Linux/distr/debian/,http://ftp.nluug.nl/pub/os/Linux/distr/debian/'
	'http://artfiles.org/debian/,http://mirror.de.leaseweb.net/debian/,http://mirror.1und1.de/debian/'
	'http://ftp.informatik.uni-frankfurt.de/debian/' )
# Download-Verzeichnis für "apt-fast"
DLDIR=/var/cache/apt/archives/apt-fast
# Apt Archive
APTCACHE=/var/cache/apt/archives
# Terminal-Farben
cGreen='\e[0;32m'
cRed='\e[0;31m'
cBlue='\e[0;34m'
endColor='\e[0m'

„Apt-fast“ kann nun verwendet werden.

„Mother Of All Ad-Blocking“

15. Januar 2014, 21:13

André P.

Debian Snippets Ubuntu 4 Kommentare

Im XDA-Forum gibt es die „Mother Of All Ad-Blocking“ für Android-Geräte. Hierbei wird eine individuelle „hosts“-Datei installiert und so Werbung blockiert.
Ob für den lokalen DNS-Server, den Desktop oder das Smartphone: Werbung blockieren tut in der heutigen Zeit immer gut, denn es spart Bandbreite und, ganz wichtig, schont die Nerven.

Changelog

16.01.2014 – Cronjob ersetzt, da vorher nicht auf allen Debian/Ubuntu-Varianten gleichermaßen funktionsfähig

Die angebotene Liste ist eine große Zusammenfassung aus verschiedenen Quellen, weshalb ich sie lokal auf einem DNS-Server installieren möchte. Als Nameserver-Forwarder benutze ich „dnsmasq“, welcher, sofern nicht anders konfiguriert, die Einträge aus der „hosts“-Datei respektiert (=kein „no-hosts“ in der Konfiguration).
Der Download erfolgt via „http://adblock.mahakala.is“. Mit „wget“ und „curl“ funktioniert der Download nicht direkt, weshalb „Mozilla/5.0“ als User-Agent gesetzt wird. Außerdem hat die Liste eine eigene Kopfzeile, die weg geschnitten werden muss:

# AD BLOCKING by: Jake Thomas
# Last Update on: 07 January 2014
# Domain Block Count: 339285
# contact me on XDA: http://forum.xda-developers.com/member.php?u=4877037
# Copyright (c) 2007-2014, Jake Thomas (BSDgeek_Jake) (thomasj-gnugpl@usa.net)

# DEFAULT
127.0.0.1 localhost
127.0.0.1 localhost.localdomain
255.255.255.255 broadcasthost
127.0.0.1 android

Vorhandene/Eigene Einträge möchte ich zudem beibehalten. Der Einfachheit halber verwende ich „curl“ für den Download, dieses kann vorab installiert werden. Für Debian und Derivate:

sudo apt-get install curl

Der Befehl, um die Liste einmalig anzuhängen (als root):

curl -s -A "Mozilla/5.0" http://adblock.mahakala.is | \
sed -e '1,/android/d' >> /etc/hosts

Zum aktualisieren der Liste (ebenfalls als root):
ACHTUNG: Das Aktualisieren funktioniert nur, wenn die Liste bereits einmal angehängt wurde, da „sed“ nach „BLOCKING STARTS“ sucht.

sed -n "/BLOCKING STARTS/q;p" /etc/hosts >> /etc/hosts.new && curl -s -A "Mozilla/5.0" http://adblock.mahakala.is | sed -e "1,/android/d" >> /etc/hosts.new && mv /etc/hosts.new /etc/hosts && sed -i '/^$/d' /etc/hosts

Und als Cronjob jeden Tag aktualisieren:

sudo crontab -e

Einfügen:

0 0 */1 * * PATH=/usr/bin:/bin sed -n "/BLOCKING STARTS/q;p" /etc/hosts >> /etc/hosts.new && curl -s -A "Mozilla/5.0" http://adblock.mahakala.is | sed -e "1,/android/d" >> /etc/hosts.new && mv /etc/hosts.new /etc/hosts && sed -i '/^$/d' /etc/hosts

Das schöne ist, dass zusätzlich viel In-App Werbung blockiert wird, wenn das Smartphone im WLAN des eigenen DNS-Servers steht. Aber auch so, auf dem Desktop, ist es eine sehr umfangreiche Liste.

Optional: Alternative als dnsmasq-Konfigurationsdatei

Via „yoyo.org“ ist es möglich, eine etwas weniger umfangreiche, dennoch starke Liste, komplett im Konfigurations-Format des „dnsmasq“ herunterzuladen.
Einmalig herunterladen und aktivieren:

sudo wget -O /etc/dnsmasq.d/adblock.conf "http://pgl.yoyo.org/adservers/serverlist.php?hostformat=dnsmasq&showintro=0&mimetype=plaintext" && sudo service dnsmasq restart

Als Cronjob jeden Tag aktualisieren:

sudo crontab -e

Einfügen:

0 0 */1 * * wget -O /etc/dnsmasq.d/adblock.conf "http://pgl.yoyo.org/adservers/serverlist.php?hostformat=dnsmasq&showintro=0&mimetype=plaintext" && service dnsmasq restart

Anmerkung: Ich fühle mich verpflichtet zu sagen, dass Entwickler guter Software immer unterstützt werden sollten. Wer keine Werbung will, der kauft die „Pro/Ultra/Sonstwas“-Version von XY.
Leider gibt es auch dubiose Entwickler, die trotz Bezahlung noch vereinzelt Werbung einblenden, wofür ich kein Verständnis habe.

Command-Line: Mail mit Anhang

9. Januar 2014, 21:01

André P.

Debian Linux Snippets Ubuntu 2 Kommentare

Ein kleines Snippet, um Mails mit Anhang via „mail“-Befehl zu versenden.
Unter Debian und Ubuntu das Paket „sharutils“ installieren. Hiermit können Dateien für den Mail-Versand vorbereit werden:

sudo apt-get install sharutils

Das Format lautet: uuencode lokale_datei.any empfaenger_dateiname.any.
Die lokale Datei kann also unter anderem Namen versendet werden.

Hier ein paar Beispiele, angefangen mit dem einfachen Versenden einer Datei:

uuencode datei.jpeg datei.jpeg | mail empfaenger@domain.tld

Mit Nachricht – alternativ: „echo“:

(cat Nachricht; uuencode datei.jpeg datei.jpeg) | mail empfaenger@domain.tld

Mit Absender und Betreff:

(cat Nachricht; uuencode datei.jpeg datei.jpeg) | mail -a "From: Absendername " -s "Betreff" empfaenger@domain.tld

Mit Absender, Betreff und UTF-8 Encoding („multiple header“):

(cat Nachricht; uuencode datei.jpeg datei.jpeg) | mail -a "`echo -e "Charset: UTF-8\nFrom: Absendername "`" -s "Betreff" empfaenger@domain.tld

Alternativen

Heute, dem 15.01.2014, möchte ich noch moderne Alternativen ergänzen, angefangen mit „mutt“, welches MIME-konform ist:

sudo apt-get install mutt

Beispiel mit Nachricht und Betreff:

 echo "Nachricht" | mutt -s "Betreff" empfaenger@domain.tld -a datei.jpeg

Zweite Alternative mit „uuenview“ – Kann quasi alles, was „uuencode“ bietet, ist jedoch wie „mutt“ MIME-konform:

sudo apt-get install uudeview

Beispiel mit Nachricht und Betreff („-a“ für Eingabe der Nachricht via „stdin“:

cat Nachricht | uuenview -b datei.jpeg -m empfaenger@domain.tld -a

Debian: Non-interactive upgrade script

2. Januar 2014, 12:34

André P.

Debian Snippets Keine Kommentare

Oft nach gefragt, hier beantwortet: Im neuen Debian Handbook wird ein „non-interactive upgrade script“ wie folgt vorgeschlagen:

#!/bin/bash
export DEBIAN_FRONTEND=noninteractive
yes '' | apt-get -y -o Dpkg::Options::="--force-confdef" -o Dpkg::Options::="--force-confold" dist-upgrade

„force-confold“ und „force-confdef“ kombiniert gibt durchaus Sinn. So wird ein Hänger beim Upgrade definitiv verhindert. Es wird stets die aktuelle Konfiguration behalten, gibt es keine, werden die Standardwerte verwendet.