Dateien Zeilenweise ausschneiden und zusammenfügen

Hallo Zusammen,
hier eine wahrscheinlich einfache Aufgabe, meine skripting Fähigkeiten sind aber nicht die bessten.

Ich habe viele Dateien (100-10k), mit je 1kB-100MB, die alle in einem Ordner liegen und ich zusammen fügen möchte.
Es sollen von allen Dateien die ersten 4 Zeilen und die letzte Zeile entfernt werden, dann alle Zusammengefügt (Reihenfolge ist egal) und bei der Zusammengefügten Datei die ersten 4 und letzte Zeile wieder ergänt werden.

Das löschen und zusammenfügen klappt (wenn auch nicht effizient), nur den Kopf (ersten 4 Zeilen) und den Fuss (letzte Zeile) bekomme ich nicht hin:

Code:

---

#!/bin/bash

# Kopfzeile in Datei ...
find * -name "*.gml" -print0 | while read -d $'\0' f
do
        tail -n+4 $f > $f.tmp
        sed '$ d' $f.tmp > $f.tmp2
        cat $f.tmp2 >> alle.gml
        rm $f.tmp $f.tmp2
        # head='tail -2 $f'
done
# echo "$head" >> alle.gml # Fusszeile in Datei

---

OS Ist Ubuntu, falls relevant.

Ich bin dankbar für jede hilfe :)

Ich würde es in Perl lösen. Dabei würde ich die jede Datei in ein Array einlesen. Und dann bei der ersten Datei den Header ausgeben und die letzte Zeile merken, ansonsten immer ab Positon 4 bis zur vorletzten Zeile das Array in deine gesamt Datei ausgeben. Zum Schluss musst Du nur noch die letzte Zeile ausgeben.
Nachteil der Variante du benötigst entsprechend RAM.

Einfach eine Pipe nehmen:

Code:

---


 tail -n+4 $f  | sed '$ d' >> alle.gml

---

Vielen Dank euch beiden. Was haltet ihr hiervon?

Code:

---

#!/bin/bash
# chmod u+x /var/bash/merge_gml.sh

# get first two lines
find * -name "*.gml" -print0 | while read -d $'\0' f
do
        head -n+2 $f  > ../all.gml
        break
done

# body of everyfile
find * -name "*.gml" -print0 | while read -d $'\0' f
do
        echo $f "added ..."
        tail -n+4 $f  | sed '$ d' >> ../all.gml
done

# get last line
find * -name "*.gml" -print0 | while read -d $'\0' f
do
        tail --lines=1 $f >> ../all.gml
        break
done

---

Ist nicht sehr schnell, aber funktioniert soweit. Was könnte man optimieren?

Leider bin ich den Skriptens nicht mehr wirklich mächtig. Einst konnte ich sehr gut php, aber wenn man das nicht mehr benötigt ... ich habe mir aber vorgenommen Python zu lernen. So etwas in der Art sollte damit ja Plattformübergreifend auch funktionieren?