TYPOlight schneller auf Webspace hochladen

[Nina]

Ein Tipp von Leo aus dem alten Forum, an den mich Alex gerade mal wieder erinnert hat. Diese Technik funktioniert natürlich nur, wenn das für euren Webspace vom Webhoster rechtemäßig erlaubt ist.

Wenn normalerweise der frische Upload der TL-Daten per FTP auf einen Webspace ewig dauert, kann man das mit der nachfolgenden Technik schneller machen. Man erstelle sich eine PHP-Datei mit nachfolgendem Inhalt. Die Links bzw. den Dateinamen muss man natürlich immer an die gerade aktive Version anpassen, die man hier findet.

<?php
shell_exec("wget http://prdownloads.sourceforge.net/typolight/typolight-2.7.2.tar.gz?download");
shell_exec("tar -xzf typolight-2.7.2.tar.gz");
?>

Diese Datei läd man auf den Server in das Verzeichnis, in dem man TYPOlight installieren möchte, und ruft sie im Browser auf. Ein paar Sekunden später sind alle Dateien an Ort und Stelle.

Die Funktion "shell_exec()" sollte nicht gesperrt sein und es sollte ein Unix-Server sein (weiß nicht, ob IIS "wget" versteht).

Axel hatte dazu noch diese Anmerkung:
In WinSCP gehe ich auf "Befehle" - "Terminal öffnen" und trage dann genau das ein, was Leo geschrieben hat (wget ...). Danach zurück in WinSCP, Rechtsklick auf die TL-Datei "Benutzerdefinierte Befehle" - UnTar ... oder eben dann gleich im Terminalfenster die 2. Zeile von Leo eintragen.

Schlauchbeutelmaschine meinte noch:
Wenn man die hochgeladenen Dateien nicht bearbeiten kann, haben sie vermutlich einen anderen Nutzer zugeteilt bekommen. Bei manchen Hostern kann man die Benutzerrechte im Adminbereich ändern.

[Toflar]

Ich finde wichtig ist vor allem, dass shell_exec im SafeMode nicht funktioniert

[lucina]

Ich finde wichtig ist vor allem, dass shell_exec im SafeMode nicht funktioniert :)

Das stimmt so nicht, sondern ist providerabhängig. Für die WepPacks Pro von Hosteurope funktioniert es jedenfalls, und es hat obendrein den Vorteil, dass die Installation bereits mit den Rechten des FTP-Users versehen ist.

Carolina.

[redbecks]

Also ich habe es jetzt mal bei Strato ausprobiert und es hat ohne probleme funktioniert ohne irgendelche Einstellungen etc. und der Server ist ein "SunOS"

// Probiert im PowerPlus-Paket

[Schlauchbeutelmaschine]

Für den Fall das man den Shell Befehl nicht direkt ausführen kann, finde ich diese Lösung ganz praktisch.

Da TYPOlight schon viele Dateien hat reduziert sich dadurch die Uploadzeit deutlich.
Oder auch wenn man hinter einer Firewall sitzt.

[Toflar]

Das stimmt so nicht, sondern ist providerabhängig. Für die WepPacks Pro von Hosteurope funktioniert es jedenfalls, und es hat obendrein den Vorteil, dass die Installation bereits mit den Rechten des FTP-Users versehen ist.

Carolina.

php.net
Note: This function is disabled when PHP is running in safe mode.

[manitougs]

Hi

Prinzipiell finde ich das ja eine sehr gute Idee: http://https://contao.org/ticket/812

lg mani

[lucina]

Eigentlich bräuchte es dazu nur diesen PHP-Schnipsel sowie die Ablage der jeweils letzten TL-Version in einer Datei
http://.../typolight-stable.tar.gz, die dann bei sourceforge liegt. Machen andere ja auch.

LG, Carolina.

[Nina]

Ich habe mal eine Anfrage an All-Inkl gestartet, weshalb wget keinerlei Aktion auslöst ...

Nachtrag: Der All-Inkl Mitarbeiter sagte, dass wget bei All-Inkl nicht funktioniert. Weshalb das so ist, wurde leider nicht erklärt.

[Toffa]

Bei one.com funktioniert es leider auch nicht. Aber der Tipp ist gut.

[osterwaldi]

Ich habs gerade bei 1und1 probiert. Hier funktioniert es auch.

Ich hab aber allerdings noch eine Frage dazu. Wie bekomme ich es hin, dass die Dateien nicht in den Ordner 'typolight-2.7.1' entpackt werden, sondern in den gleichen Ordner in dem auch die php-Datei steht?

So hab ich's versucht: tl-upload.php in den Ordner 'meinverzeichnis' kopiert und ausgeführt. Hiermit wird aber nur das tar-File in 'meinverzeichnis' kopiert. Entpackt wird aber nichts.

<?php
shell_exec("wget http://prdownloads.sourceforge.net/typolight/typolight-2.7.1.tar.gz?download");
shell_exec("tar -xzf typolight-2.7.1.tar.gz -c ./meinverzeichnis");
?>

Gruß
Michael

[lucina]

http://unixhelp.ed.ac.uk/CGI/man-cgi?tar

LG, Carolina.

[osterwaldi]

Hallo Carolina,

vielen Dank für die Info.
Ich habe nun mit dieser Info noch einige Änderungen versucht.
Leider mit ich auf keinen grünen Zweig gekommen .
Es wir mir immer nur das tar-File heruntergeladen, aber nicht entpackt.

Gruß
Michael

[BugBuster]

dann mach doch mal die letzte Zeile so und füge dabei noch an::

$output = shell_exec("tar -xzf typolight-2.7.1.tar.gz -c ./meinverzeichnis"); 
echo "<pre>$output</pre>"; 

Dann sollten wir, hoffe ich, die Fehlermeldung sehen, wie z.B. "tar" nicht gefunden (weil nicht im Suchpfad) oder ähliches.

[Carsten29]

Bei 1und1 gibt es ja noch den Webspace Explorer mit dem kann man ein zip Paket hochladen und in die jeweiligen Ordner entpacken.

Hab so immer die aktuelle Version auf dem Server und wenn ich eine Installieren will entpack ich sie im gewünschten Verzeichniss

Gruß Carsten

[Psi]

Ich habe mal eine Anfrage an All-Inkl gestartet, weshalb wget keinerlei Aktion auslöst ...

Nachtrag: Der All-Inkl Mitarbeiter sagte, dass wget bei All-Inkl nicht funktioniert. Weshalb das so ist, wurde leider nicht erklärt.

wget wird bei Angriffen oft verwendet, um Schadcode auf den Server zu ziehen. Clever parametrisiert kann so zB. eine bestehende PHP-Datei durch eine Eigene ersetzt werden. Aus diesem Grund wird das Programm gerne deaktiviert.

Aber die Programmierung eines kleinen Wizzards zum entpacken einer tar-File sollte wohl ein einfaches Unterfangen sein.

Ich selbest verschiebe mein TYPOlight-Pages meist über SSH:

tar -czf - * .htaccess | ssh USER@HOST "tar -C TARGET_DIR -xzf - --no-same-owner"

Ausgesprochen: Packe alle Dateien und die .htaccess per TAR in einen SSH-Tunnel nach USER@HOST und entpacke auf dem entfernten PC den Bytestrom aus dem SSH-Tunnel.
die Option "-C TARGET_DIR" ist einfach zum vorherigen Wechsel in ein Unterverzeichnis.

[osterwaldi]

Hallo BugBuster,
die Zeilen bringen mich leider auch nicht weiter, es wird keine Fehlermeldung ausgegeben. Selbst wenn ich an meine Zeilen nur ein 'echo "Test";' anhänge wird dies nicht ausgegeben. Wenn ich nur 'echo "Test";' in die php-Datei einfüge wird 'test' ausgegeben.

dann mach doch mal die letzte Zeile so und füge dabei noch an::

$output = shell_exec("tar -xzf typolight-2.7.1.tar.gz -c ./meinverzeichnis"); 
echo "<pre>$output</pre>"; 

Dann sollten wir, hoffe ich, die Fehlermeldung sehen, wie z.B. "tar" nicht gefunden (weil nicht im Suchpfad) oder ähliches.

Gruß
Michael

[mgco3]

Hallo Zusammen

Statt shell_exec kann man auch den PHP Befehl System verwenden... welcher unter umständen auch bei Safe Mode on funktioniert.

Bezüglich wget: Da oftmals deaktiviert würde ich zu Curl raten. Sprich datei mittels

system('curl http:/../dateiname > zieldatei');

runterladen... allenfalls die Zieldatei erst mit

<?php touch('zieldatei');?>

erstellen.

Oder falls die PHP Curl-Extension installiert ist damit. (http://ch2.php.net/manual/en/ref.curl.php)
Bedingt natürlich dass das Verzeichniss chmod 755 besitzt.

@osterwaldi
Bist du sicher wird alles im richtigen Verzeichniss ausgeführt?


Grüsse

[Stranger]

Vielen Dank für diesen Tipp. Das ist ja meeeeeegakrass und geil. Entschuldigt meine Ausdrucksweise

Und wie macht man das ganze umgekehrt? Also wie packe ich einen Ordner, der schon auf dem Server liegt, damit ich ihn schneller herunterladen kann?

[FloB]

<?php
shell_exec("wget http://prdownloads.sourceforge.net/typolight/typolight-2.7.1.tar.gz?download");
shell_exec("tar -xzf typolight-2.7.1.tar.gz -c ./meinverzeichnis");
?>

Das kann nicht funktionieren, das -c rechts sollte ein großes C sein (-C). Also:

tar -xzf typolight-2.*.*.tar.gz -C /pfad/zu/tl/

Problem ist allerdings, dass alle Daten nochmal in das Verzeichnis typolight-2.*.*/ gepackt sind, somit die Idee mit -C nicht so funktioniert, wie sie sollte … jemand ne Idee, wie ich tar beibringen könnte, dieses Verzeichnis zu ignorieren?

[Nils Riel]

Wo liegt der Fehler (wie ist es zu lösen), wenn nach dem Upload der Daten, keine davon bearbeitet/gelöscht/umbenannt o.s. gemacht werden kann?
Was muss ich meinem Hoster sagen, damit das funktioniert?

[markus.milkereit]

Als Ergänzung bei denen es nicht funktioniert: auch sehr schön ist ein FTP-Programm, dass entzippen auf dem Server beherrscht, zum Beispiel der Webclient http://www.net2ftp.com/.
Damit kann man die gezippte Version hochladen und auf dem Server entpacken - was viel Zeit spart gegenüber dem Upload der entpackten Ordner.

Ninas Methode ist nochmal deutlich schneller, dafür funktioniert die hier immer

Gruß
Markus

[markus.milkereit]

@Nils das hat sicher mit Benutzerrechten der Dateien zu tun. Am einfachsten kannst du das mit dem Typolight-Check anzeigen lassen, dort werden aktueller Inhaber und Gruppe angezeigt und farbig hinterlegt wenn es Probleme geben könnte.

Bei manchen Hostern (Host Europe) gibt es Tools den Benutzer selbst zu ändern - bei den meisten nicht.

Gruß
Markus

[lucina]

jemand ne Idee, wie ich tar beibringen könnte, dieses Verzeichnis zu ignorieren?

/SET MODE pragmatic ON

Ich benenne das dann ganz einfach um.
Carolina.

[FloB]

Die Lösung ist mir bereits bekannt, ich bin aber faul .

[FloB]

Die Lösung für die "Bequemen":

Option "--strip-components N":
   Strip the given number of leading directory components

Somit lautet der Befehl:

tar -xzf typolight-2.*.*.tar.gz -C /zielpfad/zur/typolight/intallation/ --strip-components 1

[Stranger]

Wie lautet der PHP-Befehl um einen oder am besten mehrere Ordner auf dem Server zu packen?

[FloB]

man tar

hilft immer weiter. Packen mit Option "-c" (create) statt "-x" (extract). "-z" gibt an, dass die Datei komprimiert sein soll (mit gzip), ohne die Option wird eine Tarball angelegt.

tar -czf dateiname.tar.gz /pfad/

[m-werk]

Hallo,

zu diesem Thema habe ich noch eine Frage:
Es wird ja die ganze tar Datei hochgeladen und entpackt.

Das heißt auch, dass die datei "localconfig.php" mit entpackt wird und die aktuelle hierbei auf dem Webserver überschrieben wird.

Ist das richtig?

[lucina]

Das heißt auch, dass die datei "localconfig.php" mit entpackt wird und die aktuelle hierbei auf dem Webserver überschrieben wird.
Ist das richtig?

Das ist korrekt.
Carolina

[m-werk]

Gibt's vielleicht dafür auch eine Lösung, so dass ich definieren kann, was NICHT entpackt werden soll bzw. was nicht überschrieben werden soll?

[FloB]

--exclude=PATTERN

Pattern könnte man auf "system/config/" oder sogar "system/config/(local|lang|dca)config.php" (ungetestet, "system/config/*?config.php" sollte aber funktionieren) setzen.

Wie immer benutzen:

man tar

[osterwaldi]

Die Lösung für die "Bequemen":

Option "--strip-components N":
   Strip the given number of leading directory components

Somit lautet der Befehl:

tar -xzf typolight-2.*.*.tar.gz -C /zielpfad/zur/typolight/intallation/ --strip-components 1

Hi FloB,
die Ide von Dir war genial.
Ich hab es bei mir nun so gelöst, dass die Files direkt in den Ordner entpackt werden, in dem ich die php-Datei starte.

<?php
shell_exec("wget http://prdownloads.sourceforge.net/typolight/typolight-2.7.2.tar.gz?download");
shell_exec("tar -xzf typolight-2.7.2.tar.gz --strip-components 1");
?>

[schman]

Also bei mir klappt das auch bestens danke für die super Hinweise

mein Befehl sieht nun so aus

tar -xzf typolight-2.7.2.tar.gz --strip-components 1 --exclude="system/config/*?config.php"

@Flob
danke für den Hinweis mit exclude und strip-components

[marcules]

Huhu,

ich wollte zu all-inkl anmerken, daß es "doch" geht

5.) Wie kann ich die Funktionen exec(), system() oder shell_exec() nutzen?

Um diese Befehle in einem Script nutzen zu können, sollten Sie auf die CGI Variante von PHP umschalten, da diese im normalen PHP-Betrieb aus Sicherheitsgründen gesperrt sind. Sie haben dazu folgende Möglichkeiten:

A) Sie geben der betreffenden Datei die Endung .phpx

B) Sie erstellen eine Datei mit dem Namen .htaccess (mit Punkt vorn und ohne Endung) in dem Verzeichnis, in dem Dateien über PHP-CGI ausgeführt werden sollen. Schreiben Sie in diese Datei folgenden Befehl und speichern Sie sie anschließend ab: AddHandler php-fastcgi .php

Bitte beachten Sie, dass bei PHP-CGI strengere Restriktionen für Ressourcen gelten. Sie sollten daher möglichst nicht die gesamte Seite auf PHP-CGI laufen lassen, da bei komplexeren Operationen die Prozesse abgebrochen werden können.

http://all-inkl.com/index.php?open=faq&sek=wichtig


Grüße,
Marc

Edit: Sorry, zu früh gefreut.. wget geht natürlich nicht
Edit 2: curl auch nicht :|
Edit 3: curl hat es anscheinend doch - aber es funktioniert nicht… mal den Support anschreiben ^^
Edit 4: HEUREKA! Mit mgcos Hilfe habe ich es nun hinbekommen auch bei all-inkl.com tl herunter zu laden und zu entpacken!

Hier der PHP-Code (es ist eine normale php-Datei, keine phpx (wird nicht benötigt)):

<?php
$curl = curl_init();
$file = fopen("typolight.zip", "w");
curl_setopt($curl, CURLOPT_URL, "http://surfnet.dl.sourceforge.net/sourceforge/typolight/typolight-2.7.2.zip");
curl_setopt($curl, CURLOPT_FILE, $file);
curl_exec($curl);
curl_close($curl);
fclose($file);
echo "Download Ok!";

sleep(20);

$zip = new ZipArchive;
$zip->open('typolight.zip');
$zip->extractTo('./');
$zip->close();
echo "Entpacken Ok!"; 

?>

Edit 5: Es muss unbedingt ein Server (in diesem fall surfnet) angegeben werden, da die all-inkl-Server irgend ein Problem mit der Weiterleitung von sourceforge haben, d.h. bei neueren Versionen darauf achten!

[FloB]

tar -xzf typolight-2.7.2.tar.gz --strip-components 1 --exclude="system/modules/*?config.php"

Damit zerschießt du dir aber eher deine Extensions, und die Kofigurationsdateien werden auch überschrieben . Im Pfad nicht "modules" sondern "config" verwenden!

[schman]

Damit zerschießt du dir aber eher deine Extensions, und die Kofigurationsdateien werden auch überschrieben . Im Pfad nicht "modules" sondern "config" verwenden!

Ja das ist klar, habs nur hier falsch beschrieben

[m-werk]

Hi,

wenn ich dies schreibe

tar -xzf typolight-2.7.2.tar.gz --strip-components 1 --exclude="system/config/*?config.php

werden die daten in der /config/ nicht überschrieben. Was mach ich, wenn ich zusätzlich noch Daten wie z.B. basic.css welche im Hauptverzeichnis liegt auch nicht mitüberschrieben haben möchte?

[FloB]

Was mach ich, wenn ich zusätzlich noch Daten wie z.B. basic.css welche im Hauptverzeichnis liegt auch nicht mitüberschrieben haben möchte?

Wenn du mehrere Ausnahmen hast, würde ich mit "--exclude-file" arbeiten. Hier werden die Ausnahmen in eine Datei geschrieben, pro Zeile eine. Per Parameter wird diese Datei dann geladen (siehe immernoch `man tar`). Eventuell geht es auch, wenn du eine neue Zeile in den Parameterstring einbaust:

tar -xzf typolight-2.7.2.tar.gz --strip-components 1 --exclude="system/config/*?config.php
*.css"

[xchs]

@marcules

Habe auch ein Hosting bei All-Inkl und würde gerne wissen, ob das von Dir gepostete Skript mittels curl-Abfrage so nun funktioniert?

Wäre es in diesem Zusammenhang auch möglich, das Skript so zu ergänzen bzw. anzupassen, dass z.B. einerseits die Konfigurationsdateien im Config-Verzeichnis nicht überschrieben werden und andererseits das Entpacken sämtlicher Dateien der Demo "Musicacademy" (CSS, tl_files, Template usw.) übersprungen werden?

Wie müsste man denn das Skript umbauen, wenn man anstelle des Zip-Archivs das Tarball-Archiv verwenden möchte (inkl. der oben genannten Ausnahmeregeln)?