Mitglieder per CSV importieren

[VKNet]

Muss diesen Beitrag mal nach oben holen.

Folgende Situation, ich habe die Mitglieder-Daten per CSV und ein SQL-Admin-Tool importiert. Das hat auch alles wunderbar geklappt bis auf das Passwort.
Die Passwörter versuche ich nun erfolglos mitzunehmen. Alle Scripte auf dieser Seite zum erstellen der Passwörter habe ich probiert, jedoch ohne Erfolg.

Die verschlüsselten Passwörter funktionieren einfach nicht.

Nach dem Import erhalte ich beim ersten Versuch eine Fehlermeldung, dass der Request Token invalid wäre. Wenn ich es dann nochmal probiere, wird nur gemeldet, dass der Benutzer nun gesperrt sei. Nehme ich einen anderen Browser, passiert das gleiche auch wenn ich den Cach vorher lösche.

Hat jemand eine Idee woran das liegen könnte?
Wo steckt mein Denkfehler?

Hier das Script das ich verwende:

<?
mysql_connect("localhost", "xxx","xxx") or die ("Keine Verbindung moeglich"); mysql_select_db("xxx") or die ("Die Datenbank existiert nicht.");

$abfrage = mysql_query("SELECT password,username FROM tmp where username!='xxx'");
while ($rs=mysql_fetch_array($abfrage)){

$strSalt = substr(md5(uniqid(mt_rand(), true)), 0, 23);
$pwd = sha1($strSalt . $rs[0]) . ':' . $strSalt;

echo "$rs[0] : $pwd <br>";

mysql_query("UPDATE tl_member SET password='$pwd' where username='$rs[1]'") or die (mysql_error());
}

?>

Es wird nur die erste ID ausgelassen, da dies ein über das BE erstellter Benutzer ist, den ich zur Kontrolle benutze.

[VKNet]

Nach langem Suchen, habe ich den Fehler endlich gefunden.
Beim Import der Daten in die Datenbank hatte sich ein Fehler eingeschlichen. Aus welchen Gründen auch immer, aber in der Spalte "autologin" war kein NULL-Wert, sondern "0x" hinterlegt worden. Nach der Korrektur dieses Wertes klappt jetzt der Login der Mitglieder problemlos.
Wie es dazu kam, ist leider nicht mehr nachvollziehbar. Die Kontroller der Quelldatei ergab keine Besonderheiten oder Fehler. Könnte ein einmaliger Fehler gewesen sein.

[qf_rigo]

Hallo Contao Community,

ich bin auch gerade dabei Mitglieder über eine CSV direkt in die Datenbank von Contao einzutragen.
Der Import funktioniert und ich kann mich mit den angelegten Memberdaten auch im FE anmelden.

Es gibt nur noch ein Problem; Sobald ich im BE in den Mitgliederbereich gehe werden zwar alle Memeber aufgelistet aber ich kann diese nicht Bearbeiten. Es erscheint immer nur die Meldung: "Es ist ein Fehler aufgetreten".
Nachdem mir im BE -> Member alle importierten Member aufgelistet wurden, werden diese Datensätze alle wieder von Contao entfernt. Also alle die ich über mein Skript importiert habe.
Irgendwo muss es wohl einen falschen Wert geben, der Contao dazu veranlasst diese fehlerhaften Datensätze zu entfernen.

Nachfolgend mein Query:

                $query = "INSERT DELAYED INTO tl_member
                            (    tstamp,
                                firstname,
                                lastname,
                                email,
                                language,
                                groups,
                                login,
                                username,
                                password,
                                dateAdded
                                
                            ) VALUES (
                                '".time()."',
                                '".$abonummer."',
                                '".$abonummer."',
                                'auto@import.qf',
                                'de',
                                '".serialize(array('2'))."',
                                '1',
                                '".$abonummer."',
                                '".$strSalt."',
                                '".time()."'
                            )";
                mysql_query($query) or die(mysql_error()); 

Und wie gesagt im FE funktionieren alle Daten mit Login und richtiger Gruppe. Dies hab ich anhand von Downloads getestet dir nur bestimmten Gruppen angezeigt werden sollen.

Die Variablen bestehen ausschließlich aus Zahlen, hier Beispielhaft (auch schon getestet, selbiges Problem)

$abonummer = 12423;
$plz = 12354;

$strSalt = substr(md5(uniqid(mt_rand(), true)), 0, 23); 
$strSalt = sha1($strSalt . $plz).':'.$strSalt; 

Fänd ich total super wenn mir jemand einen Tipp bzw. die Lösung sagen könnte. Sitze da schon eine Weile dran.

[qf_rigo]

Achja meine verwendete contao version ist die 2.11.2

[Andreas]

Viellleicht liegt es an der identischen email adresse, die ist pro Member nur einmal erlaubt.

[qf_rigo]

Danke Andreas für deine Antwort. In meinem Beitrag zuvor ist die Mailadresse fix somit haben alle die selbe.
Ich habe es auch mal mit einer fortlaufenden Nummer in der Mailadresse probiert. Leider wieder der selbe Fehler.
Vielleicht liegt es an irgend einem Blob-Feld in der Datenbank - keine Ahnung. Ich habe mir auch eine Erweiterung runtergeladen welche Logins in Contao erstellt. Da habe ich mir auch teilweise den Query raus genommen. Jedoch habe ich die Erweiterung an sich nicht testen können.

Erweiterung:
http://contao.org/en/extension-list/...u-extAuth.html

Query der einen Login in das Contao schreibt:

              // Prepare the Group information
              // get the ID of the requested Group
              $groupname = $GLOBALS['TL_CONFIG']['extAuth_defaultGroup'];
              $objGroup = $this->Database->prepare("SELECT id FROM tl_member_group WHERE name ='$groupname'")
                                       ->limit(1)
                                       ->execute();
              // put the ID into an array and serialize it to be put into the database
              $groupblob = serialize(array($objGroup->id));


          $this->Database->prepare("INSERT INTO tl_member (tstamp, firstname, email, username, password, locked, dateAdded, groups, loginCount, login) VALUES (?, ?, ?, ?, ?, ?, ?, ?, 3, 1)")
                         ->execute(
                               time(),
                               $strUsername,
                               "noreplay@gmx.de",
                               $strUsername,
                               "x",
                               false,
                               time(),
                               $groupblob
                           ); 

[qf_rigo]

Also ich habe meinen Fehler gefunden!
Danke für eure Hilfe!

Lösung ist die Mailadresse gewesen.
Contao prüft anscheinend alles nach dem @
@gmx.qf :: funktioniert
@import.qf :: funktioniert nicht

[redmarketing]

Hallo Leute,

habe soeben per CSV mehrere Mitglieder in phpmyadmin importiert. Nach stundenlanger Fehlerbehebung hat das auch wunderbar geklappt. Das einzige Problem sind die Passwörter. Selbstverständlich werden diese verschlüsselt in die DB geschrieben. Ich muss in Excel allerdings bis zu 2000 Passwörter generieren und diese dann in Contao importieren.
Wie komme ich an den Schlüssel falls vorhanden bzw. wie wandle ich meine 2000 Passwörter um, damit der Login in Contao später läuft?

Leider habe ich von php nur begrenzt Ahnung, weshalb mir die Skripte oben nur wenig weiterhelfen. Gibt es ein Tool o.ä., um das Problem zu lösen? Falls nicht, wäre es nett, wenn mir jemand sagen könnte, was ich mit diesen Skripten anfangen soll.

Vielen Dank schonmal.
Einen schönen Tag noch.
Beste Grüße
Tom

[qf_rigo]

Hallo Leute,

habe soeben per CSV mehrere Mitglieder in phpmyadmin importiert. Nach stundenlanger Fehlerbehebung hat das auch wunderbar geklappt. Das einzige Problem sind die Passwörter. Selbstverständlich werden diese verschlüsselt in die DB geschrieben. Ich muss in Excel allerdings bis zu 2000 Passwörter generieren und diese dann in Contao importieren.
Wie komme ich an den Schlüssel falls vorhanden bzw. wie wandle ich meine 2000 Passwörter um, damit der Login in Contao später läuft?

Leider habe ich von php nur begrenzt Ahnung, weshalb mir die Skripte oben nur wenig weiterhelfen. Gibt es ein Tool o.ä., um das Problem zu lösen? Falls nicht, wäre es nett, wenn mir jemand sagen könnte, was ich mit diesen Skripten anfangen soll.

Vielen Dank schonmal.
Einen schönen Tag noch.
Beste Grüße
Tom

Hallo,

siehe meinen Vorpost:

$strSalt = substr(md5(uniqid(mt_rand(), true)), 0, 23);  
$strSalt = sha1($strSalt . $plz).':'.$strSalt; 

In der ersten Zeile wird ganz zufällig eine Zeichenkette genriert die als "SALT" benutzt wird und
anschließend (2te Zeile) mit dem Passwort zusammengefügt wird. $plz ist in dem Fall dein unverschlüsseltes PW.
Der Rest läuft über php Standardfunktionen ab.
Musst dann nur die §strSalt mit in die Datenbank schreiben anstatt deinem unverschlüsselten PW.

Beste Grüße

[redmarketing]

Hallo,

siehe meinen Vorpost:

$strSalt = substr(md5(uniqid(mt_rand(), true)), 0, 23);  
$strSalt = sha1($strSalt . $plz).':'.$strSalt; 

In der ersten Zeile wird ganz zufällig eine Zeichenkette genriert die als "SALT" benutzt wird und
anschließend (2te Zeile) mit dem Passwort zusammengefügt wird. $plz ist in dem Fall dein unverschlüsseltes PW.
Der Rest läuft über php Standardfunktionen ab.
Musst dann nur die §strSalt mit in die Datenbank schreiben anstatt deinem unverschlüsselten PW.

Beste Grüße

Hallo und danke schonmal für die Hilfe.
Könntest du für mich nochmal genau beschreiben, was ich mit diesem Mini-Skript mache? Wo soll ich das hinschreiben/in welche Datei? Sorry, bin Anfänger

Noch etwas: Du meintest, der Code generiert zufälig eine Zeichenkette. Es müsste doch möglich sein, gleich per php und im selben Skript die 2000 Passwörter zu generieren, diese umzuwandeln und den Mitgliedern zuzordnen oder ist das zu viel verlangt?

[qf_rigo]

Sei mir nicht böse aber um dir hier php bei zu bringen ist der Thread eindeutig nicht geeignet ^^
Als Hilfe kannst du google nutzen. Folgendes wirst du brauchen.
- fopen
- feof
- fgetcsv
- if schleife
- while schleife
- mysql_query (INSERT)
- mysql_select_db
- mysql_connect

Alternativ schau dich nach einer csv import Erweiterung für Contao um.
Mein Skript wird zu deiner Datei nicht passen und Anpassungen kannst du wohl noch nicht selber bewerkstelligen.
Mehr kann ICH dir dazu leider nicht schreiben

PS: Das Skript kann ohne "viel" Mehraufwand natürlich auch mehere Datensätze auf einmal importieren. Ich importiere selber ca. 5.000 bis 6.000 Datensätze damit

[redmarketing]

Sei mir nicht böse aber um dir hier php bei zu bringen ist der Thread eindeutig nicht geeignet ^^
Als Hilfe kannst du google nutzen. Folgendes wirst du brauchen.
- fopen
- feof
- fgetcsv
- if schleife
- while schleife
- mysql_query (INSERT)
- mysql_select_db
- mysql_connect

Alternativ schau dich nach einer csv import Erweiterung für Contao um.
Mein Skript wird zu deiner Datei nicht passen und Anpassungen kannst du wohl noch nicht selber bewerkstelligen.
Mehr kann ICH dir dazu leider nicht schreiben

PS: Das Skript kann ohne "viel" Mehraufwand natürlich auch mehere Datensätze auf einmal importieren. Ich importiere selber ca. 5.000 bis 6.000 Datensätze damit

Hey qf_rigo,

vielen Dank für Deine Hilfe. Ich habe mir jetzt mal schnell die Basics von php angeschaut und ein kleines Skript geschrieben (oberer Teil größtenteils nicht von mir!).
Ich bin neu im Forum und weiß leider nicht, wo ich so etwas posten kann, damit es jemandem mit einem ähnlichen Problem weiterhilft. Falls Ihr das übernehmen wollt, könnt Ihr das gern tun.

FUNKTION:

Passwort-Import in Contao

1.) Passwort generieren
2.) Passwort Contao-gerecht verschlüsseln (sha1)
3.) kleine Übersicht erstellen

DANACH:

Mitglieder per CSV wie gewohnt importieren und in die Passwort-Spalte in der CSV die sha1-Codes (die längeren von beiden Codes) kopieren.
-->> User kann sich mit dem Passwort (die kürzeren von beiden Codes) einloggen. -->> fertig

SKRIPT

<html>
<head>
<style>
table {
    table-layout:fixed;
}
table td {
    width:250px;
}
</style>
</head>
<body>
<?php
//random code genrieren
function random_string()
{
    $character_set_array = array();
    $character_set_array[] = array('count' => 7, 'characters' => 'abcdefghijklmnopqrstuvwxyz');
    $character_set_array[] = array('count' => 1, 'characters' => '0123456789');
    $temp_array = array();
    foreach ($character_set_array as $character_set) {
        for ($i = 0; $i < $character_set['count']; $i++) {
            $temp_array[] = $character_set['characters'][rand(0, strlen($character_set['characters']) - 1)];
        }
    }
    shuffle($temp_array);
    return implode('', $temp_array);
}

//random code x mal ausgeben
    
    ?>
    
    <table>
    <?php
    for($j=0; $j < 2000; $j++)
    {
        $randomstring = random_string();
        echo "<tr><td>".$randomstring."</td>";
        $shastring = sha1($randomstring);
        echo "<td>".$shastring."</td></tr>";
    }
    ?>
    </table>
    
</body>
</html>

[gregor]

Hallo zusammen,

über Tabimporter kann ich eine CSV mit Mitgliederdaten importieren und auch einer Mitgliedergruppe zuweisen. Das funktioniert alles bestens.

Was ich nicht schaffe ist die E-Mail Adresse des Mitglieds einem Newsletter-Verteiler zu zuordnen und auf aktiviert zu setzen.

Den Newsletter-Verteiler weise ich, wie bei der Mitgliedergruppe, über ein serialisiertes Feld hinzu. Bei „createdOn“ setze ich einen aktuellen Zeitstempel.

Was setze ich bei „activation“? Fester Wert 1 für aktiviert oder 0 für nicht aktiviert? Muss ich sonst noch ein Feld verwenden, um einen Newsletter-Verteiler zu zuweisen?

Beim Import der CSV tritt kein Fehler auf, alle Mitgliederdaten werden importiert, nur im Newsletter-Verteiler erscheinen die E-Mail Adressen nicht, bzw. bei den Mitgliederfeldern fehlt die Newsletterzuweisung.

LG
Gregor

[frick.christian]

Hallo Zusammen

Ich habe momentan das gleiche Problem, ich möchte Mitglieder importieren, dass ich den Newsletter personalisieren kann.
Der Import funktioniert einwandfrei, dank der Hilfe dieses Artikels.

Dennoch habe ich ein Problem, an Mitgliedern einen Newsletter zuzuweisen.
In der Datenbank wird ist das Feld "newsletter" ein BLOB Feld - kann dies via CSV-Datei gelöst werden?

Danke euch & Gruss
Chris

[mpscy]

Hallo zusammen,

weiß jemand von euch, ob es bereits eine Lösung für Contao 3.1 gibt?

[zonky]

uff... ich stehe etwas auf dem Schlauch...

ich muss eine Mitglieder-Zugangsdaten-Tabelle importieren und die Leute wollen ihr altes Passwort weiter verwenden - eigentlich sollte es ja kein Problem sein auf PW+Salt den Hash für die DB zu generieren...

nur leider blicke ich in https://github.com/contao/core/blob/...o/password.php nicht durch bei $objUser->password = Encryption::hash($pw);

wie in https://github.com/contao/core/blob/...Encryption.php dieses erzeugt wird bzw. warum kein fester Salt eingesetzt wird?

Contao 3.1.5

[BugBuster]

Da könnte ich jetzt sagen, du musst es ja nicht verstehen, nutze es einfach und gut ist es.

[zonky]

aber wie!?!?!? das ist die Frage

wie wandle ich ein PW mit 123wert45!! in einen hash um, schreibe den per CSV in die DB und der User kann sich mit 123wert45!! einloggen??!!

[BugBuster]

na du hast es doch schon gefunden: $hash = Encryption::hash($password); , sieht zumindest für mich richtig aus, habs nicht probiert.
Wie du nun die CSV ausliest, und die Daten in die DB schreibst, das musste halt programmieren.
Kann man sich sicherlich vom tab_importer? ein wenig abschauen.

[zonky]

Wie du nun die CSV ausliest, und die Daten in die DB schreibst, das musste halt programmieren.

die CSV kann ich per phpMyAdmin einspielen oder direkt die Tabelle per INSERT füttern... mir fehlt die "Idee" wie ich die Passworterzeugung von Contao einbinde :-(

[BugBuster]

nicht ohne Programmierung.
Du könntest die passwörter erstmal im klartext eintragen und dann ein kleines Migrations PHP schreiben was diese Passwörter dann umwandelt. Aber nur diese vom CSV Import, nicht eventuell andere Nutzer die vorher schon drin waren und bleiben müssen.
Eventuell könnte man das per UPDATE machen, indem man die Bildung wie in Encryption:hash zu sehen per SQL nachbaut. Ob das geht bliebe zu testen.

[zonky]

war einfacher als gedacht...

$finalpw = crypt($passwort, '$6$' . md5(uniqid(mt_rand(), true)) . '$'); 

[andreas60]

Nach einigen Fehlversuchen, eine Adressdatei (openoffice calc) via csv und phpmyadmin zu importieren stellte ich fest, dass es immer am Feld autologin lag. Ich konnte es nicht leer lassen, nicht NULL hineinschreiben, auch sonst keine Zahl hineinschreiben - schlussendlich habe ich für jeden Datensatz eine beliebige natürlich Zahl ins Feld reingeschrieben. Der Import funktionierte, ebenso scheinen alle Funktionen zu klappen. Nur ganz wohl ist mir bei der Sache nicht - weiss einer, was genau dieses Feld macht, wozu es da ist, welche Werte erwartet werden, etc.

[zonky]

... wenn es als unique definiert ist, muss was "unique" rein...

beim Import per PHP-script reichte mir Name, Vorname, E-Mail, Username, PW (das wie oben beschrieben verschlüsselt)

[andreas60]

Besten Dank für deine Antwort zonky

Das mit mit php-Programmierung alles machen kann, ist mir schon klar. Aber: Benutzerfreundlich ist dies nicht. Ich nehme an, die meisten Webdesigner müssen Daten übernehmen aus andern Installationen oder Datenbanken. Dass es im Core keine Importfunktion für Mitglieder gibt, wundert mich schon. Für mich gehörte dies einfach dazu - oder man lässt die Mitgliederverwaltung gleich ganz weg.

Insgesamt ist Contao wohl ein tolles System, hat aber auch einige Schwächen, wie ich als Neuling feststellen muss. Insbesondere für Nicht-PHP-SQL-Programmierer ist man an der einen oder andern Stelle schnell am Ende des Lateins. Als ich vor einem halben Jahr eingestiegen bin, gab ich nach 1 Monaten frustriert auf und habe die nächsten zwei Projekte wieder mit Joomla gemacht. Nun bin ich also im zweiten Anlauf ein grosses Stück weitergekommem. Ich will erst mal eine vollstände Website realisieren und dann entscheiden, ob ich bei Contao bleibe. Derzeit kann ich die Website noch nicht produktiv einsetzen, weil ich seit einem halben Jahr auf den EFG für Contao 3.2 warte. Den Formulargenerator des Core aufzubohren wage ich mit meinen beschränken PHP-SQL-Kenntnissen nicht.

[zonky]

die aktuelle Joomla-Version (2.8?) kenne ich nicht - nur die alten... und die waren von der Programmierung her "nicht überzeugend" um es vorsichtig auszudrücken...

Eine Einarbeitung in PHP halte ich für einen "(semi) professionellen Webmaster" unabdinbar - auf welchem Level, muss man selbst entscheiden.

Frage: schonmal in TypoScript eingearbeitet (Typo3)? da weiß man "native PHP" zu schätzen ;-)

Dir kann ich nur anraten, jemanden mit Wissen in PHP, Javasript, CSS an Land zu ziehen - ggf. über die Kleinaufträge einige mal "ausprobieren" wo die "Chemie" stimmt

Tipp: ganz wichtig ist die Kommunikationsfähigkeit Deines Co-Programmierers!

wenn Du das per PHP und den Tipps oben nicht hin bekommst, melde Dich ggf. per PN bei mir

Gruss