[contao-dlstats-bundle]

[BugBuster]

Hi,
der dlstats Nachfolger für Contao 4 ist zum Testen veröffentlicht in Version 0.1.0.
Für Contao Managed Edition zu installieren mit:

composer require bugbuster/contao-dlstats-bundle

Dabei wird contao-botdetection-bundle und dessen Abhängigkeiten mit installiert.
Anschließend domain.de/contao/install aufrufen für DB Update.

Genauere Anleitungen folgen demnächst auf GitHub https://github.com/BugBuster1701/contao-dlstats-bundle
Nutzung wie bei der alten dlstats Erweiterung:

Erste Schritte

Im Backend bei "System" - "Einstellungen" in den Bereich "Download-Statistiken" gehen und dort einen Haken setzen bei "Download-Statistiken aktivieren". Mit nur dieser Einstellung bekommt man als Statistik angezeigt, welche Datei wie oft geladen wurde. Dazu gibt es nach der Installation einen neuen Menüpunkt im Backend unter Inhalte: Download-Statistiken

Mit setzen eines Hakens bei "Detailierte Download-Statistiken aktivieren" werden zusätzlich Informationen bereitgestellt wie IP Adresse, Zeitstempel für jeden Download und der Benutzername. Benutzername natürlich nur, wenn der Download von einem angemeldeten Frontend Nutzer erfolgte.

Hinweise

• gezählt werden nur Downloads, die über die Content-Elemente "Datei-Download" oder "Datei-Downloads" erstellt wurden.
• direkte Links auf Dateien werden somit nicht gezählt!
• keine Zählung, wenn man selber im BE eingeloggt ist

[BugBuster]

Hi,
die Backend Statistik hat aufgrund der Änderungen am Theme bei den Limit Togglern (früher grüne Pfeile) ein Problem.
Ticket #8 dafür ist angelegt, ich kümmere mich in den nächsten Tagen darum.
Das Problem könnte sein, es für Contao 4.3 mit altem Theme (grüner Pfeil) und 4.4 mit neuem Theme (graue Punkte) kompatible zu machen.

[BugBuster]

So, nun ist der dlstats Nachfolger contao-dlstats-bundle für Contao 4 in Version 1.0.0 freigegeben und unter Contao 4.4 (Managed Edition) getestet und dafür angepasst.

Installationsanleitung: https://github.com/BugBuster1701/con...ALLATION_DE.md

Erste Schritte siehe ersten Beitrag hier.

[BugBuster]

Die Downloadstatistik ist nun im Backend im Bereich "System" zu finden, da ist diese besser aufgehoben, da es ja kein Inhaltselement ist und die anderen Statistiken vom mir dort auch aufgehoben sind. War auch ein Bug Ticket zu Contao 3 Zeiten, dort lasse ich es aber so.

PS: Wer Statistiken von mir in einer extra Gruppe haben will, sollte die Erweiterung "bugbuster/contao-statistic_group-bundle" installieren.
Sieht dann so aus, dort kommen dann Banner und Bot Statistik auch automatisch rein sobald die verfügbar sind. (sonst auch unter System)
stat-group.png

[BugBuster]

wer von bugbuster/contao-statistic_group-bundle die Version 0.1.1 installiert hat, bitte updaten, sonst geht die Anzeige der dlstats Daten nicht mehr. Sorry

[KlausGrenoble]

Hi,
der dlstats Nachfolger für Contao 4 ist zum Testen veröffentlicht in Version 0.1.0.
Für Contao Managed Edition zu installieren mit:

composer require bugbuster/contao-dlstats-bundle

Dabei wird contao-botdetection-bundle und dessen Abhängigkeiten mit installiert.
Anschließend domain.de/contao/install aufrufen für DB Update.

Genauere Anleitungen folgen demnächst auf GitHub https://github.com/BugBuster1701/contao-dlstats-bundle
Nutzung wie bei der alten dlstats Erweiterung:

Vielen Dank,
Die einzige Gebrauchsanleitung, die ich im Contao-Universum gefunden habe.
Und hat auf Anhieb funktioniert.

[KlausGrenoble]

Und hat auf Anhieb funktioniert.

Ist in meinem Fall (lokale xampp-Installation zum Spielen) zwar nicht wichtig, aber dies hier habe ich nicht gefunden:

Einfügen in app/AppKernel.php folgende Zeile am Ende des Array $bundles:

new BugBuster\DlstatsBundle\BugBusterDlstatsBundle(),

Im app-Verzeichnis gibt es bei mir nur einen config-Ordner aber keinerlei Datei.

[xchs]

Weil Du die Managed Edition hast und nicht die Standard Edition.

[BugBuster]

Danke xchs für die PR's, passe heute Abend an. Muss mir mal nen aktuelle Standard Edition installieren um das in Zukunft zu vergleichen.

[BugBuster]

Wie ich grad feststellen musste, wird bei aktivierter Detailstatistik nicht mehr der Username (Frontend Nutzer angemeldet bei Download) erfasst.
Scheint bei allen Contao Versionen, getestet mit 4.4.45, 4.6.14, 4.8.5, der Fall zu sein, was seltsam ist, ich könnte wetten das ging zumindest mal unter 4.4.x.
Bei den höheren liegt es wohl an der Cookie Eliminierung, in 4.5 gab es vorher auch ne Anpassung.
Da muss ich erstmal schauen wie ich das nun ermittle, ob und welcher FE Nutzer gerade den Aufruf getan hat.
https://github.com/BugBuster1701/con...ndle/issues/18

[BugBuster]

Fehler in 1.0.6 behoben. Getestet mit Contao 4.4 und 4.8.

[BugBuster]

Hi,
die Version 1.1.0 vom contao-dlstats-bundle hat einen weiteren Statistik Abschnitt erhalten. Der ist nur sichtbar, wenn die Detailerfassung aktiviert ist.

Mit setzen eines Hakens bei "Detailierte Download-Statistiken aktivieren" werden zusätzlich Informationen bereitgestellt wie IP Adresse (anonymisiert), Zeitstempel für jeden Download und der Benutzername. Benutzername natürlich nur, wenn der Download von einem angemeldeten Frontend Nutzer erfolgte.

Im neuem Abschnitt ist nun die Möglichkeit geschaffen nach Dateiname und/oder Benutzername zu filtern. (Nutzerwunsch)
Hier mal zwei Screenshots dazu:

Downloadstatistik_-_Contao_Open_Source_CMS_-_2019-12-04_00.35.02.png
Downloadstatistik_-_Contao_Open_Source_CMS_-_2019-12-04_00.35.36.png

Viel Spaß damit.

[07alex07]

In der Version für Contao 4 gibt es die Export-Funktion nicht mehr oder?

[BugBuster]

Das war eine zusätzliches Modul. Ist bisher nicht für Contao 4 portiert worden, da bisher nicht gewünscht.
Müsste dabei auch von phpexcel (deprecated) auf phpspreadsheet umgestellt werden.

Wenn das also gewünscht wird, dann bitte ein Ticket erstellen.
https://github.com/BugBuster1701/con...-bundle/issues

[BugBuster]

So, Dank der Zuarbeit von Alex gibt es jetzt auch die Export Möglichkeit für die Download Statistik.
Dazu muss eine weitere Erweiterung installiert werden: "bugbuster/contao-dlstats-statistic-export-bundle"

Der "package-metadata" PR ist gestartet, sollte also auch bald im Contao Manager auftauchen, sobald freigegeben.

Für manuell einfach in der Datei composer.json eintragen:

"bugbuster/contao-dlstats-statistic-export-bundle": "^1.0"

und "composer update" auf Kommandozeile oder über Contao Manager (Systemwartung -> Composer Update ausführen)

[folkfreund]

Alles Gute zum Neuen Jahr .

Irgendwie gelingt es mir nicht, Bots von meinen Downloads auszusperren (https://community.contao.org/de/show...Header-setzen).
Gibt es alternativ eine Möglichkeit, dass diese Downloads durch Bots nicht in der Statistik auftauchen?

[BugBuster]

Wie kommst du drauf, das Downloads von Bots gezählt werden? Normalerweise werden die ja gefiltert durch eine BotDetection.

[BugBuster]

So viel ist da ja nicht zu Wissen, aber es gibt nun auch eins für DLSTATS - Download Statistik Bundle.
Der direkte Link: https://docs.contao.ninja/books/user-guide_dlstats/

Vom Design her ist es von den Contao Handbüchern abgeschaut und angepasst, ich hoffe man erkennt gleich das es keine offizielle Doku ist.

Das war für mich auch ein aktives Lernbeispiel mit Markdown + Hugo + Microsoft Azure DevOps Pipelines ein Handbuch zu generieren und auf meinem Server zu übertragen.

[folkfreund]

Wie kommst du drauf, das Downloads von Bots gezählt werden? Normalerweise werden die ja gefiltert durch eine BotDetection.

Gefühlt sehe ich viel zu viele Zugriffe auf die Dateien z.B. auf https://richmud.de/handschriften/tan...-dahlhoff.html.
Ich verfolge deinen Tipp https://community.contao.org/de/show...l=1#post517164 mal hier in diesem Thread weiter .
Ich habe inzwischen die Detailerfassung aktiviert und kontrolliert, dass die Option "Die Botdetection Filterung deaktivieren" nicht angewählt ist. Die Statistik wurde zurückgesetzt.

Aktuell sieht es bei den ersten beiden Einträgen der letzten Downloads so aus (das werde ich jetzt die nächsten Tage weiter beobachten):

files/dh_ff/Bd 01 Dahlhoff 2017_11_26.pdf

05.01.2020 16:33 0:0:0:0:0:0:0:0	surfer.at	richmud.de handschriften/tanzsammlung-dahlhoff	German (Germany)
04.01.2020 02:11 0:0:0:0:0:0:0:0	bezeqint.net	richmud.de handschriften/tanzsammlung-dahlhoff	unknown language

files/dh_ff_xml/VII Dahlhoff Primo.zip

05.01.2020 14:33 0:0:0:0:0:0:0:0	t-ipconnect.de	richmud.de handschriften/tanzsammlung-dahlhoff	German
04.01.2020 02:11 0:0:0:0:0:0:0:0	bezeqint.net	richmud.de handschriften/tanzsammlung-dahlhoff	unknown language

Offensichtlich werden die IPs vollständig anonymisiert. Die Einstellung steht allerdings auf Default: IPV4: 1 Oktett, IPV6: 2 Blöcke.
Wie kann ich die möglicherweise zu blockierenden IPs herausfinden?

[BugBuster]

Welche Contao Version ist da installiert?

[folkfreund]

Die 4.4.46 mit dlstats 1.2.0

[Futzie 2]

Hallo BugBuster.

Unter C4.9 bekomme beim Contao-Manager immer die Fehlermeldung samt Abbruch...

  Problem 1
    - Installation request for phpoffice/phpspreadsheet (locked at 1.11.0) -> satisfiable by phpoffice/phpspreadsheet[1.11.0].
    - bugbuster/contao-dlstats-statistic-export-bundle 1.0.0 requires phpoffice/phpspreadsheet 1.10.1 -> satisfiable by phpoffice/phpspreadsheet[1.10.1].
    - bugbuster/contao-dlstats-statistic-export-bundle 1.0.1 requires phpoffice/phpspreadsheet 1.10.1 -> satisfiable by phpoffice/phpspreadsheet[1.10.1].
    - bugbuster/contao-dlstats-statistic-export-bundle 1.0.2 requires phpoffice/phpspreadsheet 1.10.1 -> satisfiable by phpoffice/phpspreadsheet[1.10.1].
    - bugbuster/contao-dlstats-statistic-export-bundle 1.0.3 requires phpoffice/phpspreadsheet 1.10.1 -> satisfiable by phpoffice/phpspreadsheet[1.10.1].
    - bugbuster/contao-dlstats-statistic-export-bundle 1.0.4 requires phpoffice/phpspreadsheet 1.10.1 -> satisfiable by phpoffice/phpspreadsheet[1.10.1].
    - bugbuster/contao-dlstats-statistic-export-bundle 1.0.5 requires phpoffice/phpspreadsheet 1.10.1 -> satisfiable by phpoffice/phpspreadsheet[1.10.1].
    - Conclusion: don't install phpoffice/phpspreadsheet 1.10.1
    - Installation request for bugbuster/contao-dlstats-statistic-export-bundle ^1.0 -> satisfiable by bugbuster/contao-dlstats-statistic-export-bundle[1.0.0, 1.0.1, 1.0.2, 1.0.3, 1.0.4, 1.0.5].

[2141.5MiB/26.62s] <warning>Running update with --no-dev does not mean require-dev is ignored, it just means the packages will not be installed. If dev requirements are blocking the update you have to resolve those problems.</warning>
[450.0MiB/28.05s] Memory usage: 450.03MB (peak: 2142.35MB), time: 28.05s.
[450.0MiB/28.05s] Finished Composer Cloud resolving.


# Cloud Job ID OPxZ2Atc2gEDOGEuVNu05BrkyO9bTdVvwR57Wgzw8xHhNoBK0iYa4dWvno5NJAjRHVLm failed

---

### Der Hintergrundprozess wurde unerwartet beendet ###

Keine Ahnung was da passiert aber das Paket will nicht installiert werden?

Habe ich was übersehen?

[BugBuster]

Sieht so aus, als wenn deine PHP Ausführungszeit nur auf 30 Sekunden eingestellt ist, composer ist nach 28 Sekunden durch und die Installtion selbst wird dann abgebrochen durch Prozessende.

[BugBuster]

Ah, eine Sache sehe ich noch. Dazu müsstest du erst im Manager auf alle pakete aktualisieren klicken und dann erst die Erweiterung hinzufügen.
Grund ist, das phpoffice/phpspreadsheet auf eine Version festgetackert ist und mei´ne Erweiterung eine ganz spezielle haben will.
Das werde ich anpassen.
https://github.com/BugBuster1701/con...undle/issues/6

[Futzie 2]

Hallo BugBuster.
Kannst Du abschätzen wann Du phpoffice/phpspreadsheet auf v.1.11 bekommst?

Alle Pakete in meiner Installation sind übrigens aktuell. Das habe ich schon mal überprüft.

[BugBuster]

Die Version 1.0.6 ist online, dort ist die Eingrenzung aufgehoben, damit wird es jetzt auch mit phpoffice/phpspreadsheet auf v.1.11 installierbar.

[Futzie 2]

Nice
Installation hat ohne Probleme geklappt.

Leider meldet Excel 2016 beim Versuch eine exportierte XLSX-Datei zu öffnen, dass diese defekt ist und nicht geöffnet werden kann.
Sogar die Option "Öffnen und reparieren" führ zur Meldung das die Datei defekt sei, und ein vorgeschlagener Versuch die Daten roh auszulesen endet mit der abschließenden Meldung das die Datei definitiv defekt sei und nicht geöffnet werden kann.

Hattest Du sowas schon mal?

CSV Exporte klappen gut, leider nur mit "," getrennt also kein Semikolon und somit alle Daten in einer Spalte.
Kann das auf Semikolon umgestellt werden?

VG

[Futzie 2]

Ich sehe gerade, der Export der Besucherstatistik als XLSX kann ohne Fehler geöffnet werden.

...und bei Beiden CSV Exporte wie gesagt ,"Wert1","Wert2", usw. da wäre Wert1;Wert2; deutlich angenehmer

[BugBuster]

kannst du mir eine defekte xlsx Datei mal zukommen lassen? Und den gleichen Export als CSV, dann kann ich vielleicht was erkennen.
Ich habe hier derzeit nur Libre Office, und damit bisher keine Probleme gehabt.

[Futzie 2]

Moin.
Jo mach ich gern. Ich bin morgen Nachmittag wieder im Büro. Dann schicke ich Dir die Dateien als ZIP.

[BugBuster]

So, das war heftig und doch recht simple zu beheben.
Der doppelte Inhalt der in der CSV zu sehen war, war auch der Grund, warum die Excel Variante ein Fehler brachte. Lustigerweise nicht in LibreOffice, dort wurde das einfach ignoriert.

Außerdem wird die temporäre Datei im Contao Cache nach dem Download gleich gelöscht, die blieb bisher liegen (bis zur nächsten allgemeinen Cache Löschung).

@Futzie-2: Wird der CSV Export trotzdem noch zusätzlich mit Semikolon als Trenner benötigt?

[Futzie 2]

Moinsen.

Also das war eben ein kleiner Ritt durch sämtliche Gefühle

Zuerst habe ich versucht das Paket zu aktualisieren... Fehler... Abbruch...
Dann das Paket zu deinstallieren... Fehler... Abbruch...
Cache nochmal gelöscht, Paket aktualisiert... läuft... alles grün... doch im Contao Manager immer noch Version 1.0.6
Wieder aktualisieren... Contao Manager Abbruch... Selbstreparatur springt an...
Version immer noch da und als Version 1.0.6
Nu aber... Deinstallieren... klappt
1.0.7 installieren... klappt

Getestet... alles läuft und ist so wie es sein soll

Danke für Deine/Eure Mühe.

Das mit dem Semikolon ist nicht tragisch. Wegen mir extra muss nicht.
Wenn Du mal nicht weißt wohin mit deiner Energie dann wäre das vielleicht was für eine Version 1.0.8 und dem Fall wenn wir weitere 14 Tage wegen Corona zuhause bleiben sollen.

Danke Dir Daumen hoch

[Futzie 2]

Und bleibt alle gesund !!

[BugBuster]

In der neuen Version 1.3.0 ist es nun möglich über die Einstellungen (System-Einstellungen-Downloadstatistik) zusätzlich den Resetschutz zu aktivieren.
Es können dann nur ausgewählte Benutzergruppen und natürlich die Adminstratoren die Statistik resetten oder einzelne Dateizählungen löschen.
https://extensions.contao.org/?p=bug...dlstats-bundle

Handbuch wurde entsprechend erweitert, auch wenn das selbsterklärend sein sollte.
https://docs.contao.ninja/de/download-statistik.html

[BugBuster]

Nach einigen Anpassungen für Contao durch Spooky in 1.3.2, und PHP 8 Anpassungen in 1.3.3 kommt nun 1.3.4 mit Anpassungen für Symfony 5:

• DlstatsController has no container set

[nano]

Seit Neuestem bekomme ich im Backend eine Fehlermeldung beim Aufrufen der Downloadstatistik

Hier der Slack Trace zur Fehlermeldung:

Symfony\Component\ErrorHandler\Error\UndefinedMethodError:
Attempted to call an undefined method named "executeQuery" of class "Doctrine\DBAL\Query\QueryBuilder".

  at vendor/bugbuster/contao-dlstats-statistic-export-bundle/src/EventListener/ExportPanelListener.php:68
  at BugBuster\DlstatsExportBundle\EventListener\ExportPanelListener->onGetPanelLine()
     (vendor/bugbuster/contao-dlstats-bundle/src/Resources/contao/modules/ModuleDlstatsStatistics.php:472)
  at BugBuster\DLStats\ModuleDlstatsStatistics->addStatisticPanelLineHook()
     (vendor/bugbuster/contao-dlstats-bundle/src/Resources/contao/modules/ModuleDlstatsStatistics.php:130)
  at BugBuster\DLStats\ModuleDlstatsStatistics->compile()
     (vendor/contao/core-bundle/src/Resources/contao/classes/BackendModule.php:82)
  at Contao\BackendModule->generate()
     (vendor/contao/core-bundle/src/Resources/contao/classes/Backend.php:434)
  at Contao\Backend->getBackendModule()
     (vendor/contao/core-bundle/src/Resources/contao/controllers/BackendMain.php:169)
  at Contao\BackendMain->run()
     (vendor/contao/core-bundle/src/Controller/BackendController.php:48)
  at Contao\CoreBundle\Controller\BackendController->mainAction()
     (vendor/symfony/http-kernel/HttpKernel.php:158)
  at Symfony\Component\HttpKernel\HttpKernel->handleRaw()
     (vendor/symfony/http-kernel/HttpKernel.php:80)
  at Symfony\Component\HttpKernel\HttpKernel->handle()
     (vendor/symfony/http-kernel/Kernel.php:201)
  at Symfony\Component\HttpKernel\Kernel->handle()
     (web/index.php:31)
  at require('/srv/www/marketing/public/contao49-2022/web/index.php')
     (web/app.php:4)

Contao: 4.9.26
PHP: 7.4
contao-dlstats-bundle: 1.3.4
contao-dlstats-statistic-export-bundle: 1.0.12

Was kann ich tun, damit die Erweiterung wieder funktioniert?
Hat jemand eine Idee?

LG, martina

UPDATE: mit contao-dlstats-statistic-export-bundle 1.0.11 läuft´s

[BugBuster]

Welche doctrine/dbal Version ist bei dir installiert?
Auf Kommandozeile kannst du das dir anzeigen lassen wie folgt:

composer show | grep  doctrine/dbal

[BugBuster]

Hmm, konnte es unter Contao 2.9 mit Doctrine/Dbal 2.13 nachstellen.
Wobei ich das nicht verstehe, denn die 2.13 soll ja die Änderungen von 3.x übernommen haben damit man für beide Majors kompatiblen sein kann um die Migration zu ermöglichen.

[BugBuster]

Ok, sollte mit contao-dlstats-statistic-export-bundle Version 1.0.13 behoben sein.
Danke für den Hinweis.

[BugBuster]

Kleiner Bugfix für diejenigen, die per Insert-Tags sich die Anzahl der Downloads anzeigen lassen, je Datei.

• #35, FE Insert-Tags zeigen immer 0

Contao hat irgendwann wohl eine Änderung eingeführt, wodurch die Download Links einen Parameter "cid=<id>" bekommen haben.

Alt: files/contaodemo/media/documents/contao_fanpage_logo.pdf
Neu: files/contaodemo/media/documents/contao_fanpage_logo.pdf&cid=302

Das wurde bei der Ermittlung der Anzahl nicht beachtet, das ist nun korrigiert. Die Zählung selbst hatte weiterhin funktioniert.