SoftwareEntwicklung Beratung Schulung

Es gibt nun in der Hibernate Community Bestrebungen von Maven nach Gradle zu wechseln.

Es gibt eine neue Release von TortoiseHG. Die Release Notes geben über die Release Neuigkeiten auskunft. Informationen über die verwendete Mercurial Release 1.6 sind hier zu finden.

Auf der Subversion Users liste wurde bekannt gemacht, dass nun auch Windows binaries verfügbar sind.

In der Entwickler- als auch der Users Liste ist bekannt gegeben worden, dass eine neue Release von Subversion zur Verfügung steht. Die Release Notes geben Auskunft was in 1.6 geändert wurde Das ChangeLog für die Release 1.6.12 gibt eine Übersicht über die Änderungen im Detail.

Eine neue Release von SupoSE ist nun fertig.

• User visible Changes/Enhancements.
  • Upgrade to SVNKit 1.3.X (Support for SVN 1.6.X repositories) (#218)
  • Enormous performance enhancements for the scan command (#309)
  • Updated to Java 1.6 (#235)
  • Removed the dfilename and dpath which had been introduced in Release 0.6.0 to reduce the Index size finger print (#241).
  • Removed display property prefix (#310)
  • Output formatting of --help has been changed (#36)
  • quartz.properties are now located in the etc folder
  • Formatting problem if more than 9999 items in changeset (#314)
  • Copyright updated to 2010 (#308)
  • Updated the Build/Run Documentation (#247)
• Fixed Bugs
  • Fuzzy search had been broken (#199)
  • README will not correctly recognized (#215)
  • Searching for full qualified filenames didn't work (#216)
  • Couldn't search for files with a dot (#246)
• Won't be fixed:
  • Support for 1.1.X Repositories which fails with SVNKit (#34, #141)
• Build Changes
  • Fixed missing dependencies for bouncycastle which is needed for PDF files (#250)
  • Analyzed the dependencies in Maven build (#225)
  • Updated to Tika 0.4, 0.5, 0.6, 0.7 (#219, #239, #266, #304)
  • Updated to ANTLR3 Maven Plugin (#201, #298)
  • Updated to SVNKit 1.3.1 (#218)
  • Updated Quartz Scheduler to 1.7.3 (#303)
  • Update Maven License Plugin from 1.5.0 to 1.6.1 (#311)
  • NoSuchElementException during Site build (#300)
  • problem in generated documentation (#301)
  • Checked compatibility with Maven 3-beta-1
• Other changes
  • Fixed Comments for revisions r439-r441 (#259)
• Known Limitations
  • At the moment the Job Scheduler does not contain the performance improvements (#309)

Das Unix binary läuft auf Linux als auch auf Mac OS X. Für Windows ist selbstverständlich auch gesorgt.

Hier gibt es einige Mythbusters zu Maven, also beispielsweise das Maven automatisch für jeden Build updated oder Maven benötigt einen Internetverbindung, um ein Verzeichnis zu löschen.

Nach der Beurteilung der Test Ergebnisse insbesondere der Laufzeiten habe ich mir einige optimierungen für SupoSE überlegt und nun in einem Test auf die gleichen Test Daten losgelassen. Wichtig dabei ist zum einen, dass die Geschwindigkeit enorm gesteigert wurde (aber warten wir mal das Ende ab) und dass hier mit den Default Einstellungen für den Speicher gearbeitet wurde (-Xms512m -Xmx1024m).

• • scan gestartet: 15.05.2010 20:37:54
  • Laufzeit bis dato: 16.05.2010 12:00:00
  • Bisher ca. 710.000 Revisions gescanned

Das heißt nach bisheriger Übersicht dass innerhalb von weniger als 16 Stunden schon über 700.000 Revisions gescanned worden sind.

Update: 19:32 Uhr. Alle 94 Indizes gemerged (3877 Sekunden)
Update: 18:27 Uhr. Derzeitiger Stand: 930.176 Revisions gescanned.
Update: 17:36 Uhr. Derzeitiger Stand: 900.000 Revisions gescanned.
Update: 16:10 Uhr. Derzeitiger Stand: 830.000 Revisions gescanned.
Update: 14:30 Uhr. Derzeitiger Stand: 780.000 Revisions gescanned.
Update: 13:33 Uhr. Derzeitiger Stand: 750.000 Revisions gescanned.


Zusammenfassung des Ganzen. Zum einen ist nun die vollständige Zeit zur Indizierung etc. auf unter 24 Stunden gefallen. Nachteil ist derzeit, dass der Plattenplatz Bedarf auf ca. 110 GiB zwischenzeitlich gestiegen ist. Die einzelnen Indizes habe ich derzeit noch nicht automatisch gelöscht. Das heißt, dass hier nochmal ca. 55 GiB dazu kommen.

Nachdem nun die Vorbereitungen abgeschlossen sind habe ich nun mal SupoSE in der aktuellen Release (0.6.2 RC1 - 447) darauf losgelassen.

• Indizierung mithilfe von SupoSE (0.6.2 RC1 - 447)
  • scan gestartet: 28.04.2010 20:44
  • We have taken 436352,037 seconds for 930.176 revisions. This is an average of 2,132 revisions/second.
• Größe des Indizes nach dem Scan: 61.797.883.970 Bytes

Na ja ca. 5 Tage, um das Repository zu scannen scheint mir jetzt ein wenig viel. Vor allem, wenn ich mir den Durschnittswert anschaue.

Im Rahmen der Test Vorbereitungen für SupoSE wollte ich mir eine großes Repository besorgen, damit ich mal das Verhalten mit einem "richtigen" repository testen kann und auch mal ein paar Anhaltspunkte für Zeiten bzgl. eines entsprechenden Repositories bekomme.

Danke der netten Mithilfe der Apache Software Foundation, gibt es die einfache Möglichkeit einen Vollständigen Dump des Repositories zu erhalten, da ich nicht mit einem svnsync arbeiten wollte, da das zu große kontinuierliche Last erzeugt hätte.

Also habe ich den Dump File auf einen Server gelegt und angefangen das Repository per svnadmin load repository
Server (Infos: Core i7 CPU;12 GiB RAM; 1.3 TiB Festplatte)

Download des Dump-Files (930.176 Revs). 10 Gib File (http://svn-master.apache.org/dump/)

Icon  Name                               Last modified      Size  Description[DIR] Parent Directory                                        -   
[   ] svn-asf-public-r0:930176.7z        02-Apr-2010 17:02  9.7G  
[   ] svn-asf-public-r0:930176.7z.md5    02-Apr-2010 17:06   79   
[   ] svn-asf-public-r0:930176.7z.sha1   02-Apr-2010 17:09   88   
[   ] svn-asf-public-r0:930176.7z.sha256 02-Apr-2010 17:08  114   

svn-asf-public-r0:930176.7z (10.430.991.745 Bytes) ausgepackt 31.492.319.472 Bytes Test auf dem Core I7 ausgeführt:
svnadmin load

• Started
  • Apr 12 21:26 repos/db/revs/0/1
• Stopped:
  • Apr 25 14:05 repos/db/current
• Benötigte Zeit:
  • 12 Tage 16 Stunden 39 Minuten
• Repository size nach load
  • 27.102.128.173 Bytes

Das gleiche habe ich dann nochmal auf einem anderen Rechner gemacht, um hier einen Vergleich zu haben. Test auf dem Intel(R) Core(TM)2 Duo CPU E8400 @ 3.00GHz (4 GiB RAM)
svnadmin load

• Started
  • Apr 20 23:11 repos/db/revs/0/1
• Stopped:
  • 2. Mai 00:25 repos/db/current
• Benötigte Zeit:
  • 11 Tage 1 Stunde und 14 Minuten
• Repository size nach load
  • 27.102.279.725 Bytes

Ich hatte ein kleines Problem und wollte in einem Subversion Repository rausfinden, in welcher Version ein Änderung vorliegt. Also habe ich mir Kurzerhand folgendes Script geschrieben (check.sh) Wenn man dann die Ausgabe des Scriptes filtert: Die Ausgabe sieht ungefährt wie folgt aus: Die 1345 ist die Revision Nummber in der die Änderung ("Text") gemacht wurde. Das Problem bei dem Script ist, dass es sehr gut funktioniert, aber sobalt das Repository bzw. die Anzahl der Revisions die durchsucht werden müssen größer wird, dauert es etwas. Besser wäre da die Nutzung von SupoSE.

Update:Es gibt leider ein kleines Problem, dass bei der obigen Methode nur der geänderte Text gefunden werden kann aber kein Text, der gelöscht wurde.

I had the problem to start the Apache Tomcat as a daemon under a different user. After creating an RPM which puts the appropriate files into the correct location i had to create a service script to start, stop and check the status of the Tomcat daemon. The most important thing here is to have a su -l username which will go to the different user in his home folder where i can call the startup.sh or shutdown.sh script. It is necessary to define the JAVA_HOME etc. in the users .bashrc to activate those information during the login.

Heute ist auf der User Mailing Liste bekannt gegeben worden, dass die erste Beta Release von Maven 3 zur Verfügung steht. Maven 3 ist kompatibel zu Maven 2 und somit sollte hier der Übergang recht einfach sein. Der Download ist über die Homepage von Maven zu erreichen.

Nachdem nun Subversion 1.6.11 erschienen ist, ist nach sehr kurzer Dauer nun auch TortoiseSVN in einer neuen Release erschienen.

Das Subversion Team hat auf den Subversion Mailing Listen bekannt gegeben, dass nun die Release 1.6.11 von Subversion zur Verfügung steht. Die Übersicht über die genauen Änderungen gibt das ChangeLog und die Übersicht über die in der Release 1.6. eingeflossenen Änderungen und Erweiterungen ist in den Release Notes nach zu lesen.

Heute wurde auf der Entwicklerliste eine Vision and Roadmap Proposal veröffentlicht. Hier wird an einigen Stellen kritisch beleuchtet, wie bestimmte dinge bisher gelaufen sind. Weiterhin ist es interessant zu lesen welche Ausrichtung hier seitens der Weiterentwicklung seitens Subversion zu erwarten ist.