Raphael Bircher wrote:
Am 01.04.11 15:27, schrieb Marcus Lange:

Hi Ralph,

OK, ich probiere es nochmal anstatt auf Deine einzelnen Statements einzugehen.

Beispiel: Installsatz mit und ohne JRE

Grundsätzlich getestet sind beide Varianten. Zum einen bevor die Builds unser Haus verlassen und auf die Mirrors gehen und zum anderen (gerade bei mehreren RCs) durch Tester. Natürlich kann man jeden Build nochmal gründlich testen, bevor man ihn als final erklärt und freigibt.

Jetzt muß man wissen, daß die Dateien in den Packsätzen beider Varianten gleich sind; sowohl die Core-Funktionen als auch L10N. Der einzige Unterschied ist das eingepackte JRE.

Wenn also der JRE-Build OK ist, braucht man IMHO den anderen nicht nochmal komplett testen. Hier sollte ein Basistest reichen (installieren, Startup usw.). Genau diesen Test haben wir Haus-intern gemacht.
Ihr macht das aber automatisch, und das entspricht leider nicht ganz dem
> Vorgehen eines Manuellen installationsvorgangs. Ich kann mich noch gut

Bei mittlerweile fast 1000 Installationssätzen pro Release kann wohl keiner mehr verlangen, daß alle manuell durchgetestet werden. Da muß man sich auf Autotests verlassen können.

an eine Mac Version erinnern, die eure Smoketests wie auch die TT-Tests mit ungravierenden Mängelchen durchlief, bei einer Handinstallation aber unbrauchbar war. Ein paar Rechte waren falsch gesetzt, was die automatischen Tests aber nicht erkannt haben. Wir haben es immer so

OK, das muß schon einige Jahre her sein oder die Platform war für uns noch neu. Seit dem sind viele Verbesserungen sowohl besonders in die Autotests als auch in deren Systemumgebung gegangen.

gehalten, dass wir für eine Freigabe zumindest minimale manuelle Tests verlangen, und ich finde es auch wichtig, dass wir das so weiter beibehalten. Ich werde die Windows wJRE nun aber kurz testen.

Vielen Dank! Das ist doch mal ein konstruktiver Vorschlag.

Ähm, Du hast nicht zufällig noch etwas Zeit und Lust Linux 32/64-Bit RPM zu testen? Das fehlt bei Deutsch nämlich noch komplett. ;-)

Ciao

Marcus


--
-----------------------------------------------------------------
To unsubscribe send email to [email protected]
For additional commands send email to [email protected]
with Subject: help

Antwort per Email an