Flash Tests

[ms_hh]

Hallo,

ich muss mich gerade ein wenig ausgiebiger mit dem Thema Flash Tests auseinander setzen. Es geht darum automatisierte Regressionstests durchzuführen. Mir sind solche Tests nichts neues, ich kenne Sie aus der C Entwicklung. Ich mache mich nur gerade schwer diese Tests auf eine Flashapplikation anzuwenden.

Für die Systementwicklung (c) benutzte ich Mercury QuickTest oder SilkTest, aber lieber den Mercury.

Ich weiss, das Adobe so etwas in Verbindung mit Flex anbietet. Flex kommt mir aber nicht in die Tüte, sind verschiedene Dinge. Mir persönlich wäre es egal, ob diese Test nur in AS2 oder AS3 gehen.

Wenn jemand Möglichkeiten kennt, wäre ich sehr dankbar.

Hier mal meine Möglichkeit eines Regressionstests in Flash:
Im groben geht es darum, mit einem Mouse&Keyboard Recorder die "User" eingaben zu speichern. So habe ich die Möglichkeit immer gleiche Abläufe zu erstellen. An allen wichtigen "übergaben" (Usereingaben, Externe Daten oder Kommunikation mit dem Backend), fangen try-catch Konstrukte ab. Sobald eine Exception "geworfen" wird, wird auf dem Bildschirm (im TestModus) ein Roten Punkt (linke obere Ecke) angezeigt. Ausserdem wird der Exception-Message Text in den Clipboard gepackt.Das Tool http://macro-expert.com/index.html kann den Screen die ganze Zeit überwachen und bestimmte Farbwerte überprüfen. Mit diesem Tool überprüfe ich also, ob diesen Punkt. Wenn der Punkt irgendwann die Farbe #FF0000 hat, ruft das Tool per "run" ein Phyton-Logger auf, dem ich die Error-Message mit übergebe. So kann ich diesen Test protokollieren.

Die zweite Möglichkeit ist es Bildbereiche zu vergleichen. Das Tool kann, es muss natürlich vorher der Bildausschnitt definiert werden, den Screen analysieren und auf Veränderungen reagieren. In meinem Fall, würde ich für einen Testfall per Recorder z.B. einen Einlog Prozess aufnehmen. Am Ende des Prozesses soll auf dem Biuldschirm eine TextBox mit Text erscheinen. In dem Tool definiere ich nur diesen Bereich als mein Master und speichere den Bildausschnitt Lokal auf dem Rechner. Nun kann ich dem Tool die Anweisung geben, das gespeicherte Bild mit dem Ausschnitt auf dem Screen zu vergleichen (muss nicht 100% stimmen).

Die beiden Versionen haben natülich eine große Schwachstelle. Wenn die try-catch Konstrukte natürlich an den falschen Stellen sind, bringt das ganze Testen nichts.

Ich persönlich finde die zweite Möglichkeit am elegantesten, aber wenn jemand natürlich andere/bessere Möglichkeiten kennt, immer her damit.


Ach.. was mir da noch einfällt, UnitTest habe ich schon. Dort habe ich mir ein nettes TestFramework erstellt. So im Groben... Es werden halt TestKlassen erstellt, wo diverse Funktionen getestet werden. Da dies in der IDE aber nicht wirklich geht, sondern diese erst veröffentlichen muss, habe ich mit den MTASC zur hilfe genommen. Per Ant kann ich nun UnitTest automatisieren. Die Ausgabe der Test gebe ich an meinen Python-Socket-Server weiter, der die Test-Protokolle auch gleich als "myArrayCollectorTest.as.log" speichert. Besteht da evtl. noch mehr interesse?

Viele Grüße
Markus

[bokel]

In Flex funktioniert es auf der Ebene der UI-Componenten. Jede Komponente bekommt zur Laufzeit einen Delegate zugeteilt, der die ausgehenden Events der Komponente an die Testschnittstelle weiterleitet.
Die Doku zum Automation-Framework ist vielleicht interessant, um noch mehr darüber zu erfahren. Hier ist der direkte Link:
http://www.adobe.com/go/flex_automation_api

Noch ein paar Beispiele gibt es hier:
http://www.adobe.com/devnet/flex/?tab:samples=1

Ich weiss, du willst kein Flex benutzen, aber vielleicht hilft es ja trotzdem, sich die Beispiele mal anzuschauen.

Cheers,
Ralf.

[ms_hh]

Hi Bokel,

danke - ich werde mit die Links mal anschauen.

Gruß
Markus

[Janoscharlipp]

Mir fällt nur das hier ein: http://osflash.org/autotestflash