Video Transparenzen zu einem bestimmten Zeitpunkt ermitteln

[Taesch]

Hey Leute!

Ich hab da eine recht knifflige Problemstellung für mein kleines Spiel (im Zuge des Semsterprojekts und meiner Bakk-Arbeit).

Spielkonzept: Unterwasserwelt, in der Fische schwimmen, die abgeschossen werden sollen.

Wir legen aber Wert darauf, dass die Fische nur dann als getroffen gelten, wenn auch wirklich nur die farbigen Pixel des Objekts getroffen wurden (transparenter Hintergrund, der aufgrund der Boundingbox ebenfalls mit Click gezählt wird, soll mithilfe eines Algorithmus ausgeschlossen werden).
Jetzt wirds etwas komplizierter: Wir gestalten die Animationen der Objekte (Fische) in AfterEffects CS4 und müssen diese aus AFX nach Flash importieren - geht, indem man als .flv mit Transparenzen rendert.

Jetzt habe ich bisher herausgefunden, dass ich Videodateien sehr gut mittels Klasse "Video" und einem NetConnection und einem NetStrem importieren kann (sehe das aber nicht als elegante Lösung..), brauche aber die Bildinformation zu einem bestimmten Zeitpunkt (Zeitpunkt, als draufgeclickt wurde) um die Transparenz-Information zu kontrollieren! Geht das überhaupt? Wenn nein, wie kann ich das zum Laufen bringen?

Wenn jemand bessere Ideen und Vorschläge dazu hat, wie ich die Information aus AfterEffects nach Flash bringen kann und es nachher einfacher habe, auf die Bildinformation zuzugreifen - nur zu, ich lerne gern!

Ich freue mich über alle Antworten, am allermeisten über hilfreiche, zögert bitte nicht, Verständnisfragen zu meiner Problemstellung zu äußern, ich gebe mir dann Mühe, es verständlicher zu erklären.

Liebe Grüße,
Natascha

[Taesch]

-closed-
Nachdem ich nirgends etwas finde, wird es wohl leider per PNG-Bildsequenzimport to MovieClip funktionieren müssen. Schade um die Größe der finalen Datei.

[astrocreep]

hast du schonmal probiert, das ganze zum jeweiligen zeitpunkt per "draw" in ein bitmapdata zu zeichnen. ich hab keine ahnung, wie es sich da bei videos mit den transparenzen verhällt aber sollte er die transparenzen mitnehmen kannst du dann per getPixel32 den farbwert inkl. entsprechendem alphawert rauslesen.

[Taesch]

ich hab keine ahnung, wie es sich da bei videos mit den transparenzen verhällt

Ja, in After Effects kann man als .flv mit Transparenzen exportieren. Leider habe ich keine Methode gefunden, die es ermöglicht, auf einzelne Frames zuzugreifen und per getPixel32() den Wert rauszulesen.

Hast du schonmal probiert, das ganze zum jeweiligen zeitpunkt per "draw" in ein bitmapdata zu zeichnen.

Nachdem das aber ziemlich viele Objekte werden können und diese animiert sind, bezweifle ich, dass ich die zu jedem Frame zeichnen möchte - Flash CS4 kann Bildsequenzen als Movieclip in die Library importieren, dann kann ich bei jedem Frame hoffentlich über die Bitmapdata zugreifen. Und AFX CS4 kann auch PNG-Sequenzen exportieren.

[astrocreep]

das videos mit transparenzen gehen ist mir schon klar

du sollst ja nicht alles zu jedem zeitpunkt zeichnen. du hast viele videoobjekte, so wie ich es verstanden habe. nach einem klick weisst du ja schonmal, welches objekt angeklickt wurde. und dann das jeweilige videoobjekt mit

bitmapdata.draw(video)

zeichnen. anschließend den pixel an der jeweiligen position überprüfen.

[Taesch]

Von Adobe LiveDocs

draw(source:IBitmapDrawable, matrix:Matrix = null, colorTransform:ColorTransform = null, blendMode:String = null, clipRect:Rectangle = null, smoothing:Boolean = false):void
Draws the source display object onto the bitmap image, using the Flash Player or AIR vector renderer.

Bedeutet also, dass ich in ein dummy-Bitmap die Bitmapdaten des Videos zeichne - nimmt es dann das aktuelle Bild (Zeitpunkt A != Zeitpunkt B)? Wenn das funktioniert, wäre es das was ich gesucht habe!

[astrocreep]

ja klar. genau der aktuelle zustand wird gezeichnet, inkl. aller verzerrungen, filter, zustände etwaiger childs etc.

[Taesch]

Geil
ich schreib dir hier wieder, wenn ich das testen konnte, aber heut kann ich endlich wieder ruhig schlafen denk ich ) ausser es tauchen wieder fragen auf *hihi*

[derbrueller]

hoi,

also den Pixel wo du klickst kannst du doch kopieren und die Farbinformation abfragen.
Wenn es nicht geht liegt es eventuell daran das du das Video per Streaming Server bekommst und dieser VSA (Video Sampling Access) nicht erlaubt.

Grüsse

[Taesch]

Wenn ich die Farbinformation des Pixels abfrage, hilft mir das nicht viel weiter - weil mit einem transparenten Pixel an der Stelle des Videos würd ich ja trotzdem die Farbe von darunter sehen oder verstehe ich die Funktion falsch?

[figure8]

naja, pixelinformationen beinhalten neben der farbe (0x000000) auch noch die alpha-transparenz (0x00000000). die kannst du ermitteln und/oder sogar einfach den channel der bitmapdata kopieren und als maske benutzen oder löschen.

[Taesch]

BitmapData.draw(video) ergibt folgende Fehler Hab ich was falsch gemacht, oder funktioniert es so nicht?

 // Objekt, welches Video beinhaltet, lädt ein Video per NetStream
var video:Video = new Video();
video.name = "video";
background.addChild(video);

 // clicked-Handler
var tmp:BitmapData = new BitmapData(100,100);
tmp.draw( Video(getChildByName("Video")) );
var alpha:int = tmp.getPixel32(event.localX,event.localY);

ArgumentError: Error #2005: Parameter 0 ist nicht vom richtigen Typ. Er sollte vom Typ IBitmapDrawable sein.
	at flash.display::BitmapData/draw()
	at actionscript.classes::GameObject/

Sofern ich nicht das Video zeichne (weil nicht IBitmapDrawable), sondern den Container (background:MovieClip)

tmp.draw( background);

zeichnet es mir eine BitmapData, die einen weißen Hintergrund hat. Daher ist der Rückgabewert von getPixel32(x,y) nie 0!

[astrocreep]

einmal "video" und einmal "Video"

aber bau der mal eine ordentlich verwaltung deiner verschiedenen objekte auf. das ganze über name und getChildByName zu lösen ist nicht wirklich optimal.

[Taesch]

einmal "video" und einmal "Video"

*beschämt* Das ist ja mal doof, entschuldige, darauf hätte ich selbst kommen können. Nichts desto trotz, wird bei "draw" immernoch der Hintergrund weiß gemalt. Durch die Ergebnisse von getPixel32() find ich zumindest das weiß immer raus, ist ja nicht optimal, weils auch ein weißes Video sein könnte, aber: 0xFFFFFFFF = 4294967295 und damit abfragbar

aber bau der mal eine ordentlich verwaltung deiner verschiedenen objekte auf. das ganze über name und getChildByName zu lösen ist nicht wirklich optimal.

Ich bin erstmal am Basteln und ausloten, welche Möglichkeiten ich habe. Wenn diese Schwierigkeit gelöst ist, weiß ich ja schonmal wie ich das ausbauen kann, danach gehts an den Sound und die SoundChannels - wenn ich dann die Sturktur dahinter verstehe und weiß was ich brauche, kann ich auch eine vernünftige Stuktur bauen - wer baut ein Hochhaus, wenn er nicht weiß was ein Stützpfeiler ist? =)

[derbrueller]

zu zeichnest ja auch weiss!

schau dir mal die BitmapData Classe an

BitmapData(width:int, height:int, transparent:Boolean = true, fillColor:uint = 0xFFFFFFFF)