MediaCodec KEY_FRAME_RATE scheint, um ignoriert zu werden

Ich versuche, ändern Sie die Quelle für screenrecord in android 4.4 und niedriger der erfassten frame-rate, aber egal welchen Wert ich in:

format->setFloat("frame-rate", 5);

das Ergebnis ist immer das gleiche ( eine sehr hohe frame rate )

Ist der encoder ignorieren diese Eigenschaft ?
wie kann ich die Framerate ?

Es sieht so aus, der Wert wird nur verwendet für das schreiben von ein paar header-info in den resultierenden mp4-Datei, nicht für die Kontrolle der capture rate. Für, die, würden Sie ändern müssen, um den loop-encoder und die Bilder fallen entsprechend.

InformationsquelleAutor jacob | 2014-03-11

10

Den frame-rate Wert nicht ignoriert, aber es nicht tun, was Sie wollen.

Die Kombination von frame-rate und i-frame-interval bestimmt, wie Häufig I-frames (auch als "sync-frames") angezeigt, in die kodierte Ausgabe. Die frame-rate-Wert könnte auch eine Rolle spielen bei der Erfüllung der bitrate Ziel auf einigen Geräten, aber ich bin nicht sicher, dass (siehe z.B. dieser Beitrag).

Den MediaCodec encoder nicht drop frames. Wenn Sie möchten, um die Framerate zu reduzieren, müssen Sie so tun, indem Sie senden weniger frames zu.

Den screenrecord Befehl nicht "Probe" den Bildschirm an einer fixen frame-rate. Anstatt jedes frame erhält er von der Oberfläche compositor (SurfaceFlinger) an die encoder, mit einem entsprechenden Zeitstempel. Wenn screenrecord erhält 60 frames pro Sekunde, müssen Sie mit 60 fps-Ausgabe. Wenn es erhält 10 Bilder in schneller Folge, gefolgt von nichts für 5 Sekunden, gefolgt von ein paar mehr, Sie haben genau das in die Ausgabe-Datei.

Können Sie ändern screenrecord frames drop, aber man muss ein bisschen vorsichtig sein. Wenn Sie versuchen, reduzieren Sie die maximale Bildrate von 60fps auf 30fps fallen für jeden zweiten frame, laufen Sie Gefahr, dass in einem "frame0 - frame1 - long_pause - frame2" - Sequenz werden Sie drop-frame1, und das video wird halt auf frame0 stattdessen zeigt ein nicht-ganz-komplett-animation. Sie müssen also Puffer eines Rahmens, und dann codieren oder drop-frame N-1, wenn der Unterschied in der Präsentation mal zwischen, dass und Rahmen N von ~17ms.

Der schwierige Teil ist, dass screenrecord in seiner Standard-Betriebsart, leitet die frames an den encoder, ohne Sie zu berühren, so dass alle Sie sehen, ist die codierte Ausgabe. Sie können nicht willkürlich droppen einzelne frames der codierten Daten, so dass Sie wirklich wollen, um zu verhindern, dass die encoder sehen, wie Sie in den ersten Platz. Wenn Sie die screenrecord v1.1 Quellen können Sie Tippen Sie in "overlay" - Modus, verwendet für --bugreport zu haben, um die frames passieren screenrecord auf Ihrem Weg zum encoder.

In mancher Hinsicht könnte es einfacher sein, einen Beitrag zu schreiben-Prozessor, verringert sich die frame rate. Ich weiß nicht, wie viel Qualität würde verloren gehen, wenn decoding und re-encoding des Videos.

Update: für ein Beispiel wie es grob, fügen Sie diese zu processFrame_l():
```
     int64_t droppedFrames = 0;
+    {
+        static int flipflop = 0;
+        flipflop = 1 - flipflop;
+        if (flipflop) {
+            printf("dropping frame %lld\n", frameNumber);
+            return;
+        }
+    }

     if (mLastFrameNumber > 0) {
```
Hinweis: dieser kommt nach updateTexImage() erwirbt der nächste Puffer, und überspringt den Anruf zu swapBuffers(), die legt den Puffer an den video-encoder.
- Ich bin versucht, screenrecord v 1.1 zu setzen frame-rate, aber mit kein Glück, wenn ich die einfach überspringen frames in threadLoop es funktioniert nicht. wie kann ich erfolgreich überspringen frames ?
- und wenn ich Schlaf in die threadLoop es verlangsamt das Gerät
- Hinzugefügt Probe-patch.
- Ihr patch funktioniert Super, aber es hat ein problem mit dem letzten Bild. wenn keine frames ankommen. das Letzte Bild ist nicht erfasst. kann ich erzwingen, das Letzte frame zu wiederholen, wenn keine Bilder kommen ?
- Das ist das problem von der ich Sprach in meiner Antwort ("Sie müssen ein bisschen vorsichtig sein"). Ich weiß nicht, eine einfache Möglichkeit, das richtige zu tun. Sie können rufen Sie updateTexImage() wenn nichts neues da ist und es wird nur das Vorherige Bild wieder, so können Sie nur brauchen, um einen timer off gehen, wenn keine neuen frames angekommen sind, und legt dem vorherigen frame, wenn das nicht so gewesen.
- der timer Idee klingt wie es funktionieren kann, können Sie mir helfen mit einigen Beispiel-code? btw würde KEY_REPEAT_PREVIOUS_FRAME_AFTER hier arbeiten ?
- kann ich sagen, die Hersteller schieben Sie den Bildschirm wieder ?
- Der encoder wird sehen, was gezeichnet wurde, bevor swapBuffers(). Der code in processFrame_l() Riegel der neue Rahmen ist, macht es, und swaps. Sie konnte Spaltung, ändern der main loop aufrufen updateTexImage() wenn ein neuer frame verfügbar ist, aber nicht alles zeichnen; dann jeden 33.3 ms Sie aufwachen und tun die render + swap. Diese Ausbeute video auf eine Konstante 30fps, die übermittlung der gleiche frame immer wieder, wenn das system im Leerlauf ist. Wenn Sie das nicht wollen, können Sie fügen Sie ein "habe ich eingereicht, dieser Rahmen" zu testen, die zurückgesetzt werden, wenn ein neues Bild kommt.
- ein konstanter Vorschub alle 33ms klingt gut, aber ich dont verstehen, was Sie sagten. wenn keine neuen frames sind angekommen, und ich rufe swapBuffer es bleibt mit dem letzten Bild? was genau macht swapbuffer tun ?
- Denken swapBuffers() als "senden, was ich gerade gezogen, um den video-encoder". Wenn Sie nur anrufen swapBuffers() ohne Zeichnung alles, was Sie werden unglücklich sein. updateTexImage() bedeutet "nehmen, was das neueste, was wir von der compositor ist, und legen Sie es in einer GLES textur". Wenn man sich So anschaut processFrame_l() können Sie sehen, dass es greift das neue Bild (oder die alten Rahmen, wenn nichts neues erschienen), macht es mit etwas text, und dann sendet es an den video-encoder.
- wie gewohnt Vorschlag funktioniert Super. Ich habe einen thread, das weckt die übermäßig entsprechend der gewünschten Bildrate. diese Weise ich nicht Locker, das Letzte Bild. aber ich dachte, dass der encoder würde verbessern die Leistung, wenn Sie es bekommen würde das gleiche frame immer wieder ( bei niedriger bitrate ) , aber es funktioniert nicht. jeder Weg, zu sagen, es zu tun ?
- Ich bin mir nicht sicher, was du meinst mit "Leistungssteigerung".
- durch verbesserte ich meine weniger pixelig ( wie bei x264, dass, wenn die änderungen zwischen den frames zu klein sind die encoder überstunden generiert eine weniger pixelige Ausgabe )
- Das liegt an der H. 264-encoder. Ich weiß nicht, was Verhalten Sie sich verlassen können es.
- ok, weißt du, wie kann ich deaktivieren Sie die run-time-rotation ändern , das heißt ich möchte die aufgenommenen frames bleiben die gleichen (die native Orientierung), auch wenn das Gerät gedreht wird
- Ich weiß nicht, ob es einen Weg gibt, zu tun, die mit einer virtuelle-Anzeige-alles geht durch die display-Projektions-set von setDisplayProjection(). Sie können deaktivieren Sie die automatische Drehung zum Gerät in den Einstellungen, aber ich weiß nicht, ob das eine option für Sie.
- vielleicht kann ich das drehen der Bilder in der overlay? würde es die Verarbeitungszeit erhöhen zuzuteilen? wie kann ich das tun?
- Die änderung der Ausrichtung ist entdeckt von screenrecord durch polling (das ist, warum es nicht funktioniert, ganz rechts). Sehen Sie die setDisplayProjection () - Aufruf in runEncoder(). Es sollte eine "einfache" Frage der Weitergabe die richtigen Argumente zu SurfaceComposerClient::setDisplayProjection(). Dies ist eine undokumentierte private-API, also die Infos nur über diese Methode ist in der Kopfzeile: android.googlesource.com/platform/frameworks/native/+/...
- aber nicht setDisplayProjection wechseln mein erfassen Sie Höhe und Breite ? das problem ist, dass ich streaming die kodierte Ausgabe über rtp und der Spieler nicht wissen, die Dimensionen ändern. nicht drehen, die Bilder in der overlay-Lösung für dieses problem ?
- Versuchen Sie, die display-Projektion Veränderungen in runEncoder(), und beobachten, was passiert. Wenn Sie das Gerät drehen, wird die Ausgabe abgeschnitten werden. SurfaceFlinger ist dabei in der Zusammensetzung der neuen Ausrichtung, so dass Sie zu Folgen haben. Sie müssen die Aktualisierung der Projektion zu decken, die neue Dimensionen der virtuellen Anzeige. Da Sie bereits haben, um den display-Projektion, Sie könnte genauso gut drehen Sie es auch dort.
InformationsquelleAutor fadden

Schreibe einen Kommentar

Du musst angemeldet sein, um einen Kommentar abzugeben.