IOS Live Broadcast Systeemontwikkeling (principe)

4. Een complete app-architectuur voor live-uitzendingen (3)

5. Technische punten van een complete app voor live-uitzendingen (4)

3. Begrijp streaming media (streaming media is vereist voor live uitzendingen)
Streaming media-ontwikkeling: de netwerklaag (socket of st) is verantwoordelijk voor de transmissie, de protocollaag (rtmp of hls) is verantwoordelijk voor de netwerkverpakking, de encapsulation-laag (flv, ts) is verantwoordelijk voor de inkapseling van codec-gegevens, en de coderingslaag (h.264 en aac) is verantwoordelijk voor de afbeelding, audiocompressie.
Frame: elk frame vertegenwoordigt een stilstaand beeld
GOP: (Group of Pictures) fotogroep, een GOP is een groep doorlopende foto's, elke foto is een frame, een GOP is een verzameling van vele frames
De live-gegevens zijn eigenlijk een reeks afbeeldingen, inclusief I-frames, P-frames en B-frames. Wanneer de gebruiker ze voor de eerste keer bekijkt, zoekt hij naar de I-frames en gaat de speler naar de server om de dichtstbijzijnde I-frames te vinden en deze terug te sturen naar de gebruiker. Daarom verhoogt GOP-cache de end-to-end-latentie omdat deze het dichtstbijzijnde I-frame moet krijgen. Hoe langer de lengte van de GOP-cache, hoe beter de beeldkwaliteit
Bitsnelheid: de hoeveelheid gegevens die per seconde wordt weergegeven nadat de foto is gecomprimeerd.
Framesnelheid: het aantal afbeeldingen dat per seconde wordt weergegeven. Beïnvloedt de vloeiendheid van het beeld en is recht evenredig met de vloeiendheid van het beeld: hoe groter de framesnelheid, hoe vloeiender het beeld; hoe lager de framesnelheid, hoe springeriger het beeld.
Vanwege de speciale fysiologische structuur van het menselijk oog, als de framesnelheid van de bekeken foto hoger is dan 16, wordt deze als coherent beschouwd. Dit fenomeen wordt persistentie van het gezichtsvermogen genoemd. En als de framesnelheid een bepaalde waarde bereikt en deze weer toeneemt, is het voor het menselijk oog niet gemakkelijk om een ​​significante toename in vloeiendheid waar te nemen.
Resolutie: (rechthoekig) de lengte en breedte van de afbeelding, dat wil zeggen de grootte van de afbeelding
Gegevens per seconde vóór compressie: framesnelheid X-resolutie (eenheid moet meerdere bytes zijn)
Compressieverhouding: de hoeveelheid gegevens per seconde / bitsnelheid vóór compressie (voor dezelfde videobron en bij gebruik van hetzelfde videocoderingsalgoritme geldt: hoe hoger de compressieverhouding, hoe slechter de beeldkwaliteit.)
Videobestandsformaat: het achtervoegsel van het bestand, zoals .wmv, .mov, .mp4, .mp3, .avi,
Hoofdgebruik, afhankelijk van het bestandsformaat, zal het systeem automatisch bepalen welke software moet worden geopend,
Opmerking: Wijzig het bestandsformaat naar believen, het heeft niet veel invloed op het bestand zelf, zoals het wijzigen van avi naar mp4, het bestand is nog steeds avi.
Video-inkapselingsformaat: een container voor het opslaan van video-informatie. Streaminginkapseling kan TS, FLV, enz. Omvatten, geïndexeerde inkapseling omvat MP4, MOV, AVI, enz.,
Hoofdfunctie: Een videobestand bevat vaak afbeeldingen en audio, evenals enige configuratie-informatie (zoals de associatie van afbeeldingen en audio, hoe ze te decoderen, enz.): Deze inhoud moet worden georganiseerd en verpakt volgens bepaalde regels.
Opmerking: u zult zien dat het verpakkingsformaat hetzelfde is als het bestandsformaat, omdat het achtervoegsel van het algemene videobestandsformaat de naam gebruikt van het overeenkomstige videoverpakkingsformaat, dus het videobestandsformaat is het videoverpakkingsformaat.