亚洲乱色熟女一区二区三区丝袜,天堂√中文最新版在线,亚洲精品乱码久久久久久蜜桃图片,香蕉久久久久久av成人,欧美丰满熟妇bbb久久久

LOGO OA教程 ERP教程 模切知識交流 PMS教程 CRM教程 開發(fā)文檔 其他文檔  
 
網(wǎng)站管理員

一個 4.7 GB 視頻把瀏覽器拖進(jìn) OOM

freeflydom
2025年8月5日 8:52 本文熱度 1402

你給一家在線教育平臺做「課程視頻批量上傳」功能。
需求聽起來很樸素:講師后臺一次性拖 20 個 4K 視頻,瀏覽器要穩(wěn)、要快、要能斷網(wǎng)續(xù)傳。
你第一版直接 <input type="file"> + FormData,結(jié)果上線當(dāng)天就炸:

  • 講師 A 上傳 4.7 GB 的 .mov,Chrome 直接 內(nèi)存溢出 崩潰;
  • 講師 B 網(wǎng)斷了 3 分鐘,重新上傳發(fā)現(xiàn)進(jìn)度條歸零,心態(tài)跟著歸零;
  • 運營同學(xué)瘋狂 @ 前端:“你們是不是沒做分片?”

解決方案:三層防線,把 4 GB 切成 2 MB 的“薯片”

1. 表面用法:分片 + 并發(fā),瀏覽器再也不卡

// upload.js
const CHUNK_SIZE = 2 * 1024 * 1024;    // ?? 2 MB 一片,內(nèi)存友好
export async function* sliceFile(file) {
  let cur = 0;
  while (cur < file.size) {
    yield file.slice(cur, cur + CHUNK_SIZE);
    cur += CHUNK_SIZE;
  }
}
// uploader.js
import pLimit from 'p-limit';
const limit = pLimit(5);               // ?? 最多 5 并發(fā),防止占滿帶寬
export async function upload(file) {
  const hash = await calcHash(file);   // ?? 秒傳、斷點續(xù)傳都靠它
  const tasks = [];
  for await (const chunk of sliceFile(file)) {
    tasks.push(limit(() => uploadChunk({ hash, chunk })));
  }
  await Promise.all(tasks);
  await mergeChunks(hash, file.name);  // ?? 通知后端合并
}

逐行拆解:

  • sliceFile 用 file.slice 生成 Blob 片段,不占額外內(nèi)存
  • p-limit 控制并發(fā),避免 100 個請求同時打爆瀏覽器;
  • calcHash 用 WebWorker 算 MD5,頁面不卡頓(后面細(xì)講)。

2. 底層機(jī)制:斷點續(xù)傳到底續(xù)在哪?

角色存儲位置內(nèi)容生命周期
前端IndexedDBhash → 已上傳分片索引數(shù)組瀏覽器本地,清緩存即失效
后端Redis / MySQLhash → 已接收分片索引數(shù)組可配置 TTL,支持跨端續(xù)傳

sequenceDiagram
    participant F as 前端
    participant B as 后端
    F->>B: POST /prepare {hash, totalChunks}
    B-->>F: 200 OK {uploaded:[0,3,7]}
    loop 上傳剩余分片
        F->>B: POST /upload {hash, index, chunkData}
        B-->>F: 200 OK
    end
    F->>B: POST /merge {hash}
    B-->>F: 200 OK
    Note over B: 按順序?qū)懘疟P
  1. 前端先 POST /prepare 帶 hash + 總分片數(shù);
  2. 后端返回已上傳索引 [0, 3, 7];
  3. 前端跳過這 3 片,只傳剩余;
  4. 全部完成后 POST /merge,后端按順序?qū)懘疟P。

3. 設(shè)計哲學(xué):把“上傳”做成可插拔的協(xié)議

interface Uploader {
  prepare(file: File): Promise<PrepareResp>;
  upload(chunk: Blob, index: number): Promise<void>;
  merge(): Promise<string>;            // ?? 返回文件 URL
}

我們實現(xiàn)了三套:

  • BrowserUploader:純前端分片;
  • TusUploader:遵循 tus.io 協(xié)議,天然斷點續(xù)傳;
  • AliOssUploader:直傳 OSS,用 OSS 的斷點 SDK。
方案并發(fā)控制斷點續(xù)傳秒傳代碼量
自研手動自己實現(xiàn)手動300 行
tus內(nèi)置協(xié)議級需后端100 行
OSS內(nèi)置SDK 級自動50 行


應(yīng)用擴(kuò)展:拿來即用的配置片段

1. WebWorker 算 Hash(防卡頓)

// hash.worker.js
importScripts('spark-md5.min.js');
self.onmessage = ({ data: file }) => {
  const spark = new SparkMD5.ArrayBuffer();
  const reader = new FileReaderSync();
  for (let i = 0; i < file.size; i += CHUNK_SIZE) {
    spark.append(reader.readAsArrayBuffer(file.slice(i, i + CHUNK_SIZE)));
  }
  self.postMessage(spark.end());
};

2. 環(huán)境適配

環(huán)境適配點
瀏覽器需兼容 Safari 14 以下無 File.prototype.slice(用 webkitSlice 兜底)
Node用 fs.createReadStream 分片,Hash 用 crypto.createHash('md5')
Electron渲染進(jìn)程直接走瀏覽器方案,主進(jìn)程可復(fù)用 Node 邏輯


舉一反三:3 個變體場景

  1. 秒傳
    上傳前先算 hash → 調(diào)后端 /exists?hash=xxx → 已存在直接返回 URL,0 流量完成。
  2. 加密上傳
    在 uploadChunk 里加一層 AES-GCM 加密,后端存加密塊,下載時由前端解密。
  3. P2P 協(xié)同上傳
    用 WebRTC 把同局域網(wǎng)學(xué)員的瀏覽器變成 CDN,分片互傳后再統(tǒng)一上報,節(jié)省 70% 出口帶寬。

小結(jié)

大文件上傳的核心不是“傳”,而是“斷”。
把 4 GB 切成 2 MB 的薯片,再配上一張能續(xù)命的“進(jìn)度表”,瀏覽器就能穩(wěn)穩(wěn)地吃下任何體積的視頻。

?轉(zhuǎn)自https://juejin.cn/post/7530868895768838179


該文章在 2025/8/5 8:52:55 編輯過
關(guān)鍵字查詢
相關(guān)文章
正在查詢...
點晴ERP是一款針對中小制造業(yè)的專業(yè)生產(chǎn)管理軟件系統(tǒng),系統(tǒng)成熟度和易用性得到了國內(nèi)大量中小企業(yè)的青睞。
點晴PMS碼頭管理系統(tǒng)主要針對港口碼頭集裝箱與散貨日常運作、調(diào)度、堆場、車隊、財務(wù)費用、相關(guān)報表等業(yè)務(wù)管理,結(jié)合碼頭的業(yè)務(wù)特點,圍繞調(diào)度、堆場作業(yè)而開發(fā)的。集技術(shù)的先進(jìn)性、管理的有效性于一體,是物流碼頭及其他港口類企業(yè)的高效ERP管理信息系統(tǒng)。
點晴WMS倉儲管理系統(tǒng)提供了貨物產(chǎn)品管理,銷售管理,采購管理,倉儲管理,倉庫管理,保質(zhì)期管理,貨位管理,庫位管理,生產(chǎn)管理,WMS管理系統(tǒng),標(biāo)簽打印,條形碼,二維碼管理,批號管理軟件。
點晴免費OA是一款軟件和通用服務(wù)都免費,不限功能、不限時間、不限用戶的免費OA協(xié)同辦公管理系統(tǒng)。
Copyright 2010-2025 ClickSun All Rights Reserved