Flying Car Racing
Automotive / Motorsport Commentary · Airspeeder · uN_WhuOueKc.mp4
640×360 · 25 FPS · 60.047 s
INPUT · deterministic grayscale · silent
TARGET · source-observed color · silent
黑白视频上色
严格的 color-only V2V：灰度视频 → 同一内容、同一时间轴的自然彩色视频。FineVideo 作为真实连续视频主训练源，DAVIS 作为小型、像素对齐 benchmark；所有派生 INPUT/TARGET 都移除音轨。
GOFineVideo 1,000/1,000 完整解码S3 逐对象验证Derived video-only · 0 audio streams灰度 INPUT 为 Class B 派生
先读：Dataset Report 的 source-native 边界
原数据集没有提供灰度 INPUT，也没有提供 Task 50 的 INPUT → TARGET pair。
FineVideo 原生内容是彩色 MP4 + publisher JSON；DAVIS 原生内容是 RGB JPEG frames + 对齐 instance-mask PNG。下方出现的灰度 INPUT、英文 prompt、selective-color TARGET、pairing、浏览器 MP4 和去音轨操作，全部是为了说明未来 pipeline 的 derived preview，不是 dataset 自带内容，也不存入 raw。
FineVideo 原生内容是彩色 MP4 + publisher JSON；DAVIS 原生内容是 RGB JPEG frames + 对齐 instance-mask PNG。下方出现的灰度 INPUT、英文 prompt、selective-color TARGET、pairing、浏览器 MP4 和去音轨操作，全部是为了说明未来 pipeline 的 derived preview，不是 dataset 自带内容，也不存入 raw。
1,000FineVideo 原生 MP4
79.81 h实测连续视频时长
14.80 GiBMP4 + JSON + README
0探测 / 完整解码错误
派生说明样例（不是 dataset-native pair）
本区只演示 raw 如何被未来 pipeline 转成 Task 50 训练格式。每组 TARGET 的画面来自对应 FineVideo source-native MP4；网页展示文件是移除音轨后的 video-only proxy，因此不再与 raw S3 对象字节相同。INPUT 是从同一彩色视频确定性生成的灰度版本，不是 FineVideo 自带字段或文件。INPUT/TARGET 均保留分辨率、帧率、时长和视频内容，但 audio stream 为 0；这些派生文件不在 raw prefix。
MacBook Comparison
Education / Tech Reviews · DreamWebTuts · VoOUs0WfnrI.mp4
270×480 · 30 FPS · 24.533 s
INPUT · deterministic grayscale · silent
TARGET · source-observed color · silent
One Earth
Science & Technology / Climate Change · MTV Shuga · 4bg2QeVAFKA.mp4
202×360 · 25 FPS · 20.805 s
INPUT · deterministic grayscale · silent
TARGET · source-observed color · silent
边界：publisher 提供的是彩色视频与 JSON metadata，不是灰→彩 pair。训练 pipeline 在读取时生成 grayscale input；原始彩色 MP4 始终是 target/source of truth。
结论与角色分工
主训练源使用 FineVideo subset v1，DAVIS 保留为 benchmark。 新子集提供 1,000 条真实连续视频、79.81 小时和 935 个频道；比原先只有 832.8 MB 的 DAVIS 更适合训练，同时保持可审计、可复现且不需要全量下载 673 GB。
| Source | 用途 | 结论 |
|---|---|---|
| FineVideo subset v1 | 主训练源 | 1,000 source-native MP4 + 1,000 JSON；完整探测/解码通过；9 类分层 |
| DAVIS 2017 trainval 480p | benchmark / 像素对齐 demo | 90 sequences / 6,208 RGB frames；规模小，不单独承担训练 |
FineVideo subset v1 · 选择与全量审计
从官方 revision 7a7f490d7f92a9875dd2cc31c3d46fe5df68740b 的 1,357 个 shard 中均匀选择 40 个候选 shard，共 1,290 行；按 content_parent_category 使用 Hamilton 比例配额，并在每类内按稳定 SHA-256 key 排序，得到固定的 1,000 条。
| 检查项 | 结果 |
|---|---|
| 结构 | 1,000 MP4 + 1,000 JSON；stem 全部配对；JSON 解析错误 0 |
| 媒体 | 1,000/1,000 ffprobe 成功；1,000/1,000 完整视频流解码成功 |
| 时长 | 287,312.277588 秒；最短 15.581 秒，最长 658.170 秒 |
| 重复 | 1,000 个唯一 MP4 SHA-256；重复 hash 组 0 |
| 编码 | 全部 H.264 / yuv420p；全部带音频 |
| 分辨率 | 640×360：799；360×640：76；480×360：44；其余保持 publisher-native 尺寸 |
| 类别 | Entertainment 215；Education 162；Science & Technology 124；Lifestyle 105；News & Politics 105；Hobbies & Interests 102；Art & Creativity 80；Sports 69；Automotive 38 |
| 来源多样性 | 935 个 YouTube channel |
Task 50 S3 数据结构
s3://tv2v-data/raw/taxonomy/Task_50_video_colorization/
├── FineVideo_subset_v1/
│ ├── README.md # FineVideo 官方 dataset card / terms
│ ├── videos/ # 1,000 publisher-native MP4
│ └── metadata/ # 1,000 对应 publisher metadata JSON
└── DAVIS_2017_trainval_480p/
└── DAVIS-2017-trainval-480p.zip
s3://tv2v-data/reports/taxonomy/Task_50_video_colorization/FineVideo_subset_v1/
└── selection / media audit / S3 verification evidenceS3 raw 验证：2,001 objects，15,887,790,353 bytes；逐对象 size + 单段上传 ETag/MD5 对照，缺失 0、额外 0、不一致 0。
Task pipeline
| 阶段 | 合同 |
|---|---|
| Raw ingest | 只保存 source-native MP4、对应 JSON 与官方 README；不修改 publisher 音轨，也不生成灰度文件 |
| Train sample | 读取彩色 MP4 → 保持时轴与几何 → 确定性 luminance-only transform 生成 INPUT；source-observed color 画面作为 TARGET；两路编码均显式 -an |
| Audio gate | input_video.mp4 与 target_video.mp4 必须为 0 audio streams；发现音轨即验证失败 |
| Pairing key | source_revision + source_shard + source_row + original_video_filename |
| 禁止变化 | 除色彩与明确移除音轨外，不改变亮度结构、纹理、清晰度、帧数、FPS、相机运动、几何或内容 |
| 评测 | 外观：PSNR/SSIM、LPIPS/FID；时间一致性：CDC；另保留 identity/temporal invariants |
许可与使用条件
FineVideo 页面将数据标为 CC，官方说明视频来自 YouTube Creative Commons；下载受 Hugging Face gated access、FineVideo terms、版本与 removal list 约束。内部训练和任何后续共享均须保留原始 attribution metadata，并在使用前重新核对当前 dataset card、terms 与 removal list。本报告不把代码许可替代为数据许可。
DAVIS benchmark · 已验证
Task 50 专属 raw 副本为 s3://tv2v-data/raw/taxonomy/Task_50_video_colorization/DAVIS_2017_trainval_480p/DAVIS-2017-trainval-480p.zip。Archive 832,766,765 bytes，SHA-256 e3d0b5b77c3d031b000a19e0e25e3e2cac65d183755601bc2cf066df1a2aa492；90 sequences、6,208 RGB JPEG、6,208 masks，12,416 张图片全部解码成功，逐序列 frame-count mismatch 为 0。Mask 是分割监督，不是上色 condition/target。
Audit worker: i-0903cb0764bc9853e · temporary c6i.4xlarge · us-east-2c · encrypted 100 GiB gp3. 页面数据截至 2026-07-19；实例已终止，临时上传权限已移除，卷删除已验证。