专栏名称: 美团技术团队

10000+工程师，如何支撑中国领先的生活服务电子商务平台？数亿消费者、数百万商户、2000多个行业、几千亿交易额背后是哪些技术在支撑？这里是美团、大众点评、美团外卖、美团配送、美团优选等技术团队的对外窗口。

CVPR 2025 NTIRE赛事 | XGC质量评价挑战赛AI Generated Video赛...

美团技术团队 · 公众号 · 架构 · 2025-02-09 16:00

正文

）使用4,689条prompt生成。我们按照7:1:2的比例将整个数据集划分为训练集、验证集和测试集。其中训练集包含23,820条生成视频、各自对应的prompt和质量分数；验证集包含3,402条生成视频以及各自对应的prompt；测试集包含6,807条生成视频以及各自对应的prompt。

我们给出的具体数据集格式如下：

这里以训练集为例，以JSON形式保存，每个字典元素包含两个属性，video存储视频名称，prompt为生成该视频使用的prompt，gt_score为该视频的人工标注质量分数。

验证集、测试集无质量分数，仅包含video和prompt两个属性。

提交结果格式如下

结果同样要求保存为JSON文件，每个元素包含两个属性，video为视频名称，predict_score为模型预测质量分数；同时我们要求额外提交readme.txt，记录模型其他信息，具体提交要求见比赛主页evaluation页面。

评估指标

Score = (PLCC + SROCC) / 2

本次挑战赛面向全社会开放，个人、高等院校、科研单位、企业等人员均可报名参赛。每支队伍只能提交一种针对AI Generated Video质量评价算法进行最终排名。参赛队伍可自由选择是否发表竞赛相关论文，且该选择不会成为参加挑战赛或获奖的必要条件。

推荐文章

高可用架构 · 微信读书后台架构演进之路

9 小时前

架构师之路 · 全球软件工程技术大会，送福利！

昨天

字节跳动技术团队 · IJCAI 25 | SAP——基于拆分与私有化框架的语言模型隐私保护微调方案

昨天

架构师之路 · 美团的童鞋，有个问题麻烦您帮忙看一下...

昨天

高可用架构 · 这家公司对网关性能的优化历程，在 Reddit 上爆了

2 天前

灼见 · 把天聊死是一种怎样的体验？

8 年前

数据分析与开发 · 爱学习的程序员都关注了这些

8 年前

科Way · 张江科学城建设规划正式获批！总面积达94平方公里

7 年前

A股备忘录 · 周四，股市将这样走！（重磅经济数据出炉，大盘将变盘？）

7 年前

雨果网 · 成本持续上涨，亚马逊卖家该如何解决流量难题？

7 年前