Spaces:
Sleeping
Sleeping
deploy rater (Docker/FastAPI): registration + completeness gate + /api/submit → dataset
Browse files- static/index.html +10 -3
- static/mobile.html +5 -1
static/index.html
CHANGED
|
@@ -402,6 +402,9 @@ const DIMENSIONS = [
|
|
| 402 |
{ key: "prompt_adherence",
|
| 403 |
name: "Prompt adherence",
|
| 404 |
desc: "Does the content match what the prompt described (subjects, actions, setting)?" },
|
|
|
|
|
|
|
|
|
|
| 405 |
],
|
| 406 |
},
|
| 407 |
{
|
|
@@ -553,7 +556,7 @@ const STRINGS = {
|
|
| 553 |
"instructions_intro": "For each case, watch all videos side by side, then rate <strong>each video independently</strong> on every sub-question. The rating table groups sub-questions by dimension; videos appear as columns.",
|
| 554 |
"scale_legend": "Likert scale (1 = worst, 5 = best)",
|
| 555 |
"dimensions_header": "Dimensions",
|
| 556 |
-
"dim_inst_short": "<strong>Instruction following</strong> — controllability, prompt adherence.",
|
| 557 |
"dim_visual_short": "<strong>Visual quality</strong> — aesthetics, sharpness, realism.",
|
| 558 |
"dim_temporal_short": "<strong>Temporal consistency</strong> — anti-flicker, person / object / environment stability.",
|
| 559 |
"dim_motion_short": "<strong>Motion realism</strong> — physics, movement, camera motion.",
|
|
@@ -678,7 +681,7 @@ const STRINGS = {
|
|
| 678 |
"instructions_intro": "请并排观看所有视频,然后<strong>独立</strong>对每个视频的每个子问题打分。评分表按维度分组;视频以列方式呈现。",
|
| 679 |
"scale_legend": "李克特量表(1 = 最差, 5 = 最佳)",
|
| 680 |
"dimensions_header": "评估维度",
|
| 681 |
-
"dim_inst_short": "<strong>指令遵循</strong> — 可控性、提示一致性。",
|
| 682 |
"dim_visual_short": "<strong>画面质量</strong> — 美学、清晰度、真实感。",
|
| 683 |
"dim_temporal_short": "<strong>时间一致性</strong> — 防闪烁,人物 / 物体 / 环境稳定性。",
|
| 684 |
"dim_motion_short": "<strong>运动真实感</strong> — 物理规律、运动连贯性、相机运动。",
|
|
@@ -803,7 +806,7 @@ const STRINGS = {
|
|
| 803 |
"instructions_intro": "За всеки случай гледайте всички видеа едно до друго и оценявайте <strong>всяко видео самостоятелно</strong> по всеки под-въпрос. Таблицата групира под-въпросите по измерения; видеата са колоните.",
|
| 804 |
"scale_legend": "Ликертова скала (1 = най-лошо, 5 = най-добро)",
|
| 805 |
"dimensions_header": "Измерения",
|
| 806 |
-
"dim_inst_short": "<strong>Следване на инструкции</strong> — контролируемост, съответствие с подканата.",
|
| 807 |
"dim_visual_short": "<strong>Визуално качество</strong> — естетика, острота, реализъм.",
|
| 808 |
"dim_temporal_short": "<strong>Времева съгласуваност</strong> — анти-трептене, стабилност на хора / обекти / среда.",
|
| 809 |
"dim_motion_short": "<strong>Реалистичност на движението</strong> — физика, движение, движение на камерата.",
|
|
@@ -881,6 +884,8 @@ const RUBRIC_I18N = {
|
|
| 881 |
desc: "视频是否响应控制信号(条件输入、场景线索、BGM、字幕等)?" },
|
| 882 |
prompt_adherence: { name: "提示一致性",
|
| 883 |
desc: "内容是否与提示的描述一致(主体、动作、场景)?" },
|
|
|
|
|
|
|
| 884 |
aesthetics: { name: "美学",
|
| 885 |
desc: "构图、色彩、光照及整体观感。" },
|
| 886 |
sharpness: { name: "清晰度",
|
|
@@ -915,6 +920,8 @@ const RUBRIC_I18N = {
|
|
| 915 |
desc: "Реагира ли видеото на контролни сигнали (обуславяне, насоки за сцена, BGM, субтитри и т.н.)?" },
|
| 916 |
prompt_adherence: { name: "Съответствие с подканата",
|
| 917 |
desc: "Съответства ли съдържанието на описаното в подканата (обекти, действия, обстановка)?" },
|
|
|
|
|
|
|
| 918 |
aesthetics: { name: "Естетика",
|
| 919 |
desc: "Композиция, цвят, осветление, цялостен приятен вид." },
|
| 920 |
sharpness: { name: "Острота",
|
|
|
|
| 402 |
{ key: "prompt_adherence",
|
| 403 |
name: "Prompt adherence",
|
| 404 |
desc: "Does the content match what the prompt described (subjects, actions, setting)?" },
|
| 405 |
+
{ key: "no_irrelevant_frames",
|
| 406 |
+
name: "No irrelevant frames",
|
| 407 |
+
desc: "Does the video stay on-prompt? Higher = fewer / no frames or content that weren't asked for by the prompt." },
|
| 408 |
],
|
| 409 |
},
|
| 410 |
{
|
|
|
|
| 556 |
"instructions_intro": "For each case, watch all videos side by side, then rate <strong>each video independently</strong> on every sub-question. The rating table groups sub-questions by dimension; videos appear as columns.",
|
| 557 |
"scale_legend": "Likert scale (1 = worst, 5 = best)",
|
| 558 |
"dimensions_header": "Dimensions",
|
| 559 |
+
"dim_inst_short": "<strong>Instruction following</strong> — controllability, prompt adherence, no irrelevant frames.",
|
| 560 |
"dim_visual_short": "<strong>Visual quality</strong> — aesthetics, sharpness, realism.",
|
| 561 |
"dim_temporal_short": "<strong>Temporal consistency</strong> — anti-flicker, person / object / environment stability.",
|
| 562 |
"dim_motion_short": "<strong>Motion realism</strong> — physics, movement, camera motion.",
|
|
|
|
| 681 |
"instructions_intro": "请并排观看所有视频,然后<strong>独立</strong>对每个视频的每个子问题打分。评分表按维度分组;视频以列方式呈现。",
|
| 682 |
"scale_legend": "李克特量表(1 = 最差, 5 = 最佳)",
|
| 683 |
"dimensions_header": "评估维度",
|
| 684 |
+
"dim_inst_short": "<strong>指令遵循</strong> — 可控性、提示一致性、无无关画面。",
|
| 685 |
"dim_visual_short": "<strong>画面质量</strong> — 美学、清晰度、真实感。",
|
| 686 |
"dim_temporal_short": "<strong>时间一致性</strong> — 防闪烁,人物 / 物体 / 环境稳定性。",
|
| 687 |
"dim_motion_short": "<strong>运动真实感</strong> — 物理规律、运动连贯性、相机运动。",
|
|
|
|
| 806 |
"instructions_intro": "За всеки случай гледайте всички видеа едно до друго и оценявайте <strong>всяко видео самостоятелно</strong> по всеки под-въпрос. Таблицата групира под-въпросите по измерения; видеата са колоните.",
|
| 807 |
"scale_legend": "Ликертова скала (1 = най-лошо, 5 = най-добро)",
|
| 808 |
"dimensions_header": "Измерения",
|
| 809 |
+
"dim_inst_short": "<strong>Следване на инструкции</strong> — контролируемост, съответствие с подканата, без неуместни кадри.",
|
| 810 |
"dim_visual_short": "<strong>Визуално качество</strong> — естетика, острота, реализъм.",
|
| 811 |
"dim_temporal_short": "<strong>Времева съгласуваност</strong> — анти-трептене, стабилност на хора / обекти / среда.",
|
| 812 |
"dim_motion_short": "<strong>Реалистичност на движението</strong> — физика, движение, движение на камерата.",
|
|
|
|
| 884 |
desc: "视频是否响应控制信号(条件输入、场景线索、BGM、字幕等)?" },
|
| 885 |
prompt_adherence: { name: "提示一致性",
|
| 886 |
desc: "内容是否与提示的描述一致(主体、动作、场景)?" },
|
| 887 |
+
no_irrelevant_frames: { name: "无无关画面",
|
| 888 |
+
desc: "视频是否仅呈现提示中要求的内容?分数越高 = 越少出现与提示无关的帧或内容。" },
|
| 889 |
aesthetics: { name: "美学",
|
| 890 |
desc: "构图、色彩、光照及整体观感。" },
|
| 891 |
sharpness: { name: "清晰度",
|
|
|
|
| 920 |
desc: "Реагира ли видеото на контролни сигнали (обуславяне, насоки за сцена, BGM, субтитри и т.н.)?" },
|
| 921 |
prompt_adherence: { name: "Съответствие с подканата",
|
| 922 |
desc: "Съответства ли съдържанието на описаното в подканата (обекти, действия, обстановка)?" },
|
| 923 |
+
no_irrelevant_frames: { name: "Без неуместни кадри",
|
| 924 |
+
desc: "Остава ли видеото в рамките на подканата? По-висок = по-малко / без кадри или съдържание, които не са поискани." },
|
| 925 |
aesthetics: { name: "Естетика",
|
| 926 |
desc: "Композиция, цвят, осветление, цялостен приятен вид." },
|
| 927 |
sharpness: { name: "Острота",
|
static/mobile.html
CHANGED
|
@@ -393,7 +393,9 @@ const DIMENSIONS = [
|
|
| 393 |
{ key: "controllability", name: "Controllability",
|
| 394 |
desc: "Does the video respond to control signals (camera motion, conditioning, scene cues)?" },
|
| 395 |
{ key: "prompt_adherence", name: "Prompt adherence",
|
| 396 |
-
desc: "Does the content match what the prompt described (subjects, actions, setting)?" }
|
|
|
|
|
|
|
| 397 |
{ key: "visual_quality", name: "Visual quality",
|
| 398 |
hint: "How good does each frame look?", questions: [
|
| 399 |
{ key: "aesthetics", name: "Aesthetics",
|
|
@@ -560,6 +562,7 @@ const RUBRIC_I18N = {
|
|
| 560 |
motion_realism:{name:"运动真实感",hint:"运动是否符合物理规律?"},
|
| 561 |
controllability:{name:"可控性",desc:"视频是否响应控制信号(相机运动、条件输入、场景线索)?"},
|
| 562 |
prompt_adherence:{name:"提示一致性",desc:"内容是否与提示的描述一致(主体、动作、场景)?"},
|
|
|
|
| 563 |
aesthetics:{name:"美学",desc:"构图、色彩、光照及整体观感。"},
|
| 564 |
sharpness:{name:"清晰度",desc:"清晰度与细节;无模糊或压缩伪影。"},
|
| 565 |
realism:{name:"真实感",desc:"照片级真实感或风格忠实度(无诡异感或失真伪影)。"},
|
|
@@ -578,6 +581,7 @@ const RUBRIC_I18N = {
|
|
| 578 |
motion_realism:{name:"Реалистичност на движението",hint:"Движението изглежда ли правдоподобно?"},
|
| 579 |
controllability:{name:"Контролируемост",desc:"Реагира ли видеото на контролни сигнали (движение на камерата, обуславяне, насоки за сцена)?"},
|
| 580 |
prompt_adherence:{name:"Съответствие с подканата",desc:"Съответства ли съдържанието на описаното в подканата (обекти, действия, обстановка)?"},
|
|
|
|
| 581 |
aesthetics:{name:"Естетика",desc:"Композиция, цвят, осветление, цялостен приятен вид."},
|
| 582 |
sharpness:{name:"Острота",desc:"Яснота и детайли; липса на размазване или компресионни артефакти."},
|
| 583 |
realism:{name:"Реализъм",desc:"Фотореалистичност или стилова достоверност (без странни / счупени артефакти)."},
|
|
|
|
| 393 |
{ key: "controllability", name: "Controllability",
|
| 394 |
desc: "Does the video respond to control signals (camera motion, conditioning, scene cues)?" },
|
| 395 |
{ key: "prompt_adherence", name: "Prompt adherence",
|
| 396 |
+
desc: "Does the content match what the prompt described (subjects, actions, setting)?" },
|
| 397 |
+
{ key: "no_irrelevant_frames", name: "No irrelevant frames",
|
| 398 |
+
desc: "Does the video stay on-prompt? Higher = fewer / no frames or content that weren't asked for by the prompt." } ] },
|
| 399 |
{ key: "visual_quality", name: "Visual quality",
|
| 400 |
hint: "How good does each frame look?", questions: [
|
| 401 |
{ key: "aesthetics", name: "Aesthetics",
|
|
|
|
| 562 |
motion_realism:{name:"运动真实感",hint:"运动是否符合物理规律?"},
|
| 563 |
controllability:{name:"可控性",desc:"视频是否响应控制信号(相机运动、条件输入、场景线索)?"},
|
| 564 |
prompt_adherence:{name:"提示一致性",desc:"内容是否与提示的描述一致(主体、动作、场景)?"},
|
| 565 |
+
no_irrelevant_frames:{name:"无无关画面",desc:"视频是否仅呈现提示中要求的内容?分数越高 = 越少出现与提示无关的帧或内容。"},
|
| 566 |
aesthetics:{name:"美学",desc:"构图、色彩、光照及整体观感。"},
|
| 567 |
sharpness:{name:"清晰度",desc:"清晰度与细节;无模糊或压缩伪影。"},
|
| 568 |
realism:{name:"真实感",desc:"照片级真实感或风格忠实度(无诡异感或失真伪影)。"},
|
|
|
|
| 581 |
motion_realism:{name:"Реалистичност на движението",hint:"Движението изглежда ли правдоподобно?"},
|
| 582 |
controllability:{name:"Контролируемост",desc:"Реагира ли видеото на контролни сигнали (движение на камерата, обуславяне, насоки за сцена)?"},
|
| 583 |
prompt_adherence:{name:"Съответствие с подканата",desc:"Съответства ли съдържанието на описаното в подканата (обекти, действия, обстановка)?"},
|
| 584 |
+
no_irrelevant_frames:{name:"Без неуместни кадри",desc:"Остава ли видеото в рамките на подканата? По-висок = по-малко / без кадри или съдържание, които не са поискани."},
|
| 585 |
aesthetics:{name:"Естетика",desc:"Композиция, цвят, осветление, цялостен приятен вид."},
|
| 586 |
sharpness:{name:"Острота",desc:"Яснота и детайли; липса на размазване или компресионни артефакти."},
|
| 587 |
realism:{name:"Реализъм",desc:"Фотореалистичност или стилова достоверност (без странни / счупени артефакти)."},
|