dehezhang2 commited on
Commit
b7dc30f
·
verified ·
1 Parent(s): 12a053e

deploy rater (Docker/FastAPI): registration + completeness gate + /api/submit → dataset

Browse files
Files changed (2) hide show
  1. static/index.html +10 -3
  2. static/mobile.html +5 -1
static/index.html CHANGED
@@ -402,6 +402,9 @@ const DIMENSIONS = [
402
  { key: "prompt_adherence",
403
  name: "Prompt adherence",
404
  desc: "Does the content match what the prompt described (subjects, actions, setting)?" },
 
 
 
405
  ],
406
  },
407
  {
@@ -553,7 +556,7 @@ const STRINGS = {
553
  "instructions_intro": "For each case, watch all videos side by side, then rate <strong>each video independently</strong> on every sub-question. The rating table groups sub-questions by dimension; videos appear as columns.",
554
  "scale_legend": "Likert scale (1 = worst, 5 = best)",
555
  "dimensions_header": "Dimensions",
556
- "dim_inst_short": "<strong>Instruction following</strong> — controllability, prompt adherence.",
557
  "dim_visual_short": "<strong>Visual quality</strong> — aesthetics, sharpness, realism.",
558
  "dim_temporal_short": "<strong>Temporal consistency</strong> — anti-flicker, person / object / environment stability.",
559
  "dim_motion_short": "<strong>Motion realism</strong> — physics, movement, camera motion.",
@@ -678,7 +681,7 @@ const STRINGS = {
678
  "instructions_intro": "请并排观看所有视频,然后<strong>独立</strong>对每个视频的每个子问题打分。评分表按维度分组;视频以列方式呈现。",
679
  "scale_legend": "李克特量表(1 = 最差, 5 = 最佳)",
680
  "dimensions_header": "评估维度",
681
- "dim_inst_short": "<strong>指令遵循</strong> — 可控性、提示一致性。",
682
  "dim_visual_short": "<strong>画面质量</strong> — 美学、清晰度、真实感。",
683
  "dim_temporal_short": "<strong>时间一致性</strong> — 防闪烁,人物 / 物体 / 环境稳定性。",
684
  "dim_motion_short": "<strong>运动真实感</strong> — 物理规律、运动连贯性、相机运动。",
@@ -803,7 +806,7 @@ const STRINGS = {
803
  "instructions_intro": "За всеки случай гледайте всички видеа едно до друго и оценявайте <strong>всяко видео самостоятелно</strong> по всеки под-въпрос. Таблицата групира под-въпросите по измерения; видеата са колоните.",
804
  "scale_legend": "Ликертова скала (1 = най-лошо, 5 = най-добро)",
805
  "dimensions_header": "Измерения",
806
- "dim_inst_short": "<strong>Следване на инструкции</strong> — контролируемост, съответствие с подканата.",
807
  "dim_visual_short": "<strong>Визуално качество</strong> — естетика, острота, реализъм.",
808
  "dim_temporal_short": "<strong>Времева съгласуваност</strong> — анти-трептене, стабилност на хора / обекти / среда.",
809
  "dim_motion_short": "<strong>Реалистичност на движението</strong> — физика, движение, движение на камерата.",
@@ -881,6 +884,8 @@ const RUBRIC_I18N = {
881
  desc: "视频是否响应控制信号(条件输入、场景线索、BGM、字幕等)?" },
882
  prompt_adherence: { name: "提示一致性",
883
  desc: "内容是否与提示的描述一致(主体、动作、场景)?" },
 
 
884
  aesthetics: { name: "美学",
885
  desc: "构图、色彩、光照及整体观感。" },
886
  sharpness: { name: "清晰度",
@@ -915,6 +920,8 @@ const RUBRIC_I18N = {
915
  desc: "Реагира ли видеото на контролни сигнали (обуславяне, насоки за сцена, BGM, субтитри и т.н.)?" },
916
  prompt_adherence: { name: "Съответствие с подканата",
917
  desc: "Съответства ли съдържанието на описаното в подканата (обекти, действия, обстановка)?" },
 
 
918
  aesthetics: { name: "Естетика",
919
  desc: "Композиция, цвят, осветление, цялостен приятен вид." },
920
  sharpness: { name: "Острота",
 
402
  { key: "prompt_adherence",
403
  name: "Prompt adherence",
404
  desc: "Does the content match what the prompt described (subjects, actions, setting)?" },
405
+ { key: "no_irrelevant_frames",
406
+ name: "No irrelevant frames",
407
+ desc: "Does the video stay on-prompt? Higher = fewer / no frames or content that weren't asked for by the prompt." },
408
  ],
409
  },
410
  {
 
556
  "instructions_intro": "For each case, watch all videos side by side, then rate <strong>each video independently</strong> on every sub-question. The rating table groups sub-questions by dimension; videos appear as columns.",
557
  "scale_legend": "Likert scale (1 = worst, 5 = best)",
558
  "dimensions_header": "Dimensions",
559
+ "dim_inst_short": "<strong>Instruction following</strong> — controllability, prompt adherence, no irrelevant frames.",
560
  "dim_visual_short": "<strong>Visual quality</strong> — aesthetics, sharpness, realism.",
561
  "dim_temporal_short": "<strong>Temporal consistency</strong> — anti-flicker, person / object / environment stability.",
562
  "dim_motion_short": "<strong>Motion realism</strong> — physics, movement, camera motion.",
 
681
  "instructions_intro": "请并排观看所有视频,然后<strong>独立</strong>对每个视频的每个子问题打分。评分表按维度分组;视频以列方式呈现。",
682
  "scale_legend": "李克特量表(1 = 最差, 5 = 最佳)",
683
  "dimensions_header": "评估维度",
684
+ "dim_inst_short": "<strong>指令遵循</strong> — 可控性、提示一致性、无无关画面。",
685
  "dim_visual_short": "<strong>画面质量</strong> — 美学、清晰度、真实感。",
686
  "dim_temporal_short": "<strong>时间一致性</strong> — 防闪烁,人物 / 物体 / 环境稳定性。",
687
  "dim_motion_short": "<strong>运动真实感</strong> — 物理规律、运动连贯性、相机运动。",
 
806
  "instructions_intro": "За всеки случай гледайте всички видеа едно до друго и оценявайте <strong>всяко видео самостоятелно</strong> по всеки под-въпрос. Таблицата групира под-въпросите по измерения; видеата са колоните.",
807
  "scale_legend": "Ликертова скала (1 = най-лошо, 5 = най-добро)",
808
  "dimensions_header": "Измерения",
809
+ "dim_inst_short": "<strong>Следване на инструкции</strong> — контролируемост, съответствие с подканата, без неуместни кадри.",
810
  "dim_visual_short": "<strong>Визуално качество</strong> — естетика, острота, реализъм.",
811
  "dim_temporal_short": "<strong>Времева съгласуваност</strong> — анти-трептене, стабилност на хора / обекти / среда.",
812
  "dim_motion_short": "<strong>Реалистичност на движението</strong> — физика, движение, движение на камерата.",
 
884
  desc: "视频是否响应控制信号(条件输入、场景线索、BGM、字幕等)?" },
885
  prompt_adherence: { name: "提示一致性",
886
  desc: "内容是否与提示的描述一致(主体、动作、场景)?" },
887
+ no_irrelevant_frames: { name: "无无关画面",
888
+ desc: "视频是否仅呈现提示中要求的内容?分数越高 = 越少出现与提示无关的帧或内容。" },
889
  aesthetics: { name: "美学",
890
  desc: "构图、色彩、光照及整体观感。" },
891
  sharpness: { name: "清晰度",
 
920
  desc: "Реагира ли видеото на контролни сигнали (обуславяне, насоки за сцена, BGM, субтитри и т.н.)?" },
921
  prompt_adherence: { name: "Съответствие с подканата",
922
  desc: "Съответства ли съдържанието на описаното в подканата (обекти, действия, обстановка)?" },
923
+ no_irrelevant_frames: { name: "Без неуместни кадри",
924
+ desc: "Остава ли видеото в рамките на подканата? По-висок = по-малко / без кадри или съдържание, които не са поискани." },
925
  aesthetics: { name: "Естетика",
926
  desc: "Композиция, цвят, осветление, цялостен приятен вид." },
927
  sharpness: { name: "Острота",
static/mobile.html CHANGED
@@ -393,7 +393,9 @@ const DIMENSIONS = [
393
  { key: "controllability", name: "Controllability",
394
  desc: "Does the video respond to control signals (camera motion, conditioning, scene cues)?" },
395
  { key: "prompt_adherence", name: "Prompt adherence",
396
- desc: "Does the content match what the prompt described (subjects, actions, setting)?" } ] },
 
 
397
  { key: "visual_quality", name: "Visual quality",
398
  hint: "How good does each frame look?", questions: [
399
  { key: "aesthetics", name: "Aesthetics",
@@ -560,6 +562,7 @@ const RUBRIC_I18N = {
560
  motion_realism:{name:"运动真实感",hint:"运动是否符合物理规律?"},
561
  controllability:{name:"可控性",desc:"视频是否响应控制信号(相机运动、条件输入、场景线索)?"},
562
  prompt_adherence:{name:"提示一致性",desc:"内容是否与提示的描述一致(主体、动作、场景)?"},
 
563
  aesthetics:{name:"美学",desc:"构图、色彩、光照及整体观感。"},
564
  sharpness:{name:"清晰度",desc:"清晰度与细节;无模糊或压缩伪影。"},
565
  realism:{name:"真实感",desc:"照片级真实感或风格忠实度(无诡异感或失真伪影)。"},
@@ -578,6 +581,7 @@ const RUBRIC_I18N = {
578
  motion_realism:{name:"Реалистичност на движението",hint:"Движението изглежда ли правдоподобно?"},
579
  controllability:{name:"Контролируемост",desc:"Реагира ли видеото на контролни сигнали (движение на камерата, обуславяне, насоки за сцена)?"},
580
  prompt_adherence:{name:"Съответствие с подканата",desc:"Съответства ли съдържанието на описаното в подканата (обекти, действия, обстановка)?"},
 
581
  aesthetics:{name:"Естетика",desc:"Композиция, цвят, осветление, цялостен приятен вид."},
582
  sharpness:{name:"Острота",desc:"Яснота и детайли; липса на размазване или компресионни артефакти."},
583
  realism:{name:"Реализъм",desc:"Фотореалистичност или стилова достоверност (без странни / счупени артефакти)."},
 
393
  { key: "controllability", name: "Controllability",
394
  desc: "Does the video respond to control signals (camera motion, conditioning, scene cues)?" },
395
  { key: "prompt_adherence", name: "Prompt adherence",
396
+ desc: "Does the content match what the prompt described (subjects, actions, setting)?" },
397
+ { key: "no_irrelevant_frames", name: "No irrelevant frames",
398
+ desc: "Does the video stay on-prompt? Higher = fewer / no frames or content that weren't asked for by the prompt." } ] },
399
  { key: "visual_quality", name: "Visual quality",
400
  hint: "How good does each frame look?", questions: [
401
  { key: "aesthetics", name: "Aesthetics",
 
562
  motion_realism:{name:"运动真实感",hint:"运动是否符合物理规律?"},
563
  controllability:{name:"可控性",desc:"视频是否响应控制信号(相机运动、条件输入、场景线索)?"},
564
  prompt_adherence:{name:"提示一致性",desc:"内容是否与提示的描述一致(主体、动作、场景)?"},
565
+ no_irrelevant_frames:{name:"无无关画面",desc:"视频是否仅呈现提示中要求的内容?分数越高 = 越少出现与提示无关的帧或内容。"},
566
  aesthetics:{name:"美学",desc:"构图、色彩、光照及整体观感。"},
567
  sharpness:{name:"清晰度",desc:"清晰度与细节;无模糊或压缩伪影。"},
568
  realism:{name:"真实感",desc:"照片级真实感或风格忠实度(无诡异感或失真伪影)。"},
 
581
  motion_realism:{name:"Реалистичност на движението",hint:"Движението изглежда ли правдоподобно?"},
582
  controllability:{name:"Контролируемост",desc:"Реагира ли видеото на контролни сигнали (движение на камерата, обуславяне, насоки за сцена)?"},
583
  prompt_adherence:{name:"Съответствие с подканата",desc:"Съответства ли съдържанието на описаното в подканата (обекти, действия, обстановка)?"},
584
+ no_irrelevant_frames:{name:"Без неуместни кадри",desc:"Остава ли видеото в рамките на подканата? По-висок = по-малко / без кадри или съдържание, които не са поискани."},
585
  aesthetics:{name:"Естетика",desc:"Композиция, цвят, осветление, цялостен приятен вид."},
586
  sharpness:{name:"Острота",desc:"Яснота и детайли; липса на размазване или компресионни артефакти."},
587
  realism:{name:"Реализъм",desc:"Фотореалистичност или стилова достоверност (без странни / счупени артефакти)."},