KillzoneCCO commited on
Commit
2baa2d9
·
verified ·
1 Parent(s): bcfc5d8

Update app.py

Browse files
Files changed (1) hide show
  1. app.py +80 -35
app.py CHANGED
@@ -39,7 +39,10 @@ def load_and_prepare_dataset():
39
  row["episode_index"] = 0
40
  print(f"Warning: 'episode_index' not found for row {i}. Setting to 0.")
41
 
42
- episode_idx = int(episode_idx_raw)
 
 
 
43
  if episode_idx not in episodes_data:
44
  episodes_data[episode_idx] = []
45
  episodes_data[episode_idx].append(row)
@@ -66,7 +69,10 @@ def display_step_data(selected_episode_idx, step_idx):
66
  if not my_episodes or selected_episode_idx is None:
67
  return "", None, {}, {}
68
 
69
- episode_steps = my_episodes[selected_episode_idx]
 
 
 
70
  if not (0 <= step_idx < len(episode_steps)):
71
  return "Неверный номер шага.", None, {}, {}
72
 
@@ -74,28 +80,51 @@ def display_step_data(selected_episode_idx, step_idx):
74
 
75
  # Подготовьте информацию о шаге
76
  step_info = (
77
- f"Эпизод: {step_data['episode_index']}, "
78
  f"Шаг: {step_idx}/{len(episode_steps)-1}, "
79
- f"Вознаграждение: {step_data['reward']:.2f}, "
80
- f"Завершено: {step_data['terminated']}, "
81
- f"Усечено: {step_data['truncated']}, "
82
- f"Timestamp: {step_data['timestamp']:.2f}"
83
  )
84
 
85
  # Обработка изображения
86
- image_pil = step_data['observation.camera_image_left']
87
-
88
- # Обработка наблюдений
89
- observation_data = {
90
- "joint_positions": step_data['observation.joint_positions'].squeeze().tolist(),
91
- "is_walking": step_data['observation.is_walking'],
92
- "button_state": step_data['observation.button_state']
93
- }
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
94
 
95
  # Обработка действий
96
- action_data = {
97
- "servo_commands": step_data['action.servo_commands'].squeeze().tolist()
98
- }
 
 
 
 
 
99
 
100
  return step_info, image_pil, observation_data, action_data
101
 
@@ -105,7 +134,10 @@ def update_episode_info(selected_episode_idx):
105
  if not my_episodes or selected_episode_idx is None:
106
  return gr.update(maximum=0, value=0), "0", "Нет данных", None, {}, {}
107
 
108
- episode_steps = my_episodes[selected_episode_idx]
 
 
 
109
  num_steps = len(episode_steps)
110
  if num_steps == 0:
111
  return gr.update(maximum=0, value=0), "0", "Нет данных", None, {}, {}
@@ -132,12 +164,16 @@ def analyze_data():
132
  all_joint_positions_flat = []
133
  for episode_id in my_episodes:
134
  for step in my_episodes[episode_id]:
135
- all_joint_positions_flat.extend(step['observation.joint_positions'].squeeze().tolist())
 
 
 
136
 
137
  if not all_joint_positions_flat:
138
  return "Нет данных о положениях суставов для анализа.", None
139
 
140
  num_joints = 25 # Assuming 25 joint positions per step
 
141
  if len(all_joint_positions_flat) % num_joints != 0:
142
  return "Несоответствие данных: количество позиций суставов не кратно 25. Анализ невозможен.", None
143
 
@@ -162,11 +198,16 @@ def plot_actions_for_episode(selected_episode_idx):
162
  if not my_episodes or selected_episode_idx is None:
163
  return None
164
 
165
- episode_steps = my_episodes[selected_episode_idx]
166
  if not episode_steps:
167
  return None
168
 
169
- actions_data = [step['action.servo_commands'].squeeze().tolist() for step in episode_steps]
 
 
 
 
 
170
 
171
  if not actions_data:
172
  return None
@@ -206,13 +247,12 @@ with gr.Blocks() as demo:
206
  refresh_button = gr.Button("Обновить датасет")
207
  refresh_status = gr.Textbox(label="Статус загрузки датасета", value="Нажмите 'Обновить датасет' для начала.")
208
 
209
- episode_selector = gr.Dropdown(label="Выберите эпизод", choices=[], interactive=True)
210
  num_steps_in_episode_output = gr.Textbox(label="Всего шагов в эпизоде", interactive=False)
211
 
212
  # --- ИЗМЕНЕНИЯ ЗДЕСЬ: Добавляем Play/Stop кнопки и размещаем слайдер ---
213
  with gr.Row():
214
- step_slider = gr.Slider(minimum=0, maximum=0, value=0, label="Выберите шаг", step=1, interactive=True, scale=4)
215
- # ИСПОЛЬЗУЕМ ОБЫЧНЫЕ КНОПКИ И JAVASCRIPT ДЛЯ УПРАВЛЕНИЯ СЛАЙДЕРОМ
216
  play_button = gr.Button("▶️", scale=1)
217
  stop_button = gr.Button("⏸️", scale=1)
218
 
@@ -237,6 +277,7 @@ with gr.Blocks() as demo:
237
  action_plot_output = gr.Plot(label="График команд сервоприводов") # Новый компонент графика
238
 
239
  # --- Логика взаимодействия ---
 
240
  demo.load(
241
  load_and_prepare_dataset,
242
  inputs=None,
@@ -247,18 +288,21 @@ with gr.Blocks() as demo:
247
  outputs=[step_slider, num_steps_in_episode_output, step_info_output, image_output, observation_output, action_output]
248
  )
249
 
 
250
  episode_selector.change(
251
  update_episode_info,
252
  inputs=episode_selector,
253
  outputs=[step_slider, num_steps_in_episode_output, step_info_output, image_output, observation_output, action_output]
254
  )
255
 
 
256
  step_slider.change(
257
  display_step_data,
258
  inputs=[episode_selector, step_slider],
259
  outputs=[step_info_output, image_output, observation_output, action_output]
260
  )
261
 
 
262
  refresh_button.click(
263
  load_and_prepare_dataset,
264
  inputs=None,
@@ -269,27 +313,28 @@ with gr.Blocks() as demo:
269
  outputs=[step_slider, num_steps_in_episode_output, step_info_output, image_output, observation_output, action_output]
270
  )
271
 
 
272
  analyze_button.click(
273
  analyze_data,
274
  inputs=None,
275
  outputs=[analysis_text_output, analysis_plot_output]
276
  )
277
 
278
- # --- ИСПРАВЛЕНИЕ: Подключение кнопок Play/Stop через JavaScript ---
279
  play_button.click(
280
- None,
281
- None,
282
- None,
283
- _js=f"(x) => document.querySelector('#{step_slider._id} input')._play_button_click()"
284
  )
285
  stop_button.click(
286
- None,
287
- None,
288
- None,
289
- _js=f"(x) => document.querySelector('#{step_slider._id} input')._stop_button_click()"
290
  )
291
 
292
- # --- НОВАЯ: Подключение кнопки графика действий ---
293
  plot_actions_button.click(
294
  plot_actions_for_episode,
295
  inputs=episode_selector, # График зависит от выбранного эпизода
 
39
  row["episode_index"] = 0
40
  print(f"Warning: 'episode_index' not found for row {i}. Setting to 0.")
41
 
42
+ # Используем 1-индексированный номер эпизода для ключа, чтобы совпадать с отображением
43
+ # ВНИМАНИЕ: Если вы хотите использовать 0-индексированный в выпадающем списке,
44
+ # уберите '+ 1' здесь и в display_step_data/update_episode_info
45
+ episode_idx = int(episode_idx_raw) + 1
46
  if episode_idx not in episodes_data:
47
  episodes_data[episode_idx] = []
48
  episodes_data[episode_idx].append(row)
 
69
  if not my_episodes or selected_episode_idx is None:
70
  return "", None, {}, {}
71
 
72
+ episode_steps = my_episodes.get(selected_episode_idx)
73
+ if not episode_steps:
74
+ return "Данные эпизода не найдены.", None, {}, {}
75
+
76
  if not (0 <= step_idx < len(episode_steps)):
77
  return "Неверный номер шага.", None, {}, {}
78
 
 
80
 
81
  # Подготовьте информацию о шаге
82
  step_info = (
83
+ f"Эпизод: {step_data.get('episode_index', 'N/A')}, " # Используем get с дефолтом
84
  f"Шаг: {step_idx}/{len(episode_steps)-1}, "
85
+ f"Вознаграждение: {step_data.get('reward', 0.0):.2f}, "
86
+ f"Завершено: {step_data.get('terminated', False)}, "
87
+ f"Усечено: {step_data.get('truncated', False)}, "
88
+ f"Timestamp: {step_data.get('timestamp', 0.0):.2f}"
89
  )
90
 
91
  # Обработка изображения
92
+ # Нужно правильно извлечь PIL Image из структуры datasets.Image
93
+ image_pil = None
94
+ if 'observation.camera_image_left' in step_data:
95
+ img_data = step_data['observation.camera_image_left']
96
+ if isinstance(img_data, PILImage.Image):
97
+ image_pil = img_data
98
+ elif isinstance(img_data, dict) and 'bytes' in img_data:
99
+ try:
100
+ image_pil = PILImage.open(io.BytesIO(img_data['bytes']))
101
+ except Exception as e:
102
+ print(f"Error opening image from bytes: {e}")
103
+ elif img_data is not None:
104
+ print(f"Unexpected image format type: {type(img_data)}")
105
+
106
+
107
+ # Обработка наблюдений (исключаем image, так как он уже обработан)
108
+ observation_data = {}
109
+ for k, v in step_data.items():
110
+ if k.startswith("observation.") and k != "observation.camera_image_left":
111
+ # Удаляем префикс "observation." для более чистого отображения в JSON
112
+ clean_key = k[len("observation."):]
113
+ if isinstance(v, np.ndarray):
114
+ observation_data[clean_key] = v.squeeze().tolist()
115
+ else:
116
+ observation_data[clean_key] = v
117
+
118
 
119
  # Обработка действий
120
+ action_data = {}
121
+ for k, v in step_data.items():
122
+ if k.startswith("action."):
123
+ clean_key = k[len("action."):]
124
+ if isinstance(v, np.ndarray):
125
+ action_data[clean_key] = v.squeeze().tolist()
126
+ else:
127
+ action_data[clean_key] = v
128
 
129
  return step_info, image_pil, observation_data, action_data
130
 
 
134
  if not my_episodes or selected_episode_idx is None:
135
  return gr.update(maximum=0, value=0), "0", "Нет данных", None, {}, {}
136
 
137
+ episode_steps = my_episodes.get(selected_episode_idx)
138
+ if not episode_steps:
139
+ return gr.update(maximum=0, value=0), "0", "Нет данных", None, {}, {}
140
+
141
  num_steps = len(episode_steps)
142
  if num_steps == 0:
143
  return gr.update(maximum=0, value=0), "0", "Нет данных", None, {}, {}
 
164
  all_joint_positions_flat = []
165
  for episode_id in my_episodes:
166
  for step in my_episodes[episode_id]:
167
+ # Обрабатываем, если joint_positions - это ndarray с shape (1, 25)
168
+ joint_pos = step.get('observation.joint_positions')
169
+ if joint_pos is not None:
170
+ all_joint_positions_flat.extend(np.array(joint_pos).flatten().tolist())
171
 
172
  if not all_joint_positions_flat:
173
  return "Нет данных о положениях суставов для анализа.", None
174
 
175
  num_joints = 25 # Assuming 25 joint positions per step
176
+ # Проверка, что общее количество элементов кратно num_joints
177
  if len(all_joint_positions_flat) % num_joints != 0:
178
  return "Несоответствие данных: количество позиций суставов не кратно 25. Анализ невозможен.", None
179
 
 
198
  if not my_episodes or selected_episode_idx is None:
199
  return None
200
 
201
+ episode_steps = my_episodes.get(selected_episode_idx)
202
  if not episode_steps:
203
  return None
204
 
205
+ # Извлекаем данные servo_commands
206
+ actions_data = []
207
+ for step in episode_steps:
208
+ servo_commands = step.get('action.servo_commands')
209
+ if servo_commands is not None:
210
+ actions_data.append(np.array(servo_commands).flatten().tolist())
211
 
212
  if not actions_data:
213
  return None
 
247
  refresh_button = gr.Button("Обновить датасет")
248
  refresh_status = gr.Textbox(label="Статус загрузки датасета", value="Нажмите 'Обновить датасет' для начала.")
249
 
250
+ episode_selector = gr.Dropdown(label="Выберите эпизод (1-индексированный)", choices=[], interactive=True)
251
  num_steps_in_episode_output = gr.Textbox(label="Всего шагов в эпизоде", interactive=False)
252
 
253
  # --- ИЗМЕНЕНИЯ ЗДЕСЬ: Добавляем Play/Stop кнопки и размещаем слайдер ---
254
  with gr.Row():
255
+ step_slider = gr.Slider(minimum=0, maximum=0, value=0, label="Выберите шаг (0-индексированный)", step=1, interactive=True, scale=4)
 
256
  play_button = gr.Button("▶️", scale=1)
257
  stop_button = gr.Button("⏸️", scale=1)
258
 
 
277
  action_plot_output = gr.Plot(label="График команд сервоприводов") # Новый компонент графика
278
 
279
  # --- Логика взаимодействия ---
280
+ # Начальная загрузка и обновление при запуске
281
  demo.load(
282
  load_and_prepare_dataset,
283
  inputs=None,
 
288
  outputs=[step_slider, num_steps_in_episode_output, step_info_output, image_output, observation_output, action_output]
289
  )
290
 
291
+ # Обновление при изменении выбранного эпизода
292
  episode_selector.change(
293
  update_episode_info,
294
  inputs=episode_selector,
295
  outputs=[step_slider, num_steps_in_episode_output, step_info_output, image_output, observation_output, action_output]
296
  )
297
 
298
+ # Обновление при изменении слайдера шагов
299
  step_slider.change(
300
  display_step_data,
301
  inputs=[episode_selector, step_slider],
302
  outputs=[step_info_output, image_output, observation_output, action_output]
303
  )
304
 
305
+ # Обновление при нажатии кнопки "Обновить датасет"
306
  refresh_button.click(
307
  load_and_prepare_dataset,
308
  inputs=None,
 
313
  outputs=[step_slider, num_steps_in_episode_output, step_info_output, image_output, observation_output, action_output]
314
  )
315
 
316
+ # Кнопка анализа данных (гистограмма)
317
  analyze_button.click(
318
  analyze_data,
319
  inputs=None,
320
  outputs=[analysis_text_output, analysis_plot_output]
321
  )
322
 
323
+ # --- ИСПРАВЛЕНИЕ: Подключение кнопок Play/Stop напрямую к методам слайдера ---
324
  play_button.click(
325
+ fn=None, # Не вызываем Python функцию
326
+ inputs=None,
327
+ outputs=None,
328
+ js=f"() => {{ const slider = document.querySelector('#{step_slider._id} input'); if (slider) slider.dispatchEvent(new Event('play')); }}"
329
  )
330
  stop_button.click(
331
+ fn=None, # Не вызываем Python функцию
332
+ inputs=None,
333
+ outputs=None,
334
+ js=f"() => {{ const slider = document.querySelector('#{step_slider._id} input'); if (slider) slider.dispatchEvent(new Event('stop')); }}"
335
  )
336
 
337
+ # НОВАЯ: Подключение кнопки графика действий
338
  plot_actions_button.click(
339
  plot_actions_for_episode,
340
  inputs=episode_selector, # График зависит от выбранного эпизода