Plot2Eq / scripts /generate_data.py

Commit History

  1. Поправил импорты в generate_data

    95b75aa

  1. Изменил структуру проекта

    23650ad

  1. Теперь мы канонизируем выражение перед токенизацией. Также хеш теперь зависит от последовательности токенов, а не то строки

    febbac5

  1. small fixes

    3442a6f

  1. Исправил количество потоков и даты

    706f20f
  2. добавил докер + мелкие улучшения качества фильтра графиков. Полностью готовый пайплайн

    0707f4a

  1. test

    ababf75

  1. Добавил таймаут, исправил баг с зависанием скрипта из-за слишком сложных формул, добавил анализ полученного датасета в ноутбук, добавил поддержку продолжения генерации при наличии какого-то числа файлов

    09dcd08

  1. Исправлена ошибка при которой все потоки генерировали одинаковые функции. Добавлен красивый вывод прогресса в консоль

    85b7185
  2. Улучшил работу генератора выражений, написал токенизатор выражений, написал мультипроцессинг генерацию даты, написал класс для датасета. Полностью завершен пайплайн генерации даты. Добавил ноутбук для теста даты

    0c26e65