MajorDoMo

формирование и отображение графиков думаю нужно начинать с особенности платформы (ограничений)

да тут ты должен сделать не как хочешь а как можешь с учетом ограничений

На Дуе 2500 строк за 10 секунд

это не позволительно много

Да не критично это. 10-15 секунд мелочь то сравнению с возможностью видеть динамику.
Более подробно только вечером ((. Днем форум вижу , ответить не всегда могу.

Давайте платформу оставим за бортом - у ESP32 тактовая чуть меньше , чем у фруктовых..

угу
240 MHz dual core Tensilica
и
4-ядерный процессор Allwinner H3 1,6 Ghz, 1Gb RAM и GPU Mali-400MP2 600MHz

нужно делать несколько алгоритмов формирования данных.
По времени , по изменению. В зависимости от датчиков и формировать график.
Скажем данные по температуре окружающей среды сделать по времени с периодом от 1-10 минут.

Если мы хотим хоть какую то сортировку графиков , надо создавать для каждой переменной свой файл по дням

т е ты хочешь строить графики из архивов,по тем событиям которые уже прошли?

Работа с БД тут не прокатит. ресурсы жестко ограничены.
С 1-2 датчиками можно попробовать, но думаю при использовании десятка датчиков время на обработку займет кучу времени

Работа с БД тут не прокатит

однозначно нет
тут выход один писать все в файл,а разбор делать в браузере с помощью регулярок,там с этим проблем нет,ну и придется смирится с 10-20 и более секундами

я тестировал алгоритм сбора данных с датчиков аналогично алгоритму формирования "Архивных сообщений"

Для комфортной работы с SD картой нужно как минимум переехать с библиотеки SD.h на более новую sdfat.h

Для комфортной работы с SD картой нужно как минимум переехать с библиотеки SD.h на более новую

отлично,тогда все затягивается,ну и если создавать отдельный файл под каждую фиговину то через пару месяцев у вас в корне карты черт ногу сломит

создавай подкаталоги