Динамическое извлечение из облачной базы данных MySQL
У меня есть проект django, подключенный к облачной таблице MySQL, который извлекает графики из загруженных данных. База данных огромна (более 10M строк и 30 столбцов), я хочу динамически извлекать данные из таблицы самым быстрым и эффективным способом, чтобы пользователям не приходилось ждать 10 минут для загрузки графиков. Я думаю сделать одноразовое полное извлечение и затем сохранить извлеченные данные каким-то образом в проекте django, а затем сказать скрипту загружать только новые данные в таблице.
какой подход был бы лучшим для этого?