Нужно решение для моего сценария с использованием Python и Django
У меня есть веб-приложение Django, у нас есть код, который извлекает данные о продажах из API с датой до и после, а также мы хотим хранить их в базе данных (MYSQL) или в хранилище данных.
Мне нужна помощь, как спроектировать нижеприведенную часть, чтобы избежать дублирования и оптимизировать код? Допустим, база данных или хранилище данных уже содержит данные.
- How can we avoid writing duplicate data to DB or DW if the API pulls the existing data?
- Even if we compare with the existing records, it usually takes so much of time what is the best optimized way?
Спасибо