API Nasa передает данные так медленно
Я пытаюсь получить данные об околоземных астероидах из API NASA. И я получаю нужные мне данные, но они приходят очень медленно. Как я могу оптимизировать свой код для быстрого получения данных?
@api_view(['GET'])
def getDates(request, start_date, end_date):
dates = []
all_data = list()
api_key = 'hpdCBykg6Bcho1SitxAcgAaplIHD1E0SzNLfvTWw'
url_neo_feed = "https://api.nasa.gov/neo/rest/v1/feed?"
params = {
'api_key': api_key,
'start_date': start_date,
'end_date': end_date
}
response = requests.get(url_neo_feed, params=params)
json_data = orjson.loads(response.text)
date_asteroids = json_data['near_earth_objects']
for date in date_asteroids:
dates.append(date)
# Splitting the data to make it more meaningful
for date in dates:
collection = json_data.get('near_earth_objects')
all_dates = collection.get('{}'.format(date))
all_data.append(all_dates)
return Response(all_data)
Я бы разделил & время выборки и логики парсинга, чтобы сначала определить, является ли медленным API или парсинг данных.
API НАСА, очевидно, требуется 8 секунд для ответа на 4-дневный период данных.
Вашему коду обработки требуется очень мало времени (менее 0,01 секунды), чтобы обработать эти данные.
Вы мало что можете сделать с медленным API NASA, но вы можете кэшировать данные за определенный период локально, если это устраивает ваше приложение; тогда последующие запросы в этом диапазоне будут почти мгновенными.
Вы можете использовать, например, кэш Django (убедитесь, что он настроен на что-то другое, чем DummyCache, чтобы увидеть эффект):
from django.core.cache import cache
@api_view(['GET'])
def getDates(request, start_date, end_date):
cache_key = f'nasa_neo_{start_date}_{end_date}'
json_data = cache.get(cache_key)
if not json_data:
response = requests.get("https://api.nasa.gov/neo/rest/v1/feed?", params={
'api_key': api_key,
'start_date': start_date,
'end_date': end_date
})
response.raise_for_status()
json_data = orjson.loads(response.text)
cache.set(cache_key, json_data, timeout=86400)
date_asteroids = ...