Jest bardzo prawdopodobne, że w MongoDB trafiasz w bardzo powszechne wąskie gardło. Ponieważ bardzo często aktualizujesz dokumenty, dodając ciągi, istnieje duża szansa, że brakuje Ci miejsca na ten dokument i zmuszasz bazę danych do ciągłego przenoszenia tego dokumentu do innego miejsca w pamięci\dysku przez przepisanie go na końcu pliku danych.
Dodanie indeksów może tylko pogorszyć wydajność zapisu, więc nie pomoże to poprawić wydajności, chyba że jesteś intensywnie czytany.
Rozważyłbym zmianę logiki aplikacji, aby to zrobić:
- Indeks w polu słów kluczowych
- Przed wstawieniem czegokolwiek do bazy danych za każdym razem, gdy wykryjesz tweeta, wyszukaj dokument zawierający słowo kluczowe. Jeśli nie istnieje, wstaw nowy dokument, ale uzupełnij
idswłaściwość, dodając całą masę fałszywych ciągów do tablicy. Następnie natychmiast po wstawieniu usuń wszystkie identyfikatory z tej tablicy. Spowoduje to, że mongodb przydzieli dodatkowe miejsce dla całego dokumentu, tak że kiedy zaczniesz dodawać identyfikatory do pola ids, będzie miał dużo miejsca na rozwój. - Wstaw identyfikator tweeta do
idspole
