MongoDB
 sql >> Baza danych >  >> NoSQL >> MongoDB

Dlaczego złącze Spark Mongo nie wypycha filtrów?

To nie jest GreaterThan przyczyną problemu jest fakt, że filtr znajduje się w polu zagnieżdżonym. Twój filtr na doc_type działa, ponieważ nie jest zagnieżdżony. Najwyraźniej jest to problem z silnikiem Catalyst w Spark, a nie ze złączem Mongo. Wpływa również na naciskanie predykatów w np. Parquet.

Zobacz następujące dyskusje w Spark Jira, aby uzyskać więcej informacji.

Spark 19638

Spark 17636




  1. Redis
  2.   
  3. MongoDB
  4.   
  5. Memcached
  6.   
  7. HBase
  8.   
  9. CouchDB
  1. Mongoose + lodash niepoprawnie rozszerzają tablicę kopiowania obiektu

  2. Zapisuj strumień do mongoDB w Javie

  3. Spring Data Mongo - Perform Distinct, ale nie chce wyciągać osadzonych dokumentów w wynikach

  4. Lazy loading przy użyciu nodejs i mongoDB jako danych backendu

  5. przechowywanie upvotes/downvotes w mongodb