MongoDB
 sql >> Baza danych >  >> NoSQL >> MongoDB

Jak skonfigurować wielkość próbkowania sesji iskrowej w Java Spark

To spark.mongodb.input.sampleSize

SparkSession spark = SparkSession.builder()
                .master("local[2]")
                .appName("SparkReadMgToHive")
                .config("spark.sql.warehouse.dir", warehouseLocation)
                .config("spark.mongodb.input.uri", "mongodb://localhost:27017/test.testcollection")
                .config("spark.mongodb.input.sampleSize", 50000)
                .enableHiveSupport()
                .getOrCreate();



  1. Redis
  2.   
  3. MongoDB
  4.   
  5. Memcached
  6.   
  7. HBase
  8.   
  9. CouchDB
  1. mongoimport wybór typu pola

  2. Średnia agregacja ze znacznikiem czasu ciągu

  3. E11000 zduplikowany indeks błędu klucza w mongodb mongoose

  4. Jak uruchomić MongoDB jako usługę Windows?

  5. Polecenie nie działa w skrypcie, działa w wierszu poleceń