sql >> データベース >  >> NoSQL >> MongoDB

JavaSparksparksessionサンプルサイズを構成する方法

    spark.mongodb.input.sampleSize

    SparkSession spark = SparkSession.builder()
                    .master("local[2]")
                    .appName("SparkReadMgToHive")
                    .config("spark.sql.warehouse.dir", warehouseLocation)
                    .config("spark.mongodb.input.uri", "mongodb://localhost:27017/test.testcollection")
                    .config("spark.mongodb.input.sampleSize", 50000)
                    .enableHiveSupport()
                    .getOrCreate();
    



    1. mongodb正規表現が機能しない

    2. マングースドキュメントではなくjsonオブジェクトの配列を取得する方法

    3. 日付クエリは_idで機能しますが、日付値では機能しません-MongoDB

    4. MongoDBとNodejsを使用した日付の挿入とクエリ