Ввод больших данных должен быть в ведре HDFS или S3Apache

Ответить
Anonymous
 Ввод больших данных должен быть в ведре HDFS или S3

Сообщение Anonymous »

Я работаю над проектом с большими данными, у меня есть данные JSONL 70 ГБ в ведре S3 при использовании Spark/Hadoop, если я скопирую файл данных в HDF, я чувствую, что я что -то упускаю в концепции, которую я пришел другой фон, и я запутался !!

Подробнее здесь: https://stackoverflow.com/questions/794 ... -s3-bucket
Ответить

Быстрый ответ

Изменение регистра текста: 
Смайлики
:) :( :oops: :roll: :wink: :muza: :clever: :sorry: :angel: :read: *x)
Ещё смайлики…
   
К этому ответу прикреплено по крайней мере одно вложение.

Если вы не хотите добавлять вложения, оставьте поля пустыми.

Максимально разрешённый размер вложения: 15 МБ.

Вернуться в «Apache»