A B C D E F G H I K L M N O P R S T W Y Z Б В Е И К М О П Т Ц

Ввод и вывод в Apache Spark

Ввод и вывод в Apache Spark

Apache Spark имеет простые, удобные и универсальные механизмы ввода вывода. С их помощью просто «читать» и «писать» файлы различных форматов (поддерживаются текстовые файлы, CSV, JSON, Parquet, ORC), а также работа с базами данных (через JDBC). Spark может использовать общие с Hive метаданные, тем самым с загруженными с помощью Spark данными можно работать не только в Spark.

Механизмы ввода-вывода Spark (или, как их еще называют, «работы с источниками») работают параллельно, что позволяет достичь высочайших скоростей загрузки. Spark содержит полный набор инструментов для построения эффективных конвейеров преобразования данных, загрузка данных — это лишь одна его часть, важная, но не единственная.

Related Entries

Контакты авторизированного учебного центра
«Школа Больших Данных»
Адрес:
127576, г. Москва, м. Алтуфьево, Илимская ул. 5 корпус 2, офис 319, БЦ «Бизнес-Депо»
Часы работы:
Понедельник - Пятница: 09.00 – 18.00
Остались вопросы?
Звоните нам +7 (495) 414-11-21 или отправьте сообщение через контактную форму. Также вы можете найти ответы на ваши вопросы в нашем сборнике часто задаваемых вопросов.
Оставьте сообщение, и мы перезвоним вам в течение рабочего дня
Я даю свое согласие на обработку персональных данных и соглашаюсь с политикой конфиденциальности.
Или напишите нам в соц.сетях
Поиск по сайту