Se acaba de lanzar otra actualización de EAP 11 para un complemento llamado Big Data Tools disponible para su instalación en IntelliJ IDEA Ultimate, PyCharm y DataGrip. Puede instalarlo a través de la página de complementos en el sitio o dentro del IDE.
Big Data Tools es un complemento que le permite conectarse a clústeres de Hadoop y Spark. Proporciona monitoreo de nodos, aplicaciones y tareas individuales. Además, en IDEA y DataGrip puede crear, ejecutar y editar cuadernos Zeppelin. No tiene que cambiar a la interfaz web de Zeppelin y trabajar tranquilamente sin dejar su IDE favorito. El complemento le permite navegar cómodamente a través del código, completar de manera inteligente, refactorizar y corregir rápidamente dentro de la computadora portátil.
Nuevo tipo de configuración de lanzamiento para Spark-Submit
— Spark- IDE, . IDE, PyCharm. , spark-submit bin Spark . : - . .
spark-submit , . , SSH, spark-submit . bash- , . , , - .
Big Data Tools , . run configuration, spark-submit, SSH, - . .
Apache Zeppelin DataGrip
Zeppelin DataGrip. DataGrip , - . , SQL .
, SQL. , Matplotlib Scala DataGrip .
- Spark-submit IntelliJ IDEA, DataGrip PyCharm (BDIDE-843).
- Apache Zeppelin DataGrip (BDIDE-1045).
- Zeppelin (BDIDE-906).
- Spark Monitoring (BDIDE-1159).
- Zeppelin (BDIDE-1172).
- Zeppelin: , (, HTML Zeppelin) (BDIDE-1132).
- Zeppelin: – IntelliJ IDEA 2020.1 Zeppelin, (BDIDE-1184).
- Zeppelin: – , /api/version (BRIDE-1199).
- Zeppelin: – (BDIDE-1171).
- Zeppelin: – Structure Zeppelin (BDIDE-1135).
- Zeppelin: Fixed – IDEA , (BDIDE-1208).
- Zeppelin: – "Open in browser" (BDIDE-1142).
- Zeppelin: – (BDIDE-1129).
- Spark Monitoring: – JSON, Storages, (BDIDE-1162).
- Remote FS: – Azure (BDIDE-1141).
- Remote FS: – (BDIDE-1192).
- Remote FS: – (BDIDE-1202).
- General: – (BDIDE-1195).
- HTTP Proxy: – Spark Hadoop SOCKS proxy (BDIDE-1209).
- HTTP Proxy: – SCOKS proxy (BDIDE-1215).
- HTTP Proxy: – (BDIDE-1216).
, Big Data Tools, . , Twitter.
, , , .
Big Data Tools