Teknologi Big Data

Men- setup dan menjalankan Apache Spark mode Fully Distributed akan jauh lebih mudah dan murah jika menggunakan cloud services seperti halnya Amazon Web Services (AWS) dibandingkan dengan menjalankannya di rumah sendiri (akan membutuhkan paling tidak 3 komputer, Local Area Network , dan install Apache Spark di tiap komputer tersebut). Ilustrasi : ambsoft.de Apa yang perlu disiapkan? #1 Install Apache Spark mode Standalone di local environment Bisa menggunakan laptop Windows, MacOS, ataupun Linux. Bagi pengguna MacOS, silakan ikuti tutorialnya disini : Cara Install dan Menjalankan Apache Spark pada MacOS Catalina Untuk pengguna Windows 10 atau 7, tutorialnya ada disini: Membuat dan Menjalankan Aplikasi Apache Spark dengan Intellij IDEA pada OS Windows #2 Gunakan Maven untuk mem- package program aplikasi Apache Spark Jika Anda telah mengikuti tutorial untuk menginstal dan menjalankan Apache Spark baik di OS Windows ataupun MacOS seperti pada item...

Software yang Sudah Harus di-Install lebih dulu: (Ingat! Ini adalah tutorial bagi pengguna MacOS; buat pengguna Windows tutorialnya ada di Membuat dan Menjalankan Aplikasi Apache Spark dengan Intellij IDEA pada OS Windows ) #1 xcode-select Gunakan command berikut untuk install xcode-select, kemudian cek versi yang terinstall: Wayans-MacBook-Pro:~ wmwijaya$ install xcode-select Wayans-MacBook-Pro:~ wmwijaya$ xcode-select -v xcode-select version 2373. #2 Java (silakan ikuti prosedur install Java di https://www.oracle.com/technetwork/java/javase/using-jdk-jre-macos-catalina-5781620.html ). Pastikan versi Java yang sudah di-install dengan command berikut: Wayans-MacBook-Pro:~ wmwijaya$ java -version java version "1.8.0_241" Java(TM) SE Runtime Environment (build 1.8.0_241-b07) Java HotSpot(TM) 64-Bit Server VM (build 25.241-b07, mixed mode) Jika ada lebih dari satu versi Java yang terinstall di MacOs Anda, dan ingin switch ke versi tertentu (misal: Java versi 11 LTS), silakan...