W chmurze o chmurze i nie tylko.
Jednym z podstawowych problemów młodego adepta sztuki torturowania danych i analizy dużych zbiorów jest spory próg wejścia. Gdzie się tego można nauczyć ? Jednym z bardziej znanych narzędzi jest Apache Spark. Okazuje się, że uruchomienie tego oprogramowania w usłudze Google … Continued
Transformacje tworzą nowe obiekty RDD , również na podstawie innego obiektu RDD. Silnik Apache Spark potrafi przeanalizować sekwencję transformacji. Akcje wykonują na obiektach RDD działania, których wynikiem nie jest RDD i działania te wymuszają wykorzystanie definicji RDD wraz z sekwencją … Continued
Poradnik: Jak uruchomić na komputerze z MS Windows lokalną instancję Apache Sparka pracującą na jednym nodzie z gotową obsługą skryptów w Pythonie (pyspark) i przykładowymi zbiorami danych. Na podstawie materiałów ze strony http://semantica.cs.lth.se/pyspark/#/pyspark-vm Dla tych, którzy na co dzień korzystają … Continued