서비스

Apache Spark Consulting

조직의 Apache Spark도입과 활용을 도와드립니다.

주요 서비스

  • – Big Data Architecture 수립
  • – Business Intelligence 분석 모듈 작성
  • – Spark Streaming을 활용한 실시간 데이터 처리(Storm, Esper 대체/연계)
  • – Spark Work을 활용한 처리 모듈 작성(MapReduce 대체)
  • – Spark SQL 활용(HIVE 대체/연계)
  • – Performance Tuning
  • – R, Machine Leaning, SQL 연계

Apache Spark Training

Apache Spark 관련 기업 및 개인 교육을 진행합니다.

교육내용

Basic Advanced
1 일차 2 일차 3 일차 4 일차
오전 Basic Technique
– Scala for Apache Spark
– SBT for Apache Spark

Apache Spark 개요
– Big Data and Spark
– BDAS(Berkeley Data Analytics Stack)
– RDD, DStream

Apache Spark Core
– Deploying Spark Application
– Spark Application Configuration
Spark Streaming
– Streaming API
– [실습] Streaming Application 작성하기
– Monitoring & Performance Tuning
Machine Learning
– Mllib 개요
– Basic statistics
– Classification & Regression
– Collaborative filtering
– Clustering
– Dimensionality reduction
– Feature extraction and transformation
– Optimization
Integration with Big Data Architecture
– ElasticSearch
– Flume & Kafka
– HDFS & NoSQL
오후 Apache Spark 설치 및 설정
– Spark Build
– [실습] Installing Spark Locally
– Spark Configuration

Apache Spark Core
– Scala, Java, Python API
– [실습] Spark Application 작성하기
– Building Spark Application

Apache Spark SQL
– Spqrk SQL 개요(Shark vs. Spark SQL)
– [실습] SQL Application 작성하기
– Hive, Parquet, JSON Suppoort
Machine Learning
– [실습] ML Application 작성하기
– Integration with Streaming, SQL

GraphX
– GraphX 개요
– Graph Operators
– Pregel API
– Vertex & Edge RDDs
– [실습] GraphX Application 작성하기

Performance Tuning
– Monitoring
– Evaluate Performance
– Debugging and trouble shooting

Advanced Usage
– Spark SQL
– Spark Streaming

Scala/Akka Training

JVM 기반의 Functional Language인 Scala와 Actor model framework인 Akka에 대한 개인 교육을 진행합니다.

교육내용

Scala Akka(Scala or Java)
1 일차 2 일차 1 일차 2 일차
오전
  • Introduction
  • First Steps in Scala
  • OO Basic
  • For and Loop
  • Inheritance and Traits
  • Introduction
  • Actors Basics
  • Testing Actior
  • Modifying Actor Behavior
  • Actor Pattern
오후
  • Testing
  • Collection and Functional Programming
  • Pattern matching
  • Dealing with optional values
  • Actor Lifecycle
  • Fault Tolerance
  • Routers / Dispatchers
  • Akka Excensions
  • Finite State Machine
Service에 대한 문의는 info@raonbit.com 이나 Q&A 게시판을 이용해 주세요.