Wizualne budowanie aplikacji na Sparku przy pomocy narzędzia Seahorse

6
Bring Apache Spark capabilities closer to non code-savvy users interactive Big Data analytics speed up building Apache Spark applications Provide collaboration platform for data scientists and software engineers Seahorse Motivations

Transcript of Wizualne budowanie aplikacji na Sparku przy pomocy narzędzia Seahorse

Page 1: Wizualne budowanie aplikacji na Sparku przy pomocy narzędzia Seahorse

● Bring Apache Spark capabilities closer to non code-savvy users○ interactive Big Data analytics○ speed up building Apache Spark applications

● Provide collaboration platform for data scientists and software engineers

Seahorse Motivations

Page 2: Wizualne budowanie aplikacji na Sparku przy pomocy narzędzia Seahorse

Seahorse v.1.3

Page 3: Wizualne budowanie aplikacji na Sparku przy pomocy narzędzia Seahorse

● Development since mid 2015● First release in Feb 16● 3 releases so far● Shown on multiple conferences:

○ Strata (NYC, London)○ Spark Summit (SF, Amsterdam)○ Hadoop Summit (San Jose, Dublin)○ AI World (SF)○ ODSC (London)

● Included in platforms:○ IBM’s Big Data University○ Intel’s Trusted Analytics Platform

● Group of early adopters

Seahorse Timeline

Page 4: Wizualne budowanie aplikacji na Sparku przy pomocy narzędzia Seahorse

Seahorse 1.3 (released in Sep 16):

● R support: build custom operations in R and use R notebooks within Seahorse

● Custom cluster connectivity: run Seahorse in Client Mode and connect to any cluster

● Spark 2.0

Seahorse Roadmap Highlights

Seahorse 1.4 (Jan 17):

● Scala SDK: create custom operations in Scala and use them in multiple workflows from the operation palette

● Workflow scheduler● Email reports: generate custom

visual reports using Notebooks and get results sent via email

Page 5: Wizualne budowanie aplikacji na Sparku przy pomocy narzędzia Seahorse

1. Go to deepsense.io -> Seahorse -> Standalone2. Fill out a short form and choose between:

a. Docker (set of containers with Docker Compose)b. Vagrant (virtual machine image)

3. See examples and docs at seahorse.deepsense.io4. Post feedback to our board or directly to [email protected]

How to Get Seahorse

Page 6: Wizualne budowanie aplikacji na Sparku przy pomocy narzędzia Seahorse