[LDTO] programma 2019
OutOfBounds
outofbounds.nn@gmail.com
Sab 7 Set 2019 09:52:58 CEST
Ciao, io proporrei un talk sempre legato ai big data ma a cavallo tra SYS e
DEV, cioè:
Very scalable transaction layer using Spark, Delta Lake and Kubernetes
Spark è un framework open source per l'elaborazione dei big data con API
per Scala, Python e Java. Dalla versione 2.3 è stata introdotta la
possibilità di eseguire cluster Spark su Kubernetes
http://spark.apache.org/
Delta Lake è uno storage layer reso opensource da Databricks nel 2019, che
permette di utilizzare transazioni ACID su tabelle create da Apache Spark.
Può utilizzare come backend qualunque filesystem compatibile con Hadoop e i
principali object storage presenti sul mercato
https://docs.delta.io/
https://databricks.com/blog/2019/04/24/open-sourcing-delta-lake.html
Il talk verterebbe non solo sulla parte infrastrutturale e sistemistica
(configurazione di Kubernetes, pod necessari, configurazioni Spark), ma
anche e soprattutto su come scrivere codice Spark per sfruttare le
potenzialità della soluzione e (sempre che riesca a farlo funzionare) come
sottomettere query in puro SQL tramite thrift server integrato nell'ultima
versione di Apache Livy
Il sab 7 set 2019, 09:29 Ing. Mainardi Davide <xzjw83@gmail.com> ha scritto:
> Ciao Roberto,
> il mio talk sul private cloud non viene accettato?
>
> Ciao ciao
>
> Davide
>
> Il 6 settembre 2019 15:20:52 CEST, Roberto Guido <bob@linux.it> ha
> scritto:
>>
>> On 25/08/19 12:50, Roberto Guido wrote:
>>
>>> Un poco alla volta si sta mettendo insieme il programma per il Linux Day
>>> Torino 2019, di seguito una bozza molto molto sommaria su cosa c'e'
>>>
>>> Situazione ulteriormente aggiornata (cambia praticamente tutti i giorni
>> :-P )
>>
>>
>> ### BASE
>> Primi passi con Linux Emanuele
>> Privacy Valerio
>> ???
>> ???
>>
>> ### DEV
>> Go Alberto
>> ReadTheDocs Riccardo
>> Rust Mozilla
>> Android Federico
>>
>> ### SYS
>> Ansible Ludovico
>> Big Data Rosario
>> Nivola CSI Piemonte
>> ???
>>
>> ### MISC
>> Sicurezza Francesco B.
>> Arduino Luca
>> MQTT Francesco T.
>> Deep Speech Mozilla
>>
>>
>> Manca ancora qualche slot, ma ci siamo quasi.
>>
>> Valerio e Ludovico stanno approntando il sito, chi gia' non ha inviato
>> titolo e abstract puo' farlo qui in lista o in privato.
>>
>>
> --
> Inviato dal mio dispositivo Android con K-9 Mail. Perdonate la brevità.
>
> --
> Mailing list info: https://lists.linux.it/listinfo/ldto
>
-------------- parte successiva --------------
Un allegato HTML è stato rimosso...
URL: <http://lists.linux.it/pipermail/ldto/attachments/20190907/a309f689/attachment.htm>
Maggiori informazioni sulla lista
LDTO