Note di rilascio per la serie Queens

9.0.2

Correzione di bug

  • Fixed several bugs which prevented sahara-image-pack from generating Ambari-based Ubuntu images.

  • The command hdfs fs has been deprecated in favor of hdfs fs. This fixes will allow the use of Hbase service.

  • This fixes the issue with NTP configuration where a prefered server provided by the user is added to the end of the file and the defaults are not deleted. Here we add the prefered server to the top of the file.

9.0.1

Nuove funzionalità

  • Aggiunta la capacità di cambiare il parametro predefinito di timeout per l’installazione del pacchetto dell’agente Ambari

9.0.0

Preludio

  • Sahara APIv2 is reaching a point of maturity. Therefore, new deployments should include an unversioned endpoint in the service catalog for the «data-processing» service, for the purposes of more intuitive version discovery. Eventually existing deployments should switch to an unversioned endpoint, too, but only after time is given for the use of older clients to be less likely.

Every new release of Sahara we update our plugins list. Some new versions are added and some removed and other marked as deprecated. For Rocky we are deprecating CDH 5.7.0, Spark 1.6.0 and 2.1 as well as Storm 1.0.1. We are also removing CDH 5.5.0, MapR 5.1.0, Spark 1.3.1 and Storm 0.9.2.

Nuove funzionalità

  • Aggiunta a sahara-image-pack la capacità di creare immagini Ambari 2.6

  • Aggiunta la capacità di effettuare il boot di un cluster Sahara da volumi invece che da immagini.

  • Aggiunto il supporto per CDH 5.13.0 nel plugin CDH.

  • APIv2, la versione sperimentale delle API, supporta la creazione simultanea di più cluster esclusivamente tramite POST /v2/clusters (usando il parametro count). L’endpoint POST /v2/clusters/multiple endpoint è stato rimosso.

  • Operators can now update the running configuration of Sahara processes by sending the parent process a «HUP» signal. Note: The configuration option must support mutation.

  • Il comportamento della rimozione forzata dei cluster (APIv2) è cambiato. La funzione di abbandono dei cluster non è più usata. La risposta alla chiamata dell’API force-delete adesso include il nome dello stack che era alla base del cluster eliminato.

  • Implemented support of HDP 2.6 in the Ambari plugin.

  • Use a new keypair to access to the running cluster when the cluster’s keypair is deleted.

  • Una fonte dati EDP può fare riferimento ad un file memorizzato in un gestore di oggetti con interfaccia S3.

  • Supporto per la creazione di cluster con hadoop 2.7.5 nel plugin vanilla

Problemi noti

  • Remove the step «upload httpclient to oozie/sharelib» in sahara code. User should use latest vanilla-2.8.2 image which is built on SIE «Change-ID: I3a25ee8c282849911089adf6c3593b1bb50fd067».

Note di aggiornamento

  • Aggiunto Spark 2.3 all’elenco dei plugin supportati.

  • Aggiunte nuove versioni di Storm, 1.2.0 e 1.2.1. Entrambe sono disponibili tramite lo stesso tag 1.2.

  • Abbiamo rimosso alcune versioni di plugin. Si tratta di CDH 5.5.0, MapR 5.1.0, Spark 1.3.1 e Storm 0.9.2.

Note relative alle deprecazioni

  • The sahara-all entry point is now deprecated. Please use the sahara-api and sahara-engine entry points instead.

  • We are deprecating CDH 5.7.0, Spark 1.6.0 and 2.1 and Storm 1.0.1.

Correzione di bug

  • Hadoop is now better configured to use the proper Keystone domain for interaction with Swift; previously the “default” domain may have been incorrectly used.

Altre note

  • Alcune risposte delle APIv2 - sperimentali, ma quasi stabili - sono state rifinite. In particolare la chiave hadoop_version è stata sostituita da plugin_version, la chiave job è stata sostituita da job_template, la chiave job_execution è stata sostituita da job, e la chiave oozie_job_id è stata sostituita da engine_job_ide. In effetti questi cambiamenti erano già stati tutti parzialmente implementati, ed ora lo sono totalmente.

  • L’URL di una fonte dati S3 può contenere s3:// o s3a://; sono equivalenti.