Resurssienhallinnan korkean käytettävyyden määrittäminen – Osa 6

YARN on Hadoopin käsittelykerros, joka koostuu Masterista (Resource Manager) ja Slave. (Node Manager) -palvelut tietojen käsittelemiseksi. Resource Manager (RM) on kriittinen komponentti, joka vastaa resurssien allokoinnista ja hallinnasta kaikkien Hadoop Clusterissa käynnissä olevien töiden kesken.

On aina suositeltavaa ja paras käytäntö ottaa Cluster High Availability (HA) käyttöön kriittisissä palveluissa, kuten Namenode ja Resource Manager<..

Vaatimukset

  • Parhaat käytännöt Hadoop-palvelimen käyttöönottoon CentOS/RHEL 7:ssä – Osa 1
  • Hadoopin ennakkovaatimusten määrittäminen ja suojauksen vahvistaminen – Osa 2
  • Cloudera Managerin asentaminen ja määrittäminen CentOS/RHEL 7:ssä – Osa 3
  • CDH:n asentaminen ja palvelusijoittelujen määrittäminen CentOS/RHEL 7:ssä – Osa 4
  • Namenoden korkean käytettävyyden määrittäminen – Osa 5

Tässä artikkelissa kerrotaan, miten Korkea saatavuus otetaan käyttöön Resource Managerissa.

Korkean käytettävyyden ottaminen käyttöön Resource Managerissa

1. Siirry Cloudera Manageriin seuraavissa osoitteissa ja siirry kohtaan YARN –> Toiminnot –> Ota korkea saatavuus käyttöön.

http://13.233.129.39:7180/cmf/home

2. Valitse palvelin, johon aiot asentaa toisen resurssienhallinnan. Yleensä meillä on toinen pääpalvelin korkean käytettävyyden käyttöönottamiseksi. Tässä valitaan master2 HA:n käyttöönottamiseksi.

3. Kun olet valinnut master2:n, jatka napsauttamalla Jatka.

4. HA-prosessi alkaa. Voit tarkastella taustatoimintoja napsauttamalla kutakin vaihetta.

5. Kun kaikki prosessit on suoritettu, saat Valmis-tilan. Napsauta Valmis.

6. Varmista Resource Managerin korkea saatavuus tarkastelemalla Lanka-esiintymiä osoitteessa Cloudera Manager –> YARN –> Esiintymät.

Näet kaksi Resource Manageria, joista toinen on tilassa Aktiivinen ja toinen Valmiustilassa.

Johtopäätös

Tässä artikkelissa olemme käyneet läpi vaiheittaiset toimenpiteet Korkean käytettävyyden ottamiseksi käyttöön Resource Managerissa. Aina kun Active Resource Manager sammuu, valmiustilan resurssien hallinta muuttuu aktiiviseksi, jotta tuotanto ei keskeydy.