Bii o ṣe le Ṣeto Wiwa Giga fun Namenode - Apakan 5

Hadoop ni awọn paati akọkọ meji ti o jẹ HDFS ati YARN. HDFS jẹ fun titoju Data naa, YARN jẹ fun sisẹ data naa. HDFS jẹ Eto Faili Pinpin Hadoop, o ni Namenode bi Iṣẹ Titunto si ati Datanode bi Iṣẹ Ẹrú.

Namenode jẹ paati pataki ti Hadoop eyiti o tọju metadata ti data ti o fipamọ sinu HDFS. Ti Namenode ba lọ silẹ, gbogbo iṣupọ kii yoo ni iraye si, o jẹ aaye kan ṣoṣo ti ikuna (SPOF). Nitorinaa, agbegbe iṣelọpọ yoo ni Wiwa Wiwa giga ti Namenode lati yago fun ijade iṣelọpọ ti Namenode kan ba lọ silẹ nitori awọn idi pupọ bii jamba ẹrọ, iṣẹ ṣiṣe itọju ti a gbero, ati bẹbẹ lọ.

Hadoop 2.x pese iṣeeṣe nibiti a le ni Namenodes meji, ọkan yoo jẹ Namenode ti nṣiṣe lọwọ ati omiiran yoo jẹ Imurasilẹ Namenode.

  • Namenode ti n ṣiṣẹ - O ṣakoso gbogbo awọn iṣẹ alabara.
  • Namenode imurasilẹ - O jẹ apọju ti Namenode ti nṣiṣe lọwọ. Ti Iroyin NN ba lọ silẹ, lẹhinna Imurasilẹ NN yoo gba gbogbo ojuse ti Iroyin NN.

Muu Wiwa Namenode Ga nilo Zookeeper eyiti o jẹ dandan fun ailagbara aifọwọyi. ZKFC (Oluṣakoso Failover Foolover) jẹ alabara Zookeeper ti o lo lati ṣetọju ipo ti Namenode.

  • Awọn adaṣe ti o dara julọ fun Ṣiṣe olupin Server Hadoop lori CentOS/RHEL 7 - Apá 1
  • Ṣiṣeto Awọn ohun ti o nilo ṣaaju Hadoop ati Ikunkun Aabo - Apá 2
    • Bii a ṣe le Fi sii ati Tunto Oluṣakoso Cloudera lori CentOS/RHEL 7 - Apá 3
  • Bii o ṣe le Fi sii CDH ati Tunto Awọn ibi Iṣẹ lori CentOS/RHEL 7 - Apá 4

Ninu nkan yii, a yoo mu Wiwa Wiwa Giga ti Namenode ṣiṣẹ ninu Oluṣakoso Cloudera.

Igbesẹ 1: Fifi sori ẹrọ ti Zookeeper

1. Wọle si Cloudera Manager.

http://Your-IP:7180/cmf/home

2. Ninu iyara iṣupọ (tecmint), yan\"Ṣafikun Iṣẹ".

3. Yan iṣẹ\"Zookeeper".

4. Yan awọn olupin nibiti a yoo fi Zookeeper sori ẹrọ.

5. A yoo ni Awọn Zookeepers 3 lati dagba Quorum Zookeeper. Yan awọn olupin bi a ti sọ ni isalẹ.

6. Ṣe atunto awọn ohun-ini Zookeeper, nibi a n ni awọn aiyipada. Ni akoko gidi, o ni lati ni itọsọna lọtọ/awọn aaye oke fun titoju data Zookeeper. Ninu Apakan-1, a ti ṣalaye nipa iṣeto ni ipamọ fun iṣẹ kọọkan. Tẹ 'tẹsiwaju' lati tẹsiwaju.

7. Fifi sori ẹrọ yoo bẹrẹ, ni kete ti a fi sori ẹrọ Zookeeper yoo bẹrẹ. O le wo awọn iṣẹ isale nibi.

8. Lẹhin ipari aṣeyọri ti igbesẹ ti o wa loke, Ipo yoo ‘Pari’.

9. Bayi, Zookeeper ti wa ni ifijišẹ Fi sori ẹrọ ati Tunto. Tẹ 'Pari'.

10. O le wo iṣẹ Zookeeper lori Dasibodu Oluṣakoso Cloudera.

Igbesẹ 2: Ṣiṣe Wiwa Wiwa Namenode Ga

11. Lọ si Oluṣakoso Cloudera -> HDFS -> Awọn iṣe -> Jeki Wiwa Ga.

12. Tẹ Orukọ Nameservice bi\"nameservice1" - Eyi jẹ Orukọ Orukọ wọpọ fun mejeeji Iroyin ati imurasilẹ Namenode.

13. Yan Namenode Keji nibiti a yoo ni Namenode imurasilẹ.

14. Nibi a n yan master2.linux-console.net fun imurasilẹ Namenode.

15. Yan awọn apa Iwe akọọlẹ, iwọnyi jẹ awọn iṣẹ ti o jẹ dandan fun mimuṣiṣẹpọ Nṣiṣẹ ati Imurasilẹ Namenode.

16. A n ṣe Quorum Journal nipa gbigbe oju ipade Journal ni awọn olupin 3 bi a ti sọ ni isalẹ. Yan awọn olupin 3 ki o tẹ 'O DARA'.

17. Tẹ 'Tẹsiwaju' lati tẹsiwaju.

18. Tẹ ọna itọsọna Node Journal. O kan a nilo lati darukọ ọna lakoko fifi sori itọsọna yii yoo ṣẹda laifọwọyi nipasẹ iṣẹ funrararẹ. A n darukọ bi ‘/ jn’ . Tẹ 'Tẹsiwaju' lati tẹsiwaju.

19. Yoo bẹrẹ ṣiṣiṣẹ Wiwa to gaju.

20. Ni kete ti o pari gbogbo awọn ilana abẹlẹ, a yoo gba Ipo ‘Ti pari’.

21. Lakotan, a yoo gba ifitonileti kan ‘Ṣiṣeyọri Wiwa Wiwa Giga’. Tẹ 'Pari'.

22. Ṣayẹwo Ṣiṣẹ ati Namenode Iduro nipa lilọ si Cloudera Manager -> HDFS -> Awọn apeere.

23. Nibi, o le kekere Namenodes meji, ọkan yoo wa ni ipo ‘Ṣiṣẹ’ ati omiiran yoo wa ni ipo ‘Imurasilẹ’.

Ninu nkan yii, a ti lọ nipasẹ igbesẹ nipasẹ ilana igbesẹ lati jẹki Wiwa giga Namenode. O ti ni iṣeduro gíga lati ni Wiwa giga Namenode ni gbogbo awọn iṣupọ ni agbegbe akoko gidi kan. Jọwọ firanṣẹ awọn iyemeji rẹ ti o ba dojuko eyikeyi aṣiṣe lakoko ṣiṣe ilana yii. A yoo wo Wiwa Wiwa to ga Oluṣakoso Oro ninu nkan ti n bọ.