Video: Je, cheche hutumia mlinda bustani?
2024 Mwandishi: Lynn Donovan | [email protected]. Mwisho uliobadilishwa: 2023-12-15 23:53
Anza Cheche Mwalimu kwenye nodi nyingi na uhakikishe kuwa nodi hizi zina sawa Mlinzi wa bustani usanidi kwa ZooKeeper URL na saraka.
Habari.
| Mali ya mfumo | Maana |
|---|---|
| cheche .peleka. mlinzi wa bustani .dir | Saraka katika ZooKeeper kuhifadhi hali ya uokoaji (chaguo-msingi: / cheche ) Hii inaweza kuwa hiari |
Kwa hivyo, unaweza kuendesha cheche ndani ya nchi?
Cheche unaweza kuwa kukimbia kwa kutumia kipanga ratiba cha nguzo iliyojengwa ndani katika faili ya mtaa hali. Hii ina maana kwamba wote Cheche taratibu ni kukimbia ndani ya JVM sawa-kwa ufanisi, mfano mmoja, ulio na nyuzi nyingi Cheche.
Pili, je Spark inaweza kutumika bila Hadoop? Kama ilivyo kwa Cheche nyaraka, Cheche unaweza kukimbia bila Hadoop . Unaweza kuiendesha kama hali ya Kujitegemea bila msimamizi wa rasilimali yoyote. Lakini ikiwa unataka kufanya usanidi wa nodi nyingi, unahitaji kidhibiti cha rasilimali kama YARN au Mesos na mfumo wa faili uliosambazwa kama vile. HDFS , S3 n.k. Ndiyo, cheche unaweza kukimbia bila hadoop.
Pia kujua ni, kwa nini ZooKeeper inatumika katika Hadoop?
Mlinzi wa bustani katika Hadoop inaweza kutazamwa kama hazina kuu ambapo programu zilizosambazwa zinaweza kuweka data na kupata data kutoka kwayo. Ni kutumika ili kuweka mfumo uliosambazwa kufanya kazi pamoja kama kitengo kimoja, kwa kutumia ulandanishi, ufuataji na malengo ya uratibu.
Je, cheche hufanya kazi kwa kujitegemea?
Kujitegemea modi ni meneja rahisi wa nguzo iliyojumuishwa Cheche . Inafanya iwe rahisi kusanidi nguzo hiyo Cheche yenyewe inasimamia na inaweza kukimbia kwenye Linux, Windows, au Mac OSX. Mara nyingi ni njia rahisi zaidi ya kukimbia Cheche maombi katika mazingira yaliyounganishwa. Jifunze, jinsi ya kusakinisha Apache Spark Washa Kujitegemea Hali.
Ilipendekeza:
Je, upande wa MAP unajiunga na nini kwenye cheche?
Uunganisho wa upande wa ramani ni mchakato ambapo unganisho kati ya jedwali mbili hufanywa katika awamu ya Ramani bila ushiriki wa Punguza awamu. Viungio vya upande wa Ramani huruhusu jedwali kupakiwa kwenye kumbukumbu kuhakikisha operesheni ya uunganisho ya haraka sana, inayofanywa kabisa ndani ya ramani na hiyo pia bila kulazimika kutumia ramani zote mbili na kupunguza awamu
Je, ninahitaji kujifunza Hadoop kwa cheche?
Hapana, huhitaji kujifunza Hadoop ili kujifunzaSpark. Spark ulikuwa mradi wa kujitegemea. Lakini baada ya YARNna Hadoop 2.0, Spark ikawa maarufu kwa sababu Spark inaweza kukimbia juu ya HDFS pamoja na vifaa vingine vya Hadoop. Hadoop ni mfumo ambao unaandikaMapReduce kazi kwa kurithi madarasa ya Java
Ninaweza kupata wapi kumbukumbu za cheche?
Saraka za kumbukumbu Mahali chaguomsingi SPARK_WORKER_LOG_DIR ni /var/log/spark/worker. Saraka chaguo-msingi ya kumbukumbu ya kuanzisha seva ya Spark SQL Thrift ni $HOME/spark-thrift-server. Spark Shell na kumbukumbu za programu hutolewa kwa koni. Faili za usanidi wa kumbukumbu ziko katika saraka sawa na spark-env.sh
Bustani katika PCF ni nini?
Bustani imeundwa ili kuunda vyombo, kutoa telemetry, na kudhibiti mzunguko wa maisha ya kontena. Bustani inasaidia kutumia picha ya Docker kama mfumo wa faili wa kontena (kama inavyoonyeshwa kwenye VMworld ya mwaka huu). Mfumo wa nyuma wa Windows unachunguzwa na majukwaa mengine pia yanawezekana
Je, cheche hutumia toleo gani la Python?
Spark inaendeshwa kwenye Java 8+, Python 2.7+/3.4+ na R 3.1+. Kwa API ya Scala, Spark 2.3. 0 hutumia Scala 2.11. Utahitaji kutumia toleo linalolingana la Scala (2.11