管理Spark란무엇입니까?
管理火花서비스를이용하면일괄처리,쿼리,스트리밍과머신러닝등을위한오픈소스데이터툴을유리하게활용할수있습니다。이러한자동화기능을이용하면필요에따라신속하게클러스터를만들어간편하게관리하고,작업이완료되면끌수있습니다。또한워크로드,성능요구사항에따라서나기존리소스를바탕으로클러스터크기를조정할수도있습니다。뿐만아니라완전한管理火花클러스터에액세스권한이부여되어몇초만에동적으로클러스터크기를조정할수있게됩니다。게다가이것은작업을처리중동에도동시에수행할수있습니다。또한사용자에게클러스터가필없어지면그클러스터는끄면되므로비용이절약됩니다。管理火花제공업체는모든작업에하나의클러스터를만들어프로비저닝하고보관하는것이아니라임시클러스터를여러개만듭니다。보통은마스터노드와작업자로구성된시스템클러스터를사용합니다。기업에서는귀중한자산을운영에쓰지않고,대신보유한데이터에서가치를추출하는데만집중할수있습니다。
Managed Spark서비스를이용하면얻을수있는장점:
자동클러스터관리
작업의요구사항에따라관리형배포,로깅및모니터링이제공되어클러스터에집중할필요가없고데이터에만초점을맞출수있습니다。클러스터가정적，확장가능하고빠른상태로유지됩니다。
클러스터크기조정가능
火花클러스터를구축,구성하려면리소스를많이투입해야하지만,클러스터를만들고크기를조정하는작업이금방끝나고더이상필요없게된노드는서서히멈추므로이부분은더이상신경쓰지않아도됩니다。모든것을필에따라(根据需要)수행하는것이원칙입니다。
개발자 툴
보통은클러스터하나를관리하는데여러가지방법이있습니다。
자동또는수동구성
클러스터에포함된하드웨어와소프트웨어를자동으로구성해주며,동시에수동제어도허용됩니다。
단순한관리
클러스터관리나리소스할당문제로스트레스에시달릴필가없어집니다。纱线리소스관리자와같은툴을통해우선순위지정이간편하게해결됩니다。
비용효율적
사용자는프로세스중에사용한컴퓨팅리소스에대한금만지불하면됩니다。