{"id":179212,"date":"2023-06-30T12:42:01","date_gmt":"2023-06-30T11:42:01","guid":{"rendered":"https:\/\/liora.io\/de\/?p=179212"},"modified":"2026-08-08T13:43:59","modified_gmt":"2026-08-08T11:43:59","slug":"amazon-emr-ein-von-aws-verwaltetes-tool-zur-verwaltung-von-clustern","status":"publish","type":"post","link":"https:\/\/liora.io\/de\/amazon-emr-ein-von-aws-verwaltetes-tool-zur-verwaltung-von-clustern","title":{"rendered":"Amazon EMR: Ein von AWS verwaltetes Tool zur Verwaltung von Clustern"},"content":{"rendered":"\n<p><strong>Amazon EMR (Elastic MapReduce) ist ein Datenverarbeitungsdienst, der von Amazon Web Service (AWS) verwaltet wird. Er verwaltet gro\u00dfe Datenmengen im Petabyte-Bereich mithilfe beliebter Tools wie Apache Hadoop, Hive, Spark und HBase, um nur einige zu nennen.<\/strong><\/p>\n\n\n\n<div class=\"wp-block-buttons is-layout-flex wp-block-buttons-is-layout-flex is-content-justification-center wp-container-core-buttons-is-layout-5ee10de4\" style=\"margin-top:32px;margin-bottom:32px\"><div class=\"wp-block-button\"><a class=\"wp-block-button__link wp-element-button\" href=\"https:\/\/liora.io\/de\/weiterbildung\/cloud-dev\/aws-solutions-architect\">Amazon EMR lernen<\/a><\/div><\/div>\n\n\n\n<p><strong>Amazon EMR<\/strong> wurde so konzipiert, dass es eine hohe Flexibilit\u00e4t und Skalierbarkeit bietet, die es den Nutzern erm\u00f6glicht, sehr schnelle Ergebnisse zu erzielen, indem sie leistungsstarke und hochkonfigurierbare Rechencluster verwenden.<\/p>\n\n\n\n<p>EMR wurde so konzipiert, dass es eine hohe Flexibilit\u00e4t und Skalierbarkeit bietet, die es den Nutzern erm\u00f6glicht, sehr schnelle Ergebnisse zu erzielen, indem sie leistungsstarke und hochkonfigurierbare Rechencluster verwenden.<\/p>\n\n\n\n<p>Die Funktionsweise von <strong>Amazon EMR<\/strong> beruht auf der Erstellung von <strong>Datenverarbeitungsclustern,<\/strong> die so konfiguriert werden, dass sie den spezifischen Anforderungen jeder Aufgabe entsprechen.<\/p>\n\n\n\n<p>Diese Cluster werden auf der Grundlage der ben\u00f6tigten Rechen- und Speicherressourcen erstellt.<\/p>\n\n\n\n<p>Ein Cluster besteht aus Knoten, die verschiedene Arten von Knoten sein k\u00f6nnen:<\/p>\n\n\n\n<ul class=\"wp-block-list\">\n<li><strong>Ein Masterknoten (Master Node):<\/strong> Er verwaltet den Cluster und seine Ressourcen. Als prim\u00e4rer Knoten orchestriert er die Aufgaben der Datenverarbeitung. Au\u00dferdem speichert er die Metadaten des Clusters und bietet eine Befehlszeilenschnittstelle (CLI) und eine Webschnittstelle, um mit dem Cluster zu interagieren.<\/li>\n<li><strong>Kernknoten (core nodes):<\/strong> Sie werden vom Prim\u00e4rknoten verwaltet und koordinieren die Speicherung der Daten in einem Dateisystem wie <a href=\"https:\/\/liora.io\/de\/hdfs-hadoop-distributed-file-system-was-ist-das\">HDFS<\/a>. Dar\u00fcber hinaus f\u00fchren sie parallele Verarbeitungsaufgaben aus.<\/li>\n<li><strong>Aufgabenknoten (task nodes):<\/strong> Diese Knoten sind optional und werden verwendet, um die Kapazit\u00e4t von parallelen Verarbeitungsaufgaben auf Daten zu erh\u00f6hen, wie<a href=\"https:\/\/liora.io\/de\/mapreduce\"> MapReduce-Jobs<\/a> oder <a href=\"https:\/\/liora.io\/de\/spark-streaming-was-ist-das-wie-funktioniert-es\">Spark-Jobs.<\/a> Sie speichern jedoch keine Daten auf dem HDFS.<\/li>\n<\/ul>\n\n\n\n<figure class=\"wp-block-image aligncenter size-full is-resized\" style=\"width:366px;max-width:100%;margin-top:32px;margin-right:auto;margin-bottom:32px;margin-left:auto\"><img alt=\"Illustration zu \u201eIst die Umsetzung kompliziert?\u201c\" decoding=\"async\" height=\"225\" loading=\"lazy\" sizes=\"(max-width: 366px) 100vw, 366px\" src=\"https:\/\/liora.io\/app\/uploads\/sites\/8\/2023\/06\/image3-2.png\" srcset=\"https:\/\/liora.io\/app\/uploads\/sites\/8\/2023\/06\/image3-2.png 366w, https:\/\/liora.io\/app\/uploads\/sites\/8\/2023\/06\/image3-2-300x184.png 300w\" style=\"width:366px;max-width:100%;height:auto\" width=\"366\"\/><\/figure>\n\n\n\n<p>Um Rechen- und Speicherkapazit\u00e4t zur Verf\u00fcgung zu stellen, nutzt <a href=\"https:\/\/liora.io\/de\/aws-ec2-wie-man-das-amazon-tool-nutzt\">EMR EC2-Instanzen (Elastic Compute Cloud).<\/a> Diese Instanzen sind virtuelle Maschinen, die in hohem Ma\u00dfe konfigurierbar und an die jeweiligen Bed\u00fcrfnisse anpassbar sind.<\/p>\n\n\n\n<p>Wenn der <strong>EMR-Cluster<\/strong> erstellt wird, werden die erforderlichen Tools automatisch auf jedem Knoten des Clusters installiert (haupts\u00e4chlich Tools wie <a href=\"https:\/\/liora.io\/de\/hadoop\">Hadoop<\/a>, Spark oder Hive). F\u00fcr die Planung und Ausf\u00fchrung von Verarbeitungsaufgaben werden Manager wie YARN (der bekannteste) oder Mesos verwendet.<\/p>\n\n\n\n<p>Da die <strong>AWS-Dienste<\/strong> besonders gut miteinander integriert sind, k\u00f6nnen Datenquellen wie <a href=\"https:\/\/liora.io\/de\/amazon-s3\">Amazon S3<\/a>, RDS oder DynamoDB verwendet werden, um die Verarbeitung durch EMR zu erm\u00f6glichen. In der gleichen Integrationsrichtung wird Amazon Cloudwatch verwendet, um die Leistung und Verf\u00fcgbarkeit des Clusters zu verfolgen.<\/p>\n\n\n\n<h2 class=\"wp-block-heading\" id=\"ist-die-umsetzung-kompliziert\">Ist die Umsetzung kompliziert?<\/h2>\n\n\n\n<p>Die Installation und Implementierung von Amazon EMR ist ein relativ einfacher Prozess, der in wenigen Schritten durchgef\u00fchrt werden kann. Die Voraussetzung ist nat\u00fcrlich ein AWS-Konto.<\/p>\n\n\n\n\n\n<p>Wenn du dich in dein Konto eingeloggt hast, w\u00e4hle einfach den EMR-Service aus.<\/p>\n\n\n\n<figure class=\"wp-block-image aligncenter size-full is-resized\" style=\"width:528px;max-width:100%;margin-top:32px;margin-right:auto;margin-bottom:32px;margin-left:auto\"><img alt=\"Illustration zu \u201eIst die Umsetzung kompliziert?\u201c\" decoding=\"async\" height=\"235\" loading=\"lazy\" src=\"https:\/\/liora.io\/app\/uploads\/2023\/05\/image4.png\" style=\"width:528px;max-width:100%;height:auto\" width=\"528\"\/><\/figure>\n\n\n\n<p>W\u00e4hle den hervorgehobenen Button &#8222;Cluster erstellen&#8220;<\/p>\n\n\n\n<figure class=\"wp-block-image aligncenter size-full is-resized\" style=\"width:636px;max-width:100%;margin-top:32px;margin-right:auto;margin-bottom:32px;margin-left:auto\"><img alt=\"Illustration zu \u201eIst die Umsetzung kompliziert?\u201c\" decoding=\"async\" height=\"309\" loading=\"lazy\" src=\"https:\/\/liora.io\/app\/uploads\/2023\/05\/image5.png\" style=\"width:636px;max-width:100%;height:auto\" width=\"636\"\/><\/figure>\n\n\n\n<p>Folge dann den Schritten zur Erstellung eines Clusters je nach deinen Bed\u00fcrfnissen. Hier ist eine Zusammenfassung der Arten von EC2-Instanzen :<\/p>\n\n\n\n<figure class=\"wp-block-table is-style-stripes\"><table>\n<colgroup>\n<col\/>\n<col\/>\n<col\/>\n<\/colgroup>\n<thead>\n<tr>\n<th>Instanz-Klasse<\/th>\n<th>Instanz-Familie<\/th>\n<th>Empfohlene Nutzung<\/th>\n<\/tr>\n<\/thead>\n<tbody>\n<tr>\n<td>Allgemeiner Zweck<\/td>\n<td>M4, M5<\/td>\n<td>Traitement par lot<\/td>\n<\/tr>\n<tr>\n<td>Compute Optimized<\/td>\n<td>C5,C4<\/td>\n<td>Maschinelles Lernen<\/td>\n<\/tr>\n<tr>\n<td>Speicheroptimiert<\/td>\n<td>X1,X4<\/td>\n<td>Analysen interaktiv<\/td>\n<\/tr>\n<tr>\n<td>Speicheroptimiert<\/td>\n<td>D2, I3<\/td>\n<td>HDFS volumineux<\/td>\n<\/tr>\n<\/tbody>\n<\/table><\/figure>\n\n\n\n<figure class=\"wp-block-image size-full\" style=\"margin-top:32px;margin-bottom:32px\"><img alt=\"Illustration zu \u201eIst die Umsetzung kompliziert?\u201c\" decoding=\"async\" height=\"810\" loading=\"lazy\" src=\"https:\/\/liora.io\/app\/uploads\/2023\/05\/image7.png\" style=\"width:100%;height:auto\" width=\"823\"\/><\/figure>\n\n\n\n<p>Sobald du den Cluster erstellt hast, musst du nur noch Anwendungen zur Datenverarbeitung ausf\u00fchren und bereitstellen. Achte jedoch auf die Preisgestaltung.<\/p>\n\n\n\n<h3 class=\"wp-block-heading\" id=\"die-preise\">Die Preise<\/h3>\n\n\n\n<p>Die mit der Nutzung von<strong> Amazon EMR<\/strong> verbundenen Kosten k\u00f6nnen je nach Region variieren. Au\u00dferdem berechnet AWS EMR sowohl f\u00fcr seine Instanz als auch f\u00fcr <strong>EC2-Instanzen.<\/strong> Die Abrechnung erfolgt im Sekundentakt mit einer Mindestpauschale von einer Minute. Hier findest du die Preisliste von Amazon f\u00fcr die Nutzung dieses Dienstes.<\/p>\n\n\n\n<div class=\"wp-block-group has-background has-global-padding is-layout-constrained wp-container-core-group-is-layout-7441ce17 wp-block-group-is-layout-constrained\" style=\"border-left-color:#ff5c43;border-left-width:4px;border-radius:12px;background-color:#fff5f2;margin-top:32px;margin-bottom:32px;padding-top:24px;padding-right:28px;padding-bottom:24px;padding-left:28px\">\n\n<p style=\"margin-top:0;margin-bottom:16px;font-size:clamp(14.642px, 0.915rem + ((1vw - 3.2px) * 0.575), 22px);font-style:normal;font-weight:600\">Auch interessant<\/p>\n\n\n\n<ul style=\"margin-top:0;margin-bottom:0;padding-left:20px\" class=\"wp-block-list\">\n<li><a href=\"https:\/\/liora.io\/de\/amazon-s3\" rel=\"noopener\" target=\"_blank\">Amazon S3<\/a><\/li><li><a href=\"https:\/\/liora.io\/de\/aws-ec2-wie-man-das-amazon-tool-nutzt\" rel=\"noopener\" target=\"_blank\">Amazon EC2<\/a><\/li><li><a href=\"https:\/\/liora.io\/de\/amazon-web-services\" rel=\"noopener\" target=\"_blank\">Amazon Web Services<\/a><\/li><li><a href=\"https:\/\/liora.io\/de\/amazon-web-service-aws-microsoft-azure-oder-google-cloud-platform-gcp\" rel=\"noopener\" target=\"_blank\">AWS Google Cloud<\/a><\/li><li><a href=\"https:\/\/liora.io\/de\/amazon-omics-von-aws-alles-wichtige\" rel=\"noopener\" target=\"_blank\">Amazon Omics<\/a><\/li><li><a href=\"https:\/\/liora.io\/de\/amazon-quicksight-q-ein-business-intelligence-tool-das-mit-power-bi-konkurrieren-soll\" rel=\"noopener\" target=\"_blank\">Amazon Quicksight<\/a><\/li>\n<\/ul>\n\n<\/div>\n\n\n\n<h3 class=\"wp-block-heading\" id=\"case-studies\">Case Studies<\/h3>\n\n\n\n<p>Sehen wir uns gemeinsam zwei Fallstudien an, in denen <strong>AWS EMR<\/strong> die Antwort auf Probleme bei der Datenverarbeitung bietet.<\/p>\n\n\n\n<figure class=\"wp-block-image aligncenter size-full is-resized\" style=\"width:465px;max-width:100%;margin-top:32px;margin-right:auto;margin-bottom:32px;margin-left:auto\"><img alt=\"Illustration zu \u201eCase Studies\u201c\" decoding=\"async\" height=\"188\" loading=\"lazy\" sizes=\"(max-width: 465px) 100vw, 465px\" src=\"https:\/\/liora.io\/app\/uploads\/sites\/8\/2023\/06\/image6.png\" srcset=\"https:\/\/liora.io\/app\/uploads\/sites\/8\/2023\/06\/image6.png 465w, https:\/\/liora.io\/app\/uploads\/sites\/8\/2023\/06\/image6-300x121.png 300w\" style=\"width:465px;max-width:100%;height:auto\" width=\"465\"\/><\/figure>\n\n\n\n<p>Die Online-Plattform f\u00fcr Restaurantbewertungen (u. a.) <a href=\"https:\/\/www.yelp.fr\/paris\">Yelp<\/a>, wandte sich sich f\u00fcr die Verarbeitung und Analyse von Bewertungen in Echtzeit und in gro\u00dfem Umfang an EMR. Durch seine Nutzung kann Yelp dann detaillierte Analysen \u00fcber Entwicklungen erhalten. Da die Anforderungen des Unternehmens stark schwanken, kann Yelp nun seine Verarbeitungskapazit\u00e4t anpassen, um diesen Anforderungen gerecht zu werden.<\/p>\n\n\n\n<figure class=\"wp-block-image size-full\" style=\"margin-top:32px;margin-bottom:32px\"><img alt=\"Illustration zu \u201eCase Studies\u201c\" decoding=\"async\" height=\"450\" loading=\"lazy\" sizes=\"(max-width: 800px) 100vw, 800px\" src=\"https:\/\/liora.io\/app\/uploads\/sites\/8\/2023\/06\/image2-1024x576.png\" srcset=\"https:\/\/liora.io\/app\/uploads\/sites\/8\/2023\/06\/image2-1024x576.png 1024w, https:\/\/liora.io\/app\/uploads\/sites\/8\/2023\/06\/image2-300x169.png 300w, https:\/\/liora.io\/app\/uploads\/sites\/8\/2023\/06\/image2-768x432.png 768w, https:\/\/liora.io\/app\/uploads\/sites\/8\/2023\/06\/image2-1536x864.png 1536w, https:\/\/liora.io\/app\/uploads\/sites\/8\/2023\/06\/image2.png 1999w\" style=\"width:100%;height:auto\" width=\"800\"\/><\/figure>\n\n\n\n<div class=\"wp-block-buttons is-layout-flex wp-block-buttons-is-layout-flex is-content-justification-center wp-container-core-buttons-is-layout-5ee10de4\" style=\"margin-top:32px;margin-bottom:32px\"><div class=\"wp-block-button\"><a class=\"wp-block-button__link wp-element-button\" href=\"https:\/\/liora.io\/de\/weiterbildung\/cloud-dev\/aws-solutions-architect\">Amazon AWS Weiterbildung<\/a><\/div><\/div>\n\n\n\n<p>Als Immobilienunternehmen (mit Sitz in den USA) haben sie sich f\u00fcr den Einsatz von <strong>Amazon EMR<\/strong> entschieden, um ihre Algorithmen f\u00fcr Immobilienprognosen in sehr gro\u00dfem Ma\u00dfstab einzusetzen. So k\u00f6nnen sie Immobiliendaten schnell und effizient verarbeiten, um ihren Kunden genauere Preisentwicklungen zu liefern und die Ver\u00e4nderungen auf diesem sehr volatilen Markt in Echtzeit zu \u00fcberwachen.<\/p>\n\n\n\n<h2 class=\"wp-block-heading\" id=\"fazit\">Fazit<\/h2>\n\n\n\n<p>Amazon EMR ist eine leistungsstarke und flexible <a href=\"https:\/\/liora.io\/de\/die-hybrid-cloud-was-ist-das-wie-funktioniert-sie\">Cloud-L\u00f6sung f\u00fcr die Verarbeitung gro\u00dfer Datenmengen,<\/a> wie du in diesem Artikel erfahren hast. Dank seiner Benutzerfreundlichkeit und der F\u00e4higkeit, sich in andere<a href=\"https:\/\/liora.io\/de\/aws-glue-was-ist-das-wozu-dient-es\"> AWS-Dienste zu integrieren, ist es eine erstklassige L\u00f6sung f\u00fcr Unternehmen,<\/a> die eine hohe Leistung bei der Analyse ihrer Daten ben\u00f6tigen, um gute Entscheidungen zu treffen und sich so an die sich \u00e4ndernden Marktbed\u00fcrfnisse anzupassen.<\/p>\n\n\n\n","protected":false},"excerpt":{"rendered":"<p>Amazon EMR (Elastic MapReduce) ist ein Datenverarbeitungsdienst, der von Amazon Web Service (AWS) verwaltet wird. Er verwaltet gro\u00dfe Datenmengen im Petabyte-Bereich mithilfe beliebter Tools wie Apache Hadoop, Hive, Spark und HBase, um nur einige zu nennen. Amazon EMR wurde so konzipiert, dass es eine hohe Flexibilit\u00e4t und Skalierbarkeit bietet, die es den Nutzern erm\u00f6glicht, sehr [&hellip;]<\/p>\n","protected":false},"author":78,"featured_media":179214,"comment_status":"open","ping_status":"open","sticky":false,"template":"elementor_theme","format":"standard","meta":{"_acf_changed":false,"editor_notices":[],"footnotes":""},"categories":[2472],"class_list":["post-179212","post","type-post","status-publish","format-standard","has-post-thumbnail","hentry","category-data-ki"],"acf":[],"_links":{"self":[{"href":"https:\/\/liora.io\/de\/wp-json\/wp\/v2\/posts\/179212","targetHints":{"allow":["GET"]}}],"collection":[{"href":"https:\/\/liora.io\/de\/wp-json\/wp\/v2\/posts"}],"about":[{"href":"https:\/\/liora.io\/de\/wp-json\/wp\/v2\/types\/post"}],"author":[{"embeddable":true,"href":"https:\/\/liora.io\/de\/wp-json\/wp\/v2\/users\/78"}],"replies":[{"embeddable":true,"href":"https:\/\/liora.io\/de\/wp-json\/wp\/v2\/comments?post=179212"}],"version-history":[{"count":5,"href":"https:\/\/liora.io\/de\/wp-json\/wp\/v2\/posts\/179212\/revisions"}],"predecessor-version":[{"id":225463,"href":"https:\/\/liora.io\/de\/wp-json\/wp\/v2\/posts\/179212\/revisions\/225463"}],"wp:featuredmedia":[{"embeddable":true,"href":"https:\/\/liora.io\/de\/wp-json\/wp\/v2\/media\/179214"}],"wp:attachment":[{"href":"https:\/\/liora.io\/de\/wp-json\/wp\/v2\/media?parent=179212"}],"wp:term":[{"taxonomy":"category","embeddable":true,"href":"https:\/\/liora.io\/de\/wp-json\/wp\/v2\/categories?post=179212"}],"curies":[{"name":"wp","href":"https:\/\/api.w.org\/{rel}","templated":true}]}}