Geschrieben von:
XinYe
2 Wochen, 1 Tag ago
(0 comments)
2024 wird das Jahr sein, in dem Anwendungen im Zusammenhang mit künstlicher Intelligenz wie autonomes Fahren, KI-Karten und intelligenter Kundenservice wie Pilze aus dem Boden schießen und in jeden Winkel unseres Lebens vordringen. Allerdings verbirgt sich hinter diesen coolen Anwendungen das schwierige Problem der Datenverarbeitung. Traditionelle Big-Data-Technologien wie Hadoop, Spark, Flink usw. können mit dem Tempo der KI-Ära nicht mehr mithalten. Das System ist sehr komplex, jede Komponente erfordert eine spezielle Verwaltung, die Datenreplikation ist umständlich und die Ressourcenplanung ist nicht intelligent genug, sodass die Menschen ständig Angst vor einer Datenexplosion haben.
Gerade als der Autor Kopfschmerzen hatte, brachte die neue Produkteinführungskonferenz von Tencent Cloud Licht: Die neue Data-Intelligence-Plattform tc house-X kann die Integration von Daten und KI einfach und effizient machen. Schauen wir uns als nächstes die Neuerungen von tc house-X genauer an.
1. Vereinfachen Sie die Struktur und verbessern Sie die Effizienz
Bei der herkömmlichen Datenverarbeitung müssen Daten zwischen Datenbanken, Data Lakes, Data Warehouses und Plattformen für maschinelles Lernen hin und her kopiert werden. Unterschiedliche Verarbeitungsmethoden müssen auch unterschiedlichen Open-Source-Komponenten entsprechen, z. B. Hadoop und Spark für die Stapelverarbeitung sowie Spark Streaming und Flink für die Stream-Verarbeitung. Interaktive Abfragen nutzen Crystal, Doris usw., was die Entwicklungs- und Wartungskosten des Unternehmens hoch und das Datensystem äußerst komplex macht.
tc house-X kann mehrere Geschäftslasten basierend auf einem Datenelement unterstützen, wodurch die Architektur von Big Data oder Datenplattformen effektiv vereinfacht und die Effizienz der Datenanalyse verbessert wird. Es verwendet dieselben Daten für die Speicherung und Berechnung, verfügt über eine einfachere Architektur, geringere Kosten und ein einfacheres Betriebs- und Wartungsmanagement.
2. Flexible und intelligente Skalierung
- Umgang mit plötzlichem Datenverkehr : Nehmen Sie E-Commerce-Plattformen als Beispiel. Wenn es auf der Plattform aufgrund von Ereignissen oder Live-Übertragungen zu Verkehrsspitzen kommt und die Ressourcen nicht mithalten können, wird das Benutzererlebnis stark beeinträchtigt und sogar das Geschäft wird beeinträchtigt. Die intelligente Erweiterungsfähigkeit von tc house-X kann Laständerungen in Echtzeit erkennen, automatisch mehr Rechenressourcen abrufen und die Kapazität in Sekundenschnelle erweitern, um sicherzustellen, dass der Datenverkehr nicht verloren geht.
- Optimieren Sie die Ressourcenzuteilung : Viele Unternehmen haben Batch-Aufgaben, die nachts ausgeführt werden. Bei herkömmlichen Plattformen müssen Ressourcen im Voraus zugewiesen werden, sodass sie tagsüber ungenutzt bleiben, was zu Verschwendung führt. TC House-
- Umgang mit extremen Abfragen : Wenn ein Kollege eine falsche SQL-Anweisung schreibt, wodurch das Abfragevolumen in die Höhe schießt und eine Systemlähmung auftritt, kann das intelligente KI-Skalierungssystem in tc house-X dies tatsächlich über das KI-Modul erreichen, sofern dies der Fall ist Erhöhen Sie die Ressourcenberechnungen oder blockieren und ignorieren Sie Abfragen. Reduzieren Sie die Kosten und steigern Sie die Effizienz.
3. Ultimative Leistung, bahnbrechende Schwachstellen
- Selbstentwickelte Engine-Optimierung : tc house-X verfügt über eine selbst entwickelte Engine, die eine tiefgreifende Optimierung in den drei Dimensionen Speicher, Computing und Netzwerk durchführt. In der Vergangenheit konnte die Abfrage eines großen Berichts etwa 100 Sekunden dauern. Nach Verwendung dieser Plattform kann die Abfragegeschwindigkeit auf wenige Sekunden verkürzt und die Effizienz um fast das Zehnfache verbessert werden.
- Architektur zur Trennung von Speicher und Computer : Traditionelle Datenplattformen bündeln Speicher und Computer. Wenn die Datenmenge zunimmt, steigen gleichzeitig die Speicherkosten und der Bedarf an Rechenressourcen, was zu einer geringeren Kostenleistung führt. tc house-X verwendet eine Speicher- und Computer-Trennarchitektur, die vollständig entkoppelt ist und Ressourcen nach Bedarf zuweisen kann. Die Erweiterung des Datenspeichers ist flexibel und kostengünstig, und Rechenressourcen können je nach Aufgaben automatisch abgerufen werden, was die Effizienz erhöht. Offizielle Testergebnisse zeigen, dass sich die Gesamtkosteneffizienz für die Offline-Stapelverarbeitung um etwa das Zehnfache verbessert und die Speicher- und Rechenkosten auf Unternehmensebene um bis zu 50 % eingespart werden können.
- Unterstützt inkrementelle Berechnungen : Wenn beispielsweise monatliche Umsätze berechnet werden, müssen jedes Mal alle vergangenen Daten berechnet werden. Allerdings tc Haus——
Wenn auch Sie den Charme von tc house-X selbst erleben möchten, können Sie es auch auf der offiziellen Website von Tencent Cloud ausprobieren. Unabhängig davon, ob Sie ein Unternehmensentwickler, ein Datenanalyst oder ein KI-Anwendungsteam sind, kann es Ihnen helfen, Daten- und KI-Verarbeitungsprobleme einfach zu lösen, sodass Sie weniger Zeit mit cooleren Dingen verbringen müssen. Wenn Sie Fragen zu tc house-X haben oder auf Probleme bei der Datenverarbeitung stoßen, können Sie sich gerne über den Kommentarbereich oder per E-Mail an uns wenden.
Auf Facebook teilen
Indie123
Kommentare
Derzeit liegen keine Kommentare vor