投稿者:
XinYe
2 weeks, 1 day ago
(0 のコメント)
2024 年は、自動運転、AI マップ、インテリジェントな顧客サービスなどの人工知能関連アプリケーションが雨後の筍のように急増し、私たちの生活の隅々に浸透する年となるでしょう。ただし、これらの優れたアプリケーションの背後には、データ処理という困難な問題が横たわっています。 Hadoop、Spark、Flink などの従来のビッグデータ テクノロジは、もはや AI 時代のペースに追いつくことができません。システムは非常に複雑で、各コンポーネントには専門的な管理が必要で、データのレプリケーションは面倒で、リソースのスケジューリングは十分に賢明ではないため、人々はデータの爆発的な増加を常に心配しています。
著者が頭を抱えていたとき、Tencent Cloud の新製品発表カンファレンスで光が見えてきました。新しいデータ インテリジェンス プラットフォーム tc house-X は、データと AI の統合をシンプルかつ効率的に実現できるということです。次に、tc house-Xのイノベーションを詳しく見てみましょう。
1. 構造を簡素化し効率を向上
従来のデータ処理では、データベース、データ レイク、データ ウェアハウス、機械学習プラットフォームの間でデータをコピーする必要があります。また、バッチ処理の場合は Hadoop と Spark、ストリーム処理の場合は Spark Streaming と Flink など、さまざまな処理メソッドがさまざまなオープン ソース コンポーネントに対応する必要があります。対話型クエリには Crystal、Doris などが使用されるため、企業の開発および保守コストが高くなり、データ システムが非常に複雑になります。
tc house-X は、1 つのデータに基づいて複数のビジネス ロードをサポートでき、ビッグ データまたはデータ プラットフォーム アーキテクチャを効果的に簡素化し、データ分析効率を向上させます。ストレージと計算に同じデータを使用し、アーキテクチャがシンプルでコストが低く、運用と保守管理が容易です。
2. 柔軟でインテリジェントなスケーリング
- 突然のトラフィックへの対処: 電子商取引プラットフォームを例に挙げます。イベントやライブブロードキャストによりプラットフォームのトラフィックがピークに達した場合、リソースが追いつかないとユーザーエクスペリエンスが大幅に低下し、ビジネスにさえ影響を及ぼします。 tc house-X のインテリジェントな拡張機能は、負荷の変化をリアルタイムで感知し、より多くのコンピューティング リソースを自動的に取得し、トラフィックが失われないように数秒で容量を拡張できます。
- リソース割り当ての最適化: 多くの企業では夜間にバッチ タスクを実行しています。従来のプラットフォームではリソースを事前に割り当てる必要があるため、日中はリソースがアイドル状態になり、無駄が生じます。 TCハウス-
- 極端なクエリの処理: 同僚が間違った SQL ステートメントを作成し、クエリ量が急増してシステム麻痺を引き起こした場合、tc house-X 内の AI インテリジェント スケーリング システムは、AI モジュールを通じてこれを真に実現できます。リソース計算を増やすか、クエリをブロックして無視することでコストを削減し、効率を高めます。
3. 究極のパフォーマンス、画期的な問題点
- 自社開発エンジン最適化:tc house-Xは、ストレージ、コンピューティング、ネットワークの3次元で徹底した最適化を実行する自社開発エンジンを搭載しています。以前は、大規模なレポートのクエリには約 100 秒かかることがありました。このプラットフォームを使用すると、クエリ速度が数秒に短縮され、効率が 10 倍近く向上しました。
- ストレージとコンピューティングの分離アーキテクチャ: 従来のデータ プラットフォームは、ストレージとコンピューティングをバンドルしています。データ量が増加すると、ストレージコストと必要なコンピューティングリソースが同時に増加し、コストパフォーマンスが低下します。 tc house-X は、ストレージとコンピューティングの分離アーキテクチャを採用しており、完全に分離されており、オンデマンドでリソースを割り当てることができます。データストレージの拡張は柔軟かつ低コストで、タスクに応じてコンピューティングリソースを自動的に引き上げることができるため、効率が向上します。公式テストの結果では、オフライン バッチ処理の全体的な費用対効果が約 10 倍向上し、エンタープライズ レベルのストレージとコンピューティングのコストが最大 50% 節約できることが示されています。
- 増分計算に対応: たとえば、月次売上を計算する場合、過去のデータをすべて毎回計算する必要があります。しかし、TCハウスは——
tc house-Xの魅力を実際に体験してみたい方は、Tencent Cloudの公式サイトにアクセスして試してみると良いでしょう。エンタープライズ開発者、データ アナリスト、AI アプリケーション チームのいずれであっても、データおよび AI 処理の問題を簡単に解決できるため、より優れた作業に費やす時間を短縮できます。 tc house-Xに関するご質問やデータ処理でのトラブルなどがございましたら、コメント欄または弾幕にて皆様にお気軽にご相談ください。
Facebookでシェア
コメント
現在コメントはありません