「Apache Arrow」の記事一覧

• DuckDBがArrow Flightに対応「Airport」拡張登場

  2025-05-19 11:25

  IT・ネット

  DuckDBに新たな拡張機能「Airport」が追加され、Arrow Flightを利用した高性能データ通信が可能になりました。これによりDuckDBは外部APIや非対応フォーマットのデータにもアクセス可能となり、ユーザー定義関数のリモート実行や厳格なアクセス制御も実現します。拡張機能はC++で実装され、Apache ArrowとgRPCを活用し、高速な分散データ処理に対応する仕組みを提供しています。

• OpenTelemetryとApache Arrowの統合が第2フェーズへ

  2025-05-13 17:57

  IT・ネット

  OpenTelemetryとApache Arrowの連携を目指すOTel-Arrowプロジェクトが第2フェーズに突入した。Apache Arrowのゼロコピー・カラム指向データ形式により、テレメトリデータの圧縮効率や処理性能が向上すると期待されている。第2フェーズではRustを用いたパイプラインの構築を行い、GoベースのOpenTelemetry Collectorと互換性を保ちながら、Rustエコシステムとの統合も図る。最終的にはDataFusionとの接続やエンドツーエンドのRustベースOTAPパイプライン実装を目指している。