非公開ユーザー 情報通信・インターネット|その他情報システム関連職|20人未満|IT管理者|契約タイプ 有償利用 企業所属 確認済 投稿日: 2025年02月19日 ETL処理がだいぶ楽になった ETLツールで利用 良いポイント 自社で運営しているSaasをAWS上で構築しており、自社サービスの利用データや外部のサードパーティのデータなどを統合した顧客データ基盤を運用しておりますが、データレイクからデータウェアハウスへのデータ移管や抽出/加工で使っておりますが、AWS S3などからのデータ転送がスムーズでストレス少なく利用できるのが良いです。 改善してほしいポイント 大量のデータ処理であれば良いですが、ちょっとしたデータの加工/抽出しアドホックに分析したい場合価格的にtoo muchな印象です。あとはAWS以外のGoogleやsnowflakeなどの製品ともスムーズに連携できると嬉しいです。 どのような課題解決に貢献しましたか?どのようなメリットが得られましたか? AWS S3に保存しているECSなどのアプリケーションログやDBバックアップデータを手動バッチで抽出/加工している工数が大幅に削減できた 閉じる 0コメント レビューをシェア 0 参考になった
非公開ユーザー 情報通信・インターネット|ITコンサルタント|20-50人未満|ユーザー(利用者)|契約タイプ 有償利用 企業所属 確認済 投稿日: 2024年12月20日 使い勝手の良いETLツール ETLツールで利用 良いポイント 優れている点・好きな機能 ・Pythonへの対応が出来ていること ・VPCエンドポイント経由での接続 その理由 ・Pythonが使える為、データサイエンティストなどでも使いやすい仕様となっているため。 ・データ取得をしやすいため。 改善してほしいポイント 欲しい機能・分かりづらい点 ・他クラウドサービスとの連携 その理由 ・他クラウドサービスやSaaSとの連携がしづらく、AWSで周辺システムを固める必要性が高いため。 どのような課題解決に貢献しましたか?どのようなメリットが得られましたか? データレイクにため込んだデータを機械学習用アプリに投入する前に自動的に特定のデータ加工ができるようになり、10%程度の業務効率化につながった。 検討者へお勧めするポイント データサイエンティストの助けとなるETLツール 続きを開く 0コメント レビューをシェア 0 参考になった
非公開ユーザー LINEヤフー株式会社|広告・販促|その他専門職|300-1000人未満|ユーザー(利用者)|契約タイプ 有償利用 企業所属 確認済 投稿日: 2024年05月08日 ETLの自動化ツールとしてかなり優秀 ETLツールで利用 良いポイント AWS SNSと繋ぎ込むことによって、日次でデータベースを更新する際に、もしトラフィックの関係などでETLに失敗した場合に簡単にメール通知を送信できるなど、他のAWSサービスとの連携の取りやすさがとても良い。 改善してほしいポイント 対応しているPythonのバージョンがやや古い。現在はpython3.12なのでせめて3.10 系まで対応して欲しい。 どのような課題解決に貢献しましたか?どのようなメリットが得られましたか? s3に日々入ってくるデータをあるデータベースに加工してインサートし、データウェアハウスを構築するなどがかなり簡単にできる。 続きを開く 0コメント レビューをシェア 0 参考になった