IBM watsonx Orchestrateの評判・口コミ 全6件

改善してほしいポイント

・公式ドキュメントの情報量は豊富だが、機械翻訳が行われていることとディレクトリがわかりにくいことから慣れるまで迷いやすい
・アップデート内容をプラットフォーム上で確認できないため、いつどのような機能のアップデートが行われたのか公式ドキュメントを確認するまで気づきにくい

どのような課題解決に貢献しましたか？どのようなメリットが得られましたか？

複数のサービスを横断して手作業で業務をこなしていた顧客に対してwatsonx orchestrateを提案を行った。
watsonx orchestrate内でそれぞれのサービスにアクセスするツールを作成し、顧客の業務担当者の作業に応じて自律的にタスクを実行するエージェントを作成したことで顧客の業務効率化に貢献した。

検討者へお勧めするポイント

・直感的に操作しエージェントを構築、検証できる点
・アップデートで様々な機能が拡充されていく点

改善してほしいポイント

現状では、日本語のドキュメントが少ない点がややハードルとなっています。
また、ブラウザ上で実装できる範囲が限定的であり、より高度な処理や複雑なエージェントを構築するには、Agent Development Kit（ADK）を利用したコマンドラインでの開発が必要となります。
さらに、選択可能な言語モデルが「llama3-2-90b」と「llama3-405b」の2種類に限られており、日本語に特化したモデルが存在しない点も課題です。
日本語での指示理解や応答品質において、もう一歩改善の余地があると感じました。

どのような課題解決に貢献しましたか？どのようなメリットが得られましたか？

まだ検証段階ではありますが、エージェントの構築からデバッグまでのスピード感が非常に高く、スムーズに開発を進めることができています。
ブラウザ上で対話的に挙動を確認しながら調整できるため、試行錯誤のサイクルを短縮できる点は大きな利点です。
また、柔軟なエージェント構築が可能であり、業務フローに合わせた自動化やタスク効率化の実現にも期待が持てます。
実用化が進めば、日常業務の大幅な効率化や、チーム全体の生産性向上にもつながるポテンシャルを感じています。

改善してほしいポイント

欲しい機能・分かりづらい点
・直感的に触れるようなスキルや、汎用性の高いスキルの組み合わせ、フレーム等の提供
・必要とされる技術の明示
その理由
・技術者の育成にあたる上で、ある程度の技術教育等の提供があると望ましい
・

どのような課題解決に貢献しましたか？どのようなメリットが得られましたか？

解決できた課題・具体的な効果
・人事エージェントの配置で、全社員からの就業規則の問い合わせ、勤怠入力のガイド等に対応
・
課題に貢献した機能・ポイント
・変則的な勤務の場合、規則の読み込みと、勤怠入力内容の提示等
・

検討者へお勧めするポイント

スキルの組み合わせ、スキルスタジオでのカスタムスキルの作成、API連携、RPAとの連携等で、バックオフィス業務と言われる業務は大幅に効率化を図れます。スキルカタログのスキルが増えてきたり、開発の基本フレームワーク等が整備されてくると、サービスインまでの時間短縮にもつながってくると考えています。

今後の展開にも期待しつつ、現時点で見えている課題に対しても十分な費用対効果を望めると考えています。

改善してほしいポイント

・LLM、Knowledgeの日本語正式サポートについて早期対応していただきたいです。
・事前定義AgentやToolに国産システム(KintoneやLineなど)があると活用の幅が広がると思います。
・sales forceなどシステム連携の手順について、現在のマニュアルをもう少し詳細記載していただけるとありがたいです。
・今後さらなるアップデートによって利用可能な機能が増える予定とのことで、Tool Builderにおける処理機能（生成AIやDecisionなど）の拡充に期待しています。

どのような課題解決に貢献しましたか？どのようなメリットが得られましたか？

社内検証となりますが、
営業業務における会議後の業務として行っていた、議事録の作成、関係者への送付、社内システムへの登録という一連の手作業は長くて約30分程度を要するところ、watsonx Orchestrateを使用することで5分以内に議事録作成から社内システムへの登録まで完了することができました。
検証により、時間短縮だけでなく、宛先のコピー＆ペーストミスの低減や社内システムへの登録漏れも防ぐことができる可能性があることが確認できました。

検討者へお勧めするポイント

エージェント開発においては、直感的なUIと開発ツールが提供されているため、柔軟に開発が可能です。また、現在事前定義エージェントが112個、事前定義Toolが438個提供されており、現在利用しているシステムとのスムーズな連携が可能です。これにより、迅速かつ効率的にエージェントを作成できる点が魅力です。

改善してほしいポイント

欲しい機能・分かりづらい点
①Microsoft Teamsと完全連携はできていない
②サムズアップ・ダウンおよびレスポンスが格納されていない
③ログが見難い
その理由
①Agentの構成要素Channelsに、Microsoft Teamsは存在するが、連携したとき、参照したPDFなどのRAG
ドキュメント名は表示されるがそれだけでリンクではない。また、サムズアップ・ダウンのリンクが表示されない。wxOのNativeWindowと異なる
②サムズアップ・ダウンとコメントを入力しレスポンスを返すが、どこにも格納されていない（ユーザーが見れる場所に無い）
③TraceDetailは存在するが、生のトレースデータで解読困難。どういった問に対してどういった回答がされたかが確認できない（LangFuseを使ってログビューワーを開発した）

どのような課題解決に貢献しましたか？どのようなメリットが得られましたか？

実際は法務部門での社内からの問い合わせ対応に利用。現在PoC中。お客様に提示した契約書で修正リクエストがあり、その対応処理で15%-20%の工数をさいている。これがAgentにより自動化できればその工数が削減され、Creativeな業務に軸足をおくことができる見込み。上記、契約書で修正リクエストのFAQはデータドキュメントとして保持しており、それをRAGさせている。
現在そのFAQをAgentが参照し、回答できるよう章立て含め、文章構造を調整中（マークダウン形式などに）

検討者へお勧めするポイント

エンジニアでなくても現場担当者でエージェントが開発できる。初めの一歩を現場で始められる。もちろん外部Saasとの連携も可能で、そのためのリソースや機能もIBM watsonx Orchestrateには最初から備わっている。