Azure AI Foundryで回答APIとコンピューター使用エージェントの発表

AIエージェントは、ワークフローを自動化し、生産性を向上させ、インテリジェントな意思決定を可能にすることにより、産業を変革しています。企業は、AIエージェントを活用して、保険請求を処理し、ITサービスデスクの管理、サプライチェーンロジスティクスの最適化、さらには医療専門家が医療記録の分析を支援しています。可能性は膨大であり、Azure AI Foundryに2つの強力なイノベーションを導入できることを嬉しく思います。

AIエージェントは、ワークフローを自動化し、生産性を向上させ、インテリジェントな意思決定を可能にすることにより、産業を変革しています。企業は、AIエージェントを活用して、保険請求を処理し、ITサービスデスクの管理、サプライチェーンロジスティクスの最適化、さらには医療専門家が医療記録の分析を支援しています。可能性は膨大であり、2つの強力なイノベーションを導入できることを楽しみにしています Azure AI Foundry：

• 応答API：AIを搭載したアプリケーションを可能にする強力なAPIは、情報を取得し、データを処理し、アクションをシームレスに実行できるようにします。
• コンピューター使用エージェント（CUA）：ソフトウェアインターフェイスをナビゲートし、タスクを実行し、ワークフローを自動化する画期的なAIモデル。

一緒に、これらの能力は、AIをアシスタントとしてだけでなく、AIを再考することができますが、積極的なデジタル労働力として。エンタープライズの顧客は、大規模な自動化、効率、インテリジェンスを推進するこれらのイノベーションにすぐにアクセスできます。

応答APIでAIエージェントを強化します

Responses APIは、Azure AI FoundryのエージェントAIのロックを解除するための鍵であり、実際の影響のために企業がAIをどのように活用するかを変換します。これは、Azure Openaiサービスの強力な組み込みツールを活用するための新しい基盤であり、Chat Completions APIのシンプルさとAssistant APIおよびAzure AIエージェントサービスを通じて利用可能な高度な機能を組み合わせたものです。応答APIにより、CUA、コードインタープリター、関数呼び出し、ファイル検索などのツールとのシームレスな相互作用があります。このAPIにより、AIシステムはデータを取得し、情報を処理し、アクションを実行できます。エージェントAIをエンタープライズワークフローに接続することを確認します。

応答APIの仕組み

応答APIは、AIが相互作用全体でコンテキストを維持しながら、AIが複数のツールと対話できるようにする構造化された応答形式を提供します。それはサポートしています：

• 1つの簡単なAPI呼び出しでツール呼び出し：現在、開発者はAIツールをシームレスに統合して、実行をより効率的にすることができます。

• コンピューターの使用：Response API内のコンピューター使用ツールを使用して、自動化を促進し、ソフトウェアインタラクションを実行します。

• ファイル検索：エンタープライズデータと動的に対話し、関連情報を抽出します。

• コードインタープリター：AI搭載アプリケーション内でPythonコードを簡単に作成および実行します。

• 関数呼び出し：AI機能を強化するために、カスタム関数を開発および呼び出します。

• 会話への応答をチェーンします：一意の応答IDを使用して応答をリンクして、AI駆動型ダイアログの継続性を確保することにより、相互作用を追跡します。

• エンタープライズグレードのデータプライバシー：Azureの信頼できるセキュリティおよびコンプライアンス基準で構築され、組織のデータ保護を確保します。

検索、推論、およびアクションの実行を単一のAPIに統合することにより、回答APIはAIエージェント開発を簡素化し、自動化パイプライン内の複数のAIツールを調整する複雑さを減らします。

このスケーラビリティにより、AIを搭載した自動化がワークフローを合理化し、効率を向上させることができるカスタマーサービス、IT運用、金融、サプライチェーン管理など、業界全体で企業のユースケースに適しています。さらに柔軟性と制御のために、組織は探索できます Azure AIエージェントサービス、AIエージェントを開発およびスケーリングするための追加のツールとモデルを提供します。 Azure AIエージェントサービスは統合します セマンティックカーネルとオートゲン、複数のエージェントがタスクで共同作業する必要がある、より複雑なシナリオのためにシームレスなマルチエージェントオーケストレーションを可能にします。

コンピューター使用エージェントを使用してAIエージェントの力を強化します

コンピューター使用エージェント（CUA）は、 Azure Openaiサービス これにより、AIはグラフィカルユーザーインターフェイス（GUI）と対話し、アプリケーションをナビゲートし、マルチステップタスクを自動化できます。事前定義されたスクリプトやAPIベースの統合に依存する従来の自動化ツールとは異なり、CUAは視覚要素を解釈し、動的に適応し、画面上のコンテンツに基づいてアクションを実行できます。

コンピューターを使用するエージェントがユニークな理由は何ですか？

• 自律的なUIナビゲーション：アプリケーションを開き、ボタンをクリックし、フォームに記入し、マルチページワークフローをナビゲートできます。
• ダイナミックな適応：UIの変更とそれに応じてアクションを解釈して調整し、剛性の自動化スクリプトへの依存を減らします。
• クロスアプリケーションタスクの実行：Webベースのアプリケーションとデスクトップアプリケーション全体で動作し、API依存関係なしで異なるシステムを統合します。
• 自然言語コマンドインターフェイス：ユーザーは平易な言葉でタスクを記述でき、CUAは実行する正しいUI相互作用を決定します。

今日の発表により、開発者はCUAですぐに追加のエージェント機能の構築を開始できます。企業はこのテクノロジーを大規模に展開しようとしているため、との統合を評価しています Windows365 そして Azure Virtualデスクトップ CUAオートメーションがクラウドPCまたは仮想マシン（VM）のマネージドホスト環境でシームレスに実行できるようにし、エンタープライズコンプライアンスとセキュリティ基準を維持しながら一貫したパフォーマンスを確保します。

安全で信頼できるAIオートメーションを確保します

AIシステムがより自律的になるにつれて、セキュリティ、信頼性、および人間の意図との整合を確保することが重要です。 CUAモデルは、ソフトウェア環境と直接相互作用することができる最初のエージェントAIモデルの1つであり、誤用予防、意図しない行動、敵対的なリスクに新しい課題をもたらします。これらに対処するために、MicrosoftとOpenaiは、モデル、システム、および展開レベルにまたがる多層安全アプローチを実装しています。

CUAモデルは、有害なタスクを拒否し、不正なアクションを拒否し、誤用を防ぐための保護措置で開発されています。システムレベルでは、Microsoftはエンタープライズグレードのコンテンツのフィルタリングと実行監視を実装して、政策違反の検出と防止に役立ちます。意図しないアクションを最小限に抑えるために、CUAは、不可逆的なタスクを実行する前にユーザーの確認を要求し、金融取引などのリスクの高いアクションを制限するように設計されています。

Microsoft’s 信頼できるAI フレームワークにより、エンタープライズの展開のためのリアルタイムの観察性、ロギング、コンプライアンス監査が保証されます。自動化された人間のループ検出システムは、実行パターンを監視し、異常な動作を特定し、ガバナンスポリシーを実施します。これらの保護手段は、迅速な注入、敵対的操作、および不正アクセスに対する保護を強化するために、内部の赤い世話、外部監査、および現実世界のテストに基づいて継続的に洗練されています。 CUAモデルの現在の信頼性レベル、特に非ブラウザー環境では、人間の監視は、デリケートな操作に強く推奨されています。

AIエージェントが進化するにつれて、Microsoftは透明性、セキュリティ、および継続的なリスク軽減に取り組んでいます。 CUAの組み込みのセーフガードとAzureのエンタープライズコンプライアンスおよびガバナンスツールを組み合わせることで、組織は自信を持ってAIを搭載した自動化を展開し、安全で責任あるAIの採用を大規模に確保できます。

CUAと応答APIを開始します

Azure AI Foundryは、AI駆動の自動化の境界を押し続けています。エンタープライズのお客様は、APIとCUAの回答にアクセスできます Azure Openaiサービス 今後数週間で。

これらの新しい機能で開発者と企業がどのように革新するかを楽しみにしています。