Azure Synapse AnalyticsでAzure OpenAIのLLMを利用する【2. SynapseMLを利用した一括処理】 - JBS Tech Blog

Azure Synapse Analytics上で Azure OpenAI Service（もしくはOpenAI）のLLMを利用する方法として、今回はSynapseMLを利用した一括処理を紹介します。 はじめに SynapseMLについて 参考 実践 SynapseMLのインストール SynapseMLを用いたAzure OpenAI Serviceの呼び出し 一般的なユースケースを想定した処理 データ準備 メッセージカラムの作成 データ処理 おわりに はじめに 前回の記事では、Deltaテーブルを利用した逐次処理によるAzure Synapse AnalyticsでのAzure OpenAIの呼び出し方法を紹介しました。しかし、この方法ではApache Sparkの持つ分散処理能力を十分に活かせず、効率的とは言えません。 本記事では、SynapseMLを使用することでApache Sp

[jbs_blog_PR]

SynapseMLを利用してAzure Synapse Analytics上でAzure OpenAI ServiceのLLMを効率的に呼び出し、自然言語データを一括処理できる方法を紹介しています。前回紹介したものよりも今回の方法の方が実用的なようですね！