Scikit-LLM

برای آنالیز متن یه پکیج پایتونی به نام Scikit LLm هست که ترکیب LLM مثل OpenAI3 با scikit Learn هست .

این کتابخانه شامل امکانات مختلفی است که در زیر به چند مورد مهم ان آنها اشاره شده:

طبقه بندی Zero-shot text: این ویژگی به شما اجازه می دهد تا برای طبقه بندی متن حتی برای برچسب هایی که در داده های آموزشی شما وجود ندارد استفاده کنید.

دسته بندی Zero-shot text چند برچسبی: این ویژگی همچنین به شما اجازه می دهد تا با استفاده از روش طبقه بندی شات صفر، چندین برچسب به متون اختصاص دهید.

بردار سازی متن: این ویژگی متن را به بردارهای عددی یا ویژگی های عددی تبدیل می کند که می توانید برای مدل سازی و تحلیل متن از آنها استفاده کنید.

ترجمه متن: با استفاده از این قابلیت می توانید متون را به زبان های دیگر ترجمه کنید.

خلاصه سازی متن: این ویژگی به شما امکان می دهد خلاصه سازی متن را انجام دهید و خروجی های خلاصه شده را دریافت کنید.

نصب

1. اول از همه، قبل از شروع استفاده از Scikit-LLM، باید کلید OpenAI API خود را بدست بیارید تا بتونید به Scikit-LLM منتقل کنید تا پس از نصب پیکربندی شود.

2. پس از آن، آن را به این صورت نصب کنید:

pip install scikit-llm

3.برای تنظیمات به صورت زیر عمل کنید

import os
from skllm.config import SKLLMConfig
from dotenv import load_dotenv
load_dotenv()
OPENAI_SECRET_KEY = os.environ[&quotOPENAI_SECRET_KEY&quot]
OPENAI_ORG_ID = os.environ[&quotOPENAI_ORG_ID&quot]
SKLLMConfig.set_openai_key(OPENAI_SECRET_KEY)
SKLLMConfig.set_openai_org(OPENAI_ORG_ID)

در اموزش های اینده نحوه کار با این کتابخانه را یاد خواهیم گرفت