মূল কনটেন্টে যান

কাস্টম LLM

কাস্টম LLM: নিয়ে আসুন আপনার নিজস্ব AI মডেল ও API কী।

OpenAI, Anthropic, Google, Azure, AWS, OpenRouter, xAI, DeepSeek, Groq, Cohere, Ollama বা আপনার নিজস্ব মডেল API নিয়ে আসুন। খরচ, ল্যাটেন্সি বা সক্ষমতা অনুযায়ী অনুরোধ রুট করুন, ফলব্যাক, মনিটরিং ও গভর্নেন্স সহ।

অথবা $150 ক্রেডিট দিয়ে শুরু করুন, Growth-এর প্রথম মাসের জন্য যথেষ্ট

  • OpenAI
  • Anthropic
  • Google Gemini
  • Azure OpenAI
  • AWS Bedrock
  • OpenRouter
  • xAI
  • DeepSeek
  • Groq
  • Cohere
  • Ollama

নমনীয় মডেল ইন্টিগ্রেশন

আপনার স্ট্যাকের জন্য উপযুক্ত পদ্ধতি বেছে নিন: প্রোভাইডার, রুটিং ও গভর্নেন্স।

  • বাহ্যিক API সংযুক্ত করুন

    ক্রেডেনশিয়ালের মাধ্যমে আপনার বিদ্যমান মডেল প্রোভাইডার MonoChat-এ আনুন এবং সংযোগ যাচাই করুন।

    • API কী ম্যানেজমেন্ট
    • নিরাপদ ক্রেডেনশিয়াল সংরক্ষণ
    • সংযোগ যাচাই
    • ব্যবহার মনিটরিং
  • মডেল রেজিস্ট্রি

    প্রতিটি ওয়ার্কস্পেসে একাধিক মডেল পরিচালনা করুন এবং সেগুলো চ্যানেল, এজেন্ট ও স্কোপে অ্যাসাইন করুন।

    • প্রোভাইডার + মডেল ক্যাটালগ
    • ওয়ার্কস্পেস অনুযায়ী আলাদা
    • এনভায়রনমেন্ট পৃথকীকরণ
    • ভার্সনযুক্ত কনফিগ
  • রুটিং ও ফলব্যাক

    খরচ, ল্যাটেন্সি, সক্ষমতা বা ভাষা অনুযায়ী রুট করুন, নিরাপদ ফলব্যাক ও A/B টেস্টসহ।

    • বুদ্ধিমান রুটিং নিয়ম
    • ফলব্যাক চেইন
    • A/B টেস্টিং
    • পারফরম্যান্স তুলনা

সমর্থিত API প্রোভাইডার

একক ভেন্ডরে আটকে না গিয়ে আপনার পছন্দের প্রোভাইডার সংযুক্ত করুন।

  • OpenAI

    অ্যাসিস্ট্যান্ট, সার্চ ও কনটেন্ট তৈরির জন্য সাধারণ-উদ্দেশ্যের ভাষা, ভিশন ও অডিও মডেল পরিবার।

    • চ্যাট ও অ্যাসিস্ট্যান্ট মডেল
    • মাল্টিমোডাল রিজনিং মডেল
    • এমবেডিং ও টুলস
  • Anthropic

    এন্টারপ্রাইজ-মানের কথোপকথনের জন্য নিরাপত্তা-কেন্দ্রিক অ্যাসিস্ট্যান্ট ও রিজনিং মডেল পরিবার।

    • অ্যাসিস্ট্যান্ট-ধাঁচের মডেল
    • দীর্ঘ-কনটেক্সট রিজনিং মডেল
    • এন্টারপ্রাইজ নিরাপত্তা টুলিং
  • Google

    সার্চ, কথোপকথন ও মাল্টিমোডাল অভিজ্ঞতার জন্য Google AI মডেল পরিবার।

    • সার্চ ও কথোপকথন মডেল
    • মাল্টিমোডাল মডেল
    • এন্টারপ্রাইজ ML সার্ভিস
  • Azure OpenAI

    Azure কমপ্লায়েন্স, অবজার্ভেবিলিটি ও গভর্নেন্সসহ এন্টারপ্রাইজ OpenAI সার্ভিস।

    • ম্যানেজড ফাউন্ডেশন মডেল
    • এন্টারপ্রাইজ নিরাপত্তা ও কমপ্লায়েন্স
    • মনিটরিং ও অবজার্ভেবিলিটি
  • AWS Bedrock

    AWS-এ সম্পূর্ণ ম্যানেজড ফাউন্ডেশন মডেল, যা আপনার নিজের ক্লাউড অ্যাকাউন্ট ও রিজিয়নের ভেতরে চলে।

    • একাধিক মডেল পরিবার
    • আপনার AWS অ্যাকাউন্টে চলে
    • IAM ও VPC ইন্টিগ্রেশন
  • OpenRouter

    অনেক প্রোভাইডারের শত শত মডেলের জন্য একটি API কী, একীভূত বিলিং ও স্বয়ংক্রিয় প্রোভাইডার ফলব্যাকসহ।

    • একটি API-তে শত শত মডেল
    • ওপেন-সোর্স ও প্রোপ্রাইটারি মডেল
    • প্রোভাইডার ফলব্যাক ও প্রাইস রুটিং
  • xAI

    দ্রুত, রিয়েল-টাইম-সচেতন কথোপকথন ও রিজনিংয়ের জন্য Grok মডেল পরিবার।

    • Grok চ্যাট মডেল
    • রিজনিং মডেল
    • ভিশন সাপোর্ট
  • DeepSeek

    শক্তিশালী কোডিং ও গণিত পারফরম্যান্সসহ সাশ্রয়ী চ্যাট ও রিজনিং মডেল।

    • চ্যাট মডেল
    • রিজনিং মডেল
    • প্রতি টোকেনে কম খরচ
  • Groq

    জনপ্রিয় ওপেন মডেলের জন্য অতি-কম-ল্যাটেন্সি ইনফারেন্স, রিয়েল-টাইম চ্যাটের জন্য আদর্শ।

    • অত্যন্ত দ্রুত ইনফারেন্স
    • ওপেন-সোর্স মডেল
    • রিয়েল-টাইম কথোপকথন
  • Cohere

    রিট্রিভাল, সার্চ ও বহুভাষিক ব্যবসায়িক ব্যবহারের জন্য তৈরি এন্টারপ্রাইজ ল্যাঙ্গুয়েজ মডেল।

    • Command চ্যাট মডেল
    • এমবেডিং ও রির‍্যাঙ্ক
    • বহুভাষিক সাপোর্ট
  • Ollama

    ওপেন-সোর্স মডেল নিজের সার্ভারে চালান এবং প্রতিটি কথোপকথন আপনার নিজস্ব অবকাঠামোতে রাখুন।

    • সেলফ-হোস্টেড মডেল
    • ডেটা অন-প্রিমিসেই থাকে
    • প্রতি টোকেনে কোনো ফি নেই
  • কাস্টম API

    আপনার নিজস্ব ইন-হাউস বা ডোমেইন-নির্দিষ্ট মডেল API, যা পুরোপুরি আপনার টিমের নিয়ন্ত্রণে।

    • অভ্যন্তরীণ মডেল গেটওয়ে
    • ডোমেইন-নির্দিষ্ট মডেল
    • প্রাইভেট ইনফারেন্স এন্ডপয়েন্ট

সহজ ইন্টিগ্রেশন প্রক্রিয়া

পরিষ্কার ও পুনরাবৃত্তিযোগ্য সেটআপে আপনার কাস্টম মডেল চালু করুন।

  1. API ক্রেডেনশিয়াল যোগ করুন

    নিরাপদে আপনার প্রোভাইডার কী যোগ করুন এবং রোল অনুযায়ী অ্যাক্সেস সীমিত করুন।

  2. রুটিং কনফিগার করুন

    চ্যানেল, এজেন্ট বা ওয়ার্কফ্লো অনুযায়ী মডেলের পছন্দ, ফলব্যাক ও নিয়ম সেট করুন।

  3. টেস্ট ও ডিপ্লয় করুন

    টেস্ট চালান, পারফরম্যান্স মনিটর করুন এবং নিরাপদে প্রোডাকশনে রোলআউট করুন।

এন্টারপ্রাইজ-মানের নিরাপত্তা

প্রতিটি মডেল ও ওয়ার্কস্পেসের জন্য ক্রেডেনশিয়াল সুরক্ষিত রাখুন এবং গভর্নেন্স কার্যকর করুন।

  • ক্রেডেনশিয়াল এনক্রিপশন

    সব প্রোভাইডার ক্রেডেনশিয়াল সংরক্ষণ ও স্থানান্তর উভয় অবস্থায় এনক্রিপ্টেড থাকে।

  • অ্যাক্সেস কন্ট্রোল

    রোল-ভিত্তিক অ্যাক্সেস কন্ট্রোল (RBAC) সহ সূক্ষ্ম অনুমতি।

  • অডিট লগিং

    মডেল কনফিগারেশন পরিবর্তন ও ব্যবহারের সম্পূর্ণ অডিট ট্রেইল।

  • ওয়ার্কস্পেস আইসোলেশন

    ডেটা ও মডেল কনফিগারেশন প্রতিটি ওয়ার্কস্পেসে আলাদা রাখা হয়।

শিল্প-নির্দিষ্ট মডেল

ডোমেইন-কেন্দ্রিক মডেল স্ট্যাকের উদাহরণ, যা টিমগুলো MonoChat-এ সংযুক্ত করে।

  • ই-কমার্স

    • পণ্য সুপারিশ ইঞ্জিন
    • গ্রাহক সেন্টিমেন্ট বিশ্লেষণ
    • মূল্য অপ্টিমাইজেশন মডেল
    • ইনভেন্টরি পূর্বাভাস
  • স্বাস্থ্যসেবা

    • মেডিকেল ইনটেক অ্যাসিস্ট্যান্ট
    • রোগী ট্রায়াজ সিস্টেম
    • ওষুধের পারস্পরিক ক্রিয়া পরীক্ষক
    • উপসর্গ বিশ্লেষণ
  • ফাইন্যান্স

    • প্রতারণা শনাক্তকরণ সিস্টেম
    • ক্রেডিট স্কোরিং মডেল
    • ঝুঁকি মূল্যায়ন টুল
    • কমপ্লায়েন্স সারসংক্ষেপ
  • শিক্ষা

    • ব্যক্তিগত শিক্ষাপথ
    • শিক্ষার্থীর ফলাফল পূর্বাভাসক
    • কনটেন্ট সুপারিশ
    • স্বয়ংক্রিয় গ্রেডিং

সাধারণ জিজ্ঞাসা

কাস্টম LLM নিয়ে প্রশ্ন

সবচেয়ে সাধারণ প্রশ্নগুলোর দ্রুত উত্তর।

MonoChat-এ "bring your own LLM" বলতে কী বোঝায়?

আপনি যেসব মডেল প্রোভাইডার ইতিমধ্যে ব্যবহার করেন, তাদের জন্য নিজের API ক্রেডেনশিয়াল সংযুক্ত করেন। MonoChat আপনার অ্যাকাউন্টের মাধ্যমে মডেলগুলো কল করে, ফলে আপনার মূল্য ও ডেটা চুক্তি অপরিবর্তিত থাকে এবং AI-তে কোনো মার্কআপ নেই।

কোন LLM প্রোভাইডার সংযুক্ত করতে পারি?

OpenAI, Anthropic, Google, Azure OpenAI, AWS Bedrock, OpenRouter, xAI, DeepSeek, Groq, Cohere ও Ollama, এছাড়া আপনার নিজস্ব কাস্টম মডেল API।

বিভিন্ন অ্যাসিস্ট্যান্ট বা চ্যানেল কি ভিন্ন মডেল ব্যবহার করতে পারে?

জি। মডেল রেজিস্ট্রি আপনাকে প্রতিটি ওয়ার্কস্পেসে একাধিক মডেল পরিচালনা করতে এবং সেগুলো চ্যানেল, এজেন্ট ও স্কোপে অ্যাসাইন করতে দেয়। রুটিং নিয়ম খরচ, ল্যাটেন্সি, সক্ষমতা বা ভাষা অনুযায়ী মডেল বেছে নিতে পারে, আর কোনো প্রোভাইডার ব্যর্থ হলে ফলব্যাক চেইন কাজ করে।

আমি কি সেলফ-হোস্টেড বা প্রাইভেট মডেল ব্যবহার করতে পারি?

জি। আপনি Ollama দিয়ে নিজের সার্ভারে ওপেন-সোর্স মডেল চালাতে পারেন, অথবা কাস্টম API এন্ডপয়েন্টের মাধ্যমে নিজস্ব ইন-হাউস মডেল সংযুক্ত করতে পারেন।

আমার প্রোভাইডার API কী কীভাবে সুরক্ষিত থাকে?

প্রোভাইডার ক্রেডেনশিয়াল সংরক্ষণ ও স্থানান্তর উভয় অবস্থায় এনক্রিপ্টেড থাকে। রোল-ভিত্তিক অ্যাক্সেস কন্ট্রোল কে এগুলো ব্যবহার করতে পারবে তা সীমিত করে, পরিবর্তনগুলো অডিট লগে রেকর্ড হয় এবং মডেল কনফিগারেশন প্রতিটি ওয়ার্কস্পেসে আলাদা থাকে।

Growth-এর প্রথম মাস আমাদের পক্ষ থেকে

আপনার মডেল সংযুক্ত করতে প্রস্তুত?

ক্রেডেনশিয়াল যোগ করুন, রুটিং কনফিগার করুন এবং MonoChat-এ মাল্টি-মডেল অ্যাসিস্ট্যান্ট চালান, গভর্নেন্স ও মনিটরিং সহ।

প্রতি বিজনেসে একটি কোড • ব্যবহারের সময় 30 দিন • কার্ডের প্রয়োজন নেই

শুরু করতে $150।

নিন