gemini ??? : Google Gemini AI ??? ???? ??? ??? ??? ??

?? ???? ?? ??, ?? ? ?? ? ?? ??? ?? ???? NLP (Natural Language Processing) ??? ?????. ? ??? ??? ?? ?? ??? ?????? ???? ?? ??? ? NLP ?? ????? ???????. ?? ??? ???? ??? ??? ?? ??? ???? ?? ??? ???? ??? ??? NLP ??? ????? ? ?????. ??? ???? ?? ??? ??? ?? ? ?? ??? ?? ??? ??? ? ????. ?? ?? ? Gemini Embedding ??? Google? ??? Gemini AI ??? ??? ???? 100 ?? ?? ??? ??? ??? ???? ??? ??? ???? ??? ??? ?????.

Gemini ??? ??? ??, ?? ? ??? ??? ?? ??? ???? ???? ???? ??? ?? ?????. ? ? ?? ???? ? ?? ?? ??? ?????? Gemini Embedding? ? ??? ??? ??? ???? ??? ?? ?????? ?? ??? ? ????.

?? ??

• Gemini ??? ? Gemini LLM?? ??? ?? ??????.
• Gemini Imbed? ???? ??? ??? ?????? ???? ????.
• Jina AI ??? ? ??? -E5-Large?? ?? ??.
• ??? ??? ?? ?? ? ?? ????? ?? ???.

*? ??? *** ??? ?? ??? ??? ? ??? ????? . ***

??

• Gemini ????? ??????
• ??? ?? ???? ?? ??
• Gemini ???? ?? ????
• ?? ??? ??? ??? ??
• Gemini ???? ???? ???? Jina AI ??? ? ??? -E5-Large? ??
  • 1 ??. ??? ?????? ??????
  • 2 ??. ??????????
  • 3 ??. ???? ??????
  • 4 ??. ?? ??????? ???? ??????
  • 5 ??. ?????? ??
  • 6 ??. Jina AI ???? ??????
• ??? ?? ?? ??
  • ????
• ?????
• ?? ?? ??

Gemini ????? ??????

2025 ? 3 ?, Google? Gemini API?? ??? ??? ??? ?? Gemini ??? ??? ?? (Gemini-Embedding-exp-03-07)? ??????.

?? ??? ??? Gemini ???? ??????, ?? ??? ???? ??? ??? ?? Gemini? ?? ??? ?? ???? ??? ?? ???? ?? ??? ? ????. MTEB ??? ???? 1 ?? ?????.

Gemini ???? ???? ??? ??? ?? ??? ??? ?? ??? ?? ??? ??? ???? ?? ? ??? ?????. ?? 100 ?? ?? ??? ???? ???? ?? ? ??? ?? ??? ??? ??? ? ????.

??? ?? ???? ?? ??

• ??? ??? ?? :? ??? ??? ?? ? ?? ?? ???? ??? Assamese ? Macedonian? ?? ??? ???? 100 ?? ?? ???? ??? ??? ?????.
• ?? 8000 ?? ?? ?? ?? :? ??? ??? ?? ??? ?? ?? ? ??? ??? ?? ?? ?? ????? ??? ??? ? ????.
• 3K ??? ?? ?? :? ??? ?? 3072? ??? ??? ???? ?? ? ???? ?? 768 ? 1536? ?? ?? ??? ?????.
• ???? ?? : Gemini Embedding? MTEB (Massive Text Embedding Benchmark)?? 1 ?, ?? ?? ??? 68.32? ?? ??? ?? ??? ?? ??????.

Gemini ???? ?? ????

Gemini ???? ??? ??? ????? ?????? Gemini LLM?? ????????. ? ??? ??? ?? ??? ???? ?? ?? ??? ?????. ? ??? ????? ????? ???? ?? ???? ???? ???? ?? ? ? ?? ? ??? ?? ????? ??? ? ??????.

1. ?? ?? T? M (?????? ?? ???, ??? ???? ??? ? ???)? ?? ???? ?? ??? ???? ?????.
2. ??? ?? ??? ???? ?? ???? ????? ?? ??? ?????.
3. ?????, ???? ?? ???? ?????? ?? ?? ??? ???? ?? ?? ???? ?????.

?? ?? : ??? ?? ??? ??? ??? ?? ?? (NCE) ??? ???? ?? ???? ??? ???? ?????. ??? ??? ?? ??? ?? ?? ????. ?????, ?? ???? ??, ??? ? ?? ? (?? ??) ??? ??? ?????.

?? ??

1. ?? ?? :? ?? ??? ??? ??-?? ?? ???? ??? ??? ? ??? ???? ?????. ? ??? ?? ????? ?? ?? ??? ?? ??? ???? ???? ??? ?????.
2. ?? ?? : ? ?? ?? ??? ??? ??? ?? ??-?? ?? ??? ???? ?? ? ??? ??? ?????. ? ????? ? ?? ?? ??? ? ?? ? ??? ??? ???? ?? ??? ??? ??????.

?? ????? : Gemini Embedding : Gemini? ??? ???

?? ??? ??? ??? ??

??? ??? ??? ?? ??? ?? ?? ?? ? Gemini Embedding? ?? ? ?? Jina AI Embedding ? Multialual-E5-Large Embedding? ?????. ?? ??? ? ? ??? Gemini Embedding ? Jina AI ???? ?? ?? ? ???? ??? ??? ? ?? ?? ??? ??? ?? ? ? ??????. ??, ?? ??? ? ? ???, Gemini ???? ?? ???? ???? ??? ?? ?? ??? ???? ??? ?? ??? ???? ??? ??? ??? ? ????? ? ?? ??? ??? ??????.

Gemini ???? ???? ???? Jina AI ??? ? ??? -E5-Large? ??

?? ?? ??????? ??? ?? ??? ?? ?? ?? ? Gemini Embeddings? ?? ? ?? Jina AI Embedding ? ??? -E5-Large Embedings? ?????.

1 ??. ??? ?????? ??????

 <code>!pip install langchain-community !pip install chromadb</code>

2 ??. ??????????

??? ? ???? ??? ???? ???? ??? ?? ???? Gemini ???? ??? ??????.

 <code>from langchain_community.document_loaders import WebBaseLoader loader = WebBaseLoader("https://ckbirlahospitals.com/rbh/blog/pregnancy-early-symptoms-in-hindi") data = loader.load()</code>

3 ??. ???? ??????

?? ??? recursiveCharacterTexTsplitter? ???? ?? ??? ??? ??? ?? 500 ? ???? ?????. ?? ??? ??? DataVariable? ???? ??? All_Splits? ?????. Gemini Imbedding API? ?? ??? ?? 10 ?? ??? ? ?????.

 <code>from langchain_text_splitters import RecursiveCharacterTextSplitter text_splitter = RecursiveCharacterTextSplitter(chunk_size=500, chunk_overlap=0) all_splits = text_splitter.split_documents(data) all_splits = all_splits[:10]</code>

4 ??. ?? ??????? ???? ??????

?? "GeminieMbeddingFunction"??? ???? ????. Gemini Embedding API? ???? ?? ??? ?? ?? ???? ? ??????. ?? ?? "create_chroma_db"?? ??? ??? ???? ????? ??? ?? ? ??? ???? ????.

 <code>import chromadb from chromadb import Documents, EmbeddingFunction, Embeddings class GeminiEmbeddingFunction(EmbeddingFunction): def __call__(self, input: Documents) -> Embeddings: title = "Custom query" return client.models.embed_content( model="gemini-embedding-exp-03-07", contents=input).embeddings[0].values def create_chroma_db(documents, name): chroma_client = chromadb.Client() db = chroma_client.create_collection(name=name, embedding_function=GeminiEmbeddingFunction()) for i, d in enumerate(documents): db.add( documents=d.page_content, ids=str(i) ) return db db = create_chroma_db(all_splits, "datab")</code>

5 ??. ?????? ??

 <code>def get_relevant_passage(query, db): passage = db.query(query_texts=[query], n_results=1)['documents'][0][0] return passage passage = get_relevant_passage("???? ?????????? ????? ?? ?????? ??????", db) print(passage)</code>

6 ??. Jina AI ???? ??????

?? ??? Hugging Face Transformer ??? ???? ??? ?? ??? ??? ???? ??? ??? ???? ???? ???? ??? ?????.

1. ?????? ?? autotokenizer ? ?? ??? ?? ?? ? ?? (Jinaai/Jina-embeddings-v3)????? CHROMADB? ?? ?? ??? ??? ??? ?? ???? ???? ? ?????.
2. ?? _pool ?? :? ??? ???? ?? ??? ???? ??? ??? ??? ???? ??? ??? ???????? ??? (??? ?? ??)? ????.
3. CustomHuggingface ??? : ???? ?? ??? ??? ???? ?? _pool ??? ???? ???? ?????. ??? ???? ???? ?????.

 <code>from transformers import AutoTokenizer, AutoModel from chromadb import EmbeddingFunction tokenizer = AutoTokenizer.from_pretrained('jinaai/jina-embeddings-v3') model = AutoModel.from_pretrained('jinaai/jina-embeddings-v3') # the model returns many hidden states per document so we must aggregate them def average_pool(last_hidden_states, attention_mask): last_hidden = last_hidden_states.masked_fill(~attention_mask[...,None].bool(), 0.0) return last_hidden.sum(dim=1) / attention_mask.sum(dim=1)[...,None] class CustomHuggingFace(EmbeddingFunction): def __call__(self, texts): queries = [f'query: {text}' for text in texts] batch_dict = tokenizer(texts, max_length=512, padding=True, truncation=True, return_tensors='pt') outputs = model(**batch_dict) embeddings = average_pool(outputs.last_hidden_state, batch_dict['attention_mask']) return embeddings.tolist()</code>

??

 <code>def get_relevant_passage(query, db): passage = db.query(query_texts=[query], n_results=1)['documents'][0][0] return passage passage = get_relevant_passage("???? ?????????? ????? ?? ?????? ??????", db) print(passage)</code>

??? -E5-Large ???? ???? ?? ?? ??? ??? "intfloat/multiredual-e5-large-instruct"? ?????.

??? ?? ?? ??

????

?? ??? ???? ??? ? ??? Gemini ???? ???? 7 ???? 5 ?? ??? ??? ?? ? ??? Jina AI Embedding ? Multialual-E5-Large? ???? 3 ?? ??? ?? ? ????.

??? MTEB ?? ??? ??? ?? ??, Gemini ???? ? ???? ?? ??? ???? ???? ?? ???? ? ? ?? ?? ?????.

?????

???, Gemini ???? ??? NLP, ?? ???? ?? ??? ??? ??? ??? ?????. ??? ??? ??, ??? ?? ??? ?? ?? ? MTEB? ?? ?? ??? ??? ??? ???? Gemini? ??, ?? ? ??? ??? ?? ??? ?????. ???? ??? ?? Gemini? ??? ?? ???? ???? ? ?? ???? ???? ???? ??? NLP? ???? ? ??? ?????.

?? ??

• ??? ?? ???? ??? : ??? ???? ??, ?? ? ?? ? ??? ?? NLP ??? ???? ?? ?? ?? ? ?? ?? ??? ?????.
• Gemini ??? ?? : Google? Gemini Embedding? AI ??? ??? ???? ??? ??? ??? ???? ??? ??? ???? 100 ? ??? ??? ????.
• ?? ?? : 8000 ??? 3072 ?? ???? ???? ? ?? ? ??? ??? ???? ??? ???????.
• ???? ?? : MTEB ??? ???? 1 ?? ??? ?? ?? ??? 68.32?, ??? NLP?? ? ??? ?????.

? ??? ??? ???? ?? Vidhya? ???? ??? ??? ??? ?? ??? ? ????.

?? ?? ??

Q1. A : Gemini Embedding ??? Google? Gemini AI? ?????? ???? ??? 100 ? ??? ??? ?? ?? ??? ??? ??? ???? ?????.

Q2. ?? ??? ?? ??? ?? ???? ?????? A : Gemini Embedding? ??? ??? ???? 8000 ?? ? ?? 3072 ??? ???? ??, ?? ? ??? ??? ???? ?????.

Q3. GeMini ???? ??? ???? ??? ?????? ?? : Gemini Embedding? ?? ? Assamese ? Macedonian? ?? ??? ??? ?? ? ?? ??? ? ?????. MTEB ??? ???? 1 ?? ???? ??? ??? ??? ?????.

Q4. Gemini ??? ??? ?????? A :? ??? Gemini LLM?? ????? ?????? ?? ??? ????? ???? ??? ??? ???? ??? ??? ???? ?????.

Q5. A : Gemini ???? ????? ?? ???? ?? ?? ??? ?? ?? (NCE) ??? ?????. NLP ??? ????? ?? ??? ??? ?? ? ?? ? ??? ??? ?? ???? ? ?? ?? ??? ????.

? ??? ??? -E5-Large & Jina? Gemini ???? ??? ?? ?????. ??? ??? PHP ??? ????? ?? ?? ??? ?????!