notebooks/02_azure_ai_search.ipynb

{
 "cells": [
  {
   "cell_type": "markdown",
   "metadata": {},
   "source": [
    "# Azure AI Search: vector search, step by step"
   ]
  },
  {
   "cell_type": "markdown",
   "metadata": {},
   "source": [
    "## Setup API client\n"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 2,
   "metadata": {},
   "outputs": [],
   "source": [
    "import os\n",
    "import dotenv\n",
    "from azure.search.documents.indexes import SearchIndexClient\n",
    "from azure.core.credentials import AzureKeyCredential\n",
    "\n",
    "dotenv.load_dotenv()\n",
    "\n",
    "AZURE_SEARCH_SERVICE = os.getenv(\"AZURE_SEARCH_SERVICE\")\n",
    "AZURE_SEARCH_ENDPOINT = f\"https://{AZURE_SEARCH_SERVICE}.search.windows.net\"\n",
    "AZURE_SEARCH_SERVICE_KEY = os.getenv(\"AZURE_SEARCH_SERVICE_KEY\")\n",
    "\n",
    "search_service_cred = AzureKeyCredential(AZURE_SEARCH_SERVICE_KEY)\n",
    "index_client = SearchIndexClient(endpoint=AZURE_SEARCH_ENDPOINT, credential=search_service_cred)"
   ]
  },
  {
   "cell_type": "markdown",
   "metadata": {},
   "source": [
    "## Tìm kiếm trên index\n",
    "\n",
    "### Tạo index\n",
    "- Bước đầu tiên chúng ta phải tạo một index.\n",
    "- Index giống như collection chứa các tài liệu\n",
    "- Chúng ta cần định nghĩa:\n",
    "    - Cấu trúc của index: các field và kiểu dữ liệu\n",
    "    - Thuật toán tìm kiếm trên vector\n",
    "- Đoạn mã sau tạo ra index có 2 field:\n",
    "    - id: id của document\n",
    "    - embedding: là vector đại diện cho document, ở đây chúng ta định nghĩa số chiều của vector (vector_search_dimensions) là 3 "
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 3,
   "metadata": {},
   "outputs": [
    {
     "ename": "HttpResponseError",
     "evalue": "(ResourceNameAlreadyInUse) Cannot create index 'teeenytinyindex' because it already exists.\nCode: ResourceNameAlreadyInUse\nMessage: Cannot create index 'teeenytinyindex' because it already exists.\nException Details:\t(CannotCreateExistingIndex) Cannot create index 'teeenytinyindex' because it already exists.\n\tCode: CannotCreateExistingIndex\n\tMessage: Cannot create index 'teeenytinyindex' because it already exists.",
     "output_type": "error",
     "traceback": [
      "\u001b[0;31m---------------------------------------------------------------------------\u001b[0m",
      "\u001b[0;31mHttpResponseError\u001b[0m                         Traceback (most recent call last)",
      "Cell \u001b[0;32mIn[3], line 35\u001b[0m\n\u001b[1;32m     13\u001b[0m AZURE_SEARCH_TINY_INDEX \u001b[38;5;241m=\u001b[39m \u001b[38;5;124m\"\u001b[39m\u001b[38;5;124mteeenytinyindex\u001b[39m\u001b[38;5;124m\"\u001b[39m\n\u001b[1;32m     15\u001b[0m index \u001b[38;5;241m=\u001b[39m SearchIndex(\n\u001b[1;32m     16\u001b[0m     name\u001b[38;5;241m=\u001b[39mAZURE_SEARCH_TINY_INDEX, \n\u001b[1;32m     17\u001b[0m     fields\u001b[38;5;241m=\u001b[39m[\n\u001b[0;32m   (...)\u001b[0m\n\u001b[1;32m     32\u001b[0m     )\n\u001b[1;32m     33\u001b[0m )\n\u001b[0;32m---> 35\u001b[0m \u001b[43mindex_client\u001b[49m\u001b[38;5;241;43m.\u001b[39;49m\u001b[43mcreate_index\u001b[49m\u001b[43m(\u001b[49m\u001b[43mindex\u001b[49m\u001b[43m)\u001b[49m\n",
      "File \u001b[0;32m~/miniconda3/envs/ai_design_win/lib/python3.11/site-packages/azure/core/tracing/decorator.py:94\u001b[0m, in \u001b[0;36mdistributed_trace.<locals>.decorator.<locals>.wrapper_use_tracer\u001b[0;34m(*args, **kwargs)\u001b[0m\n\u001b[1;32m     92\u001b[0m span_impl_type \u001b[38;5;241m=\u001b[39m settings\u001b[38;5;241m.\u001b[39mtracing_implementation()\n\u001b[1;32m     93\u001b[0m \u001b[38;5;28;01mif\u001b[39;00m span_impl_type \u001b[38;5;129;01mis\u001b[39;00m \u001b[38;5;28;01mNone\u001b[39;00m:\n\u001b[0;32m---> 94\u001b[0m     \u001b[38;5;28;01mreturn\u001b[39;00m \u001b[43mfunc\u001b[49m\u001b[43m(\u001b[49m\u001b[38;5;241;43m*\u001b[39;49m\u001b[43margs\u001b[49m\u001b[43m,\u001b[49m\u001b[43m \u001b[49m\u001b[38;5;241;43m*\u001b[39;49m\u001b[38;5;241;43m*\u001b[39;49m\u001b[43mkwargs\u001b[49m\u001b[43m)\u001b[49m\n\u001b[1;32m     96\u001b[0m \u001b[38;5;66;03m# Merge span is parameter is set, but only if no explicit parent are passed\u001b[39;00m\n\u001b[1;32m     97\u001b[0m \u001b[38;5;28;01mif\u001b[39;00m merge_span \u001b[38;5;129;01mand\u001b[39;00m \u001b[38;5;129;01mnot\u001b[39;00m passed_in_parent:\n",
      "File \u001b[0;32m~/miniconda3/envs/ai_design_win/lib/python3.11/site-packages/azure/search/documents/indexes/_search_index_client.py:230\u001b[0m, in \u001b[0;36mSearchIndexClient.create_index\u001b[0;34m(self, index, **kwargs)\u001b[0m\n\u001b[1;32m    228\u001b[0m kwargs[\u001b[38;5;124m\"\u001b[39m\u001b[38;5;124mheaders\u001b[39m\u001b[38;5;124m\"\u001b[39m] \u001b[38;5;241m=\u001b[39m \u001b[38;5;28mself\u001b[39m\u001b[38;5;241m.\u001b[39m_merge_client_headers(kwargs\u001b[38;5;241m.\u001b[39mget(\u001b[38;5;124m\"\u001b[39m\u001b[38;5;124mheaders\u001b[39m\u001b[38;5;124m\"\u001b[39m))\n\u001b[1;32m    229\u001b[0m patched_index \u001b[38;5;241m=\u001b[39m index\u001b[38;5;241m.\u001b[39m_to_generated()  \u001b[38;5;66;03m# pylint:disable=protected-access\u001b[39;00m\n\u001b[0;32m--> 230\u001b[0m result \u001b[38;5;241m=\u001b[39m \u001b[38;5;28;43mself\u001b[39;49m\u001b[38;5;241;43m.\u001b[39;49m\u001b[43m_client\u001b[49m\u001b[38;5;241;43m.\u001b[39;49m\u001b[43mindexes\u001b[49m\u001b[38;5;241;43m.\u001b[39;49m\u001b[43mcreate\u001b[49m\u001b[43m(\u001b[49m\u001b[43mpatched_index\u001b[49m\u001b[43m,\u001b[49m\u001b[43m \u001b[49m\u001b[38;5;241;43m*\u001b[39;49m\u001b[38;5;241;43m*\u001b[39;49m\u001b[43mkwargs\u001b[49m\u001b[43m)\u001b[49m\n\u001b[1;32m    231\u001b[0m \u001b[38;5;28;01mreturn\u001b[39;00m cast(SearchIndex, SearchIndex\u001b[38;5;241m.\u001b[39m_from_generated(result))\n",
      "File \u001b[0;32m~/miniconda3/envs/ai_design_win/lib/python3.11/site-packages/azure/core/tracing/decorator.py:94\u001b[0m, in \u001b[0;36mdistributed_trace.<locals>.decorator.<locals>.wrapper_use_tracer\u001b[0;34m(*args, **kwargs)\u001b[0m\n\u001b[1;32m     92\u001b[0m span_impl_type \u001b[38;5;241m=\u001b[39m settings\u001b[38;5;241m.\u001b[39mtracing_implementation()\n\u001b[1;32m     93\u001b[0m \u001b[38;5;28;01mif\u001b[39;00m span_impl_type \u001b[38;5;129;01mis\u001b[39;00m \u001b[38;5;28;01mNone\u001b[39;00m:\n\u001b[0;32m---> 94\u001b[0m     \u001b[38;5;28;01mreturn\u001b[39;00m \u001b[43mfunc\u001b[49m\u001b[43m(\u001b[49m\u001b[38;5;241;43m*\u001b[39;49m\u001b[43margs\u001b[49m\u001b[43m,\u001b[49m\u001b[43m \u001b[49m\u001b[38;5;241;43m*\u001b[39;49m\u001b[38;5;241;43m*\u001b[39;49m\u001b[43mkwargs\u001b[49m\u001b[43m)\u001b[49m\n\u001b[1;32m     96\u001b[0m \u001b[38;5;66;03m# Merge span is parameter is set, but only if no explicit parent are passed\u001b[39;00m\n\u001b[1;32m     97\u001b[0m \u001b[38;5;28;01mif\u001b[39;00m merge_span \u001b[38;5;129;01mand\u001b[39;00m \u001b[38;5;129;01mnot\u001b[39;00m passed_in_parent:\n",
      "File \u001b[0;32m~/miniconda3/envs/ai_design_win/lib/python3.11/site-packages/azure/search/documents/indexes/_generated/operations/_indexes_operations.py:399\u001b[0m, in \u001b[0;36mIndexesOperations.create\u001b[0;34m(self, index, request_options, **kwargs)\u001b[0m\n\u001b[1;32m    397\u001b[0m     map_error(status_code\u001b[38;5;241m=\u001b[39mresponse\u001b[38;5;241m.\u001b[39mstatus_code, response\u001b[38;5;241m=\u001b[39mresponse, error_map\u001b[38;5;241m=\u001b[39merror_map)\n\u001b[1;32m    398\u001b[0m     error \u001b[38;5;241m=\u001b[39m \u001b[38;5;28mself\u001b[39m\u001b[38;5;241m.\u001b[39m_deserialize\u001b[38;5;241m.\u001b[39mfailsafe_deserialize(_models\u001b[38;5;241m.\u001b[39mErrorResponse, pipeline_response)\n\u001b[0;32m--> 399\u001b[0m     \u001b[38;5;28;01mraise\u001b[39;00m HttpResponseError(response\u001b[38;5;241m=\u001b[39mresponse, model\u001b[38;5;241m=\u001b[39merror)\n\u001b[1;32m    401\u001b[0m deserialized \u001b[38;5;241m=\u001b[39m \u001b[38;5;28mself\u001b[39m\u001b[38;5;241m.\u001b[39m_deserialize(\u001b[38;5;124m\"\u001b[39m\u001b[38;5;124mSearchIndex\u001b[39m\u001b[38;5;124m\"\u001b[39m, pipeline_response\u001b[38;5;241m.\u001b[39mhttp_response)\n\u001b[1;32m    403\u001b[0m \u001b[38;5;28;01mif\u001b[39;00m \u001b[38;5;28mcls\u001b[39m:\n",
      "\u001b[0;31mHttpResponseError\u001b[0m: (ResourceNameAlreadyInUse) Cannot create index 'teeenytinyindex' because it already exists.\nCode: ResourceNameAlreadyInUse\nMessage: Cannot create index 'teeenytinyindex' because it already exists.\nException Details:\t(CannotCreateExistingIndex) Cannot create index 'teeenytinyindex' because it already exists.\n\tCode: CannotCreateExistingIndex\n\tMessage: Cannot create index 'teeenytinyindex' because it already exists."
     ]
    }
   ],
   "source": [
    "from azure.search.documents.indexes.models import (\n",
    "    HnswAlgorithmConfiguration,\n",
    "    HnswParameters,\n",
    "    SearchField,\n",
    "    SearchFieldDataType,\n",
    "    SearchIndex,\n",
    "    SimpleField,\n",
    "    VectorSearch,\n",
    "    VectorSearchAlgorithmKind,\n",
    "    VectorSearchProfile,\n",
    ")\n",
    "\n",
    "AZURE_SEARCH_TINY_INDEX = \"teeenytinyindex\"\n",
    "\n",
    "index = SearchIndex(\n",
    "    name=AZURE_SEARCH_TINY_INDEX, \n",
    "    fields=[\n",
    "        SimpleField(name=\"id\", type=SearchFieldDataType.String, key=True),\n",
    "        SearchField(name=\"embedding\", \n",
    "                    type=SearchFieldDataType.Collection(SearchFieldDataType.Single), \n",
    "                    searchable=True, \n",
    "                    vector_search_dimensions=3,\n",
    "                    vector_search_profile_name=\"embedding_profile\")\n",
    "    ],\n",
    "    vector_search=VectorSearch(\n",
    "        algorithms=[HnswAlgorithmConfiguration( # Hierachical Navigable Small World, IVF\n",
    "                            name=\"hnsw_config\",\n",
    "                            kind=VectorSearchAlgorithmKind.HNSW,\n",
    "                            parameters=HnswParameters(metric=\"cosine\"),\n",
    "                        )],\n",
    "        profiles=[VectorSearchProfile(name=\"embedding_profile\", algorithm_configuration_name=\"hnsw_config\")]\n",
    "    )\n",
    ")\n",
    "\n",
    "index_client.create_index(index)"
   ]
  },
  {
   "cell_type": "markdown",
   "metadata": {},
   "source": [
    "### Thêm một vài document vào index"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 5,
   "metadata": {},
   "outputs": [
    {
     "data": {
      "text/plain": [
       "[<azure.search.documents._generated.models._models_py3.IndexingResult at 0x7f8e5575c590>,\n",
       " <azure.search.documents._generated.models._models_py3.IndexingResult at 0x7f8e5575f1d0>,\n",
       " <azure.search.documents._generated.models._models_py3.IndexingResult at 0x7f8e5575f810>]"
      ]
     },
     "execution_count": 5,
     "metadata": {},
     "output_type": "execute_result"
    }
   ],
   "source": [
    "from azure.search.documents import SearchClient\n",
    "\n",
    "search_client = SearchClient(AZURE_SEARCH_ENDPOINT, AZURE_SEARCH_TINY_INDEX, credential=search_service_cred)\n",
    "search_client.upload_documents(documents=[\n",
    "    {\"id\": \"1\", \"embedding\": [1, 2, 3]},\n",
    "    {\"id\": \"2\", \"embedding\": [1, 1, 3]},\n",
    "    {\"id\": \"3\", \"embedding\": [4, 5, 6]}])"
   ]
  },
  {
   "cell_type": "markdown",
   "metadata": {},
   "source": [
    "### Tìm kiếm với vector similarity"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 6,
   "metadata": {},
   "outputs": [
    {
     "name": "stdout",
     "output_type": "stream",
     "text": [
      "id: 1, score: 0.9999999\n",
      "id: 3, score: 0.9752594\n",
      "id: 2, score: 0.9680425\n"
     ]
    }
   ],
   "source": [
    "from azure.search.documents.models import VectorizedQuery\n",
    "\n",
    "r = search_client.search(search_text=None, vector_queries=[\n",
    "    VectorizedQuery(vector=[1, 2, 3], k_nearest_neighbors=3, fields=\"embedding\")])\n",
    "for doc in r:\n",
    "    print(f\"id: {doc['id']}, score: {doc['@search.score']}\")"
   ]
  },
  {
   "cell_type": "markdown",
   "metadata": {},
   "source": [
    "## Tìm kiếm với index lớn hơn\n",
    "Giả sử chúng ta có thông tin sản phẩm như trong file products.txt, chúng ta cần lưu trữ các sản phẩm trong vector DB là Azure AI Search."
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 32,
   "metadata": {},
   "outputs": [],
   "source": [
    "products = []\n",
    "with open(\"../data/products.txt\", \"r\") as f:\n",
    "    for line in f:\n",
    "        products.append(line)"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 33,
   "metadata": {},
   "outputs": [
    {
     "data": {
      "text/plain": [
       "['Lenovo Điện thoại, $405.00, Điện thoại thông minh với nhiều tính năng hiện đại và thiết kế đẹp mắt. Sản phẩm này có màn hình sắc nét, camera chất lượng cao và thời lượng pin lâu dài, phù hợp cho cả công việc và giải trí.\\n',\n",
       " 'Asus Máy chiếu, $1594.00, Máy chiếu với độ phân giải cao, phù hợp cho các buổi thuyết trình và giải trí. Sản phẩm này có khả năng trình chiếu rõ nét, màu sắc sống động và dễ dàng kết nối với các thiết bị khác.\\n',\n",
       " 'Asus Máy chơi game, $1951.00, Máy chơi game với đồ họa đẹp và nhiều trò chơi hấp dẫn. Sản phẩm này có khả năng chơi game mượt mà, đồ họa sắc nét và nhiều tính năng giải trí khác.\\n',\n",
       " 'Samsung Máy ảnh kỹ thuật số, $1376.00, Máy ảnh kỹ thuật số với khả năng chống nước, phù hợp cho các chuyến du lịch và hoạt động ngoài trời.\\n',\n",
       " 'Sony Máy chiếu, $1261.00, Máy chiếu với độ phân giải cao, phù hợp cho các buổi thuyết trình và giải trí. Sản phẩm này có khả năng trình chiếu rõ nét, màu sắc sống động và dễ dàng kết nối với các thiết bị khác.\\n',\n",
       " 'Dell Điện thoại, $1919.00, Điện thoại với màn hình lớn, camera kép và pin dung lượng cao, mang lại trải nghiệm tuyệt vời cho người dùng.\\n',\n",
       " 'Dell Điện thoại, $1275.00, Điện thoại thông minh với khả năng chống nước, bộ nhớ lớn và hiệu suất mạnh mẽ, đáp ứng mọi nhu cầu sử dụng.\\n',\n",
       " 'Sony Máy chơi game, $1893.00, Máy chơi game với đồ họa đẹp và nhiều trò chơi hấp dẫn. Sản phẩm này có khả năng chơi game mượt mà, đồ họa sắc nét và nhiều tính năng giải trí khác.\\n',\n",
       " 'Acer Máy nghe nhạc, $1781.00, Máy nghe nhạc với bộ nhớ lớn, lưu trữ được nhiều bài hát.\\n',\n",
       " 'Apple Máy chơi game, $471.00, Máy chơi game cầm tay với thiết kế nhỏ gọn, dễ dàng mang theo.\\n',\n",
       " 'HP Máy tính bảng, $897.00, Máy tính bảng với màn hình cảm ứng nhạy và nhiều ứng dụng hữu ích. Sản phẩm này có thiết kế mỏng nhẹ, dễ dàng mang theo và phù hợp cho cả công việc và giải trí.\\n',\n",
       " 'Nikon Điện thoại, $1965.00, Điện thoại thông minh với nhiều tính năng hiện đại và thiết kế đẹp mắt. Sản phẩm này có màn hình sắc nét, camera chất lượng cao và thời lượng pin lâu dài, phù hợp cho cả công việc và giải trí.\\n',\n",
       " 'Lenovo Máy ảnh, $1508.00, Máy ảnh compact với thiết kế nhỏ gọn, dễ dàng mang theo và chụp ảnh nhanh chóng.\\n',\n",
       " 'Dell Máy chiếu, $1454.00, Máy chiếu với độ phân giải cao, phù hợp cho các buổi thuyết trình và giải trí. Sản phẩm này có khả năng trình chiếu rõ nét, màu sắc sống động và dễ dàng kết nối với các thiết bị khác.\\n',\n",
       " 'Canon Máy tính, $357.00, Máy tính xách tay với hiệu suất cao và độ bền tốt, phù hợp cho cả công việc và giải trí. Sản phẩm này có bộ vi xử lý mạnh mẽ, dung lượng lưu trữ lớn và thiết kế mỏng nhẹ, dễ dàng mang theo.\\n',\n",
       " 'Acer Máy in, $590.00, Máy in màu với độ phân giải cao, phù hợp cho in ấn hình ảnh và tài liệu màu.\\n',\n",
       " 'Acer Máy tính, $1343.00, Máy tính xách tay với hiệu suất cao và độ bền tốt, phù hợp cho cả công việc và giải trí. Sản phẩm này có bộ vi xử lý mạnh mẽ, dung lượng lưu trữ lớn và thiết kế mỏng nhẹ, dễ dàng mang theo.\\n',\n",
       " 'Sony Máy in, $654.00, Máy in màu với độ phân giải cao, phù hợp cho in ấn hình ảnh và tài liệu màu.\\n',\n",
       " 'HP Máy quét, $1154.00, Máy quét ảnh với độ phân giải cao, phù hợp cho việc số hóa ảnh cũ.\\n',\n",
       " 'Dell Máy tính, $1746.00, Máy tính xách tay với hiệu suất cao và độ bền tốt, phù hợp cho cả công việc và giải trí. Sản phẩm này có bộ vi xử lý mạnh mẽ, dung lượng lưu trữ lớn và thiết kế mỏng nhẹ, dễ dàng mang theo.\\n',\n",
       " 'Samsung Máy chiếu, $603.00, Máy chiếu 4K với độ phân giải siêu cao, mang lại trải nghiệm xem phim tuyệt vời.\\n',\n",
       " 'Acer Máy tính, $1442.00, Máy tính xách tay với hiệu suất cao và độ bền tốt, phù hợp cho cả công việc và giải trí. Sản phẩm này có bộ vi xử lý mạnh mẽ, dung lượng lưu trữ lớn và thiết kế mỏng nhẹ, dễ dàng mang theo.\\n',\n",
       " 'Nikon Máy tính bảng, $362.00, Máy tính bảng với màn hình lớn và pin lâu, phù hợp cho việc xem phim và chơi game.\\n',\n",
       " 'Nikon Máy chơi game, $421.00, Máy chơi game với đồ họa đẹp và nhiều trò chơi hấp dẫn. Sản phẩm này có khả năng chơi game mượt mà, đồ họa sắc nét và nhiều tính năng giải trí khác.\\n',\n",
       " 'Sony Máy chiếu, $357.00, Máy chiếu mini với thiết kế nhỏ gọn, dễ dàng mang theo và sử dụng.\\n',\n",
       " 'Dell Máy chiếu, $1332.00, Máy chiếu 4K với độ phân giải siêu cao, mang lại trải nghiệm xem phim tuyệt vời.\\n',\n",
       " 'Apple Máy ảnh, $389.00, Máy ảnh DSLR với ống kính đa dạng, phù hợp cho nhiếp ảnh gia chuyên nghiệp.\\n',\n",
       " 'Sony Máy tính, $335.00, Máy tính xách tay với hiệu suất cao và độ bền tốt, phù hợp cho cả công việc và giải trí. Sản phẩm này có bộ vi xử lý mạnh mẽ, dung lượng lưu trữ lớn và thiết kế mỏng nhẹ, dễ dàng mang theo.\\n',\n",
       " 'Dell Máy ảnh kỹ thuật số, $1436.00, Máy ảnh kỹ thuật số với ống kính zoom xa, phù hợp cho việc chụp ảnh từ xa.\\n',\n",
       " 'Sony Máy chơi game, $1523.00, Máy chơi game console với nhiều trò chơi độc quyền và đồ họa ấn tượng.\\n',\n",
       " 'Sony Máy in, $548.00, Máy in chất lượng cao, in ấn nhanh chóng và tiết kiệm mực. Sản phẩm này có khả năng in ấn đa dạng, từ tài liệu văn phòng đến hình ảnh chất lượng cao, đáp ứng mọi nhu cầu in ấn của bạn.\\n',\n",
       " 'Lenovo Máy tính bảng, $1101.00, Máy tính bảng với màn hình cảm ứng nhạy và nhiều ứng dụng hữu ích. Sản phẩm này có thiết kế mỏng nhẹ, dễ dàng mang theo và phù hợp cho cả công việc và giải trí.\\n',\n",
       " 'Dell Máy nghe nhạc, $752.00, Máy nghe nhạc với âm thanh chất lượng cao và thiết kế nhỏ gọn. Sản phẩm này có khả năng phát nhạc liên tục trong nhiều giờ, phù hợp cho những người yêu thích âm nhạc.\\n',\n",
       " 'Asus Máy chiếu, $172.00, Máy chiếu mini với thiết kế nhỏ gọn, dễ dàng mang theo và sử dụng.\\n',\n",
       " 'Acer Điện thoại, $1602.00, Điện thoại thông minh với nhiều tính năng hiện đại và thiết kế đẹp mắt. Sản phẩm này có màn hình sắc nét, camera chất lượng cao và thời lượng pin lâu dài, phù hợp cho cả công việc và giải trí.\\n',\n",
       " 'Lenovo Máy ảnh kỹ thuật số, $833.00, Máy ảnh kỹ thuật số với khả năng chống nước, phù hợp cho các chuyến du lịch và hoạt động ngoài trời.\\n',\n",
       " 'Lenovo Máy nghe nhạc, $1155.00, Máy nghe nhạc với khả năng kết nối Bluetooth, dễ dàng kết nối với tai nghe không dây.\\n',\n",
       " 'Asus Máy tính bảng, $1937.00, Máy tính bảng với màn hình lớn và pin lâu, phù hợp cho việc xem phim và chơi game.\\n',\n",
       " 'Sony Máy nghe nhạc, $698.00, Máy nghe nhạc với khả năng kết nối Bluetooth, dễ dàng kết nối với tai nghe không dây.\\n',\n",
       " 'Acer Máy chơi game, $1589.00, Máy chơi game với đồ họa đẹp và nhiều trò chơi hấp dẫn. Sản phẩm này có khả năng chơi game mượt mà, đồ họa sắc nét và nhiều tính năng giải trí khác.\\n',\n",
       " 'Sony Máy tính bảng, $1998.00, Máy tính bảng với màn hình lớn và pin lâu, phù hợp cho việc xem phim và chơi game.\\n',\n",
       " 'Nikon Máy chiếu, $1896.00, Máy chiếu 4K với độ phân giải siêu cao, mang lại trải nghiệm xem phim tuyệt vời.\\n',\n",
       " 'Lenovo Máy quét, $1042.00, Máy quét di động với thiết kế nhỏ gọn, dễ dàng mang theo và sử dụng.\\n',\n",
       " 'Asus Máy ảnh kỹ thuật số, $1058.00, Máy ảnh kỹ thuật số với khả năng chống nước, phù hợp cho các chuyến du lịch và hoạt động ngoài trời.\\n',\n",
       " 'Dell Máy in, $1720.00, Máy in màu với độ phân giải cao, phù hợp cho in ấn hình ảnh và tài liệu màu.\\n',\n",
       " 'Samsung Máy ảnh kỹ thuật số, $1374.00, Máy ảnh kỹ thuật số với ống kính zoom xa, phù hợp cho việc chụp ảnh từ xa.\\n',\n",
       " 'Acer Máy chơi game, $562.00, Máy chơi game console với nhiều trò chơi độc quyền và đồ họa ấn tượng.\\n',\n",
       " 'Sony Điện thoại, $252.00, Điện thoại thông minh với khả năng chống nước, bộ nhớ lớn và hiệu suất mạnh mẽ, đáp ứng mọi nhu cầu sử dụng.\\n',\n",
       " 'Lenovo Máy chơi game, $825.00, Máy chơi game cầm tay với thiết kế nhỏ gọn, dễ dàng mang theo.\\n',\n",
       " 'Sony Máy chiếu, $335.00, Máy chiếu với độ phân giải cao, phù hợp cho các buổi thuyết trình và giải trí. Sản phẩm này có khả năng trình chiếu rõ nét, màu sắc sống động và dễ dàng kết nối với các thiết bị khác.\\n',\n",
       " 'Nikon Máy in, $923.00, Máy in màu với độ phân giải cao, phù hợp cho in ấn hình ảnh và tài liệu màu.\\n',\n",
       " 'HP Máy chơi game, $1236.00, Máy chơi game với đồ họa đẹp và nhiều trò chơi hấp dẫn. Sản phẩm này có khả năng chơi game mượt mà, đồ họa sắc nét và nhiều tính năng giải trí khác.\\n',\n",
       " 'Canon Máy nghe nhạc, $361.00, Máy nghe nhạc với khả năng kết nối Bluetooth, dễ dàng kết nối với tai nghe không dây.\\n',\n",
       " 'Nikon Máy ảnh kỹ thuật số, $1206.00, Máy ảnh kỹ thuật số với nhiều tính năng chụp ảnh chuyên nghiệp. Sản phẩm này có khả năng chụp ảnh sắc nét, quay video chất lượng cao và nhiều chế độ chụp ảnh đa dạng.\\n',\n",
       " 'Canon Máy quét, $938.00, Máy quét ảnh với độ phân giải cao, phù hợp cho việc số hóa ảnh cũ.\\n',\n",
       " 'Acer Máy ảnh, $581.00, Máy ảnh compact với thiết kế nhỏ gọn, dễ dàng mang theo và chụp ảnh nhanh chóng.\\n',\n",
       " 'Lenovo Máy nghe nhạc, $283.00, Máy nghe nhạc với khả năng kết nối Bluetooth, dễ dàng kết nối với tai nghe không dây.\\n',\n",
       " 'Samsung Máy in, $401.00, Máy in chất lượng cao, in ấn nhanh chóng và tiết kiệm mực. Sản phẩm này có khả năng in ấn đa dạng, từ tài liệu văn phòng đến hình ảnh chất lượng cao, đáp ứng mọi nhu cầu in ấn của bạn.\\n',\n",
       " 'Lenovo Máy tính bảng, $1463.00, Máy tính bảng với màn hình lớn và pin lâu, phù hợp cho việc xem phim và chơi game.\\n',\n",
       " 'Canon Máy chiếu, $1874.00, Máy chiếu mini với thiết kế nhỏ gọn, dễ dàng mang theo và sử dụng.\\n',\n",
       " 'Dell Máy in, $1393.00, Máy in màu với độ phân giải cao, phù hợp cho in ấn hình ảnh và tài liệu màu.\\n',\n",
       " 'HP Máy quét, $667.00, Máy quét ảnh với độ phân giải cao, phù hợp cho việc số hóa ảnh cũ.\\n',\n",
       " 'HP Máy chơi game, $213.00, Máy chơi game cầm tay với thiết kế nhỏ gọn, dễ dàng mang theo.\\n',\n",
       " 'Apple Máy ảnh, $526.00, Máy ảnh kỹ thuật số với độ phân giải cao và nhiều chế độ chụp ảnh. Sản phẩm này có khả năng chụp ảnh sắc nét, quay video chất lượng cao và nhiều tính năng chỉnh sửa ảnh chuyên nghiệp.\\n',\n",
       " 'Acer Máy ảnh, $1583.00, Máy ảnh kỹ thuật số với độ phân giải cao và nhiều chế độ chụp ảnh. Sản phẩm này có khả năng chụp ảnh sắc nét, quay video chất lượng cao và nhiều tính năng chỉnh sửa ảnh chuyên nghiệp.\\n',\n",
       " 'Canon Máy tính, $493.00, Máy tính xách tay với màn hình cảm ứng, pin lâu và thiết kế thời trang, phù hợp cho người dùng di động.\\n',\n",
       " 'Apple Máy quét, $276.00, Máy quét di động với thiết kế nhỏ gọn, dễ dàng mang theo và sử dụng.\\n',\n",
       " 'HP Máy tính bảng, $1335.00, Máy tính bảng với màn hình lớn và pin lâu, phù hợp cho việc xem phim và chơi game.\\n',\n",
       " 'Lenovo Điện thoại, $800.00, Điện thoại thông minh với nhiều tính năng hiện đại và thiết kế đẹp mắt. Sản phẩm này có màn hình sắc nét, camera chất lượng cao và thời lượng pin lâu dài, phù hợp cho cả công việc và giải trí.\\n',\n",
       " 'Canon Máy tính bảng, $1405.00, Máy tính bảng với màn hình lớn và pin lâu, phù hợp cho việc xem phim và chơi game.\\n',\n",
       " 'Apple Máy ảnh kỹ thuật số, $618.00, Máy ảnh kỹ thuật số với nhiều tính năng chụp ảnh chuyên nghiệp. Sản phẩm này có khả năng chụp ảnh sắc nét, quay video chất lượng cao và nhiều chế độ chụp ảnh đa dạng.\\n',\n",
       " 'HP Máy in, $681.00, Máy in chất lượng cao, in ấn nhanh chóng và tiết kiệm mực. Sản phẩm này có khả năng in ấn đa dạng, từ tài liệu văn phòng đến hình ảnh chất lượng cao, đáp ứng mọi nhu cầu in ấn của bạn.\\n',\n",
       " 'Dell Máy in, $543.00, Máy in laser với tốc độ in nhanh và chi phí vận hành thấp, phù hợp cho văn phòng.\\n',\n",
       " 'Samsung Máy chơi game, $948.00, Máy chơi game cầm tay với thiết kế nhỏ gọn, dễ dàng mang theo.\\n',\n",
       " 'Canon Máy nghe nhạc, $1275.00, Máy nghe nhạc với âm thanh chất lượng cao và thiết kế nhỏ gọn. Sản phẩm này có khả năng phát nhạc liên tục trong nhiều giờ, phù hợp cho những người yêu thích âm nhạc.\\n',\n",
       " 'Sony Máy ảnh kỹ thuật số, $1408.00, Máy ảnh kỹ thuật số với khả năng chống nước, phù hợp cho các chuyến du lịch và hoạt động ngoài trời.\\n',\n",
       " 'Samsung Máy nghe nhạc, $146.00, Máy nghe nhạc với bộ nhớ lớn, lưu trữ được nhiều bài hát.\\n',\n",
       " 'Canon Máy in, $901.00, Máy in màu với độ phân giải cao, phù hợp cho in ấn hình ảnh và tài liệu màu.\\n',\n",
       " 'Dell Máy in, $1896.00, Máy in chất lượng cao, in ấn nhanh chóng và tiết kiệm mực. Sản phẩm này có khả năng in ấn đa dạng, từ tài liệu văn phòng đến hình ảnh chất lượng cao, đáp ứng mọi nhu cầu in ấn của bạn.\\n',\n",
       " 'Sony Máy nghe nhạc, $356.00, Máy nghe nhạc với khả năng kết nối Bluetooth, dễ dàng kết nối với tai nghe không dây.\\n',\n",
       " 'Sony Máy tính, $1176.00, Máy tính xách tay với màn hình cảm ứng, pin lâu và thiết kế thời trang, phù hợp cho người dùng di động.\\n',\n",
       " 'Dell Điện thoại, $1820.00, Điện thoại thông minh với khả năng chống nước, bộ nhớ lớn và hiệu suất mạnh mẽ, đáp ứng mọi nhu cầu sử dụng.\\n',\n",
       " 'Asus Máy quét, $1893.00, Máy quét di động với thiết kế nhỏ gọn, dễ dàng mang theo và sử dụng.\\n',\n",
       " 'Acer Máy tính bảng, $262.00, Máy tính bảng với màn hình cảm ứng nhạy và nhiều ứng dụng hữu ích. Sản phẩm này có thiết kế mỏng nhẹ, dễ dàng mang theo và phù hợp cho cả công việc và giải trí.\\n',\n",
       " 'Asus Máy in, $569.00, Máy in laser với tốc độ in nhanh và chi phí vận hành thấp, phù hợp cho văn phòng.\\n',\n",
       " 'HP Máy chiếu, $543.00, Máy chiếu mini với thiết kế nhỏ gọn, dễ dàng mang theo và sử dụng.\\n',\n",
       " 'HP Máy ảnh, $680.00, Máy ảnh kỹ thuật số với độ phân giải cao và nhiều chế độ chụp ảnh. Sản phẩm này có khả năng chụp ảnh sắc nét, quay video chất lượng cao và nhiều tính năng chỉnh sửa ảnh chuyên nghiệp.\\n',\n",
       " 'Samsung Máy ảnh kỹ thuật số, $456.00, Máy ảnh kỹ thuật số với ống kính zoom xa, phù hợp cho việc chụp ảnh từ xa.\\n',\n",
       " 'Samsung Máy tính, $1965.00, Máy tính xách tay với màn hình cảm ứng, pin lâu và thiết kế thời trang, phù hợp cho người dùng di động.\\n',\n",
       " 'Sony Máy ảnh kỹ thuật số, $338.00, Máy ảnh kỹ thuật số với khả năng chống nước, phù hợp cho các chuyến du lịch và hoạt động ngoài trời.\\n',\n",
       " 'Apple Điện thoại, $774.00, Điện thoại thông minh với nhiều tính năng hiện đại và thiết kế đẹp mắt. Sản phẩm này có màn hình sắc nét, camera chất lượng cao và thời lượng pin lâu dài, phù hợp cho cả công việc và giải trí.\\n',\n",
       " 'Asus Máy chơi game, $328.00, Máy chơi game console với nhiều trò chơi độc quyền và đồ họa ấn tượng.\\n',\n",
       " 'Acer Máy nghe nhạc, $822.00, Máy nghe nhạc với âm thanh chất lượng cao và thiết kế nhỏ gọn. Sản phẩm này có khả năng phát nhạc liên tục trong nhiều giờ, phù hợp cho những người yêu thích âm nhạc.\\n',\n",
       " 'Dell Điện thoại, $739.00, Điện thoại thông minh với khả năng chống nước, bộ nhớ lớn và hiệu suất mạnh mẽ, đáp ứng mọi nhu cầu sử dụng.\\n',\n",
       " 'Nikon Máy tính, $581.00, Máy tính xách tay với màn hình cảm ứng, pin lâu và thiết kế thời trang, phù hợp cho người dùng di động.\\n',\n",
       " 'Nikon Máy nghe nhạc, $469.00, Máy nghe nhạc với âm thanh chất lượng cao và thiết kế nhỏ gọn. Sản phẩm này có khả năng phát nhạc liên tục trong nhiều giờ, phù hợp cho những người yêu thích âm nhạc.\\n',\n",
       " 'Apple Máy tính bảng, $1145.00, Máy tính bảng với bút cảm ứng, phù hợp cho việc vẽ và ghi chú.\\n',\n",
       " 'Lenovo Máy ảnh, $898.00, Máy ảnh compact với thiết kế nhỏ gọn, dễ dàng mang theo và chụp ảnh nhanh chóng.\\n',\n",
       " 'Samsung Máy ảnh kỹ thuật số, $1561.00, Máy ảnh kỹ thuật số với ống kính zoom xa, phù hợp cho việc chụp ảnh từ xa.\\n',\n",
       " 'Lenovo Máy ảnh, $634.00, Máy ảnh DSLR với ống kính đa dạng, phù hợp cho nhiếp ảnh gia chuyên nghiệp.\\n']"
      ]
     },
     "execution_count": 33,
     "metadata": {},
     "output_type": "execute_result"
    }
   ],
   "source": [
    "products"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 7,
   "metadata": {},
   "outputs": [],
   "source": [
    "import dotenv\n",
    "import openai\n",
    "\n",
    "dotenv.load_dotenv()\n",
    "\n",
    "# Initialize Azure search variables\n",
    "AZURE_SEARCH_SERVICE = os.getenv(\"AZURE_SEARCH_SERVICE\")\n",
    "AZURE_SEARCH_ENDPOINT = f\"https://{AZURE_SEARCH_SERVICE}.search.windows.net\"\n",
    "\n",
    "# Set up OpenAI client based on environment variables\n",
    "dotenv.load_dotenv()\n",
    "AZURE_OPENAI_SERVICE = os.getenv(\"AZURE_OPENAI_SERVICE\")\n",
    "AZURE_OPENAI_EMBEDDING_DEPLOYMENT = os.getenv(\"AZURE_OPENAI_EMBEDDING_DEPLOYMENT\")\n",
    "\n",
    "openai_client = openai.AzureOpenAI(\n",
    "    api_version=\"2023-07-01-preview\",\n",
    "    azure_endpoint=f\"https://{AZURE_OPENAI_SERVICE}.openai.azure.com\")\n",
    "\n",
    "def get_embedding(text):\n",
    "    get_embeddings_response = openai_client.embeddings.create(model=AZURE_OPENAI_EMBEDDING_DEPLOYMENT, input=text)\n",
    "    return get_embeddings_response.data[0].embedding"
   ]
  },
  {
   "cell_type": "markdown",
   "metadata": {},
   "source": [
    "Trước tiên, tạo một index khác.\n",
    "\n",
    "Index bao gồm các field:\n",
    "- id\n",
    "- content: Lưu thông tin sản phẩm\n",
    "- sourcefile: Lưu tên file để sử dụng cho việc trích dẫn sau này\n",
    "- embedding: Lưu vector đại diện cho thông tin sản phẩm\n",
    "\n",
    "Lưu ý: Kích thước vector là 1536 nếu sử dụng mô hình text-embedding-ada-002"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 8,
   "metadata": {},
   "outputs": [
    {
     "ename": "HttpResponseError",
     "evalue": "(ResourceNameAlreadyInUse) Cannot create index 'gptkbindex' because it already exists.\nCode: ResourceNameAlreadyInUse\nMessage: Cannot create index 'gptkbindex' because it already exists.\nException Details:\t(CannotCreateExistingIndex) Cannot create index 'gptkbindex' because it already exists.\n\tCode: CannotCreateExistingIndex\n\tMessage: Cannot create index 'gptkbindex' because it already exists.",
     "output_type": "error",
     "traceback": [
      "\u001b[0;31m---------------------------------------------------------------------------\u001b[0m",
      "\u001b[0;31mHttpResponseError\u001b[0m                         Traceback (most recent call last)",
      "Cell \u001b[0;32mIn[8], line 26\u001b[0m\n\u001b[1;32m      2\u001b[0m AZURE_SEARCH_FULL_INDEX \u001b[38;5;241m=\u001b[39m \u001b[38;5;124m\"\u001b[39m\u001b[38;5;124mgptkbindex\u001b[39m\u001b[38;5;124m\"\u001b[39m\n\u001b[1;32m      4\u001b[0m index \u001b[38;5;241m=\u001b[39m SearchIndex(\n\u001b[1;32m      5\u001b[0m     name\u001b[38;5;241m=\u001b[39mAZURE_SEARCH_FULL_INDEX, \n\u001b[1;32m      6\u001b[0m     fields\u001b[38;5;241m=\u001b[39m[\n\u001b[0;32m   (...)\u001b[0m\n\u001b[1;32m     23\u001b[0m     )\n\u001b[1;32m     24\u001b[0m )\n\u001b[0;32m---> 26\u001b[0m \u001b[43mindex_client\u001b[49m\u001b[38;5;241;43m.\u001b[39;49m\u001b[43mcreate_index\u001b[49m\u001b[43m(\u001b[49m\u001b[43mindex\u001b[49m\u001b[43m)\u001b[49m\n",
      "File \u001b[0;32m~/miniconda3/envs/ai_design_win/lib/python3.11/site-packages/azure/core/tracing/decorator.py:94\u001b[0m, in \u001b[0;36mdistributed_trace.<locals>.decorator.<locals>.wrapper_use_tracer\u001b[0;34m(*args, **kwargs)\u001b[0m\n\u001b[1;32m     92\u001b[0m span_impl_type \u001b[38;5;241m=\u001b[39m settings\u001b[38;5;241m.\u001b[39mtracing_implementation()\n\u001b[1;32m     93\u001b[0m \u001b[38;5;28;01mif\u001b[39;00m span_impl_type \u001b[38;5;129;01mis\u001b[39;00m \u001b[38;5;28;01mNone\u001b[39;00m:\n\u001b[0;32m---> 94\u001b[0m     \u001b[38;5;28;01mreturn\u001b[39;00m \u001b[43mfunc\u001b[49m\u001b[43m(\u001b[49m\u001b[38;5;241;43m*\u001b[39;49m\u001b[43margs\u001b[49m\u001b[43m,\u001b[49m\u001b[43m \u001b[49m\u001b[38;5;241;43m*\u001b[39;49m\u001b[38;5;241;43m*\u001b[39;49m\u001b[43mkwargs\u001b[49m\u001b[43m)\u001b[49m\n\u001b[1;32m     96\u001b[0m \u001b[38;5;66;03m# Merge span is parameter is set, but only if no explicit parent are passed\u001b[39;00m\n\u001b[1;32m     97\u001b[0m \u001b[38;5;28;01mif\u001b[39;00m merge_span \u001b[38;5;129;01mand\u001b[39;00m \u001b[38;5;129;01mnot\u001b[39;00m passed_in_parent:\n",
      "File \u001b[0;32m~/miniconda3/envs/ai_design_win/lib/python3.11/site-packages/azure/search/documents/indexes/_search_index_client.py:230\u001b[0m, in \u001b[0;36mSearchIndexClient.create_index\u001b[0;34m(self, index, **kwargs)\u001b[0m\n\u001b[1;32m    228\u001b[0m kwargs[\u001b[38;5;124m\"\u001b[39m\u001b[38;5;124mheaders\u001b[39m\u001b[38;5;124m\"\u001b[39m] \u001b[38;5;241m=\u001b[39m \u001b[38;5;28mself\u001b[39m\u001b[38;5;241m.\u001b[39m_merge_client_headers(kwargs\u001b[38;5;241m.\u001b[39mget(\u001b[38;5;124m\"\u001b[39m\u001b[38;5;124mheaders\u001b[39m\u001b[38;5;124m\"\u001b[39m))\n\u001b[1;32m    229\u001b[0m patched_index \u001b[38;5;241m=\u001b[39m index\u001b[38;5;241m.\u001b[39m_to_generated()  \u001b[38;5;66;03m# pylint:disable=protected-access\u001b[39;00m\n\u001b[0;32m--> 230\u001b[0m result \u001b[38;5;241m=\u001b[39m \u001b[38;5;28;43mself\u001b[39;49m\u001b[38;5;241;43m.\u001b[39;49m\u001b[43m_client\u001b[49m\u001b[38;5;241;43m.\u001b[39;49m\u001b[43mindexes\u001b[49m\u001b[38;5;241;43m.\u001b[39;49m\u001b[43mcreate\u001b[49m\u001b[43m(\u001b[49m\u001b[43mpatched_index\u001b[49m\u001b[43m,\u001b[49m\u001b[43m \u001b[49m\u001b[38;5;241;43m*\u001b[39;49m\u001b[38;5;241;43m*\u001b[39;49m\u001b[43mkwargs\u001b[49m\u001b[43m)\u001b[49m\n\u001b[1;32m    231\u001b[0m \u001b[38;5;28;01mreturn\u001b[39;00m cast(SearchIndex, SearchIndex\u001b[38;5;241m.\u001b[39m_from_generated(result))\n",
      "File \u001b[0;32m~/miniconda3/envs/ai_design_win/lib/python3.11/site-packages/azure/core/tracing/decorator.py:94\u001b[0m, in \u001b[0;36mdistributed_trace.<locals>.decorator.<locals>.wrapper_use_tracer\u001b[0;34m(*args, **kwargs)\u001b[0m\n\u001b[1;32m     92\u001b[0m span_impl_type \u001b[38;5;241m=\u001b[39m settings\u001b[38;5;241m.\u001b[39mtracing_implementation()\n\u001b[1;32m     93\u001b[0m \u001b[38;5;28;01mif\u001b[39;00m span_impl_type \u001b[38;5;129;01mis\u001b[39;00m \u001b[38;5;28;01mNone\u001b[39;00m:\n\u001b[0;32m---> 94\u001b[0m     \u001b[38;5;28;01mreturn\u001b[39;00m \u001b[43mfunc\u001b[49m\u001b[43m(\u001b[49m\u001b[38;5;241;43m*\u001b[39;49m\u001b[43margs\u001b[49m\u001b[43m,\u001b[49m\u001b[43m \u001b[49m\u001b[38;5;241;43m*\u001b[39;49m\u001b[38;5;241;43m*\u001b[39;49m\u001b[43mkwargs\u001b[49m\u001b[43m)\u001b[49m\n\u001b[1;32m     96\u001b[0m \u001b[38;5;66;03m# Merge span is parameter is set, but only if no explicit parent are passed\u001b[39;00m\n\u001b[1;32m     97\u001b[0m \u001b[38;5;28;01mif\u001b[39;00m merge_span \u001b[38;5;129;01mand\u001b[39;00m \u001b[38;5;129;01mnot\u001b[39;00m passed_in_parent:\n",
      "File \u001b[0;32m~/miniconda3/envs/ai_design_win/lib/python3.11/site-packages/azure/search/documents/indexes/_generated/operations/_indexes_operations.py:399\u001b[0m, in \u001b[0;36mIndexesOperations.create\u001b[0;34m(self, index, request_options, **kwargs)\u001b[0m\n\u001b[1;32m    397\u001b[0m     map_error(status_code\u001b[38;5;241m=\u001b[39mresponse\u001b[38;5;241m.\u001b[39mstatus_code, response\u001b[38;5;241m=\u001b[39mresponse, error_map\u001b[38;5;241m=\u001b[39merror_map)\n\u001b[1;32m    398\u001b[0m     error \u001b[38;5;241m=\u001b[39m \u001b[38;5;28mself\u001b[39m\u001b[38;5;241m.\u001b[39m_deserialize\u001b[38;5;241m.\u001b[39mfailsafe_deserialize(_models\u001b[38;5;241m.\u001b[39mErrorResponse, pipeline_response)\n\u001b[0;32m--> 399\u001b[0m     \u001b[38;5;28;01mraise\u001b[39;00m HttpResponseError(response\u001b[38;5;241m=\u001b[39mresponse, model\u001b[38;5;241m=\u001b[39merror)\n\u001b[1;32m    401\u001b[0m deserialized \u001b[38;5;241m=\u001b[39m \u001b[38;5;28mself\u001b[39m\u001b[38;5;241m.\u001b[39m_deserialize(\u001b[38;5;124m\"\u001b[39m\u001b[38;5;124mSearchIndex\u001b[39m\u001b[38;5;124m\"\u001b[39m, pipeline_response\u001b[38;5;241m.\u001b[39mhttp_response)\n\u001b[1;32m    403\u001b[0m \u001b[38;5;28;01mif\u001b[39;00m \u001b[38;5;28mcls\u001b[39m:\n",
      "\u001b[0;31mHttpResponseError\u001b[0m: (ResourceNameAlreadyInUse) Cannot create index 'gptkbindex' because it already exists.\nCode: ResourceNameAlreadyInUse\nMessage: Cannot create index 'gptkbindex' because it already exists.\nException Details:\t(CannotCreateExistingIndex) Cannot create index 'gptkbindex' because it already exists.\n\tCode: CannotCreateExistingIndex\n\tMessage: Cannot create index 'gptkbindex' because it already exists."
     ]
    }
   ],
   "source": [
    "from azure.search.documents.indexes.models import SearchableField\n",
    "AZURE_SEARCH_FULL_INDEX = \"gptkbindex\"\n",
    "\n",
    "index = SearchIndex(\n",
    "    name=AZURE_SEARCH_FULL_INDEX, \n",
    "    fields=[\n",
    "        SimpleField(name=\"id\", type=SearchFieldDataType.String, key=True),\n",
    "        SearchableField(name=\"content\", type=SearchFieldDataType.String),\n",
    "        SearchableField(name=\"sourcefile\", type=SearchFieldDataType.String),\n",
    "        SearchField(name=\"embedding\", \n",
    "                    type=SearchFieldDataType.Collection(SearchFieldDataType.Single), \n",
    "                    searchable=True, \n",
    "                    vector_search_dimensions=1536,\n",
    "                    vector_search_profile_name=\"embedding_profile\")\n",
    "    ],\n",
    "    vector_search=VectorSearch(\n",
    "        algorithms=[HnswAlgorithmConfiguration( # Hierachical Navigable Small World, IVF\n",
    "                            name=\"hnsw_config\",\n",
    "                            kind=VectorSearchAlgorithmKind.HNSW,\n",
    "                            parameters=HnswParameters(metric=\"cosine\"),\n",
    "                        )],\n",
    "        profiles=[VectorSearchProfile(name=\"embedding_profile\", algorithm_configuration_name=\"hnsw_config\")]\n",
    "    )\n",
    ")\n",
    "\n",
    "index_client.create_index(index)"
   ]
  },
  {
   "cell_type": "markdown",
   "metadata": {},
   "source": [
    "Bước tiếp theo, chúng ta sẽ cần chuẩn bị danh sách documents từ products"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 9,
   "metadata": {},
   "outputs": [
    {
     "ename": "NameError",
     "evalue": "name 'products' is not defined",
     "output_type": "error",
     "traceback": [
      "\u001b[0;31m---------------------------------------------------------------------------\u001b[0m",
      "\u001b[0;31mNameError\u001b[0m                                 Traceback (most recent call last)",
      "Cell \u001b[0;32mIn[9], line 1\u001b[0m\n\u001b[0;32m----> 1\u001b[0m documents \u001b[38;5;241m=\u001b[39m [{\u001b[38;5;124m\"\u001b[39m\u001b[38;5;124mid\u001b[39m\u001b[38;5;124m\"\u001b[39m: \u001b[38;5;28mstr\u001b[39m(i), \u001b[38;5;124m\"\u001b[39m\u001b[38;5;124mcontent\u001b[39m\u001b[38;5;124m\"\u001b[39m: prod, \u001b[38;5;124m\"\u001b[39m\u001b[38;5;124membedding\u001b[39m\u001b[38;5;124m\"\u001b[39m: get_embedding(prod), \u001b[38;5;124m\"\u001b[39m\u001b[38;5;124msourcefile\u001b[39m\u001b[38;5;124m\"\u001b[39m: \u001b[38;5;124m\"\u001b[39m\u001b[38;5;124mproducts.txt\u001b[39m\u001b[38;5;124m\"\u001b[39m} \u001b[38;5;28;01mfor\u001b[39;00m i, prod \u001b[38;5;129;01min\u001b[39;00m \u001b[38;5;28menumerate\u001b[39m(\u001b[43mproducts\u001b[49m)]\n",
      "\u001b[0;31mNameError\u001b[0m: name 'products' is not defined"
     ]
    }
   ],
   "source": [
    "documents = [{\"id\": str(i), \"content\": prod, \"embedding\": get_embedding(prod), \"sourcefile\": \"products.txt\"} for i, prod in enumerate(products)]"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 36,
   "metadata": {},
   "outputs": [
    {
     "data": {
      "text/plain": [
       "{'id': '0',\n",
       " 'content': 'Lenovo Điện thoại, $405.00, Điện thoại thông minh với nhiều tính năng hiện đại và thiết kế đẹp mắt. Sản phẩm này có màn hình sắc nét, camera chất lượng cao và thời lượng pin lâu dài, phù hợp cho cả công việc và giải trí.\\n',\n",
       " 'embedding': [-0.009237738326191902,\n",
       "  0.008772023022174835,\n",
       "  0.025773799046874046,\n",
       "  -0.029142256826162338,\n",
       "  -0.04264160245656967,\n",
       "  -0.006277578882873058,\n",
       "  -0.011126115918159485,\n",
       "  -0.007508852053433657,\n",
       "  -0.02050420641899109,\n",
       "  0.0023269786033779383,\n",
       "  0.027381472289562225,\n",
       "  0.04687769338488579,\n",
       "  -0.019572775810956955,\n",
       "  -0.013473828323185444,\n",
       "  -0.02277536317706108,\n",
       "  0.00010177541116718203,\n",
       "  0.005352529231458902,\n",
       "  -0.005422705318778753,\n",
       "  0.022226711735129356,\n",
       "  -0.024229923263192177,\n",
       "  -0.029652629047632217,\n",
       "  0.008427522145211697,\n",
       "  0.0005374858155846596,\n",
       "  0.008867718279361725,\n",
       "  -0.009339812211692333,\n",
       "  0.0009657200425863266,\n",
       "  0.012229795567691326,\n",
       "  -0.008976172655820847,\n",
       "  -0.004153154324740171,\n",
       "  -0.001827770727686584,\n",
       "  0.03669576719403267,\n",
       "  0.0007974566542543471,\n",
       "  -0.040217336267232895,\n",
       "  -0.022864677011966705,\n",
       "  -0.011374921537935734,\n",
       "  0.038150325417518616,\n",
       "  -0.0026204425375908613,\n",
       "  0.003700199071317911,\n",
       "  0.014698721468448639,\n",
       "  -0.007323842030018568,\n",
       "  0.05333390086889267,\n",
       "  0.00033971655648201704,\n",
       "  0.002939425176009536,\n",
       "  0.019202755764126778,\n",
       "  -0.01538772415369749,\n",
       "  -0.0018995418213307858,\n",
       "  -0.019394146278500557,\n",
       "  -0.00722176767885685,\n",
       "  -0.00851045735180378,\n",
       "  -0.0038182225544005632,\n",
       "  -0.013601421378552914,\n",
       "  0.024676499888300896,\n",
       "  -0.04539761319756508,\n",
       "  -0.01714850775897503,\n",
       "  -0.024536147713661194,\n",
       "  0.005996874067932367,\n",
       "  -0.015630150213837624,\n",
       "  0.0026571257039904594,\n",
       "  0.021257005631923676,\n",
       "  -0.024293720722198486,\n",
       "  -0.01547703891992569,\n",
       "  -0.004315835423767567,\n",
       "  -0.025199631229043007,\n",
       "  0.013843847438693047,\n",
       "  -0.025454817339777946,\n",
       "  -0.012855001725256443,\n",
       "  -0.015362204983830452,\n",
       "  0.003763995599001646,\n",
       "  0.008261650800704956,\n",
       "  -0.0008740125340409577,\n",
       "  0.037512362003326416,\n",
       "  0.0052823531441390514,\n",
       "  0.04108496755361557,\n",
       "  0.001194590120576322,\n",
       "  0.01830960437655449,\n",
       "  -0.006622080225497484,\n",
       "  -0.021512191742658615,\n",
       "  0.02489340677857399,\n",
       "  -0.005253644660115242,\n",
       "  0.007789556868374348,\n",
       "  0.019253794103860855,\n",
       "  -0.03220449015498161,\n",
       "  -0.0009657200425863266,\n",
       "  -0.009652415290474892,\n",
       "  0.01708471216261387,\n",
       "  0.019177237525582314,\n",
       "  -0.007961807772517204,\n",
       "  0.026820063591003418,\n",
       "  -0.002921881154179573,\n",
       "  -0.027840808033943176,\n",
       "  0.005623664241284132,\n",
       "  -0.01606396771967411,\n",
       "  0.00880392175167799,\n",
       "  0.030137483030557632,\n",
       "  0.004067028872668743,\n",
       "  -0.005413135979324579,\n",
       "  0.007132452446967363,\n",
       "  0.014928389340639114,\n",
       "  -0.036083318293094635,\n",
       "  0.013652457855641842,\n",
       "  -0.02167806215584278,\n",
       "  0.02166530303657055,\n",
       "  -0.04669906198978424,\n",
       "  -0.00024202809436246753,\n",
       "  -0.029320886358618736,\n",
       "  -0.0072791846469044685,\n",
       "  0.015362204983830452,\n",
       "  0.003894778434187174,\n",
       "  0.02618209831416607,\n",
       "  0.016752969473600388,\n",
       "  -0.044734127819538116,\n",
       "  0.02463822066783905,\n",
       "  0.034986019134521484,\n",
       "  -0.023272976279258728,\n",
       "  0.022749843075871468,\n",
       "  -0.003205775748938322,\n",
       "  0.025901392102241516,\n",
       "  -0.008714606054127216,\n",
       "  -0.014622165821492672,\n",
       "  -0.026666950434446335,\n",
       "  0.018781699240207672,\n",
       "  -5.417721331468783e-05,\n",
       "  0.031387895345687866,\n",
       "  0.0022647769656032324,\n",
       "  0.011464237235486507,\n",
       "  -0.0046443878673017025,\n",
       "  -0.004861295688897371,\n",
       "  -0.013333475217223167,\n",
       "  0.019457941874861717,\n",
       "  0.019725888967514038,\n",
       "  0.02438303455710411,\n",
       "  -0.010634882375597954,\n",
       "  0.015298408456146717,\n",
       "  0.01728885993361473,\n",
       "  -0.026156578212976456,\n",
       "  0.01355038397014141,\n",
       "  0.004580591339617968,\n",
       "  0.030009889975190163,\n",
       "  -0.044249277561903,\n",
       "  -0.01429042313247919,\n",
       "  0.02320917882025242,\n",
       "  0.016944359987974167,\n",
       "  -0.014047997072339058,\n",
       "  0.008076640777289867,\n",
       "  -0.00012629720731638372,\n",
       "  0.003317419672384858,\n",
       "  -0.021052855998277664,\n",
       "  0.017658879980444908,\n",
       "  0.004245659336447716,\n",
       "  0.017646120861172676,\n",
       "  0.00854873564094305,\n",
       "  0.002122829668223858,\n",
       "  0.025824837386608124,\n",
       "  0.05108826234936714,\n",
       "  -0.0009553530835546553,\n",
       "  0.00976724922657013,\n",
       "  -0.0038182225544005632,\n",
       "  -0.0031180556397885084,\n",
       "  -0.019253794103860855,\n",
       "  0.005059065297245979,\n",
       "  -0.007961807772517204,\n",
       "  0.009110145270824432,\n",
       "  0.0005638018483296037,\n",
       "  -0.022290509194135666,\n",
       "  0.028912588953971863,\n",
       "  0.017518527805805206,\n",
       "  0.019508980214595795,\n",
       "  0.021843932569026947,\n",
       "  0.004551882855594158,\n",
       "  -0.010571085847914219,\n",
       "  -0.008682708255946636,\n",
       "  0.021512191742658615,\n",
       "  0.010239344090223312,\n",
       "  0.0009346192236989737,\n",
       "  0.022660529240965843,\n",
       "  -0.0020510584581643343,\n",
       "  0.019942795857787132,\n",
       "  -0.015298408456146717,\n",
       "  -0.012389286421239376,\n",
       "  -0.015783263370394707,\n",
       "  0.009773628786206245,\n",
       "  0.017773713916540146,\n",
       "  0.014073515310883522,\n",
       "  0.0028851982206106186,\n",
       "  -0.018092697486281395,\n",
       "  -0.008669949136674404,\n",
       "  -0.0035694160033017397,\n",
       "  0.007272804621607065,\n",
       "  0.008746504783630371,\n",
       "  -0.016612617298960686,\n",
       "  0.008535976521670818,\n",
       "  0.03309764340519905,\n",
       "  0.018871014937758446,\n",
       "  0.005725739058107138,\n",
       "  -0.6251039505004883,\n",
       "  -0.0033014705404639244,\n",
       "  -0.026743507012724876,\n",
       "  0.0026427714619785547,\n",
       "  0.019075162708759308,\n",
       "  -0.0032137504313141108,\n",
       "  0.014073515310883522,\n",
       "  0.0005964976153336465,\n",
       "  -0.023502642288804054,\n",
       "  -0.015770502388477325,\n",
       "  0.002590139163658023,\n",
       "  -0.006571042817085981,\n",
       "  0.006185073871165514,\n",
       "  -0.022405343130230904,\n",
       "  -0.016599858179688454,\n",
       "  -0.025429299101233482,\n",
       "  -0.0006814267253503203,\n",
       "  -0.006095758639276028,\n",
       "  -0.017059193924069405,\n",
       "  0.0055758170783519745,\n",
       "  -0.009952259249985218,\n",
       "  -0.02129528298974037,\n",
       "  -0.043943051248788834,\n",
       "  0.0030813724733889103,\n",
       "  6.025781840435229e-05,\n",
       "  -0.005626854486763477,\n",
       "  -0.005496071185916662,\n",
       "  0.017263341695070267,\n",
       "  -0.029371924698352814,\n",
       "  0.020606281235814095,\n",
       "  -0.025824837386608124,\n",
       "  0.026233134791254997,\n",
       "  0.003197801299393177,\n",
       "  0.03069889172911644,\n",
       "  0.04529554024338722,\n",
       "  -0.012178758159279823,\n",
       "  -0.007374879438430071,\n",
       "  0.021767377853393555,\n",
       "  -0.0034545823000371456,\n",
       "  0.02722836099565029,\n",
       "  -0.006532764993607998,\n",
       "  -0.010628502815961838,\n",
       "  -0.0005059862742200494,\n",
       "  -0.01212772075086832,\n",
       "  -0.019981075078248978,\n",
       "  -0.011936331167817116,\n",
       "  0.014073515310883522,\n",
       "  -0.02269880659878254,\n",
       "  0.014379738830029964,\n",
       "  -0.026692470535635948,\n",
       "  0.012032026425004005,\n",
       "  0.01483907364308834,\n",
       "  0.01605120860040188,\n",
       "  0.01638294942677021,\n",
       "  -0.005435464903712273,\n",
       "  -0.008287169970571995,\n",
       "  0.03414390608668327,\n",
       "  -0.04817914217710495,\n",
       "  0.012523259967565536,\n",
       "  0.005212176591157913,\n",
       "  -0.00100718776229769,\n",
       "  6.997682066867128e-05,\n",
       "  -0.01722506433725357,\n",
       "  -0.03467979654669762,\n",
       "  -0.030469223856925964,\n",
       "  0.034475646913051605,\n",
       "  -0.015642909333109856,\n",
       "  -0.010481770150363445,\n",
       "  -0.009556720964610577,\n",
       "  -0.004829397425055504,\n",
       "  0.004756031557917595,\n",
       "  0.027840808033943176,\n",
       "  -0.016485024243593216,\n",
       "  0.03554742783308029,\n",
       "  0.022558454424142838,\n",
       "  0.001775138545781374,\n",
       "  0.029397442936897278,\n",
       "  0.013193123042583466,\n",
       "  0.009575859643518925,\n",
       "  0.027560101822018623,\n",
       "  0.009441887028515339,\n",
       "  -0.009862944483757019,\n",
       "  0.024867888540029526,\n",
       "  -0.019202755764126778,\n",
       "  0.038788292557001114,\n",
       "  -0.030214037746191025,\n",
       "  -0.009646035730838776,\n",
       "  -0.012976215220987797,\n",
       "  0.005349339451640844,\n",
       "  0.004539123270660639,\n",
       "  0.0320003405213356,\n",
       "  -0.016752969473600388,\n",
       "  -0.012695509940385818,\n",
       "  0.006800710689276457,\n",
       "  -0.030800966545939445,\n",
       "  0.011464237235486507,\n",
       "  -0.034986019134521484,\n",
       "  0.004956990480422974,\n",
       "  -0.005681081209331751,\n",
       "  -0.019687609747052193,\n",
       "  -0.01454560924321413,\n",
       "  0.008988931775093079,\n",
       "  0.019700368866324425,\n",
       "  0.00629033800214529,\n",
       "  6.514224514830858e-05,\n",
       "  0.02710076794028282,\n",
       "  -0.02089974470436573,\n",
       "  0.0013333475217223167,\n",
       "  0.052670419216156006,\n",
       "  -0.014634924940764904,\n",
       "  -0.009403608739376068,\n",
       "  -0.007866112515330315,\n",
       "  -0.006698635872453451,\n",
       "  0.019445182755589485,\n",
       "  -0.0022089548874646425,\n",
       "  -0.015630150213837624,\n",
       "  0.024140607565641403,\n",
       "  0.013014492578804493,\n",
       "  0.018985848873853683,\n",
       "  -0.040600113570690155,\n",
       "  -0.0017926825676113367,\n",
       "  0.0015087879728525877,\n",
       "  0.021231485530734062,\n",
       "  0.006169124972075224,\n",
       "  -0.029295368120074272,\n",
       "  -0.006653978489339352,\n",
       "  0.0038246021140366793,\n",
       "  -0.023502642288804054,\n",
       "  -0.025697244331240654,\n",
       "  -0.012414805591106415,\n",
       "  0.009518442675471306,\n",
       "  0.005135620944201946,\n",
       "  0.019751407206058502,\n",
       "  -0.006602941080927849,\n",
       "  -0.014366979710757732,\n",
       "  -0.009537581354379654,\n",
       "  -0.003719337983056903,\n",
       "  -0.024485109373927116,\n",
       "  0.0073684994131326675,\n",
       "  -0.00854873564094305,\n",
       "  -0.024791333824396133,\n",
       "  0.007859732955694199,\n",
       "  0.006928303744643927,\n",
       "  -0.011164393275976181,\n",
       "  -0.014430776238441467,\n",
       "  -0.00402875104919076,\n",
       "  -0.0020367044489830732,\n",
       "  -0.029780222102999687,\n",
       "  -0.009014450013637543,\n",
       "  0.007751279044896364,\n",
       "  -0.0038469310384243727,\n",
       "  -0.01096662413328886,\n",
       "  0.0025072037242352962,\n",
       "  0.0005354921449907124,\n",
       "  0.009882083162665367,\n",
       "  -0.019113441929221153,\n",
       "  0.010041574016213417,\n",
       "  0.004574211314320564,\n",
       "  -0.004880434833467007,\n",
       "  -0.019968315958976746,\n",
       "  -0.004484896548092365,\n",
       "  0.0118406368419528,\n",
       "  -0.014711480587720871,\n",
       "  0.009901221841573715,\n",
       "  0.003489670343697071,\n",
       "  -0.035828132182359695,\n",
       "  -0.006564663257449865,\n",
       "  0.029371924698352814,\n",
       "  -0.021180449053645134,\n",
       "  -0.020670076832175255,\n",
       "  0.026105541735887527,\n",
       "  -0.007617305964231491,\n",
       "  -0.01703367382287979,\n",
       "  0.024421313777565956,\n",
       "  -0.005135620944201946,\n",
       "  -0.019521739333868027,\n",
       "  -0.006807090248912573,\n",
       "  -0.014086274430155754,\n",
       "  0.01619156077504158,\n",
       "  -0.026590395718812943,\n",
       "  0.009588618762791157,\n",
       "  -0.004389201290905476,\n",
       "  -0.013958681374788284,\n",
       "  0.0004057060868944973,\n",
       "  0.039502814412117004,\n",
       "  0.0047273230738937855,\n",
       "  0.030469223856925964,\n",
       "  0.018794458359479904,\n",
       "  -0.009154802188277245,\n",
       "  0.02425544150173664,\n",
       "  -0.0001596906949998811,\n",
       "  0.01799062266945839,\n",
       "  -0.012669991701841354,\n",
       "  -0.005891609936952591,\n",
       "  0.024331998080015182,\n",
       "  0.020019352436065674,\n",
       "  0.018360642716288567,\n",
       "  -0.007087795063853264,\n",
       "  0.010730576701462269,\n",
       "  -0.016663653776049614,\n",
       "  0.01574498414993286,\n",
       "  0.015132538042962551,\n",
       "  0.006877266336232424,\n",
       "  -0.017748195677995682,\n",
       "  0.007470574229955673,\n",
       "  -0.010398834943771362,\n",
       "  0.013575902208685875,\n",
       "  0.011081458069384098,\n",
       "  0.015374965034425259,\n",
       "  0.02560792863368988,\n",
       "  -2.128212508978322e-05,\n",
       "  -0.021244246512651443,\n",
       "  -0.028733959421515465,\n",
       "  0.0005677891313098371,\n",
       "  0.020670076832175255,\n",
       "  0.03445012867450714,\n",
       "  0.011987368576228619,\n",
       "  0.020338334143161774,\n",
       "  -0.017722677439451218,\n",
       "  -0.0030765878036618233,\n",
       "  0.029116738587617874,\n",
       "  -0.011087837629020214,\n",
       "  -0.001491243951022625,\n",
       "  -0.014481812715530396,\n",
       "  -0.023438846692442894,\n",
       "  0.005952216684818268,\n",
       "  -0.018488235771656036,\n",
       "  0.0461631715297699,\n",
       "  0.010047954507172108,\n",
       "  -0.02031281590461731,\n",
       "  -0.01690608076751232,\n",
       "  0.02689661830663681,\n",
       "  -0.018092697486281395,\n",
       "  0.007489712908864021,\n",
       "  0.008976172655820847,\n",
       "  0.018985848873853683,\n",
       "  -0.004507225006818771,\n",
       "  -0.02470201812684536,\n",
       "  0.013116567395627499,\n",
       "  0.02083594724535942,\n",
       "  0.026488320901989937,\n",
       "  0.023043308407068253,\n",
       "  0.009882083162665367,\n",
       "  -0.018539272248744965,\n",
       "  -0.0028931729029864073,\n",
       "  0.023387808352708817,\n",
       "  0.018628587946295738,\n",
       "  0.006877266336232424,\n",
       "  0.010532807558774948,\n",
       "  0.011106976307928562,\n",
       "  -0.013346235267817974,\n",
       "  0.004475326742976904,\n",
       "  -0.030852003023028374,\n",
       "  0.00014065142022445798,\n",
       "  0.03919659182429314,\n",
       "  -0.018398920074105263,\n",
       "  0.028325660154223442,\n",
       "  0.03825240209698677,\n",
       "  0.01218513771891594,\n",
       "  0.007023998536169529,\n",
       "  0.002007995964959264,\n",
       "  0.004666716326028109,\n",
       "  -0.00032296995050273836,\n",
       "  0.012778446078300476,\n",
       "  0.004979319404810667,\n",
       "  0.016229838132858276,\n",
       "  0.011272847652435303,\n",
       "  -0.000342108920449391,\n",
       "  -0.030392669141292572,\n",
       "  0.003047879319638014,\n",
       "  0.00594902690500021,\n",
       "  0.002229688921943307,\n",
       "  0.013269678689539433,\n",
       "  -0.015438761562108994,\n",
       "  0.006915544159710407,\n",
       "  -0.01131750550121069,\n",
       "  0.0213463194668293,\n",
       "  -0.00206381781026721,\n",
       "  -0.0064211213029921055,\n",
       "  0.014201108366250992,\n",
       "  -0.017059193924069405,\n",
       "  -0.023489883169531822,\n",
       "  -0.011489755474030972,\n",
       "  0.017824752256274223,\n",
       "  0.010169167071580887,\n",
       "  -0.0009091005777008832,\n",
       "  -0.03442461043596268,\n",
       "  0.009467405267059803,\n",
       "  -0.0034609618596732616,\n",
       "  0.02967814728617668,\n",
       "  -0.008459419943392277,\n",
       "  0.011783219873905182,\n",
       "  0.006972961127758026,\n",
       "  -0.006127656903117895,\n",
       "  -0.013307956978678703,\n",
       "  0.0040861680172383785,\n",
       "  0.03585365042090416,\n",
       "  -0.001658709836192429,\n",
       "  -0.0012512095272541046,\n",
       "  0.003248838474974036,\n",
       "  0.010762475430965424,\n",
       "  -0.011885294690728188,\n",
       "  -0.024280961602926254,\n",
       "  -0.024753054603934288,\n",
       "  0.01916447840631008,\n",
       "  -0.006915544159710407,\n",
       "  -0.012051165103912354,\n",
       "  -0.002100500976666808,\n",
       "  0.035241205245256424,\n",
       "  -0.007311082910746336,\n",
       "  -0.01242118515074253,\n",
       "  -0.027560101822018623,\n",
       "  0.008172336034476757,\n",
       "  -0.02211187779903412,\n",
       "  -0.001141957938671112,\n",
       "  -0.004248849116265774,\n",
       "  -0.00032596042728982866,\n",
       "  0.021461153402924538,\n",
       "  0.029525035992264748,\n",
       "  0.0008827845449559391,\n",
       "  -0.008427522145211697,\n",
       "  0.0012121341424062848,\n",
       "  -0.019126201048493385,\n",
       "  -0.00606386037543416,\n",
       "  0.04128911718726158,\n",
       "  0.004357303027063608,\n",
       "  0.02129528298974037,\n",
       "  -0.0006682687089778483,\n",
       "  -0.0029298558365553617,\n",
       "  -0.015055982396006584,\n",
       "  -0.02837669849395752,\n",
       "  -0.017888547852635384,\n",
       "  0.021754618734121323,\n",
       "  0.015489798039197922,\n",
       "  -0.014226626604795456,\n",
       "  -0.016306394711136818,\n",
       "  0.019560016691684723,\n",
       "  -0.009142043069005013,\n",
       "  0.007834214717149734,\n",
       "  0.015413242392241955,\n",
       "  0.01499218586832285,\n",
       "  0.015642909333109856,\n",
       "  -0.006743293721228838,\n",
       "  -0.009907601401209831,\n",
       "  -0.0061467960476875305,\n",
       "  0.01096662413328886,\n",
       "  0.040727708488702774,\n",
       "  -0.019496221095323563,\n",
       "  0.012957075610756874,\n",
       "  -0.011815117672085762,\n",
       "  0.02875947766005993,\n",
       "  0.0186923835426569,\n",
       "  0.022532936185598373,\n",
       "  -0.01212772075086832,\n",
       "  0.0036938192788511515,\n",
       "  -0.006972961127758026,\n",
       "  -0.015323927626013756,\n",
       "  -0.009543961845338345,\n",
       "  0.0015303193358704448,\n",
       "  0.03064785525202751,\n",
       "  -0.014073515310883522,\n",
       "  0.005071824416518211,\n",
       "  0.009103765711188316,\n",
       "  0.007215388119220734,\n",
       "  0.03881381079554558,\n",
       "  0.0156811885535717,\n",
       "  0.004832587204873562,\n",
       "  0.008070261217653751,\n",
       "  -0.00805750209838152,\n",
       "  -0.023464364930987358,\n",
       "  -0.017505768686532974,\n",
       "  0.027253879234194756,\n",
       "  -0.004063839092850685,\n",
       "  0.01315484568476677,\n",
       "  0.031132709234952927,\n",
       "  -0.010296760126948357,\n",
       "  -0.03174515441060066,\n",
       "  -0.019432423636317253,\n",
       "  0.0003919499577023089,\n",
       "  0.01903688535094261,\n",
       "  -0.02096354030072689,\n",
       "  -0.024459591135382652,\n",
       "  -0.01753128692507744,\n",
       "  -0.03631298616528511,\n",
       "  0.021065615117549896,\n",
       "  -0.04422375559806824,\n",
       "  0.02804495580494404,\n",
       "  0.014583887532353401,\n",
       "  -0.010590224526822567,\n",
       "  -0.009461025707423687,\n",
       "  -0.01663813553750515,\n",
       "  -0.0018245808314532042,\n",
       "  -0.01818201132118702,\n",
       "  -0.015170815400779247,\n",
       "  0.0002474109351169318,\n",
       "  0.005550298374146223,\n",
       "  -0.01222341600805521,\n",
       "  -0.0170974712818861,\n",
       "  0.04521898180246353,\n",
       "  -0.00644663954153657,\n",
       "  0.0014146881876513362,\n",
       "  0.008427522145211697,\n",
       "  0.0277897696942091,\n",
       "  0.04792395606637001,\n",
       "  0.0249572042375803,\n",
       "  -0.018347883597016335,\n",
       "  -0.0008014439372345805,\n",
       "  -0.022086359560489655,\n",
       "  0.016804007813334465,\n",
       "  0.009780008345842361,\n",
       "  0.006382843013852835,\n",
       "  -0.003508809255436063,\n",
       "  0.012242554686963558,\n",
       "  0.007464194670319557,\n",
       "  0.019955554977059364,\n",
       "  -0.005712979473173618,\n",
       "  0.020886985585093498,\n",
       "  0.00925687700510025,\n",
       "  -0.02037661336362362,\n",
       "  -0.0028389457147568464,\n",
       "  -0.0013660432305186987,\n",
       "  -0.003371646860614419,\n",
       "  -0.024434072896838188,\n",
       "  -0.00257897493429482,\n",
       "  0.02037661336362362,\n",
       "  0.002103690756484866,\n",
       "  -0.011521654203534126,\n",
       "  -0.014660443179309368,\n",
       "  0.001995236612856388,\n",
       "  0.018858255818486214,\n",
       "  0.01696987822651863,\n",
       "  0.030622337013483047,\n",
       "  -0.0087082264944911,\n",
       "  0.01573222503066063,\n",
       "  0.035700540989637375,\n",
       "  -0.023859903216362,\n",
       "  0.01038607582449913,\n",
       "  0.02748354710638523,\n",
       "  -0.008108539506793022,\n",
       "  0.01351210568100214,\n",
       "  -0.002524747746065259,\n",
       "  -0.025582410395145416,\n",
       "  0.00016746589972171932,\n",
       "  -0.026488320901989937,\n",
       "  -0.052721455693244934,\n",
       "  -0.036593690514564514,\n",
       "  0.0033907857723534107,\n",
       "  -0.007502472493797541,\n",
       "  0.0076428246684372425,\n",
       "  0.006532764993607998,\n",
       "  0.019317589700222015,\n",
       "  -0.007304702885448933,\n",
       "  -0.0022009804379194975,\n",
       "  0.0080000851303339,\n",
       "  0.02179289609193802,\n",
       "  -0.005984114948660135,\n",
       "  0.02050420641899109,\n",
       "  -0.018296845257282257,\n",
       "  -0.00835096649825573,\n",
       "  -0.009952259249985218,\n",
       "  -0.004223330412060022,\n",
       "  0.021639784798026085,\n",
       "  0.001469712588004768,\n",
       "  -0.026794543489813805,\n",
       "  -0.01393316313624382,\n",
       "  0.012880519963800907,\n",
       "  0.004682665690779686,\n",
       "  0.010749716311693192,\n",
       "  -0.01781199313700199,\n",
       "  -0.02837669849395752,\n",
       "  0.00629033800214529,\n",
       "  0.0090973861515522,\n",
       "  -0.015528076328337193,\n",
       "  0.013754532672464848,\n",
       "  -0.01034779753535986,\n",
       "  0.024434072896838188,\n",
       "  -0.027764251455664635,\n",
       "  -0.0066284597851336,\n",
       "  -0.007087795063853264,\n",
       "  -0.02947399765253067,\n",
       "  -0.014647684060037136,\n",
       "  -0.018552031368017197,\n",
       "  0.014571128413081169,\n",
       "  0.012204277329146862,\n",
       "  0.017595084384083748,\n",
       "  0.0029298558365553617,\n",
       "  0.028274623677134514,\n",
       "  0.012472222559154034,\n",
       "  -0.016076726838946342,\n",
       "  0.02727939747273922,\n",
       "  -0.02735595405101776,\n",
       "  0.016918839886784554,\n",
       "  0.0022583974059671164,\n",
       "  -0.00201437552459538,\n",
       "  0.03424597904086113,\n",
       "  0.014622165821492672,\n",
       "  -0.016025688499212265,\n",
       "  0.0009521632455289364,\n",
       "  -0.02069559507071972,\n",
       "  0.013524864800274372,\n",
       "  0.024280961602926254,\n",
       "  -0.01254877820611,\n",
       "  -0.034016311168670654,\n",
       "  -0.03715510293841362,\n",
       "  -0.014609405770897865,\n",
       "  -0.01605120860040188,\n",
       "  -0.007476953789591789,\n",
       "  -0.00046372105134651065,\n",
       "  -0.0010781614109873772,\n",
       "  -0.024599943310022354,\n",
       "  0.04631628468632698,\n",
       "  0.01141957938671112,\n",
       "  -0.0070750354789197445,\n",
       "  0.00883581954985857,\n",
       "  0.006545524578541517,\n",
       "  -0.011183531954884529,\n",
       "  0.0008484938880428672,\n",
       "  0.0225839726626873,\n",
       "  0.010086231864988804,\n",
       "  -0.026871100068092346,\n",
       "  0.012063924223184586,\n",
       "  -0.03348042070865631,\n",
       "  -0.0018405299633741379,\n",
       "  0.014150070957839489,\n",
       "  -0.0022599922958761454,\n",
       "  0.0313623771071434,\n",
       "  0.024918926879763603,\n",
       "  -0.0007165148272179067,\n",
       "  0.008140437304973602,\n",
       "  0.022660529240965843,\n",
       "  -0.011872534640133381,\n",
       "  -0.040140777826309204,\n",
       "  -0.009684314019978046,\n",
       "  -0.006902785040438175,\n",
       "  -0.009020829573273659,\n",
       "  -0.013422790914773941,\n",
       "  -0.014137311838567257,\n",
       "  -0.02786632627248764,\n",
       "  0.015693947672843933,\n",
       "  0.008746504783630371,\n",
       "  -0.011081458069384098,\n",
       "  0.0005566247855313122,\n",
       "  -0.0032855214085429907,\n",
       "  0.0007775202393531799,\n",
       "  0.020976299419999123,\n",
       "  0.03031611256301403,\n",
       "  0.018794458359479904,\n",
       "  -0.00934619177132845,\n",
       "  0.013575902208685875,\n",
       "  0.0357515774667263,\n",
       "  -0.016025688499212265,\n",
       "  -0.01908792369067669,\n",
       "  -0.013473828323185444,\n",
       "  0.006248870398849249,\n",
       "  0.0015343066770583391,\n",
       "  0.029295368120074272,\n",
       "  0.0225839726626873,\n",
       "  -0.03942625969648361,\n",
       "  0.0023732311092317104,\n",
       "  0.029499517753720284,\n",
       "  0.011304745450615883,\n",
       "  0.012937936931848526,\n",
       "  -0.01105593889951706,\n",
       "  0.0028836033307015896,\n",
       "  0.02121872641146183,\n",
       "  -0.001405916060321033,\n",
       "  0.0030718031339347363,\n",
       "  -0.015910856425762177,\n",
       "  0.0009394039516337216,\n",
       "  0.015004944987595081,\n",
       "  0.007100554183125496,\n",
       "  0.04054907709360123,\n",
       "  0.008312688209116459,\n",
       "  -0.020210741087794304,\n",
       "  -0.00909100566059351,\n",
       "  0.019521739333868027,\n",
       "  -0.005470552947372198,\n",
       "  0.00398409366607666,\n",
       "  -0.006564663257449865,\n",
       "  -0.02406405285000801,\n",
       "  0.016204319894313812,\n",
       "  -0.02051696553826332,\n",
       "  0.016433987766504288,\n",
       "  0.001658709836192429,\n",
       "  -0.02715180441737175,\n",
       "  0.007751279044896364,\n",
       "  -0.010883688926696777,\n",
       "  0.02502099983394146,\n",
       "  0.005387617275118828,\n",
       "  -0.0035726057831197977,\n",
       "  0.008191474713385105,\n",
       "  0.013984200544655323,\n",
       "  0.022941233590245247,\n",
       "  0.018207531422376633,\n",
       "  -0.029576072469353676,\n",
       "  -0.018922051414847374,\n",
       "  0.03348042070865631,\n",
       "  -0.011496135033667088,\n",
       "  0.013575902208685875,\n",
       "  -0.00858063343912363,\n",
       "  -0.016663653776049614,\n",
       "  -4.572915713652037e-05,\n",
       "  -0.0332762710750103,\n",
       "  -0.011980989016592503,\n",
       "  -0.007177109830081463,\n",
       "  0.004035130608826876,\n",
       "  -0.028529809787869453,\n",
       "  -0.016344672068953514,\n",
       "  0.008006464689970016,\n",
       "  -0.010494530200958252,\n",
       "  -0.01857755146920681,\n",
       "  -0.0047177537344396114,\n",
       "  0.003770375158637762,\n",
       "  0.013473828323185444,\n",
       "  -0.008982552215456963,\n",
       "  -0.003416304476559162,\n",
       "  -0.008504077792167664,\n",
       "  0.003543897531926632,\n",
       "  0.01106231939047575,\n",
       "  -0.005773586221039295,\n",
       "  0.005776776000857353,\n",
       "  0.0265138391405344,\n",
       "  -0.03233208507299423,\n",
       "  0.036593690514564514,\n",
       "  0.033710088580846786,\n",
       "  -0.01260619517415762,\n",
       "  0.001829365617595613,\n",
       "  0.026207616552710533,\n",
       "  0.011158013716340065,\n",
       "  -0.0007567863794974983,\n",
       "  -0.005671511869877577,\n",
       "  -0.027764251455664635,\n",
       "  -0.027330435812473297,\n",
       "  -0.01218513771891594,\n",
       "  -0.008625291287899017,\n",
       "  -0.02599070779979229,\n",
       "  0.001146742724813521,\n",
       "  0.005113292019814253,\n",
       "  -0.013020872138440609,\n",
       "  -0.008134057745337486,\n",
       "  0.014035237021744251,\n",
       "  -0.017748195677995682,\n",
       "  -0.03501153737306595,\n",
       "  0.0012902849121019244,\n",
       "  -0.029244331642985344,\n",
       "  0.003875639522448182,\n",
       "  0.03335282951593399,\n",
       "  0.000456942681921646,\n",
       "  -0.004146774765104055,\n",
       "  -0.019917277619242668,\n",
       "  -0.0027209222316741943,\n",
       "  -0.013358994387090206,\n",
       "  -0.0029872728046029806,\n",
       "  -0.02393645979464054,\n",
       "  -0.013984200544655323,\n",
       "  0.03182171285152435,\n",
       "  -0.005240885075181723,\n",
       "  -0.018871014937758446,\n",
       "  -0.03233208507299423,\n",
       "  0.024740295484662056,\n",
       "  -0.0019138960633426905,\n",
       "  -0.0020255399867892265,\n",
       "  -0.020172463729977608,\n",
       "  0.008063881658017635,\n",
       "  0.012497740797698498,\n",
       "  0.010118130594491959,\n",
       "  0.02192048914730549,\n",
       "  0.0014433965552598238,\n",
       "  -0.005636423826217651,\n",
       "  -0.017493009567260742,\n",
       "  -0.003776754718273878,\n",
       "  2.4770997697487473e-05,\n",
       "  -0.004130825400352478,\n",
       "  -0.018934810534119606,\n",
       "  0.011196292005479336,\n",
       "  0.04973577708005905,\n",
       "  0.028682921081781387,\n",
       "  0.011145254597067833,\n",
       "  0.006379653234034777,\n",
       "  -0.005448224022984505,\n",
       "  -0.05573265254497528,\n",
       "  -0.005885230377316475,\n",
       "  -0.017263341695070267,\n",
       "  0.008644429966807365,\n",
       "  0.0002918691316153854,\n",
       "  0.006315856706351042,\n",
       "  -0.006009633652865887,\n",
       "  0.02223947085440159,\n",
       "  -0.006890025455504656,\n",
       "  0.029320886358618736,\n",
       "  -0.0037990836426615715,\n",
       "  0.021563228219747543,\n",
       "  -0.016612617298960686,\n",
       "  -0.0022440431639552116,\n",
       "  -0.014099033549427986,\n",
       "  0.0012767281150445342,\n",
       "  -0.032357603311538696,\n",
       "  -0.019560016691684723,\n",
       "  0.036415062844753265,\n",
       "  0.0183734018355608,\n",
       "  0.005661942530423403,\n",
       "  -0.004315835423767567,\n",
       "  -0.01131750550121069,\n",
       "  -0.019457941874861717,\n",
       "  0.0032137504313141108,\n",
       "  -0.000314197939587757,\n",
       "  -0.007304702885448933,\n",
       "  0.019075162708759308,\n",
       "  0.035955727100372314,\n",
       "  -0.010807132348418236,\n",
       "  0.001366840791888535,\n",
       "  -0.014609405770897865,\n",
       "  -0.00047209433978423476,\n",
       "  -0.025174112990498543,\n",
       "  0.019011367112398148,\n",
       "  -0.0020733873825520277,\n",
       "  0.0008437091601081192,\n",
       "  0.00867632869631052,\n",
       "  -0.000603674678131938,\n",
       "  -0.023375049233436584,\n",
       "  0.004746462218463421,\n",
       "  -0.02727939747273922,\n",
       "  0.0011291987029835582,\n",
       "  -0.01740369386970997,\n",
       "  -0.001830960507504642,\n",
       "  0.023196419700980186,\n",
       "  -0.001945794327184558,\n",
       "  -0.04185052588582039,\n",
       "  -0.0034482027404010296,\n",
       "  0.018016140908002853,\n",
       "  -0.014775277115404606,\n",
       "  2.631607094372157e-05,\n",
       "  0.015898095443844795,\n",
       "  -0.023183660581707954,\n",
       "  0.006481728050857782,\n",
       "  -0.010405214503407478,\n",
       "  0.00675605284050107,\n",
       "  -0.009996917098760605,\n",
       "  -0.025518612936139107,\n",
       "  -0.010201065801084042,\n",
       "  -0.027177322655916214,\n",
       "  -0.026973174884915352,\n",
       "  0.003882019082084298,\n",
       "  0.0007715393439866602,\n",
       "  -0.017059193924069405,\n",
       "  -0.018603069707751274,\n",
       "  -0.010998522862792015,\n",
       "  0.011285606771707535,\n",
       "  -0.03386320173740387,\n",
       "  -0.02077215164899826,\n",
       "  0.02727939747273922,\n",
       "  -0.029780222102999687,\n",
       "  -0.0032552180346101522,\n",
       "  0.017186786979436874,\n",
       "  0.013882125727832317,\n",
       "  -0.035828132182359695,\n",
       "  -0.007234526798129082,\n",
       "  -0.019917277619242668,\n",
       "  0.004695424810051918,\n",
       "  0.0265138391405344,\n",
       "  0.19098129868507385,\n",
       "  0.01671469211578369,\n",
       "  0.00854873564094305,\n",
       "  0.04422375559806824,\n",
       "  0.03281693533062935,\n",
       "  0.03906899690628052,\n",
       "  0.007145211566239595,\n",
       "  0.0031834470573812723,\n",
       "  -0.013320716097950935,\n",
       "  0.01160458941012621,\n",
       "  0.008899616077542305,\n",
       "  0.0098948422819376,\n",
       "  -0.0022488278336822987,\n",
       "  0.0016020904295146465,\n",
       "  0.013218642212450504,\n",
       "  -0.03465427830815315,\n",
       "  -0.03649161756038666,\n",
       "  -0.007610926404595375,\n",
       "  -0.013780050911009312,\n",
       "  -0.0036714905872941017,\n",
       "  0.015285649336874485,\n",
       "  -0.0023556870874017477,\n",
       "  0.011713043786585331,\n",
       "  -0.03120926395058632,\n",
       "  0.00860615260899067,\n",
       "  0.007004859391599894,\n",
       "  -0.024663740769028664,\n",
       "  -0.009282395243644714,\n",
       "  0.032025858759880066,\n",
       "  0.029295368120074272,\n",
       "  -0.013295197859406471,\n",
       "  -0.031056152656674385,\n",
       "  0.018398920074105263,\n",
       "  0.010941105894744396,\n",
       "  0.0064211213029921055,\n",
       "  -0.001486459281295538,\n",
       "  0.004181862808763981,\n",
       "  -0.0003124036593362689,\n",
       "  0.009843804873526096,\n",
       "  0.022073600441217422,\n",
       "  -0.021907730028033257,\n",
       "  0.014736998826265335,\n",
       "  0.03868621960282326,\n",
       "  -0.024089571088552475,\n",
       "  0.006634839344769716,\n",
       "  0.008599773049354553,\n",
       "  ...],\n",
       " 'sourcefile': 'products.txt'}"
      ]
     },
     "execution_count": 36,
     "metadata": {},
     "output_type": "execute_result"
    }
   ],
   "source": [
    "documents[0]"
   ]
  },
  {
   "cell_type": "markdown",
   "metadata": {},
   "source": [
    "Upload document lên index"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 37,
   "metadata": {},
   "outputs": [
    {
     "data": {
      "text/plain": [
       "[<azure.search.documents._generated.models._models_py3.IndexingResult at 0x7f95d41fc4d0>,\n",
       " <azure.search.documents._generated.models._models_py3.IndexingResult at 0x7f95d438ba10>,\n",
       " <azure.search.documents._generated.models._models_py3.IndexingResult at 0x7f95d438b810>,\n",
       " <azure.search.documents._generated.models._models_py3.IndexingResult at 0x7f95d438aad0>,\n",
       " <azure.search.documents._generated.models._models_py3.IndexingResult at 0x7f95d4389f90>,\n",
       " <azure.search.documents._generated.models._models_py3.IndexingResult at 0x7f95d438bfd0>,\n",
       " <azure.search.documents._generated.models._models_py3.IndexingResult at 0x7f95dc171950>,\n",
       " <azure.search.documents._generated.models._models_py3.IndexingResult at 0x7f95dc170d50>,\n",
       " <azure.search.documents._generated.models._models_py3.IndexingResult at 0x7f95dc172150>,\n",
       " <azure.search.documents._generated.models._models_py3.IndexingResult at 0x7f95dc170550>,\n",
       " <azure.search.documents._generated.models._models_py3.IndexingResult at 0x7f95dc170810>,\n",
       " <azure.search.documents._generated.models._models_py3.IndexingResult at 0x7f95d4517d90>,\n",
       " <azure.search.documents._generated.models._models_py3.IndexingResult at 0x7f95d4517550>,\n",
       " <azure.search.documents._generated.models._models_py3.IndexingResult at 0x7f95d4517110>,\n",
       " <azure.search.documents._generated.models._models_py3.IndexingResult at 0x7f95d4516950>,\n",
       " <azure.search.documents._generated.models._models_py3.IndexingResult at 0x7f95d4517950>,\n",
       " <azure.search.documents._generated.models._models_py3.IndexingResult at 0x7f95d4515390>,\n",
       " <azure.search.documents._generated.models._models_py3.IndexingResult at 0x7f95d4516d10>,\n",
       " <azure.search.documents._generated.models._models_py3.IndexingResult at 0x7f95d4517290>,\n",
       " <azure.search.documents._generated.models._models_py3.IndexingResult at 0x7f95d4511b50>,\n",
       " <azure.search.documents._generated.models._models_py3.IndexingResult at 0x7f95d4511bd0>,\n",
       " <azure.search.documents._generated.models._models_py3.IndexingResult at 0x7f95dc3d0590>,\n",
       " <azure.search.documents._generated.models._models_py3.IndexingResult at 0x7f95d454c910>,\n",
       " <azure.search.documents._generated.models._models_py3.IndexingResult at 0x7f95d454db90>,\n",
       " <azure.search.documents._generated.models._models_py3.IndexingResult at 0x7f95d454e410>,\n",
       " <azure.search.documents._generated.models._models_py3.IndexingResult at 0x7f95d454f190>,\n",
       " <azure.search.documents._generated.models._models_py3.IndexingResult at 0x7f95d454dc50>,\n",
       " <azure.search.documents._generated.models._models_py3.IndexingResult at 0x7f95d454d4d0>,\n",
       " <azure.search.documents._generated.models._models_py3.IndexingResult at 0x7f95d454dc90>,\n",
       " <azure.search.documents._generated.models._models_py3.IndexingResult at 0x7f95d454fa50>,\n",
       " <azure.search.documents._generated.models._models_py3.IndexingResult at 0x7f95d454d9d0>,\n",
       " <azure.search.documents._generated.models._models_py3.IndexingResult at 0x7f95d454f8d0>,\n",
       " <azure.search.documents._generated.models._models_py3.IndexingResult at 0x7f95d454e110>,\n",
       " <azure.search.documents._generated.models._models_py3.IndexingResult at 0x7f95d454e390>,\n",
       " <azure.search.documents._generated.models._models_py3.IndexingResult at 0x7f95d454eed0>,\n",
       " <azure.search.documents._generated.models._models_py3.IndexingResult at 0x7f95d454c710>,\n",
       " <azure.search.documents._generated.models._models_py3.IndexingResult at 0x7f95d4557e10>,\n",
       " <azure.search.documents._generated.models._models_py3.IndexingResult at 0x7f95d4554310>,\n",
       " <azure.search.documents._generated.models._models_py3.IndexingResult at 0x7f95d4557010>,\n",
       " <azure.search.documents._generated.models._models_py3.IndexingResult at 0x7f95d4556750>,\n",
       " <azure.search.documents._generated.models._models_py3.IndexingResult at 0x7f95d4554d90>,\n",
       " <azure.search.documents._generated.models._models_py3.IndexingResult at 0x7f95d4556410>,\n",
       " <azure.search.documents._generated.models._models_py3.IndexingResult at 0x7f95d4557d90>,\n",
       " <azure.search.documents._generated.models._models_py3.IndexingResult at 0x7f95d45567d0>,\n",
       " <azure.search.documents._generated.models._models_py3.IndexingResult at 0x7f95d4556e50>,\n",
       " <azure.search.documents._generated.models._models_py3.IndexingResult at 0x7f95d45547d0>,\n",
       " <azure.search.documents._generated.models._models_py3.IndexingResult at 0x7f95d4556210>,\n",
       " <azure.search.documents._generated.models._models_py3.IndexingResult at 0x7f95d4555f10>,\n",
       " <azure.search.documents._generated.models._models_py3.IndexingResult at 0x7f95d4555110>,\n",
       " <azure.search.documents._generated.models._models_py3.IndexingResult at 0x7f95d4557950>,\n",
       " <azure.search.documents._generated.models._models_py3.IndexingResult at 0x7f95d45579d0>,\n",
       " <azure.search.documents._generated.models._models_py3.IndexingResult at 0x7f95d45550d0>,\n",
       " <azure.search.documents._generated.models._models_py3.IndexingResult at 0x7f95d4554f10>,\n",
       " <azure.search.documents._generated.models._models_py3.IndexingResult at 0x7f95d45578d0>,\n",
       " <azure.search.documents._generated.models._models_py3.IndexingResult at 0x7f95d4557050>,\n",
       " <azure.search.documents._generated.models._models_py3.IndexingResult at 0x7f95d4555ad0>,\n",
       " <azure.search.documents._generated.models._models_py3.IndexingResult at 0x7f95d4557850>,\n",
       " <azure.search.documents._generated.models._models_py3.IndexingResult at 0x7f95d45558d0>,\n",
       " <azure.search.documents._generated.models._models_py3.IndexingResult at 0x7f95d4556a10>,\n",
       " <azure.search.documents._generated.models._models_py3.IndexingResult at 0x7f95d4556e90>,\n",
       " <azure.search.documents._generated.models._models_py3.IndexingResult at 0x7f95d4557650>,\n",
       " <azure.search.documents._generated.models._models_py3.IndexingResult at 0x7f95d4555650>,\n",
       " <azure.search.documents._generated.models._models_py3.IndexingResult at 0x7f95d4555e90>,\n",
       " <azure.search.documents._generated.models._models_py3.IndexingResult at 0x7f95d452b210>,\n",
       " <azure.search.documents._generated.models._models_py3.IndexingResult at 0x7f95d4528e90>,\n",
       " <azure.search.documents._generated.models._models_py3.IndexingResult at 0x7f95d452b150>,\n",
       " <azure.search.documents._generated.models._models_py3.IndexingResult at 0x7f95d452b4d0>,\n",
       " <azure.search.documents._generated.models._models_py3.IndexingResult at 0x7f95d4529610>,\n",
       " <azure.search.documents._generated.models._models_py3.IndexingResult at 0x7f95d4298790>,\n",
       " <azure.search.documents._generated.models._models_py3.IndexingResult at 0x7f95d4298550>,\n",
       " <azure.search.documents._generated.models._models_py3.IndexingResult at 0x7f95d429a050>,\n",
       " <azure.search.documents._generated.models._models_py3.IndexingResult at 0x7f95d4299e10>,\n",
       " <azure.search.documents._generated.models._models_py3.IndexingResult at 0x7f95d429b210>,\n",
       " <azure.search.documents._generated.models._models_py3.IndexingResult at 0x7f95d429b190>,\n",
       " <azure.search.documents._generated.models._models_py3.IndexingResult at 0x7f95d429b990>,\n",
       " <azure.search.documents._generated.models._models_py3.IndexingResult at 0x7f95d429b090>,\n",
       " <azure.search.documents._generated.models._models_py3.IndexingResult at 0x7f95d4298490>,\n",
       " <azure.search.documents._generated.models._models_py3.IndexingResult at 0x7f95d4298bd0>,\n",
       " <azure.search.documents._generated.models._models_py3.IndexingResult at 0x7f95d429b7d0>,\n",
       " <azure.search.documents._generated.models._models_py3.IndexingResult at 0x7f95d429afd0>,\n",
       " <azure.search.documents._generated.models._models_py3.IndexingResult at 0x7f95d429b310>,\n",
       " <azure.search.documents._generated.models._models_py3.IndexingResult at 0x7f95d429a6d0>,\n",
       " <azure.search.documents._generated.models._models_py3.IndexingResult at 0x7f95d429a890>,\n",
       " <azure.search.documents._generated.models._models_py3.IndexingResult at 0x7f95d429b890>,\n",
       " <azure.search.documents._generated.models._models_py3.IndexingResult at 0x7f95d429ae50>,\n",
       " <azure.search.documents._generated.models._models_py3.IndexingResult at 0x7f95d429a0d0>,\n",
       " <azure.search.documents._generated.models._models_py3.IndexingResult at 0x7f95d4298990>,\n",
       " <azure.search.documents._generated.models._models_py3.IndexingResult at 0x7f95d429ba50>,\n",
       " <azure.search.documents._generated.models._models_py3.IndexingResult at 0x7f95d429bcd0>,\n",
       " <azure.search.documents._generated.models._models_py3.IndexingResult at 0x7f95d429ad10>,\n",
       " <azure.search.documents._generated.models._models_py3.IndexingResult at 0x7f95d429b250>,\n",
       " <azure.search.documents._generated.models._models_py3.IndexingResult at 0x7f95d4298cd0>,\n",
       " <azure.search.documents._generated.models._models_py3.IndexingResult at 0x7f95d429bb10>,\n",
       " <azure.search.documents._generated.models._models_py3.IndexingResult at 0x7f95d429a1d0>,\n",
       " <azure.search.documents._generated.models._models_py3.IndexingResult at 0x7f95d429b390>,\n",
       " <azure.search.documents._generated.models._models_py3.IndexingResult at 0x7f95d429b610>,\n",
       " <azure.search.documents._generated.models._models_py3.IndexingResult at 0x7f95d4299e90>,\n",
       " <azure.search.documents._generated.models._models_py3.IndexingResult at 0x7f95d429bb50>,\n",
       " <azure.search.documents._generated.models._models_py3.IndexingResult at 0x7f95d429b950>,\n",
       " <azure.search.documents._generated.models._models_py3.IndexingResult at 0x7f95d429b290>]"
      ]
     },
     "execution_count": 37,
     "metadata": {},
     "output_type": "execute_result"
    }
   ],
   "source": [
    "\n",
    "search_client = SearchClient(AZURE_SEARCH_ENDPOINT, AZURE_SEARCH_FULL_INDEX, credential=search_service_cred)\n",
    "search_client.upload_documents(documents=documents)"
   ]
  },
  {
   "cell_type": "markdown",
   "metadata": {},
   "source": [
    "### Bây giờ chúng ta có thể tìm kiếm thông tin sản phẩm"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 11,
   "metadata": {},
   "outputs": [
    {
     "name": "stdout",
     "output_type": "stream",
     "text": [
      "Score: 0.88687\tContent: Sony Máy in, $654.00, Máy in màu với độ phân giải cao, phù hợp cho in ấn hình ảnh và tài liệu màu. \n",
      "Score: 0.88352\tContent: Canon Máy in, $901.00, Máy in màu với độ phân giải cao, phù hợp cho in ấn hình ảnh và tài liệu màu. \n",
      "Score: 0.88164\tContent: Sony Máy in, $548.00, Máy in chất lượng cao, in ấn nhanh chóng và tiết kiệm mực. Sản phẩm này có khả năng in ấn đa dạng, từ tài liệu văn phòng đến hìn\n",
      "Score: 0.88103\tContent: Samsung Máy in, $401.00, Máy in chất lượng cao, in ấn nhanh chóng và tiết kiệm mực. Sản phẩm này có khả năng in ấn đa dạng, từ tài liệu văn phòng đến \n",
      "Score: 0.87831\tContent: Nikon Máy in, $923.00, Máy in màu với độ phân giải cao, phù hợp cho in ấn hình ảnh và tài liệu màu. \n"
     ]
    }
   ],
   "source": [
    "search_query = \"cho tôi xem máy in màu\"\n",
    "search_vector = get_embedding(search_query)\n",
    "search_client = SearchClient(AZURE_SEARCH_ENDPOINT, AZURE_SEARCH_FULL_INDEX, credential=search_service_cred)\n",
    "r = search_client.search(search_text=None, top=5, vector_queries=[\n",
    "    VectorizedQuery(vector=search_vector, k_nearest_neighbors=5, fields=\"embedding\")])\n",
    "for doc in r:\n",
    "    content = doc[\"content\"].replace(\"\\n\", \" \")[:150]\n",
    "    print(f\"Score: {doc['@search.score']:.5f}\\tContent: {content}\")"
   ]
  },
  {
   "cell_type": "markdown",
   "metadata": {},
   "source": [
    "## Tìm kiếm với Semantic và Hybrid search"
   ]
  },
  {
   "cell_type": "markdown",
   "metadata": {},
   "source": [
    "Trong nhiều trường hợp thực tế, kết hợp giữa text search và vector search có thể cho kết quả tốt hơn. \n",
    "Chúng ta có thể kết hợp text search và vector search (gọi là hybrid search), kết quả cuối cùng còn được xếp hạng (ranked) qua mô hình AI Search semantic ranker."
   ]
  },
  {
   "cell_type": "markdown",
   "metadata": {},
   "source": [
    "### Trước tiên chúng ta cần thiết lập semantic search cho index"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 12,
   "metadata": {},
   "outputs": [
    {
     "data": {
      "text/plain": [
       "<azure.search.documents.indexes.models._index.SearchIndex at 0x7f8e54702ad0>"
      ]
     },
     "execution_count": 12,
     "metadata": {},
     "output_type": "execute_result"
    }
   ],
   "source": [
    "\n",
    "from azure.search.documents.indexes import SearchIndexClient\n",
    "from azure.search.documents.indexes.models import SemanticConfiguration, SemanticPrioritizedFields, SemanticField, SemanticSearch\n",
    "\n",
    "index_client = SearchIndexClient(endpoint=AZURE_SEARCH_ENDPOINT, credential=search_service_cred)\n",
    "semantic_config = SemanticConfiguration(\n",
    "                    name=\"default-semantic-config\",\n",
    "                    prioritized_fields=SemanticPrioritizedFields(\n",
    "                        content_fields=[SemanticField(field_name=\"content\")]\n",
    "                    )\n",
    "                )\n",
    "\n",
    "# Create the semantic settings with the configuration\n",
    "semantic_search = SemanticSearch(configurations=[semantic_config])     \n",
    "current_index = index_client.get_index(AZURE_SEARCH_FULL_INDEX)\n",
    "current_index.semantic_search = semantic_search\n",
    "index_client.create_or_update_index(current_index)"
   ]
  },
  {
   "cell_type": "markdown",
   "metadata": {},
   "source": [
    "### Thực hiện tìm kiếm"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 17,
   "metadata": {},
   "outputs": [
    {
     "name": "stdout",
     "output_type": "stream",
     "text": [
      "Score: 3.03722\tContent: Canon Máy in, $901.00, Máy in màu với độ phân giải cao, phù hợp cho in ấn hình ảnh và tài liệu màu. \n",
      "Score: 3.01731\tContent: Nikon Máy in, $923.00, Máy in màu với độ phân giải cao, phù hợp cho in ấn hình ảnh và tài liệu màu. \n",
      "Score: 2.99280\tContent: Dell Máy in, $1393.00, Máy in màu với độ phân giải cao, phù hợp cho in ấn hình ảnh và tài liệu màu. \n",
      "Score: 2.97365\tContent: Dell Máy in, $1720.00, Máy in màu với độ phân giải cao, phù hợp cho in ấn hình ảnh và tài liệu màu. \n",
      "Score: 2.95144\tContent: Sony Máy in, $654.00, Máy in màu với độ phân giải cao, phù hợp cho in ấn hình ảnh và tài liệu màu. \n"
     ]
    }
   ],
   "source": [
    "user_question = \"cho tôi xem máy in màu\"\n",
    "user_question_vector = get_embedding(user_question)\n",
    "r = search_client.search(\n",
    "        user_question,\n",
    "        top=5, \n",
    "        vector_queries=[\n",
    "                VectorizedQuery(vector=user_question_vector, k_nearest_neighbors=50, fields=\"embedding\")],\n",
    "        query_type=\"semantic\",\n",
    "        semantic_configuration_name=\"default-semantic-config\")\n",
    "\n",
    "for doc in r:\n",
    "    content = doc[\"content\"].replace(\"\\n\", \" \")[:150]\n",
    "    print(f\"Score: {doc['@search.reranker_score']:.5f}\\tContent: {content}\")"
   ]
  }
 ],
 "metadata": {
  "kernelspec": {
   "display_name": "Python 3",
   "language": "python",
   "name": "python3"
  },
  "language_info": {
   "codemirror_mode": {
    "name": "ipython",
    "version": 3
   },
   "file_extension": ".py",
   "mimetype": "text/x-python",
   "name": "python",
   "nbconvert_exporter": "python",
   "pygments_lexer": "ipython3",
   "version": "3.11.9"
  },
  "orig_nbformat": 4
 },
 "nbformat": 4,
 "nbformat_minor": 2
}