{"id":26095,"date":"2026-07-01T13:37:35","date_gmt":"2026-07-01T13:37:35","guid":{"rendered":"https:\/\/umang.pk\/2026\/07\/01\/llm-%d9%be%d9%84%db%8c%d9%b9-%d9%81%d8%a7%d8%b1%d9%85%d8%b2-%da%a9%db%92-%d9%84%db%8c%db%92-%d9%be%d8%b1%d9%88%da%88%da%a9%d9%b9-%da%a9%db%92-%d8%aa%d8%ac%d8%b1%d8%a8%d8%a7%d8%aa-%d8%b3%d9%88%d8%a6\/"},"modified":"2026-07-01T13:37:37","modified_gmt":"2026-07-01T13:37:37","slug":"llm-%d9%be%d9%84%db%8c%d9%b9-%d9%81%d8%a7%d8%b1%d9%85%d8%b2-%da%a9%db%92-%d9%84%db%8c%db%92-%d9%be%d8%b1%d9%88%da%88%da%a9%d9%b9-%da%a9%db%92-%d8%aa%d8%ac%d8%b1%d8%a8%d8%a7%d8%aa-%d8%b3%d9%88%d8%a6","status":"publish","type":"post","link":"https:\/\/umang.pk\/ur\/2026\/07\/01\/llm-%d9%be%d9%84%db%8c%d9%b9-%d9%81%d8%a7%d8%b1%d9%85%d8%b2-%da%a9%db%92-%d9%84%db%8c%db%92-%d9%be%d8%b1%d9%88%da%88%da%a9%d9%b9-%da%a9%db%92-%d8%aa%d8%ac%d8%b1%d8%a8%d8%a7%d8%aa-%d8%b3%d9%88%d8%a6\/","title":{"rendered":"LLM \u067e\u0644\u06cc\u0679 \u0641\u0627\u0631\u0645\u0632 \u06a9\u06d2 \u0644\u06cc\u06d2 \u067e\u0631\u0648\u0688\u06a9\u0679 \u06a9\u06d2 \u062a\u062c\u0631\u0628\u0627\u062a: \u0633\u0648\u0626\u0686 \u0628\u06cc\u06a9 \u0688\u06cc\u0632\u0627\u0626\u0646 \u062c\u0628 \u0635\u0627\u0631\u0641 \u06a9\u06cc \u0631\u06cc\u0646\u0688\u0645\u0627\u0626\u0632\u06cc\u0634\u0646 Python \u0645\u06cc\u06ba \u0645\u0627\u0631\u06a9\u06cc\u0679 \u06a9\u06d2 \u062a\u0648\u0627\u0632\u0646 \u06a9\u0648 \u062a\u0648\u0691 \u062f\u06cc\u062a\u06cc \u06c1\u06d2\u06d4"},"content":{"rendered":"\n<div id=\"\">\n<p>\u0622\u067e \u06a9\u06cc \u0679\u06cc\u0645 LLM SaaS \u067e\u0644\u06cc\u0679 \u0641\u0627\u0631\u0645 \u06a9\u06d2 \u0644\u06cc\u06d2 \u0630\u06c1\u06cc\u0646 \u0627\u0633\u062a\u0641\u0633\u0627\u0631 \u0631\u0648\u0679\u0646\u06af \u06a9\u06cc \u0635\u0644\u0627\u062d\u06cc\u062a\u06cc\u06ba \u0641\u0631\u0627\u06c1\u0645 \u06a9\u0631\u06d2 \u06af\u06cc\u06d4 \u06cc\u06c1 \u0641\u06cc\u0686\u0631 \u06c1\u0631 \u0622\u0646\u06d2 \u0648\u0627\u0644\u06cc \u062f\u0631\u062e\u0648\u0627\u0633\u062a \u06a9\u0648 \u062d\u0642\u06cc\u0642\u06cc \u0648\u0642\u062a \u0645\u06cc\u06ba \u067e\u0691\u06be\u062a\u0627 \u06c1\u06d2 \u0627\u0648\u0631 \u0641\u06cc\u0635\u0644\u06c1 \u06a9\u0631\u062a\u0627 \u06c1\u06d2 \u06a9\u06c1 \u0622\u06cc\u0627 \u0627\u0633\u06d2 \u062a\u06cc\u0632 \u0631\u0641\u062a\u0627\u0631 \u0645\u0639\u06cc\u0627\u0631\u06cc \u0645\u0627\u0688\u0644 \u06cc\u0627 \u0632\u06cc\u0627\u062f\u06c1 \u067e\u0631\u0641\u0627\u0631\u0645\u0646\u0633 \u067e\u0631\u06cc\u0645\u06cc\u0645 \u0645\u0627\u0688\u0644 \u067e\u0631 \u0628\u06be\u06cc\u062c\u0646\u0627 \u06c1\u06d2\u06d4 \u0622\u0641 \u0644\u0627\u0626\u0646 \u062a\u0634\u062e\u06cc\u0635 \u0645\u06cc\u06ba\u060c \u06a9\u0627\u0645 \u06a9\u06cc \u062a\u06a9\u0645\u06cc\u0644 \u06a9\u06cc \u0634\u0631\u062d \u0645\u06cc\u06ba 6 \u0641\u06cc\u0635\u062f \u067e\u0648\u0627\u0626\u0646\u0679\u0633 \u06a9\u0627 \u0627\u0636\u0627\u0641\u06c1 \u06a9\u06cc\u0627 \u062c\u0627\u062a\u0627 \u06c1\u06d2\u06d4<\/p>\n<p>\u0622\u067e \u067e\u06cc\u062f\u0627\u0648\u0627\u0631\u06cc \u0645\u0627\u062d\u0648\u0644 \u0645\u06cc\u06ba \u062c\u0627\u0646\u0686 \u06a9\u06d2 \u0644\u06cc\u06d2 \u062a\u06cc\u0627\u0631 \u06c1\u06cc\u06ba\u06d4 \u067e\u0644\u06cc\u0679 \u0641\u0627\u0631\u0645 \u0627\u0646\u062c\u06cc\u0646\u0626\u0631 \u067e\u06be\u0631 \u0633\u0627\u062e\u062a\u06cc \u0645\u0633\u0627\u0626\u0644 \u0627\u0679\u06be\u0627\u062a\u06d2 \u06c1\u06cc\u06ba\u06d4 \u0627\u0633 \u06a9\u0627 \u0645\u0637\u0644\u0628 \u06cc\u06c1 \u06c1\u06d2 \u06a9\u06c1 \u0635\u0627\u0631\u0641 \u06a9\u06cc \u0633\u0637\u062d \u067e\u0631 \u0631\u06cc\u0646\u0688\u0645\u0627\u0626\u0632\u06cc\u0634\u0646 \u0646\u06c1\u06cc\u06ba \u06a9\u06cc \u062c\u0627 \u0633\u06a9\u062a\u06cc\u06d4<\/p>\n<p>\u0627\u0633 \u0645\u0633\u0626\u0644\u06d2 \u06a9\u06cc \u062c\u0691\u06cc\u06ba causal inference \u0645\u06cc\u06ba \u06c1\u06d2 \u0627\u0648\u0631 \u0627\u0633 \u06a9\u06d2 \u062a\u06a9\u0646\u06cc\u06a9\u06cc \u0631\u06a9\u0627\u0648\u0679\u0648\u06ba \u0633\u06d2 \u0632\u06cc\u0627\u062f\u06c1 \u06af\u06c1\u0631\u06d2 \u0627\u062b\u0631\u0627\u062a \u06c1\u06cc\u06ba\u06d4 \u062a\u0645\u0627\u0645 \u0635\u0627\u0631\u0641\u06cc\u0646 \u0633\u0646\u0679\u0631\u0644\u0627\u0626\u0632\u0688 \u067e\u0631\u06cc\u0645\u06cc\u0645 \u0645\u0627\u0688\u0644 \u06a9\u06cc \u0635\u0644\u0627\u062d\u06cc\u062a \u06a9\u06d2 \u067e\u0648\u0644 \u06a9\u0627 \u0627\u0633\u062a\u0639\u0645\u0627\u0644 \u06a9\u0631\u062a\u06d2 \u06c1\u06cc\u06ba\u06d4 \u0645\u0639\u06cc\u0627\u0631\u06cc A\/B \u0679\u06cc\u0633\u0679\u0646\u06af \u0627\u0633 \u0645\u0627\u062d\u0648\u0644 \u0645\u06cc\u06ba \u06a9\u06be\u06cc\u0644 \u06a9\u0627 \u0627\u06cc\u06a9 \u0646\u0627\u06c1\u0645\u0648\u0627\u0631 \u0645\u06cc\u062f\u0627\u0646 \u0628\u0646\u0627\u062a\u06cc \u06c1\u06d2\u06d4 \u062c\u0628 \u06a9\u0633\u06cc \u067e\u0631\u0648\u0633\u06cc\u0633\u0646\u06af \u06af\u0631\u0648\u067e \u06a9\u06d2 \u0644\u06cc\u06d2 \u0631\u0648\u0679\u0646\u06af AI \u06a9\u0648 \u0641\u0639\u0627\u0644 \u06a9\u06cc\u0627 \u062c\u0627\u062a\u0627 \u06c1\u06d2\u060c \u062a\u0648 \u0627\u0633 \u06a9\u06d2 \u0635\u0627\u0631\u0641\u06cc\u0646 \u067e\u06c1\u0644\u06d2 \u067e\u0631\u06cc\u0645\u06cc\u0645 \u0648\u0633\u0627\u0626\u0644 \u0627\u0633\u062a\u0639\u0645\u0627\u0644 \u06a9\u0631\u06cc\u06ba \u06af\u06d2 \u0627\u0648\u0631 \u06a9\u0646\u0679\u0631\u0648\u0644 \u06af\u0631\u0648\u067e \u06a9\u06cc \u062f\u0633\u062a\u06cc\u0627\u0628\u06cc \u06a9\u0645 \u06c1\u0648 \u062c\u0627\u0626\u06d2 \u06af\u06cc\u06d4<\/p>\n<p>\u0631\u0648\u0679\u0646\u06af AI \u0639\u0644\u0627\u062c \u06a9\u06d2 \u06af\u0631\u0648\u067e \u06a9\u06d2 \u062a\u062c\u0631\u0628\u06d2 \u06a9\u0648 \u062a\u0628\u062f\u06cc\u0644 \u06a9\u0631\u0646\u06d2 \u0633\u06d2 \u0632\u06cc\u0627\u062f\u06c1 \u06a9\u0631\u062a\u0627 \u06c1\u06d2\u06d4 \u06cc\u06c1 \u0628\u0646\u06cc\u0627\u062f\u06cc \u0637\u0648\u0631 \u067e\u0631 \u06c1\u0631 \u06a9\u0633\u06cc \u06a9\u06d2 \u0644\u06cc\u06d2 \u0648\u0633\u0627\u0626\u0644 \u06a9\u06d2 \u0645\u0646\u0638\u0631 \u0646\u0627\u0645\u06d2 \u06a9\u0648 \u0628\u062f\u0644 \u062f\u06cc\u062a\u0627 \u06c1\u06d2\u06d4 \u06cc\u06c1 AI \u06a9\u06d2 \u0627\u062b\u0631\u0627\u062a \u06a9\u0648 \u0627\u0644\u06af \u06a9\u0631\u0646\u06d2 \u06a9\u06d2 \u0628\u0627\u0631\u06d2 \u0645\u06cc\u06ba \u0646\u06c1\u06cc\u06ba \u06c1\u06d2\u06d4 \u06c1\u0645 AI \u0631\u0648\u0679\u0646\u06af \u06a9\u06d2 \u0645\u0634\u062a\u0631\u06a9\u06c1 \u0627\u062b\u0631\u0627\u062a \u0627\u0648\u0631 \u0627\u06cc\u06a9 \u062a\u062c\u0631\u0628\u0627\u062a\u06cc \u0688\u06cc\u0632\u0627\u0626\u0646 \u06a9\u06d2 \u0630\u0631\u06cc\u0639\u06d2 \u06a9\u0646\u0679\u0631\u0648\u0644 \u06af\u0631\u0648\u067e \u067e\u0631 \u0639\u0627\u0626\u062f \u0645\u0635\u0646\u0648\u0639\u06cc \u06a9\u0645\u06cc \u06a9\u06cc \u067e\u06cc\u0645\u0627\u0626\u0634 \u06a9\u0631 \u0631\u06c1\u06d2 \u06c1\u06cc\u06ba\u06d4 \u06cc\u06c1 \u06a9\u0648\u0626\u06cc \u0635\u0627\u0641 \u062a\u062c\u0631\u0628\u06c1 \u0646\u06c1\u06cc\u06ba \u06c1\u06d2\u060c \u06cc\u06c1 \u0627\u06cc\u06a9 \u0645\u0628\u06c1\u0645 \u067e\u06cc\u0645\u0627\u0626\u0634 \u06c1\u06d2\u06d4<\/p>\n<p>\u0633\u0648\u0626\u0686 \u0628\u06cc\u06a9 \u062a\u062c\u0631\u0628\u0627\u062a LLM \u067e\u0631 \u0645\u0628\u0646\u06cc \u067e\u0644\u06cc\u0679 \u0641\u0627\u0631\u0645\u0632 \u0627\u0648\u0631 \u0645\u0634\u062a\u0631\u06a9\u06c1 \u0648\u0633\u0627\u0626\u0644 \u06a9\u06cc \u0645\u0635\u0646\u0648\u0639\u0627\u062a \u06a9\u06d2 \u0644\u06cc\u06d2 \u0627\u06cc\u06a9 \u0645\u0639\u06cc\u0627\u0631\u06cc \u062a\u0631\u0645\u06cc\u0645 \u06c1\u06cc\u06ba \u062c\u06c1\u0627\u06ba \u0635\u0627\u0631\u0641 \u06a9\u06cc \u0633\u0637\u062d \u06a9\u06cc \u0628\u06d2 \u062a\u0631\u062a\u06cc\u0628\u06cc \u0645\u0648\u0627\u0632\u0646\u06c1 \u06a9\u0648 \u062a\u0648\u0691 \u0633\u06a9\u062a\u06cc \u06c1\u06d2\u06d4 \u0635\u0627\u0631\u0641\u06cc\u0646 \u06a9\u0648 \u0628\u06d2 \u062a\u0631\u062a\u06cc\u0628 \u0628\u0646\u0627\u0646\u0627 \u0628\u0646\u062f \u06a9\u0631\u06cc\u06ba \u0627\u0648\u0631 \u0627\u0633 \u06a9\u06d2 \u0628\u062c\u0627\u0626\u06d2 \u0679\u0627\u0626\u0645 \u0633\u0644\u0627\u0679\u0633 \u06a9\u0648 \u0628\u06d2 \u062a\u0631\u062a\u06cc\u0628 \u0628\u0646\u0627\u0626\u06cc\u06ba\u06d4<\/p>\n<p>\u067e\u0648\u0631\u0627 \u067e\u0644\u06cc\u0679 \u0641\u0627\u0631\u0645 30 \u0645\u0646\u0679 \u06a9\u06d2 \u0644\u06cc\u06d2 AI \u0631\u0648\u0679\u0646\u06af \u06a9\u06d2 \u0633\u0627\u062a\u06be \u0686\u0644\u062a\u0627 \u06c1\u06d2 \u0627\u0648\u0631 \u067e\u06be\u0631 \u0627\u06af\u0644\u06d2 30 \u0645\u0646\u0679 \u06a9\u06d2 \u0644\u06cc\u06d2 \u0628\u0646\u062f \u06a9\u0631 \u062f\u06cc\u0627 \u062c\u0627\u062a\u0627 \u06c1\u06d2\u06d4 \u0633\u0627\u0626\u06cc\u06a9\u0644 \u06a9\u0648 \u062f\u06c1\u0631\u0627\u0646\u06d2 \u0627\u0648\u0631 \u06a9\u0627\u0641\u06cc \u0633\u0644\u0627\u0679\u0633 \u062c\u0645\u0639 \u06a9\u0631\u0646\u06d2 \u06a9\u06d2 \u0628\u0639\u062f\u060c \u06c1\u0645 \u0633\u0644\u0627\u0679\u0633 \u067e\u0631 AI \u06a9\u06d2 \u0628\u0631\u0639\u06a9\u0633 \u0627\u0648\u0631 AI \u0622\u0641 \u0633\u0644\u0627\u0679\u0633 \u06a9\u06d2 \u0630\u0631\u06cc\u0639\u06d2 \u0639\u0644\u0627\u062c \u06a9\u06d2 \u0627\u0648\u0633\u0637 \u0627\u062b\u0631 \u06a9\u0627 \u0627\u0646\u062f\u0627\u0632\u06c1 \u0644\u06af\u0627\u062a\u06d2 \u06c1\u06cc\u06ba\u06d4<\/p>\n<p>\u06cc\u06c1 \u0679\u06cc\u0648\u0679\u0648\u0631\u06cc\u0644 \u0622\u067e \u06a9\u0648 Python \u0645\u06cc\u06ba \u067e\u0648\u0631\u06cc \u0633\u0648\u0626\u0686 \u0628\u06cc\u06a9 \u067e\u0627\u0626\u067e \u0644\u0627\u0626\u0646 \u06a9\u06d2 \u0630\u0631\u06cc\u0639\u06d2 \u0644\u06d2 \u062c\u0627\u062a\u0627 \u06c1\u06d2\u060c \u0628\u0634\u0645\u0648\u0644 \u0633\u06cc\u0634\u0646 \u0644\u0627\u06af\u0632 \u0633\u06d2 \u0679\u0627\u0626\u0645 \u0633\u06cc\u0631\u06cc\u0632 \u0628\u0646\u0627\u0646\u0627\u060c \u06a9\u06cc\u0631\u06cc \u0627\u0648\u0648\u0631 \u0622\u0644\u0648\u062f\u06af\u06cc \u06a9\u06cc \u062a\u0634\u062e\u06cc\u0635\u060c \u06a9\u06cc\u0631\u06cc \u0627\u0648\u0648\u0631 \u0627\u06cc\u0688\u062c\u0633\u0679\u0645\u0646\u0679 \u06a9\u06d2 \u0633\u0627\u062a\u06be \u0627\u0648\u0631 \u0628\u063a\u06cc\u0631 \u0628\u0631\u0627\u06c1 \u0631\u0627\u0633\u062a \u0627\u062b\u0631\u0627\u062a \u06a9\u0627 \u062a\u062e\u0645\u06cc\u0646\u06c1 \u0644\u06af\u0627\u0646\u0627\u060c \u0679\u0627\u0626\u0645 \u0633\u06cc\u0631\u06cc\u0632 \u06a9\u06d2 \u0688\u06cc\u0679\u0627 \u067e\u0631 HAC \u0645\u0639\u06cc\u0627\u0631\u06cc \u063a\u0644\u0637\u06cc\u0648\u06ba \u06a9\u0627 \u0627\u0637\u0644\u0627\u0642 \u06a9\u0631\u0646\u0627\u060c \u0628\u0648\u0679\u0633\u0679\u0631\u06cc\u067e \u0627\u0639\u062a\u0645\u0627\u062f \u06a9\u06d2 \u0648\u0642\u0641\u0648\u06ba \u06a9\u0627 \u062d\u0633\u0627\u0628 \u0644\u06af\u0627\u0646\u0627\u060c \u0627\u0648\u0631 \u062a\u0645\u0627\u0645 \u0632\u0645\u06cc\u0646\u06cc \u0633\u0686\u0627\u0626\u06cc\u0648\u06ba \u06a9\u06cc \u062a\u0635\u062f\u06cc\u0642 \u06a9\u0631\u0646\u0627\u06d4<\/p>\n<p>\u0622\u062e\u0631 \u062a\u06a9\u060c \u0622\u067e \u062c\u0627\u0646 \u0644\u06cc\u06ba \u06af\u06d2 \u06a9\u06c1 \u0627\u0633 \u062a\u062c\u0632\u06cc\u06c1 \u06a9\u0648 \u0627\u067e\u0646\u06d2 LLM \u067e\u0644\u06cc\u0679 \u0641\u0627\u0631\u0645 \u0688\u06cc\u0679\u0627 \u067e\u0631 \u06a9\u06cc\u0633\u06d2 \u0686\u0644\u0627\u06cc\u0627 \u062c\u0627\u0626\u06d2 \u0627\u0648\u0631 \u0627\u0646 \u0686\u0627\u0631 \u0634\u0631\u0627\u0626\u0637 \u06a9\u0648 \u062a\u0644\u0627\u0634 \u06a9\u06cc\u0627 \u062c\u0627\u0626\u06d2 \u062c\u0648 \u0627\u0633 \u06a9\u06cc \u062e\u0644\u0627\u0641 \u0648\u0631\u0632\u06cc \u06a9\u0631\u062a\u06cc \u06c1\u06cc\u06ba\u06d4<\/p>\n<h2 id=\"heading-table-of-contents\">\u0627\u0646\u0688\u06cc\u06a9\u0633<\/h2>\n<h2 id=\"heading-why-user-level-ab-testing-fails-on-shared-llm-infrastructure\">\u0645\u0634\u062a\u0631\u06a9\u06c1 LLM \u0627\u0646\u0641\u0631\u0627\u0633\u0679\u0631\u06a9\u0686\u0631 \u067e\u0631 \u0635\u0627\u0631\u0641 \u06a9\u06cc \u0633\u0637\u062d \u06a9\u06cc A\/B \u062c\u0627\u0646\u0686 \u06a9\u06cc\u0648\u06ba \u0646\u0627\u06a9\u0627\u0645 \u06c1\u0648\u062a\u06cc \u06c1\u06d2\u06d4<\/h2>\n<p>\u0645\u0639\u06cc\u0627\u0631\u06cc A\/B \u0679\u06cc\u0633\u0679\u0646\u06af \u0628\u06d2 \u062a\u0631\u062a\u06cc\u0628 \u06c1\u0648\u0646\u06d2 \u06a9\u06d2 \u0630\u0631\u06cc\u0639\u06d2 \u0648\u062c\u06c1 \u06a9\u06d2 \u0646\u062a\u0627\u0626\u062c \u062e\u0631\u06cc\u062f\u062a\u06cc \u06c1\u06d2\u06d4 \u0627\u06af\u0631 \u06c1\u0645 \u0627\u06cc\u06a9 \u0633\u06a9\u06d2 \u06a9\u0648 \u067e\u0644\u0679\u062a\u06d2 \u06c1\u06cc\u06ba \u0627\u0648\u0631 \u06c1\u0631 \u0635\u0627\u0631\u0641 \u06a9\u0648 \u0639\u0644\u0627\u062c \u06cc\u0627 \u06a9\u0646\u0679\u0631\u0648\u0644 \u062a\u0641\u0648\u06cc\u0636 \u06a9\u0631\u062a\u06d2 \u06c1\u06cc\u06ba\u060c \u062a\u0648 \u062f\u0648\u0646\u0648\u06ba \u06af\u0631\u0648\u067e\u0633\u060c \u0627\u0648\u0633\u0637\u0627\u064b\u060c \u062a\u0645\u0627\u0645 \u0627\u0644\u062c\u06be\u0646\u06d2 \u0648\u0627\u0644\u06d2 \u0639\u0648\u0627\u0645\u0644 \u06a9\u06cc \u06cc\u06a9\u0633\u0627\u06ba \u062a\u0642\u0633\u06cc\u0645 \u06a9\u0627 \u0627\u0634\u062a\u0631\u0627\u06a9 \u06a9\u0631\u06cc\u06ba \u06af\u06d2\u06d4 \u0639\u0644\u0627\u062c \u06a9\u06d2 \u0644\u062d\u0627\u0638 \u0633\u06d2 \u0646\u062a\u0627\u0626\u062c \u0645\u06cc\u06ba \u0641\u0631\u0642 \u0645\u062e\u062a\u0644\u0641 \u06c1\u0648 \u0633\u06a9\u062a\u0627 \u06c1\u06d2\u06d4 \u0645\u0646\u0637\u0642 \u06a9\u0648 \u0628\u0631\u0642\u0631\u0627\u0631 \u0631\u06a9\u06be\u0627 \u062c\u0627\u062a\u0627 \u06c1\u06d2 \u062c\u0628 \u0635\u0627\u0631\u0641 \u0627\u06cc\u06a9 \u062f\u0648\u0633\u0631\u06d2 \u0633\u06d2 \u0622\u0632\u0627\u062f\u0627\u0646\u06c1 \u0637\u0648\u0631 \u067e\u0631 \u06a9\u0627\u0645 \u06a9\u0631\u062a\u06d2 \u06c1\u06cc\u06ba\u06d4<\/p>\n<p>\u0645\u0634\u062a\u0631\u06a9\u06c1 LLM \u0627\u0646\u0641\u0631\u0627\u0633\u0679\u0631\u06a9\u0686\u0631 \u0627\u0633 \u0622\u0632\u0627\u062f\u06cc \u06a9\u0648 \u062a\u0648\u0691\u062a\u0627 \u06c1\u06d2\u06d4 \u0627\u0633\u062a\u0641\u0633\u0627\u0631 \u0631\u0648\u0679\u0646\u06af \u06a9\u06d2 \u0645\u0646\u0638\u0631 \u0646\u0627\u0645\u06d2 \u067e\u0631 \u063a\u0648\u0631 \u06a9\u0631\u06cc\u06ba\u06d4 \u0627\u06cc\u06a9 \u0628\u0627\u0631 \u062c\u0628 \u0622\u067e \u06a9\u06d2 50% \u0635\u0627\u0631\u0641\u06cc\u0646 \u06a9\u0648 AI \u0631\u0648\u0679\u0646\u06af \u06a9\u06d2 \u0644\u06cc\u06d2 \u062a\u0641\u0648\u06cc\u0636 \u06a9\u06cc\u0627 \u062c\u0627\u062a\u0627 \u06c1\u06d2\u060c \u062a\u0648 \u0627\u0646\u06c1\u06cc\u06ba \u06a9\u0627\u0645\u0648\u06ba \u06a9\u0648 \u062a\u06cc\u0632\u06cc \u0633\u06d2 \u0627\u0648\u0631 \u0632\u06cc\u0627\u062f\u06c1 \u0634\u0631\u062d\u0648\u06ba \u067e\u0631 \u0645\u06a9\u0645\u0644 \u06a9\u0631\u0646\u06d2 \u06a9\u06d2 \u0644\u06cc\u06d2 \u067e\u0631\u06cc\u0645\u06cc\u0645 \u0645\u0627\u0688\u0644\u0632 \u062a\u06a9 \u062a\u0631\u062c\u06cc\u062d\u06cc \u0631\u0633\u0627\u0626\u06cc \u062f\u06cc \u062c\u0627\u062a\u06cc \u06c1\u06d2\u06d4 \u0628\u0642\u06cc\u06c1 50% \u0627\u0646\u062d\u0637\u0627\u0637 \u067e\u0630\u06cc\u0631 \u0645\u0627\u062d\u0648\u0644 \u0645\u06cc\u06ba \u06a9\u0627\u0645 \u06a9\u0631\u062a\u06cc \u06c1\u06d2 \u062c\u06c1\u0627\u06ba \u067e\u0631\u06cc\u0645\u06cc\u0645 \u0645\u0627\u0688\u0644 \u06a9\u06cc \u0642\u0637\u0627\u0631\u06cc\u06ba \u0644\u0645\u0628\u06cc \u06c1\u0648\u062a\u06cc \u06c1\u06cc\u06ba \u06a9\u06cc\u0648\u0646\u06a9\u06c1 \u062a\u06be\u0631\u0627\u067e\u06cc \u06af\u0631\u0648\u067e \u0633\u06cc\u0634\u0646\u0632 \u06a9\u06cc \u06af\u0646\u062c\u0627\u0626\u0634 \u06c1\u0648\u062a\u06cc \u06c1\u06d2\u06d4 \u06a9\u0646\u0679\u0631\u0648\u0644 \u06af\u0631\u0648\u067e \u06a9\u06d2 \u0635\u0627\u0631\u0641\u06cc\u0646 \u06a9\u0648 \u0628\u062f\u062a\u0631 \u062f\u0633\u062a\u06cc\u0627\u0628\u06cc \u06a9\u0627 \u0633\u0627\u0645\u0646\u0627 \u06a9\u0631\u0646\u0627 \u067e\u0691\u0627\u060c \u0627\u0633 \u0644\u06cc\u06d2 \u0646\u06c1\u06cc\u06ba \u06a9\u06c1 AI \u0631\u0648\u0679\u0646\u06af \u0641\u06cc\u0686\u0631 \u0646\u0627\u06a9\u0627\u0645 \u06c1\u0648 \u06af\u06cc\u0627\u060c \u0628\u0644\u06a9\u06c1 \u0627\u0633 \u0644\u06cc\u06d2 \u06a9\u06c1 \u062a\u062c\u0631\u0628\u0627\u062a\u06cc \u0688\u06cc\u0632\u0627\u0626\u0646 \u0646\u06d2 \u0645\u0635\u0646\u0648\u0639\u06cc \u0642\u0644\u062a \u067e\u06cc\u062f\u0627 \u06a9\u06cc\u06d4<\/p>\n<p>\u0645\u062f\u0627\u062e\u0644\u062a \u06cc\u06c1\u0627\u06ba \u0627\u06cc\u06a9 \u0633\u0627\u062e\u062a\u06cc \u0645\u0633\u0626\u0644\u06c1 \u06c1\u06d2\u06d4 \u0645\u0633\u062a\u062d\u06a9\u0645 \u06cc\u0648\u0646\u0679 \u0679\u0631\u06cc\u0679\u0645\u0646\u0679 \u0648\u06cc\u0644\u06cc\u0648 \u0645\u0641\u0631\u0648\u0636\u06c1\u060c \u062c\u0633\u06d2 SUTVA \u06a9\u06c1\u0627 \u062c\u0627\u062a\u0627 \u06c1\u06d2\u060c \u0627\u0633 \u0628\u0627\u062a \u067e\u0631 \u0632\u0648\u0631 \u062f\u06cc\u062a\u0627 \u06c1\u06d2 \u06a9\u06c1 \u06cc\u0648\u0646\u0679 \u06a9\u0627 \u0646\u062a\u06cc\u062c\u06c1 \u0635\u0631\u0641 \u0627\u0633 \u06cc\u0648\u0646\u0679 \u06a9\u06d2 \u0639\u0644\u0627\u062c \u06a9\u06cc \u0645\u062e\u062a\u0635 \u067e\u0631 \u0645\u0646\u062d\u0635\u0631 \u06c1\u06d2\u06d4<\/p>\n<p>SUTVA \u0645\u0634\u062a\u0631\u06a9\u06c1 LLM \u0627\u0646\u0641\u0631\u0627\u0633\u0679\u0631\u06a9\u0686\u0631 \u067e\u0631 \u0646\u0627\u06a9\u0627\u0645 \u06c1\u0648 \u062c\u0627\u062a\u0627 \u06c1\u06d2\u06d4 \u067e\u0631\u0648\u0633\u06cc\u0633 \u0634\u062f\u06c1 \u0635\u0627\u0631\u0641 \u06a9\u06d2 \u0633\u06cc\u0634\u0646 \u06a9\u06d2 \u0644\u06cc\u06d2 \u0627\u0633 \u0635\u0644\u0627\u062d\u06cc\u062a \u06a9\u06cc \u0636\u0631\u0648\u0631\u062a \u06c1\u0648\u062a\u06cc \u06c1\u06d2 \u062c\u0648 \u0627\u0633 \u0628\u0627\u062a \u06a9\u0627 \u062a\u0639\u06cc\u0646 \u06a9\u0631\u062a\u06cc \u06c1\u06d2 \u06a9\u06c1 \u06a9\u0646\u0679\u0631\u0648\u0644 \u06a9\u0631\u0646\u06d2 \u0648\u0627\u0644\u06d2 \u0635\u0627\u0631\u0641 \u06a9\u0648 \u067e\u0631\u06cc\u0645\u06cc\u0645 \u0645\u0627\u0688\u0644 \u06a9\u06cc \u0637\u0631\u0641 \u0644\u06d2 \u062c\u0627\u06cc\u0627 \u06af\u06cc\u0627 \u06c1\u06d2 \u06cc\u0627 \u0627\u0646\u062d\u0637\u0627\u0637 \u0634\u062f\u06c1 \u0645\u0639\u06cc\u0627\u0631\u06cc \u0645\u0627\u0688\u0644 \u06a9\u06cc \u0637\u0631\u0641\u06d4 \u06a9\u0646\u0679\u0631\u0648\u0644 \u06af\u0631\u0648\u067e \u0627\u0628 \u0645\u06a9\u0645\u0644 \u0637\u0648\u0631 \u067e\u0631 \u0645\u062a\u0636\u0627\u062f \u0646\u06c1\u06cc\u06ba \u06c1\u06d2\u06d4<\/p>\n<p>\u0635\u0627\u0631\u0641 \u06a9\u06cc \u0633\u0637\u062d \u06a9\u06d2 \u0628\u06d2 \u062a\u0631\u062a\u06cc\u0628 \u06c1\u0648\u0646\u06d2 \u06a9\u06d2 \u0628\u0639\u062f \u0645\u062a\u0648\u0642\u0639 \u0639\u0644\u0627\u062c \u06a9\u06d2 \u0627\u062b\u0631\u0627\u062a \u06cc\u06c1 \u06c1\u06cc\u06ba:<\/p>\n<pre><code class=\"language-plaintext\">Naive ATE = E[outcome | AI-on user] - E[outcome | AI-off user, degraded capacity]\n<\/code><\/pre>\n<p>\u0639\u0645\u0644\u06cc \u0637\u0648\u0631 \u067e\u0631\u060c \u0636\u0631\u0648\u0631\u06cc \u0645\u062a\u0636\u0627\u062f \u0648\u06c1\u06cc \u06c1\u0648\u06af\u0627 \u062c\u0648 \u0635\u0627\u0631\u0641\u06cc\u0646 \u06a9\u0648 AI \u0631\u0648\u0679\u0646\u06af \u06a9\u06d2 \u0628\u063a\u06cc\u0631\u060c AI \u0631\u0648\u0679\u0646\u06af \u06a9\u06d2 \u0628\u063a\u06cc\u0631\u060c \u0627\u0648\u0631 \u0635\u0644\u0627\u062d\u06cc\u062a \u0645\u06cc\u06ba \u06a9\u0645\u06cc \u06a9\u06d2 \u0628\u063a\u06cc\u0631 \u06c1\u0648\u0627 \u06c1\u0648\u06af\u0627\u06d4 50\/50 \u0635\u0627\u0631\u0641 \u06a9\u06cc \u0633\u0637\u062d \u06a9\u06cc \u062a\u0642\u0633\u06cc\u0645 \u06a9\u06d2 \u0633\u0627\u062a\u06be\u060c \u0627\u0633 \u0645\u062a\u0636\u0627\u062f \u06a9\u0648 \u06a9\u0628\u06be\u06cc \u0646\u06c1\u06cc\u06ba \u062f\u06cc\u06a9\u06be\u0627 \u062c\u0627 \u0633\u06a9\u062a\u0627\u06d4 \u0622\u067e \u06a9\u0627 \u062a\u062e\u0645\u06cc\u0646\u06c1 AI \u0631\u0648\u0679\u0646\u06af \u06a9\u06d2 \u0628\u0631\u0627\u06c1 \u0631\u0627\u0633\u062a \u0627\u062b\u0631\u0627\u062a \u06a9\u0648 \u0635\u0644\u0627\u062d\u06cc\u062a \u0645\u06cc\u06ba \u06a9\u0645\u06cc \u06a9\u06d2 \u062c\u0631\u0645\u0627\u0646\u06d2 \u06a9\u06d2 \u0633\u0627\u062a\u06be \u062c\u0648\u0691\u062a\u0627 \u06c1\u06d2\u060c \u0627\u0648\u0631 \u0627\u0646\u06c1\u06cc\u06ba \u0627\u0644\u06af \u06a9\u0631\u0646\u06d2 \u06a9\u06d2 \u0644\u06cc\u06d2 \u0645\u062c\u0645\u0648\u0639\u06cc \u0635\u0644\u0627\u062d\u06cc\u062a \u06a9\u06d2 \u0627\u0633\u062a\u0639\u0645\u0627\u0644 \u06a9\u06d2 \u0641\u0646\u06a9\u0634\u0646 \u06a9\u0648 \u062c\u0627\u0646\u0646\u06d2 \u06a9\u06cc \u0636\u0631\u0648\u0631\u062a \u06c1\u0648\u062a\u06cc \u06c1\u06d2\u060c \u062c\u0648 \u0628\u06c1\u062a \u06a9\u0645 \u0644\u0648\u06af\u0648\u06ba \u06a9\u06d2 \u067e\u0627\u0633 \u06c1\u06d2\u06d4<\/p>\n<p>\u062f\u0648\u0633\u0631\u06d2 \u0645\u0634\u062a\u0631\u06a9\u06c1 \u0648\u0633\u0627\u0626\u0644 LLM \u067e\u0644\u06cc\u0679 \u0641\u0627\u0631\u0645 \u067e\u06cc\u0679\u0631\u0646 \u0628\u06be\u06cc \u0627\u0633\u06cc \u062e\u0631\u0627\u0628\u06cc \u06a9\u0627 \u0633\u0628\u0628 \u0628\u0646\u062a\u06d2 \u06c1\u06cc\u06ba\u06d4 \u06cc\u0639\u0646\u06cc\u060c \u0627\u06cc\u06a9 \u06a9\u06cc\u0634\u0646\u06af \u067e\u0631\u062a \u062c\u0648 \u067e\u0631\u0648\u0633\u06cc\u0633 \u0634\u062f\u06c1 \u0635\u0627\u0631\u0641\u06cc\u0646 \u06a9\u06cc \u062a\u0644\u0627\u0634 \u06a9\u0648 \u062a\u06cc\u0632 \u06a9\u0631\u062a\u06cc \u06c1\u06d2 \u0644\u06cc\u06a9\u0646 \u06a9\u0646\u0679\u0631\u0648\u0644 \u0635\u0627\u0631\u0641 \u06a9\u06cc \u0645\u0634\u062a\u0631\u06a9\u06c1 \u06a9\u06cc\u0634 \u0627\u0633\u067e\u06cc\u0633 \u06a9\u0648 \u0627\u0633\u062a\u0639\u0645\u0627\u0644 \u06a9\u0631\u062a\u06cc \u06c1\u06d2\u060c \u0627\u06cc\u06a9 \u0639\u0645\u062f\u06c1 \u0645\u0627\u0688\u0644 \u0648\u0631\u0698\u0646 \u062c\u0648 GPU \u0645\u06cc\u0645\u0648\u0631\u06cc \u0627\u0633\u062a\u0639\u0645\u0627\u0644 \u06a9\u0631\u062a\u0627 \u06c1\u06d2 \u0627\u0648\u0631 \u06a9\u0646\u0679\u0631\u0648\u0644 \u06af\u0631\u0648\u067e \u0645\u06cc\u06ba \u0645\u0639\u06cc\u0627\u0631\u06cc \u0627\u0646\u062f\u0627\u0632\u06c1 \u06a9\u0648 \u06a9\u0645 \u06a9\u0631\u062a\u0627 \u06c1\u06d2\u060c \u06cc\u0627 \u0627\u06cc\u06a9 \u0628\u06cc\u0686 \u0634\u06cc\u0688\u06cc\u0648\u0644\u0631 \u062c\u0648 AI \u0631\u0648\u0679\u0646\u06af \u06a9\u06cc \u062f\u0631\u062e\u0648\u0627\u0633\u062a\u0648\u06ba \u06a9\u0648 \u062a\u0631\u062c\u06cc\u062d \u062f\u06cc\u062a\u0627 \u06c1\u06d2 \u0627\u0648\u0631 \u06c1\u0631 \u0686\u06cc\u0632 \u06a9\u06d2 \u0644\u06cc\u06d2 \u0642\u0637\u0627\u0631 \u0645\u06cc\u06ba \u062a\u0627\u062e\u06cc\u0631 \u067e\u06cc\u062f\u0627 \u06a9\u0631\u062a\u0627 \u06c1\u06d2\u06d4 \u0645\u0634\u062a\u0631\u06a9\u06c1 \u0648\u0633\u0627\u0626\u0644 \u06a9\u06d2 \u062a\u0627\u0644\u0627\u0628 \u06a9\u0648 \u0686\u06be\u0648\u0646\u06d2 \u0648\u0627\u0644\u06cc \u06a9\u0648\u0626\u06cc \u0628\u06be\u06cc \u0686\u06cc\u0632 \u06a9\u0646\u0679\u0631\u0648\u0644 \u06af\u0631\u0648\u067e \u06a9\u0648 \u0622\u0644\u0648\u062f\u06c1 \u06a9\u0631\u062a\u06cc \u06c1\u06d2\u06d4<\/p>\n<h2 id=\"heading-how-switchback-design-restores-a-clean-comparison\">\u0633\u0648\u0626\u0686 \u0628\u06cc\u06a9 \u0688\u06cc\u0632\u0627\u0626\u0646 \u0635\u0627\u0641 \u0645\u0648\u0627\u0632\u0646\u06c1 \u06a9\u0648 \u06a9\u06cc\u0633\u06d2 \u0628\u062d\u0627\u0644 \u06a9\u0631\u062a\u0627 \u06c1\u06d2\u06d4<\/h2>\n<p>\u0686\u0648\u0646\u06a9\u06c1 \u0645\u0639\u06cc\u0627\u0631\u06cc \u0631\u06cc\u0646\u0688\u0645\u0627\u0626\u0632\u06cc\u0634\u0646 \u0645\u0634\u062a\u0631\u06a9\u06c1 \u0648\u0633\u0627\u0626\u0644 \u06a9\u06d2 \u0630\u0631\u06cc\u0639\u06d2 \u06a9\u0646\u0679\u0631\u0648\u0644 \u06af\u0631\u0648\u067e \u06a9\u0648 \u0646\u0642\u0635\u0627\u0646 \u067e\u06c1\u0646\u0686\u0627 \u0633\u06a9\u062a\u06cc \u06c1\u06d2\u060c \u0627\u06cc\u06a9 \u0633\u0648\u0626\u0686 \u0628\u06cc\u06a9 \u0688\u06cc\u0632\u0627\u0626\u0646 \u0628\u06d2 \u062a\u0631\u062a\u06cc\u0628 \u06c1\u0648\u0646\u06d2 \u0648\u0627\u0644\u06cc \u0686\u06cc\u0632\u0648\u06ba \u06a9\u0648 \u062a\u0628\u062f\u06cc\u0644 \u06a9\u0631\u062a\u0627 \u06c1\u06d2\u06d4 \u0635\u0627\u0631\u0641\u06cc\u0646 \u06a9\u0648 \u0628\u06d2 \u062a\u0631\u062a\u06cc\u0628 \u0628\u0646\u0627\u0646\u0627 \u0628\u0646\u062f \u06a9\u0631\u06cc\u06ba\u06d4 \u0679\u0627\u0626\u0645 \u0633\u0644\u0627\u0679\u0633 \u06a9\u0648 \u0628\u06d2 \u062a\u0631\u062a\u06cc\u0628 \u0628\u0646\u0627\u0626\u06cc\u06ba\u06d4<\/p>\n<p>\u067e\u0648\u0631\u0627 \u067e\u0644\u06cc\u0679 \u0641\u0627\u0631\u0645 \u06a9\u0633\u06cc \u0628\u06be\u06cc \u0648\u0642\u062a \u0627\u06cc\u06a9 \u06c1\u06cc \u067e\u0631\u0648\u0633\u06cc\u0633\u0646\u06af \u062d\u0627\u0644\u062a \u0645\u06cc\u06ba \u06a9\u0627\u0645 \u06a9\u0631\u062a\u0627 \u06c1\u06d2\u06d4 AI \u0631\u0648\u0679\u0646\u06af \u062a\u0645\u0627\u0645 \u0635\u0627\u0631\u0641\u06cc\u0646 \u06a9\u06d2 \u0644\u06cc\u06d2 \u0622\u0646 \u06cc\u0627 \u0622\u0641 \u06c1\u06d2\u06d4<\/p>\n<p>\u0639\u0644\u0627\u062c \u06a9\u0627 \u0627\u0634\u0627\u0631\u06d2 \u067e\u06c1\u0644\u06d2 \u0633\u06d2 \u0637\u06d2 \u0634\u062f\u06c1 \u0634\u06cc\u0688\u0648\u0644 \u06a9\u06d2 \u0645\u0637\u0627\u0628\u0642 \u0633\u0644\u0627\u0679\u0633 \u06a9\u06d2 \u062f\u0631\u0645\u06cc\u0627\u0646 \u0628\u062f\u0644\u062a\u0627 \u06c1\u06d2\u060c \u067e\u0648\u0631\u06d2 \u062a\u062c\u0631\u0628\u06d2 \u06a9\u06d2 \u062f\u0648\u0631\u0627\u0646 \u0645\u062a\u0628\u0627\u062f\u0644 \u0628\u0644\u0627\u06a9\u0633 \u06a9\u06d2 \u0630\u0631\u06cc\u0639\u06d2 \u0633\u0627\u0626\u06cc\u06a9\u0644 \u0686\u0644\u0627\u062a\u0627 \u06c1\u06d2\u06d4 \u0631\u0646 \u06a9\u06d2 \u0627\u062e\u062a\u062a\u0627\u0645 \u067e\u0631\u060c \u06c1\u0631 \u0633\u0644\u0627\u0679 \u0645\u06cc\u06ba \u0633\u0644\u0627\u0679\u0633 \u06a9\u06cc \u0627\u06cc\u06a9 \u0679\u0627\u0626\u0645 \u0633\u06cc\u0631\u06cc\u0632 \u06c1\u0648\u062a\u06cc \u06c1\u06d2 \u062c\u0633 \u0645\u06cc\u06ba \u0639\u0644\u0627\u062c \u06a9\u06d2 \u0645\u06cc\u0679\u0631\u06a9\u0633 \u0627\u0648\u0631 \u0645\u062c\u0645\u0648\u0639\u06cc \u0646\u062a\u0627\u0626\u062c \u06c1\u0648\u062a\u06d2 \u06c1\u06cc\u06ba\u060c \u062c\u06cc\u0633\u06d2 \u06a9\u0627\u0645 \u06a9\u06cc \u062a\u06a9\u0645\u06cc\u0644 \u06a9\u06cc \u0627\u0648\u0633\u0637 \u0634\u0631\u062d \u06cc\u0627 \u0641\u06cc \u0633\u06cc\u0634\u0646 \u0627\u0648\u0633\u0637 \u0644\u0627\u06af\u062a\u06d4 \u06c1\u0645 \u0639\u0644\u0627\u062c \u06a9\u06d2 \u0627\u0634\u0627\u0631\u06cc\u06c1 \u067e\u0631 \u0646\u062a\u0627\u0626\u062c \u06a9\u0648 \u067e\u06cc\u0686\u06be\u06d2 \u0686\u06be\u0648\u0691\u062a\u06d2 \u06c1\u06cc\u06ba \u0627\u0648\u0631 \u06af\u062a\u0627\u0646\u06a9 \u0627\u0648\u0633\u0637 \u0639\u0644\u0627\u062c \u06a9\u06d2 \u0627\u062b\u0631 \u06a9\u0627 \u062a\u062e\u0645\u06cc\u0646\u06c1 \u06c1\u06cc\u06ba\u06d4<\/p>\n<p><em>\u0634\u06a9\u0644 1: \u062a\u06cc\u0646 \u0633\u0644\u0627\u0679 \u0633\u0648\u0626\u0686 \u0628\u06cc\u06a9 \u0688\u06cc\u0632\u0627\u0626\u0646 \u06a9\u0627 \u062a\u0635\u0648\u0631\u0627\u062a\u06cc \u0645\u0646\u0635\u0648\u0628\u06c1\u06d4 \u0628\u0644\u06cc\u0648 \u0627\u06cc\u0631\u06cc\u0627 \u0628\u0644\u0627\u06a9 \u067e\u0631 AI \u0631\u0648\u0679\u0646\u06af \u06c1\u06d2\u060c \u062c\u0628\u06a9\u06c1 \u0646\u0627\u0631\u0646\u062c\u06cc \u06c1\u0631 \u0633\u0627\u0626\u06cc\u06a9\u0644 \u0645\u06cc\u06ba \u067e\u06c1\u0644\u06d2 AI \u0622\u0641 \u0633\u0644\u0627\u0679 \u06a9\u0648 \u0646\u0634\u0627\u0646 \u0632\u062f \u06a9\u0631\u062a\u0627 \u06c1\u06d2\u060c \u062c\u06c1\u0627\u06ba \u0628\u0644\u0627\u06a9\u0633 \u067e\u0631 \u067e\u0686\u06be\u0644\u06d2 \u0633\u06d2 \u06a9\u06cc\u0631\u06cc \u0627\u0648\u0648\u0631 \u0645\u0635\u0646\u0648\u0639\u06cc \u0637\u0648\u0631 \u067e\u0631 \u0646\u062a\u0627\u0626\u062c \u06a9\u0648 \u0628\u0691\u06be\u0627\u062a\u0627 \u06c1\u06d2\u06d4<\/em><br \/><em>\u06af\u0631\u06cc\u0646 \u0628\u06cc\u0646\u0688 \u062d\u0642\u06cc\u0642\u06cc 6pp \u0628\u0631\u0627\u06c1 \u0631\u0627\u0633\u062a \u0627\u062b\u0631 \u06a9\u06cc \u0646\u0645\u0627\u0626\u0646\u062f\u06af\u06cc \u06a9\u0631\u062a\u0627 \u06c1\u06d2\u06d4 \u0622\u0644 \u0622\u0646 \u0627\u0648\u0631 \u0622\u0644 \u0622\u0641 \u0633\u0644\u0627\u0679\u0633 \u06a9\u0627 \u0633\u0627\u062f\u06c1 \u0645\u0648\u0627\u0632\u0646\u06c1 \u0627\u0646\u062f\u0627\u0632\u06d2 \u06a9\u06d2 \u0627\u062b\u0631 \u06a9\u0648 \u0628\u0691\u06be\u0627\u062a\u0627 \u06c1\u06d2 \u06a9\u06cc\u0648\u0646\u06a9\u06c1 \u0627\u0646\u0679\u0631\u0627 \u0628\u0644\u0627\u06a9 \u06a9\u06cc\u0631\u06cc \u0627\u0648\u0648\u0631 \u06a9\u06cc \u0628\u0631\u0627\u06c1 \u0631\u0627\u0633\u062a \u0634\u0631\u0627\u06a9\u062a \u06a9\u0648 \u0627\u0644\u06af \u0646\u06c1\u06cc\u06ba \u06a9\u06cc\u0627 \u062c\u0627 \u0633\u06a9\u062a\u0627\u06d4<\/em><\/p>\n<p>\u0648\u0627\u0636\u062d \u0645\u0648\u0627\u0632\u0646\u06d2 \u0628\u062d\u0627\u0644 \u06a9\u06cc\u06d2 \u06af\u0626\u06d2 \u06c1\u06cc\u06ba \u06a9\u06cc\u0648\u0646\u06a9\u06c1 \u067e\u0644\u06cc\u0679 \u0641\u0627\u0631\u0645 \u0645\u062e\u0635\u0648\u0635 \u0633\u0644\u0627\u0679\u0633 \u06a9\u06d2 \u0644\u06cc\u06d2 \u0648\u0627\u062d\u062f \u062d\u0627\u0644\u0627\u062a \u0645\u06cc\u06ba \u06a9\u0627\u0645 \u06a9\u0631\u062a\u0627 \u06c1\u06d2\u06d4 \u0627\u06cc\u06a9 \u0633\u0644\u0627\u0679 \u06a9\u06d2 \u0627\u0646\u062f\u0631 \u062a\u0645\u0627\u0645 \u0635\u0627\u0631\u0641\u06cc\u0646 \u06a9\u0648 \u0627\u06cc\u06a9 \u062c\u06cc\u0633\u0627 \u0633\u0644\u0648\u06a9 \u0645\u0644\u062a\u0627 \u06c1\u06d2\u06d4 AI-\u0622\u0641 \u0633\u0644\u0627\u0679\u0633 AI-on \u0633\u0644\u0627\u0679\u0633 \u06a9\u06d2 \u0644\u06cc\u06d2 \u0642\u0627\u0628\u0644 \u0627\u0639\u062a\u0645\u0627\u062f \u062c\u0648\u0627\u0628\u06cc \u062d\u0642\u0627\u0626\u0642 \u06a9\u06d2 \u0637\u0648\u0631 \u067e\u0631 \u06a9\u0627\u0645 \u06a9\u0631\u062a\u06d2 \u06c1\u06cc\u06ba \u0627\u06af\u0631 \u062a\u0645\u0627\u0645 \u0633\u0644\u0627\u0679\u0648\u06ba \u0645\u06cc\u06ba \u0637\u0644\u0628 \u06a9\u06cc \u0634\u0631\u0627\u0626\u0637 \u06a9\u0627 \u0645\u0648\u0627\u0632\u0646\u06c1 \u0631\u06c1\u062a\u0627 \u06c1\u06d2\u06d4<\/p>\n<p>\u0627\u06c1\u0645 \u067e\u06cc\u0686\u06cc\u062f\u06af\u06cc \u06a9\u06cc\u0631\u06cc \u0627\u0648\u0648\u0631 \u06c1\u06d2\u06d4 \u0627\u06af\u0631 AI \u0631\u0648\u0679\u0646\u06af \u06a9\u06d2 \u0627\u062b\u0631\u0627\u062a \u0628\u0639\u062f \u06a9\u06d2 AI \u0622\u0641 \u0633\u0644\u0627\u0679\u0633 \u0645\u06cc\u06ba \u0628\u0631\u0642\u0631\u0627\u0631 \u0631\u06c1\u062a\u06d2 \u06c1\u06cc\u06ba \u062c\u06cc\u0633\u06d2 \u06a9\u06c1 \u06af\u0631\u0645 \u0631\u0648\u0679\u0646\u06af \u06a9\u06cc\u0634\u0632\u060c \u062c\u0627\u0631\u06cc \u0633\u06cc\u0634\u0646 \u062c\u0648 AI \u0631\u0648\u0679\u0646\u06af \u0645\u06cc\u06ba \u0634\u0631\u0648\u0639 \u06c1\u0648\u062a\u06d2 \u06c1\u06cc\u06ba \u0627\u0648\u0631 \u0633\u0648\u0626\u0686 \u06a9\u06d2 \u0628\u0639\u062f \u0645\u06a9\u0645\u0644 \u06c1\u0648\u062a\u06d2 \u06c1\u06cc\u06ba\u060c \u06cc\u0627 \u0635\u0627\u0631\u0641 \u06a9\u06d2 \u0628\u062f\u0644\u06d2 \u06c1\u0648\u0626\u06d2 \u0631\u0648\u06cc\u06d2 \u062c\u0648 \u0633\u0644\u0627\u0679 \u0628\u0627\u0624\u0646\u0688\u0631\u06cc \u06a9\u06d2 \u067e\u0627\u0631 \u0628\u0631\u0642\u0631\u0627\u0631 \u0631\u06c1\u062a\u06d2 \u06c1\u06cc\u06ba\u060c \u062a\u0648 AI \u0622\u0641 \u0633\u0644\u0627\u0679 \u06a9\u06d2 \u0646\u062a\u0627\u0626\u062c \u06a9\u0648 \u0645\u0635\u0646\u0648\u0639\u06cc \u0637\u0648\u0631 \u067e\u0631 \u0628\u0642\u0627\u06cc\u0627 AI \u0627\u062b\u0631\u0627\u062a \u0633\u06d2 \u0628\u0691\u06be\u0627\u06cc\u0627 \u062c\u0627\u0626\u06d2 \u06af\u0627\u06d4<\/p>\n<p>\u0633\u0627\u062f\u06c1 \u0645\u0648\u0627\u0632\u0646\u06c1 \u0627\u0633 \u062c\u06cc\u0646\u06cc\u0627\u062a\u06cc \u0628\u0644\u0646\u062f\u06cc \u06a9\u0648 \u0628\u0631\u0627\u06c1 \u0631\u0627\u0633\u062a \u0639\u0644\u0627\u062c \u06a9\u06d2 \u0627\u062b\u0631\u0627\u062a \u06a9\u06d2 \u0633\u0627\u062a\u06be \u0627\u0644\u062c\u06be\u0627\u062a\u06d2 \u06c1\u06cc\u06ba\u060c \u062a\u062e\u0645\u06cc\u0646\u06d2 \u06a9\u0648 \u0627\u0648\u067e\u0631 \u06a9\u06cc \u0637\u0631\u0641 \u0645\u062a\u0648\u062c\u06c1 \u06a9\u0631\u062a\u06d2 \u06c1\u06cc\u06ba\u06d4 \u06a9\u06cc\u0631\u06cc \u0627\u0648\u0648\u0631 \u06a9\u0627 \u062a\u062e\u0645\u06cc\u0646\u06c1 \u0644\u06af\u0627\u0646\u0627 \u0627\u0648\u0631 \u0627\u0633\u06d2 \u062e\u062a\u0645 \u06a9\u0631\u0646\u0627 \u0633\u0648\u0626\u0686 \u0628\u06cc\u06a9 \u062a\u062c\u0631\u0628\u0627\u062a \u0645\u06cc\u06ba \u0627\u06cc\u06a9 \u0627\u06c1\u0645 \u062a\u062c\u0632\u06cc\u0627\u062a\u06cc \u0686\u06cc\u0644\u0646\u062c \u06c1\u06d2\u06d4 \u06cc\u06c1 \u0648\u06c1 \u062c\u06af\u06c1 \u06c1\u06d2 \u062c\u06c1\u0627\u06ba \u0632\u06cc\u0627\u062f\u06c1 \u062a\u0631 \u0627\u0635\u0644 \u06a9\u0627\u0645 \u0645\u0636\u0645\u0631 \u06c1\u06d2 \u0627\u0648\u0631 \u0632\u06cc\u0627\u062f\u06c1 \u062a\u0631 \u0627\u0633 \u0679\u06cc\u0648\u0679\u0648\u0631\u06cc\u0644 \u0645\u06cc\u06ba \u06a9\u06cc\u0627 \u0634\u0627\u0645\u0644 \u06c1\u06d2\u06d4<\/p>\n<h2 id=\"heading-identification-assumptions\">\u0634\u0646\u0627\u062e\u062a \u06a9\u06d2 \u0645\u0641\u0631\u0648\u0636\u06d2<\/h2>\n<p>\u0633\u0648\u0626\u0686 \u0628\u06cc\u06a9 \u0627\u0646\u0641\u0631\u0646\u0633 \u0635\u0631\u0641 \u0627\u0633 \u0635\u0648\u0631\u062a \u0645\u06cc\u06ba \u0648\u062c\u06c1 \u06a9\u06cc \u062a\u0634\u0631\u06cc\u062d \u06a9\u06cc \u0627\u062c\u0627\u0632\u062a \u062f\u06cc\u062a\u0627 \u06c1\u06d2 \u062c\u0628 \u0686\u0627\u0631 \u0634\u0631\u0627\u0626\u0637 \u0645\u0648\u062c\u0648\u062f \u06c1\u0648\u06ba\u06d4<\/p>\n<h3 id=\"heading-1-zero-or-bounded-carryover-between-slots\">1. \u0633\u0644\u0627\u0679 \u06a9\u06d2 \u062f\u0631\u0645\u06cc\u0627\u0646 \u0635\u0641\u0631 \u06cc\u0627 \u0645\u062d\u062f\u0648\u062f \u06a9\u06cc\u0631\u06cc \u0627\u0648\u0648\u0631\u06d4<\/h3>\n<p>\u0627\u06cc\u06a9 \u0633\u0644\u0627\u0679 \u0645\u06cc\u06ba AI \u0631\u0648\u0679\u0646\u06af \u06a9\u06d2 \u0627\u062b\u0631\u0627\u062a \u0645\u062a\u0639\u0635\u0628 \u0645\u0648\u0627\u0632\u0646\u06c1 \u06a9\u06d2 \u0628\u0639\u062f \u06a9\u06d2 \u0633\u0644\u0627\u0679 \u0645\u06cc\u06ba \u0628\u0631\u0642\u0631\u0627\u0631 \u0646\u06c1\u06cc\u06ba \u0631\u06c1\u062a\u06d2 \u06c1\u06cc\u06ba\u06d4 \u0627\u0633 \u0679\u06cc\u0648\u0679\u0648\u0631\u06cc\u0644 \u0645\u06cc\u06ba \u06a9\u06cc\u0631\u06cc \u0627\u0648\u0648\u0631 \u0645\u0627\u0688\u0644 \u0641\u0631\u0633\u0679 \u0622\u0631\u0688\u0631 \u067e\u0631\u0633\u0679\u06cc\u0646\u0633 (\u067e\u06c1\u0644\u06d2 \u0622\u0631\u0688\u0631 \u0645\u06cc\u06ba \u062a\u0627\u062e\u06cc\u0631) \u06a9\u0648 \u067e\u06a9\u0691\u062a\u0627 \u06c1\u06d2\u06d4 \u0627\u06af\u0631 \u0627\u062b\u0631 \u0645\u062a\u0639\u062f\u062f \u0627\u062f\u0648\u0627\u0631 \u062a\u06a9 \u0631\u06c1\u062a\u0627 \u06c1\u06d2\u060c \u062a\u0648 \u0631\u062c\u0639\u062a \u0645\u06cc\u06ba \u0645\u0632\u06cc\u062f \u0648\u0642\u0641\u06d2 \u06a9\u06cc \u0634\u0631\u0627\u0626\u0637 \u06a9\u06cc \u0636\u0631\u0648\u0631\u062a \u06c1\u0648\u062a\u06cc \u06c1\u06d2\u06d4<\/p>\n<h3 id=\"heading-2-demand-stationarity-across-the-treatment-schedule\">2. \u0639\u0644\u0627\u062c \u06a9\u06d2 \u067e\u0648\u0631\u06d2 \u0634\u06cc\u0688\u0648\u0644 \u0645\u06cc\u06ba \u0645\u0633\u062a\u0642\u0644 \u0645\u0632\u0627\u062c\u06cc \u06a9\u06cc \u0636\u0631\u0648\u0631\u062a \u06c1\u06d2\u06d4<\/h3>\n<p>AI-on \u0627\u0648\u0631 AI-off \u0633\u0644\u0627\u0679\u0633 \u06a9\u0648 \u0627\u0633\u06cc \u0637\u0631\u062d \u06a9\u06cc \u0628\u0646\u06cc\u0627\u062f\u06cc \u0637\u0644\u0628 \u06a9\u06cc \u0634\u0631\u0627\u0626\u0637 \u06a9\u0627 \u0633\u0627\u0645\u0646\u0627 \u06c1\u06d2\u06d4 \u0627\u06af\u0631 \u067e\u06cc\u0631 \u06a9\u06cc \u0635\u0628\u062d \u06a9\u06cc \u0633\u0644\u0627\u0679 \u0645\u06cc\u06ba \u06c1\u0645\u06cc\u0634\u06c1 AI \u0622\u0646 \u06c1\u0648\u062a\u0627 \u06c1\u06d2 \u0627\u0648\u0631 \u0627\u062a\u0648\u0627\u0631 \u06a9\u06cc \u062f\u0648\u067e\u06c1\u0631 \u06a9\u06d2 \u0633\u0644\u0627\u0679 \u0645\u06cc\u06ba \u06c1\u0645\u06cc\u0634\u06c1 AI \u0628\u0646\u062f \u06c1\u0648\u062a\u0627 \u06c1\u06d2\u060c \u062a\u0648 \u0645\u0627\u0646\u06af \u0645\u06cc\u06ba \u0641\u0631\u0642 \u067e\u0631\u0648\u0633\u06cc\u0633\u0646\u06af \u0645\u0648\u0627\u0632\u0646\u06c1 \u06a9\u0648 \u0627\u0633 \u0637\u0631\u062d \u0622\u0644\u0648\u062f\u06c1 \u06a9\u0631 \u062f\u06d2 \u06af\u0627 \u06a9\u06c1 \u062a\u0627\u062e\u06cc\u0631 \u06a9\u06cc \u0627\u0635\u0644\u0627\u062d \u06a9\u0648 \u062f\u0631\u0633\u062a \u0646\u06c1\u06cc\u06ba \u06a9\u06cc\u0627 \u062c\u0627 \u0633\u06a9\u062a\u0627\u06d4<\/p>\n<h3 id=\"heading-3-no-ramp-up-effects-at-block-boundaries\">3. \u0628\u0644\u0627\u06a9 \u06a9\u06cc \u062d\u062f\u0648\u062f \u067e\u0631 \u06a9\u0648\u0626\u06cc \u0631\u06cc\u0645\u067e \u0627\u067e \u0627\u062b\u0631 \u0646\u06c1\u06cc\u06ba \u06c1\u06d2\u06d4<\/h3>\n<p>\u0633\u0633\u0679\u0645 \u06c1\u0631 \u0633\u0644\u0627\u0679 \u06a9\u06d2 \u0627\u0646\u062f\u0631 \u0645\u0633\u062a\u062d\u06a9\u0645 \u062d\u0627\u0644\u062a \u062a\u06a9 \u067e\u06c1\u0646\u0686\u062a\u0627 \u06c1\u06d2\u06d4 \u0627\u06af\u0631 \u0631\u0648\u0679\u0646\u06af \u0645\u0627\u0688\u0644 \u06a9\u0627 \u06a9\u06cc\u0634 \u0679\u06be\u0646\u0688\u0627 \u06c1\u06d2\u060c \u062a\u0627\u06a9\u06c1 \u06c1\u0631 AI-on \u0628\u0644\u0627\u06a9 \u0645\u06cc\u06ba \u067e\u06c1\u0644\u0627 \u0633\u0644\u0627\u0679 \u0628\u0639\u062f \u06a9\u06d2 \u0633\u0644\u0627\u0679\u0633 \u0633\u06d2 \u0628\u062f\u062a\u0631 \u06a9\u0627\u0631\u06a9\u0631\u062f\u06af\u06cc \u06a9\u0627 \u0645\u0638\u0627\u06c1\u0631\u06c1 \u06a9\u0631\u06d2\u060c \u0648\u06c1 \u0631\u06cc\u0645\u067e \u0627\u067e \u067e\u06cc\u0631\u06cc\u0688 \u0645\u0633\u062a\u062d\u06a9\u0645 \u0631\u06cc\u0627\u0633\u062a \u06a9\u06d2 \u0628\u0631\u0627\u06c1 \u0631\u0627\u0633\u062a \u0627\u062b\u0631 \u06a9\u0627 \u0646\u06cc\u0686\u06d2 \u06a9\u06cc \u0637\u0631\u0641 \u0645\u062a\u0639\u0635\u0628 \u062a\u062e\u0645\u06cc\u0646\u06c1 \u067e\u06cc\u062f\u0627 \u06a9\u0631\u06d2 \u06af\u0627\u06d4<\/p>\n<h3 id=\"heading-4-residual-autocorrelation-is-addressed\">4. \u0628\u0642\u0627\u06cc\u0627 \u062e\u0648\u062f \u06a9\u0627\u0631 \u062a\u0639\u0644\u0642 \u06a9\u0648 \u062d\u0644 \u06a9\u0631 \u062f\u06cc\u0627 \u06af\u06cc\u0627 \u06c1\u06d2\u06d4<\/h3>\n<p>\u0633\u0644\u0627\u0679 \u06a9\u06cc \u0628\u0627\u0642\u06cc\u0627\u062a \u0648\u0642\u062a \u06a9\u06d2 \u0633\u0627\u062a\u06be \u0633\u0627\u062a\u06be \u0688\u06cc\u0645\u0627\u0646\u0688 \u0633\u0627\u0626\u06cc\u06a9\u0644\u060c \u0635\u0644\u0627\u062d\u06cc\u062a \u06a9\u06d2 \u0648\u0627\u0642\u0639\u0627\u062a\u060c \u0627\u0648\u0631 \u067e\u0644\u06cc\u0679 \u0641\u0627\u0631\u0645 \u06a9\u06cc \u0633\u0637\u062d \u06a9\u06d2 \u062c\u06be\u0679\u06a9\u06d2 \u06a9\u06cc \u0648\u062c\u06c1 \u0633\u06d2 \u0627\u06cc\u06a9 \u0633\u06d2 \u0632\u06cc\u0627\u062f\u06c1 \u0648\u0642\u062a \u06a9\u06d2 \u0648\u0642\u0641\u0648\u06ba \u0633\u06d2 \u0645\u0646\u0633\u0644\u06a9 \u06c1\u0648 \u0633\u06a9\u062a\u06d2 \u06c1\u06cc\u06ba\u06d4 HAC \u0645\u0639\u06cc\u0627\u0631\u06cc \u062e\u0631\u0627\u0628\u06cc\u0627\u06ba \u06cc\u0627 \u0628\u0648\u0679\u0633\u0679\u0631\u06cc\u067e CI \u0627\u0633\u06d2 \u0679\u06be\u06cc\u06a9 \u06a9\u0631 \u062f\u06d2 \u06af\u0627 (\u0639\u0627\u0645 OLS \u0645\u0639\u06cc\u0627\u0631\u06cc \u063a\u0644\u0637\u06cc\u0627\u06ba \u06a9\u0627\u0641\u06cc \u0646\u06c1\u06cc\u06ba \u06c1\u0648\u06ba \u06af\u06cc)\u06d4<\/p>\n<p>&quot;\u062c\u0628 \u0645\u0646\u062a\u0642\u0644\u06cc \u0646\u0627\u06a9\u0627\u0645 \u06c1\u0648 \u062c\u0627\u062a\u06cc \u06c1\u06d2&#8221; \u0633\u06cc\u06a9\u0634\u0646 \u06c1\u0631 \u0646\u0627\u06a9\u0627\u0645\u06cc \u06a9\u06d2 \u0645\u0648\u0688 \u06a9\u0648 \u0627\u06cc\u06a9 \u0645\u062e\u0635\u0648\u0635 \u0645\u0641\u0631\u0648\u0636\u06d2 \u0633\u06d2 \u0646\u0642\u0634\u06c1 \u0628\u0646\u0627\u062a\u0627 \u06c1\u06d2 \u062c\u0633 \u06a9\u06cc \u062e\u0644\u0627\u0641 \u0648\u0631\u0632\u06cc \u06c1\u0648\u062a\u06cc \u06c1\u06d2\u06d4<\/p>\n<p>\u0627\u0633 \u0679\u06cc\u0648\u0679\u0648\u0631\u06cc\u0644 \u0645\u06cc\u06ba \u062a\u0645\u0627\u0645 \u06a9\u0648\u0688 \u062f\u0631\u062c \u0630\u06cc\u0644 \u0633\u0627\u062a\u06be\u06cc \u0646\u0648\u0679 \u0628\u06a9 \u0645\u06cc\u06ba \u0622\u062e\u0631 \u0633\u06d2 \u0622\u062e\u0631 \u062a\u06a9 \u0686\u0644\u062a\u0627 \u06c1\u06d2: <code>06_switchback\/switchback_demo.ipynb<\/code>.<\/p>\n<h2 id=\"heading-prerequisites\">\u0634\u0631\u0637\u06cc\u06ba<\/h2>\n<ul>\n<li>\n<p>Python 3.11+<\/p>\n<\/li>\n<li>\n<p>\u067e\u0627\u0646\u0688\u0627\u0633 2.x (<code>pip install pandas<\/code>)<\/p>\n<\/li>\n<li>\n<p>NumPy 1.26+ (<code>pip install numpy<\/code>)<\/p>\n<\/li>\n<li>\n<p>\u0631\u06cc\u0627\u0633\u062a\u06cc \u0645\u0627\u0688\u0644 0.14+ (<code>pip install statsmodels<\/code>)<\/p>\n<\/li>\n<li>\n<p>matplotlib 3.8+ (<code>pip install matplotlib<\/code>)<\/p>\n<\/li>\n<\/ul>\n<p>\u0645\u0635\u0646\u0648\u0639\u06cc \u0688\u06cc\u0679\u0627\u0633\u06cc\u0679 \u062d\u0627\u0635\u0644 \u06a9\u0631\u0646\u06d2 \u06a9\u06d2 \u0644\u06cc\u06d2\u060c \u0633\u0627\u062a\u06be\u06cc \u0631\u06cc\u067e\u0648\u0632\u0679\u0631\u06cc \u06a9\u0648 \u06a9\u0644\u0648\u0646 \u06a9\u0631\u06cc\u06ba\u06d4<\/p>\n<pre><code class=\"language-bash\">git clone https:\/\/github.com\/RudrenduPaul\/product-experimentation-causal-inference-genai-llm\ncd product-experimentation-causal-inference-genai-llm\npython data\/generate_data.py\n<\/code><\/pre>\n<p>\u062a\u062e\u0644\u06cc\u0642 \u0627\u0633\u06a9\u0631\u067e\u0679 \u0644\u06a9\u06be\u062a\u0627 \u06c1\u06d2: <code>data\/synthetic_llm_logs.csv<\/code>\u0645\u0635\u0646\u0648\u0639\u06cc SaaS LLM \u067e\u0631\u0648\u0688\u06a9\u0679 \u0679\u06cc\u0644\u06cc \u0645\u06cc\u0679\u0631\u06cc \u06a9\u06cc 50,000 \u0644\u0627\u0626\u0646 \u0641\u0627\u0626\u0644\u06d4 \u0627\u06c1\u0645 \u06a9\u0627\u0644\u0645 \u06c1\u06cc\u06ba\u06d4 <code>user_id<\/code>\u060c <code>task_completed<\/code> (\u0628\u0627\u0626\u0646\u0631\u06cc \u0646\u062a\u06cc\u062c\u06c1) <code>cost_usd<\/code>\u0627\u0648\u0631 <code>session_minutes<\/code>.<\/p>\n<p>\u0645\u0631\u062d\u0644\u06c1 1 \u0645\u06cc\u06ba \u0633\u0644\u0627\u0679 \u0645\u062e\u062a\u0635 \u06a9\u0631\u0646\u06d2 \u06a9\u06d2 \u0628\u0639\u062f\u060c 48 \u0679\u0627\u0626\u0645 \u0633\u0644\u0627\u0679\u0633 \u0645\u06cc\u06ba \u0633\u06d2 \u06c1\u0631 \u0627\u06cc\u06a9 \u0645\u06cc\u06ba \u062a\u0642\u0631\u06cc\u0628\u0627\u064b 1,042 \u0633\u06cc\u0634\u0646 \u06c1\u0648\u062a\u06d2 \u06c1\u06cc\u06ba\u06d4 \u0688\u06cc\u0679\u0627\u0633\u06cc\u0679 \u062d\u0642\u06cc\u0642\u062a \u067e\u0633\u0646\u062f\u0627\u0646\u06c1 LLM \u067e\u0644\u06cc\u0679 \u0641\u0627\u0631\u0645 \u0679\u0631\u06cc\u0641\u06a9 \u06a9\u06cc \u0646\u0645\u0627\u0626\u0646\u062f\u06af\u06cc \u06a9\u0631\u062a\u0627 \u06c1\u06d2\u06d4 \u0627\u0633\u062a\u0641\u0633\u0627\u0631 \u06a9\u06cc \u0622\u0645\u062f \u06a9\u06cc \u0634\u0631\u062d\u060c \u0645\u0627\u0688\u0644 \u0644\u0627\u06af\u062a \u06a9\u06cc \u062a\u0642\u0633\u06cc\u0645\u060c \u0627\u0648\u0631 \u0633\u06cc\u0634\u0646 \u06a9\u06cc \u0644\u0645\u0628\u0627\u0626\u06cc \u067e\u06cc\u062f\u0627\u0648\u0627\u0631 \u06a9\u06d2 \u0646\u0645\u0648\u0646\u0648\u06ba \u06a9\u06d2 \u0644\u06cc\u06d2 \u06a9\u06cc\u0644\u06cc\u0628\u0631\u06cc\u0679 \u06a9\u0631\u062f\u06c1 \u062a\u0642\u0633\u06cc\u0645 \u0633\u06d2 \u0627\u062e\u0630 \u06a9\u06cc \u062c\u0627\u062a\u06cc \u06c1\u06d2\u06d4<\/p>\n<h2 id=\"heading-step-1-build-the-switchback-time-series\">\u0645\u0631\u062d\u0644\u06c1 1: \u0633\u0648\u0626\u0686 \u0628\u06cc\u06a9 \u0679\u0627\u0626\u0645 \u0633\u06cc\u0631\u06cc\u0632 \u0628\u0646\u0627\u0646\u0627<\/h2>\n<p>\u0633\u0648\u0626\u0686 \u0628\u06cc\u06a9 \u062a\u062c\u0631\u0628\u06c1 \u0631\u06cc\u0626\u0644 \u0679\u0627\u0626\u0645 \u067e\u0631\u0648\u0633\u06cc\u0633\u0646\u06af \u0627\u06cc\u0644\u0648\u06a9\u06cc\u0634\u0646 \u06a9\u0646\u0679\u0631\u0648\u0644\u0631 \u06a9\u0627 \u0627\u0633\u062a\u0639\u0645\u0627\u0644 \u06a9\u0631\u062a\u06d2 \u06c1\u0648\u0626\u06d2 \u0686\u0644\u0627\u06cc\u0627 \u062c\u0627\u062a\u0627 \u06c1\u06d2 \u062c\u0648 \u067e\u0631\u0648\u0688\u06a9\u0634\u0646 \u0645\u06cc\u06ba \u0633\u0644\u0627\u0679 \u0628\u0627\u0624\u0646\u0688\u0631\u06cc \u067e\u0631 \u0631\u0648\u0679\u0646\u06af AI \u06a9\u0648 \u0622\u0646 \u0627\u0648\u0631 \u0622\u0641 \u06a9\u0631\u062a\u0627 \u06c1\u06d2\u06d4<\/p>\n<p>\u0627\u0633 \u0679\u06cc\u0648\u0679\u0648\u0631\u06cc\u0644 \u0645\u06cc\u06ba\u060c \u0622\u067e \u0633\u06cc\u0634\u0646 \u0644\u0627\u06af \u0633\u06d2 \u06c1\u0631 \u0642\u0637\u0627\u0631 \u06a9\u0648 \u0645\u0635\u0646\u0648\u0639\u06cc \u0679\u0627\u0626\u0645 \u0633\u0644\u0627\u0679 \u067e\u0631 \u0646\u0642\u0634\u06c1 \u0628\u0646\u0627 \u06a9\u0631 \u0627\u0648\u0631 \u067e\u06be\u0631 \u0633\u0644\u0627\u0679 \u06a9\u06cc \u0633\u0637\u062d \u067e\u0631 \u062c\u0645\u0639 \u06a9\u0631\u06a9\u06d2 \u0679\u0627\u0626\u0645 \u0633\u06cc\u0631\u06cc\u0632 \u0628\u0646\u0627\u062a\u06d2 \u06c1\u06cc\u06ba\u06d4<\/p>\n<pre><code class=\"language-python\">import pandas as pd\nimport numpy as np\n\ndf = pd.read_csv(\"data\/synthetic_llm_logs.csv\")\nprint(f\"Dataset shape: {df.shape}\")\nprint(df[[\"user_id\", \"task_completed\", \"cost_usd\", \"session_minutes\"]].head(3).round(3))\n\n# Shuffle to eliminate row-ordering bias before slot assignment\ndf = df.sample(frac=1, random_state=42).reset_index(drop=True)\n\n# Assign hour slots: 48 slots, each containing ~1,042 sessions\ndf['hour_slot'] = df.index % 48\n\n# Treatment schedule: 3-slot blocks (on, on, on, off, off, off, ...)\n# 3-slot blocks give the platform time to settle into each state and break\n# the perfect collinearity between ai_on and its one-period lag.\nai_on_schedule = np.tile([1, 1, 1, 0, 0, 0], 8)   # 48 slots, 8 full cycles\ndf['ai_on'] = ai_on_schedule[df['hour_slot']]\n\n# Aggregate to slot level: mean outcome, mean cost, treatment indicator, session count\nslots = df.groupby('hour_slot').agg(\n    mean_task_completed = ('task_completed', 'mean'),\n    mean_cost           = ('cost_usd',       'mean'),\n    ai_on               = ('ai_on',          'first'),\n    n_obs               = ('user_id',         'count')\n).reset_index()\n\nprint(f\"nSlot-level data: {len(slots)} slots\")\nprint(slots[['hour_slot', 'ai_on', 'mean_task_completed', 'mean_cost', 'n_obs']].head(8).round(4))\nprint(f\"nAI-on slots: {slots['ai_on'].sum()},  AI-off slots: {(1 - slots['ai_on']).sum()}\")\n<\/code><\/pre>\n<p><strong>\u0645\u062a\u0648\u0642\u0639 \u067e\u06cc\u062f\u0627\u0648\u0627\u0631:<\/strong><\/p>\n<pre><code class=\"language-text\">Dataset shape: (50000, 16)\n   user_id  task_completed  cost_usd  session_minutes\n0        0               0     0.022             7.03\n1        1               1     0.008             4.07\n2        2               1     0.040             8.34\n\nSlot-level data: 48 slots\n   hour_slot  ai_on  mean_task_completed  mean_cost  n_obs\n0          0      1               0.5950     0.0222   1042\n1          1      1               0.5806     0.0223   1042\n2          2      1               0.5950     0.0224   1042\n3          3      0               0.6353     0.0218   1042\n4          4      0               0.6017     0.0222   1042\n5          5      0               0.6094     0.0218   1042\n6          6      1               0.5912     0.0218   1042\n7          7      1               0.5931     0.0219   1042\n\nAI-on slots: 24,  AI-off slots: 24\n<\/code><\/pre>\n<p>\u06cc\u06c1 \u0639\u0645\u0644 \u0688\u06cc\u0679\u0627 \u06a9\u06cc \u062a\u06cc\u0627\u0631\u06cc \u0633\u06d2 \u0642\u0637\u0627\u0631 \u062a\u0631\u062a\u06cc\u0628 \u06a9\u06d2 \u0646\u0645\u0648\u0646\u06d2 \u06a9\u0648 \u06c1\u0679\u0627\u0646\u06d2 \u06a9\u06d2 \u0644\u06cc\u06d2 \u0633\u0644\u0627\u0679 \u0645\u062e\u062a\u0635 \u06a9\u0631\u0646\u06d2 \u0633\u06d2 \u067e\u06c1\u0644\u06d2 \u0688\u06cc\u0679\u0627 \u0633\u06cc\u0679 \u06a9\u0648 \u0634\u0641\u0644 \u06a9\u0631\u06a9\u06d2 \u0634\u0631\u0648\u0639 \u06c1\u0648\u062a\u0627 \u06c1\u06d2\u06d4 50,000 \u0642\u0637\u0627\u0631\u0648\u06ba \u0645\u06cc\u06ba \u0633\u06d2 \u06c1\u0631 \u0627\u06cc\u06a9 \u06a9\u0648 \u0645\u0627\u0688\u06cc\u0648\u0644\u0648 \u0631\u06cc\u0627\u0636\u06cc \u06a9\u0627 \u0627\u0633\u062a\u0639\u0645\u0627\u0644 \u06a9\u0631\u062a\u06d2 \u06c1\u0648\u0626\u06d2 48 \u062c\u0627\u0645\u0639 \u0679\u0627\u0626\u0645 \u0633\u0644\u0627\u0679\u0633 \u0645\u06cc\u06ba \u0633\u06d2 \u0627\u06cc\u06a9 \u06a9\u0648 \u062a\u0641\u0648\u06cc\u0636 \u06a9\u06cc\u0627 \u062c\u0627\u062a\u0627 \u06c1\u06d2\u060c \u0627\u0648\u0631 \u067e\u0631\u0648\u0633\u06cc\u0633\u0646\u06af \u06a9\u0627 \u0634\u06cc\u0688\u0648\u0644 \u062a\u06cc\u0646 \u0633\u0644\u0627\u0679 \u0628\u0644\u0627\u06a9\u0633 \u0645\u06cc\u06ba \u062a\u0628\u062f\u06cc\u0644 \u06c1\u0648\u062a\u0627 \u06c1\u06d2 \u062a\u0627\u06a9\u06c1 \u0622\u0679\u06be \u0645\u06a9\u0645\u0644 \u0686\u06a9\u0631 \u0645\u06a9\u0645\u0644 \u06c1\u0648\u06ba\u06d4<\/p>\n<p>\u062a\u06cc\u0646 \u0633\u0644\u0627\u0679 \u0628\u0644\u0627\u06a9 \u0688\u06be\u0627\u0646\u0686\u06c1 \u062f\u0648 \u0645\u0642\u0627\u0635\u062f \u06a9\u0648 \u067e\u0648\u0631\u0627 \u06a9\u0631\u062a\u0627 \u06c1\u06d2\u06d4 \u06cc\u0639\u0646\u06cc\u060c \u06cc\u06c1 \u067e\u0644\u06cc\u0679 \u0641\u0627\u0631\u0645 \u06a9\u0648 \u0639\u0644\u0627\u062c \u06a9\u06cc \u06c1\u0631 \u062d\u0627\u0644\u062a \u0645\u06cc\u06ba \u0628\u0633\u0646\u06d2 \u06a9\u0627 \u0648\u0642\u062a \u062f\u06cc\u062a\u0627 \u06c1\u06d2 \u0627\u0648\u0631 \u0645\u0648\u062c\u0648\u062f\u06c1 \u0639\u0644\u0627\u062c \u06a9\u06d2 \u0627\u0634\u0627\u0631\u06d2 \u0627\u0648\u0631 \u0627\u06cc\u06a9 \u0645\u062f\u062a \u06a9\u06d2 \u0648\u0642\u0641\u06d2 \u06a9\u06d2 \u062f\u0631\u0645\u06cc\u0627\u0646 \u06a9\u0627\u0645\u0644 \u06c1\u0645 \u0622\u06c1\u0646\u06af\u06cc \u06a9\u0648 \u062a\u0648\u0691 \u062f\u06cc\u062a\u0627 \u06c1\u06d2\u06d4 \u0628\u0635\u0648\u0631\u062a \u062f\u06cc\u06af\u0631\u060c \u06a9\u06cc\u0631\u06cc \u0627\u0648\u0648\u0631 \u06a9\u06d2 \u062a\u062e\u0645\u06cc\u0646\u06d2 \u062e\u0627\u0644\u0635\u062a\u0627\u064b \u0634\u0641\u0679 \u06a9\u06d2 \u0646\u0638\u0627\u0645 \u0627\u0644\u0627\u0648\u0642\u0627\u062a \u06a9\u06cc \u0628\u0646\u06cc\u0627\u062f \u067e\u0631 \u0646\u0627\u0645\u0645\u06a9\u0646 \u06c1\u0648 \u062c\u0627\u062a\u06d2 \u06c1\u06cc\u06ba\u06d4 \u06af\u0646\u062a\u06cc \u06a9\u06d2 \u0628\u0639\u062f\u060c \u06c1\u0631 \u0633\u0644\u0627\u0679 \u0645\u06cc\u06ba \u062a\u0642\u0631\u06cc\u0628\u0627\u064b 1,042 \u0633\u06cc\u0634\u0646 \u06c1\u0648\u062a\u06d2 \u06c1\u06cc\u06ba\u06d4<\/p>\n<p>\u0627\u0646\u062c\u06cc\u06a9\u0634\u0646 \u0633\u06d2 \u067e\u06c1\u0644\u06d2\u060c \u0633\u0644\u0627\u0679 \u0644\u06cc\u0648\u0644 \u06a9\u06cc \u0627\u0648\u0633\u0637 \u0627\u0628\u06be\u06cc \u062a\u06a9 \u0639\u0644\u0627\u062c \u06a9\u06d2 \u0630\u0631\u06cc\u0639\u06d2 \u0648\u0627\u0636\u062d \u0637\u0648\u0631 \u067e\u0631 \u0627\u0644\u06af \u0646\u06c1\u06cc\u06ba \u06a9\u06cc \u06af\u0626\u06cc \u062a\u06be\u06cc\u06d4 \u0633\u0644\u0627\u0679\u0633 3\u060c 4\u060c \u0627\u0648\u0631 5 (AI-off) \u062e\u0627\u0645 \u0688\u06cc\u0679\u0627 \u0645\u06cc\u06ba \u0633\u0644\u0627\u0679\u0633 0\u060c 1\u060c \u0627\u0648\u0631 2 (AI-on) \u0633\u06d2 \u0642\u062f\u0631\u06d2 \u0632\u06cc\u0627\u062f\u06c1 \u062a\u06a9\u0645\u06cc\u0644 \u06a9\u06cc \u0634\u0631\u062d \u062f\u06a9\u06be\u0627\u062a\u06d2 \u06c1\u06cc\u06ba\u06d4 \u0627\u0633 \u06a9\u06cc \u062a\u0648\u0642\u0639 \u06c1\u06d2\u06d4 \u0627\u0646\u062c\u06cc\u06a9\u0634\u0646 \u0633\u06d2 \u067e\u06c1\u0644\u06d2\u060c \u0639\u0644\u0627\u062c \u06a9\u06cc \u062a\u0641\u0648\u06cc\u0636 \u0628\u06d2 \u062a\u0631\u062a\u06cc\u0628 \u06c1\u06d2 \u0627\u0648\u0631 \u0646\u062a\u0627\u0626\u062c \u062d\u0642\u06cc\u0642\u06cc \u0633\u06af\u0646\u0644 \u0646\u06c1\u06cc\u06ba \u062f\u06cc\u062a\u06d2 \u06c1\u06cc\u06ba\u06d4 \u0646\u06cc\u0686\u06d2 \u062f\u06cc\u06d2 \u06af\u0626\u06d2 \u0627\u0646\u062c\u06cc\u06a9\u0634\u0646 \u06a9\u06d2 \u0645\u0631\u0627\u062d\u0644 \u0627\u0635\u0644 \u0645\u0639\u0644\u0648\u0645\u0627\u062a \u0645\u06cc\u06ba \u0628\u06cc\u06a9 \u06a9\u0631\u062a\u06d2 \u06c1\u06cc\u06ba\u06d4<\/p>\n<pre><code class=\"language-python\"># Known ground truth baked into the simulation\nTRUE_EFFECT = 0.060   # AI routing raises task completion by 6 percentage points\nCARRYOVER   = 0.030   # Residual routing effect persists into the following slot\n\n# Replace slot means with synthetic balanced base rates.\n# Slot noise std matches the CLT variance of aggregating ~1,042 Bernoulli sessions,\n# simulating realistic slot-to-slot demand variation without treatment-group imbalance.\nBASE_RATE = df['task_completed'].mean()\nslot_noise_std = np.sqrt(BASE_RATE * (1 - BASE_RATE) \/ slots['n_obs'].iloc[0])\nrng = np.random.default_rng(42)\nslots['mean_task_completed'] = BASE_RATE + rng.normal(0, slot_noise_std, size=len(slots))\n\n# Lag the treatment indicator: did the previous slot have AI routing on?\nslots['ai_on_lag1'] = slots['ai_on'].shift(1).fillna(0).astype(int)\n\n# Observed outcome = base outcome + treatment effect + carryover from prior slot\nslots['mean_task_completed'] = (\n    slots['mean_task_completed']\n    + TRUE_EFFECT * slots['ai_on']\n    + CARRYOVER   * slots['ai_on_lag1']\n)\n\nprint(\"Post-injection slot data:\")\nprint(slots[['hour_slot', 'ai_on', 'ai_on_lag1', 'mean_task_completed']].head(8).round(4))\n<\/code><\/pre>\n<p><strong>\u0645\u062a\u0648\u0642\u0639 \u067e\u06cc\u062f\u0627\u0648\u0627\u0631:<\/strong><\/p>\n<pre><code class=\"language-text\">Post-injection slot data:\n   hour_slot  ai_on  ai_on_lag1  mean_task_completed\n0          0      1           0               0.6606\n1          1      1           1               0.6701\n2          2      1           1               0.6973\n3          3      0           1               0.6402\n4          4      0           0               0.5663\n5          5      0           0               0.5761\n6          6      1           0               0.6579\n7          7      1           1               0.6811\n<\/code><\/pre>\n<p>\u0627\u0646\u062c\u06a9\u0634\u0646 \u062e\u0627\u0645 \u0633\u0644\u0627\u0679 \u06a9\u06d2 \u0630\u0631\u0627\u0626\u0639 \u06a9\u0648 1,042 \u0628\u0631\u0646\u0648\u0644\u06cc \u0679\u0631\u0627\u0626\u0644\u0632 \u06a9\u06d2 \u062a\u063a\u06cc\u0631 \u06a9\u06d2 \u0644\u06cc\u06d2 \u062f\u0631\u0633\u062a \u06a9\u06cc\u06d2 \u062c\u0627\u0646\u06d2 \u0648\u0627\u0644\u06d2 \u0634\u0648\u0631 \u06a9\u06d2 \u0633\u0627\u062a\u06be \u0628\u062f\u0644 \u062f\u06cc\u062a\u0627 \u06c1\u06d2\u060c \u062c\u0633 \u0633\u06d2 \u0633\u0644\u0627\u0679 \u0633\u06d2 \u0633\u0644\u0627\u0679 \u0645\u06cc\u06ba \u062a\u063a\u06cc\u0631 \u067e\u06cc\u062f\u0627 \u06c1\u0648\u062a\u0627 \u06c1\u06d2 \u062c\u0648 \u0645\u0635\u0646\u0648\u0639\u06cc \u0639\u0644\u0627\u062c \u06af\u0631\u0648\u067e \u06a9\u06d2 \u0639\u062f\u0645 \u062a\u0648\u0627\u0632\u0646 \u06a9\u06d2 \u0628\u063a\u06cc\u0631 \u067e\u06cc\u062f\u0627\u0648\u0627\u0631 \u06a9\u06cc \u0637\u0644\u0628 \u0645\u06cc\u06ba \u062a\u063a\u06cc\u0631 \u06a9\u0648 \u0638\u0627\u06c1\u0631 \u06a9\u0631\u062a\u0627 \u06c1\u06d2\u06d4<\/p>\n<p>\u062a\u0627\u062e\u06cc\u0631 <code>ai_on<\/code> AI \u0622\u0646 \u067e\u06cc\u0631\u06cc\u0688 \u06a9\u06d2 \u0641\u0648\u0631\u0627\u064b \u0628\u0639\u062f \u0633\u0644\u0627\u0679 \u06a9\u06cc \u0634\u0646\u0627\u062e\u062a \u06a9\u0631\u062a\u0627 \u06c1\u06d2\u06d4 \u067e\u06be\u0631 \u0627\u0646\u062c\u06cc\u06a9\u0634\u0646 \u0641\u0627\u0631\u0645\u0648\u0644\u06c1 \u0634\u0627\u0645\u0644 \u06a9\u06cc\u0627 \u062c\u0627\u062a\u0627 \u06c1\u06d2\u06d4 <code>TRUE_EFFECT<\/code> (0.060) \u062a\u0645\u0627\u0645 AI \u0622\u0646 \u0633\u0644\u0627\u0679\u0633 \u0645\u06cc\u06ba <code>CARRYOVER<\/code> (0.030) \u0627\u0646 \u062a\u0645\u0627\u0645 \u0633\u0644\u0627\u0679\u0633 \u067e\u0631 \u0644\u0627\u06af\u0648 \u06c1\u0648\u062a\u0627 \u06c1\u06d2 \u062c\u0648 AI-on \u0633\u0644\u0627\u0679 \u06a9\u06cc \u067e\u06cc\u0631\u0648\u06cc \u06a9\u0631\u062a\u06d2 \u06c1\u06cc\u06ba\u060c \u0642\u0637\u0639 \u0646\u0638\u0631 \u0627\u0646 \u06a9\u06cc \u0627\u067e\u0646\u06cc \u067e\u0631\u0648\u0633\u06cc\u0633\u0646\u06af \u062d\u0627\u0644\u062a\u06d4<\/p>\n<p>\u0633\u0644\u0627\u0679 3 \u067e\u0631 \u0627\u06cc\u06a9 \u0646\u0638\u0631 \u0688\u0627\u0644\u06cc\u06ba\u06d4 <code>ai_on=0<\/code> \u0644\u06cc\u06a9\u0646 <code>ai_on_lag1=1<\/code>\u0644\u06c1\u0630\u0627 \u06cc\u06c1\u0627\u06ba \u062a\u06a9 \u06a9\u06c1 \u0627\u06af\u0631 AI \u0631\u0648\u0679\u0646\u06af \u06a9\u0648 \u0628\u0646\u062f \u06a9\u0631 \u062f\u06cc\u0627 \u06af\u06cc\u0627 \u06c1\u06d2\u060c \u0646\u062a\u06cc\u062c\u06c1 \u06a9\u0648 +0.030 \u06a9\u06cc\u0631\u06cc \u0627\u0648\u0648\u0631 \u06a9\u0648 \u0641\u0631\u0648\u063a \u0645\u0644\u06d2 \u06af\u0627\u06d4 \u06cc\u06c1 \u06a9\u06cc\u0631\u06cc \u0627\u0648\u0648\u0631 \u0622\u0644\u0648\u062f\u06af\u06cc \u06c1\u06d2 \u062c\u0648 \u0628\u0648\u0644\u06cc \u0645\u0627\u0688\u0644\u0632 \u0645\u06cc\u06ba \u0646\u06c1\u06cc\u06ba \u062f\u06cc\u06a9\u06be\u06cc \u062c\u0627\u062a\u06cc \u06c1\u06d2\u06d4<\/p>\n<p>\u06c1\u0631 \u0633\u0627\u0626\u06cc\u06a9\u0644 \u0645\u06cc\u06ba \u067e\u06c1\u0644\u0627 AI \u0622\u0641 \u0633\u0644\u0627\u0679 \u0627\u0635\u0644 \u0622\u0641 \u067e\u06cc\u0631\u06cc\u0688 \u06a9\u06cc \u0639\u06a9\u0627\u0633\u06cc \u06a9\u0631\u062a\u0627 \u06c1\u06d2\u060c \u0644\u06cc\u06a9\u0646 \u0646\u062a\u06cc\u062c\u06c1 \u067e\u0686\u06be\u0644\u06d2 \u0628\u0644\u0627\u06a9 \u0633\u06d2 \u0628\u0642\u0627\u06cc\u0627 \u0631\u0648\u0679\u0646\u06af \u06a9\u06cc \u062d\u0627\u0644\u062a \u0633\u06d2 \u0628\u0691\u06be\u0627 \u06c1\u0648\u0627 \u06c1\u06d2\u06d4 \u0633\u0644\u0627\u0679\u0633 \u067e\u0631 \u062a\u0645\u0627\u0645 AI \u0627\u0648\u0631 \u062a\u0645\u0627\u0645 AI \u0622\u0641 \u0633\u0644\u0627\u0679\u0633 \u06a9\u0627 \u0633\u0627\u062f\u06c1 \u0645\u0648\u0627\u0632\u0646\u06c1 \u0627\u0639\u0644\u06cc\u0670 \u0646\u062a\u0627\u0626\u062c \u06a9\u0648 AI \u0622\u0641 \u06a9\u0633\u0648\u0679\u06cc \u06a9\u06d2 \u062d\u0635\u06d2 \u06a9\u06d2 \u0637\u0648\u0631 \u067e\u0631 \u0633\u0645\u062c\u06be\u0627 \u062c\u0627\u0626\u06d2 \u06af\u0627\u060c \u062d\u0642\u06cc\u0642\u06cc \u0628\u0631\u0627\u06c1 \u0631\u0627\u0633\u062a \u0627\u062b\u0631 \u06a9\u0648 \u0645\u0633\u062e \u06a9\u0631\u062a\u0627 \u06c1\u06d2\u06d4<\/p>\n<p><img decoding=\"async\" src=\"https:\/\/umang.pk\/wp-content\/uploads\/2026\/07\/1782913055_863_LLM-\u067e\u0644\u06cc\u0679-\u0641\u0627\u0631\u0645\u0632-\u06a9\u06d2-\u0644\u06cc\u06d2-\u067e\u0631\u0648\u0688\u06a9\u0679-\u06a9\u06d2-\u062a\u062c\u0631\u0628\u0627\u062a-\u0633\u0648\u0626\u0686-\u0628\u06cc\u06a9.png\" alt=\"a2e1458b-751e-4e64-9e76-ea269f09de5d\" style=\"display:block;margin:0 auto\" width=\"1918\" height=\"719\" loading=\"lazy\" title=\"\"><\/p>\n<p><em>\u0634\u06a9\u0644 2: \u0628\u0627\u0626\u06cc\u06ba: 6pp \u200b\u200b\u067e\u0631\u0648\u0633\u06cc\u0633\u0646\u06af \u0627\u062b\u0631\u0627\u062a \u0627\u0648\u0631 3pp \u06a9\u06cc\u0631\u06cc \u0627\u0648\u0648\u0631 \u0627\u0646\u062c\u06cc\u06a9\u0634\u0646 \u0644\u06af\u0627\u0646\u06d2 \u06a9\u06d2 \u0628\u0639\u062f \u0645\u0635\u0646\u0648\u0639\u06cc \u0688\u06cc\u0679\u0627\u0633\u06cc\u0679 \u06a9\u06cc 48-\u0633\u0644\u0627\u0679 \u0679\u0627\u0626\u0645 \u0633\u06cc\u0631\u06cc\u0632\u06d4 \u0627\u0648\u0631\u0646\u062c \u0688\u0627\u0679 \u06c1\u0631 \u0633\u0627\u0626\u06cc\u06a9\u0644 \u06a9\u06d2 \u067e\u06c1\u0644\u06d2 AI-\u0622\u0641 \u0633\u0644\u0627\u0679 \u06a9\u0648 \u0646\u0634\u0627\u0646 \u0632\u062f \u06a9\u0631\u062a\u0627 \u06c1\u06d2 (ai_on=0, ai_on_lag1=1)\u060c \u062c\u06c1\u0627\u06ba \u0646\u062a\u06cc\u062c\u06c1 \u067e\u0686\u06be\u0644\u06d2 AI-on \u0628\u0644\u0627\u06a9 \u0633\u06d2 \u0632\u06cc\u0627\u062f\u06c1 \u0631\u06c1\u062a\u0627 \u06c1\u06d2\u06d4<\/em><br \/><em>\u062f\u0627\u0626\u06cc\u06ba: Naive OLS (\u0633\u0631\u062e) \u062d\u0642\u06cc\u0642\u06cc 6pp \u0627\u062b\u0631 \u0633\u06d2 0.9pp \u0633\u06d2 \u0632\u06cc\u0627\u062f\u06c1 \u06c1\u06d2 \u06a9\u06cc\u0648\u0646\u06a9\u06c1 \u0627\u0633 \u0645\u06cc\u06ba \u0628\u0631\u0627\u06c1 \u0631\u0627\u0633\u062a \u0627\u0648\u0631 \u0648\u0631\u0627\u062b\u062a \u0645\u06cc\u06ba \u0645\u0644\u0646\u06d2 \u0648\u0627\u0644\u0627 \u06a9\u06cc\u0631\u06cc \u0627\u0648\u0648\u0631 \u0634\u0627\u0645\u0644 \u06c1\u06d2\u06d4 \u06a9\u06cc\u0631\u06cc \u0627\u0648\u0648\u0631 \u0627\u06cc\u0688\u062c\u0633\u0679 \u0634\u062f\u06c1 OLS (\u0646\u06cc\u0644\u0627) \u0627\u0635\u0644 \u0627\u062b\u0631 \u06a9\u0648 \u0628\u062d\u0627\u0644 \u06a9\u0631\u062a\u0627 \u06c1\u06d2\u06d4 \u062f\u0648\u0646\u0648\u06ba 95% \u0628\u0648\u0679\u0633\u0679\u0631\u06cc\u067e CIs \u0645\u06cc\u06ba \u06af\u0631\u06cc\u0646 \u0688\u06cc\u0634\u0688 \u0631\u06cc\u0626\u0644 \u0627\u06cc\u0641\u06cc\u06a9\u0679 \u0644\u0627\u0626\u0646\u06cc\u06ba \u0634\u0627\u0645\u0644 \u06c1\u06cc\u06ba\u06d4<\/em><\/p>\n<h2 id=\"heading-step-2-naive-estimate-ignoring-time-structure\">\u0645\u0631\u062d\u0644\u06c1 2: \u0628\u06d2 \u06c1\u0648\u062f\u06c1 \u062a\u062e\u0645\u06cc\u0646\u06c1 (\u0648\u0642\u062a \u06a9\u06cc \u0633\u0627\u062e\u062a \u06a9\u0648 \u0646\u0638\u0631 \u0627\u0646\u062f\u0627\u0632 \u06a9\u0631\u0646\u0627)<\/h2>\n<p>\u06a9\u0633\u06cc \u0628\u06be\u06cc \u0648\u0636\u0627\u062d\u062a \u06a9\u0648 \u0634\u0627\u0645\u0644 \u06a9\u0631\u0646\u06d2 \u0633\u06d2 \u067e\u06c1\u0644\u06d2 \u0648\u0627\u0636\u062d \u062a\u062e\u0645\u06cc\u0646\u0648\u06ba \u06a9\u0627 \u062d\u0633\u0627\u0628 \u0644\u06af\u0627\u0626\u06cc\u06ba\u06d4 \u06cc\u0639\u0646\u06cc\u060c \u06c1\u0645 \u062f\u0646\u06cc\u0627\u0648\u06cc \u0688\u06be\u0627\u0646\u0686\u06d2 \u06a9\u0648 \u0645\u06a9\u0645\u0644 \u0637\u0648\u0631 \u067e\u0631 \u0646\u0638\u0631 \u0627\u0646\u062f\u0627\u0632 \u06a9\u0631\u062a\u06d2 \u06c1\u06cc\u06ba \u0627\u0648\u0631 \u0628\u0627\u0626\u0646\u0631\u06cc AI \u0627\u06cc\u06a9\u0679\u06cc\u0648\u06cc\u0634\u0646 \u0627\u0634\u0627\u0631\u06d2 \u067e\u0631 \u0627\u0648\u0633\u0637 \u06a9\u0627\u0645 \u06a9\u06cc \u062a\u06a9\u0645\u06cc\u0644 \u06a9\u0648 \u067e\u06cc\u0686\u06be\u06d2 \u0686\u06be\u0648\u0691 \u062f\u06cc\u062a\u06d2 \u06c1\u06cc\u06ba\u06d4<\/p>\n<pre><code class=\"language-python\">import statsmodels.api as sm\n\n# Naive OLS: outcome ~ constant + ai_on\n# No lag term, no time controls\nX_naive = sm.add_constant(slots['ai_on'])\nnaive_model = sm.OLS(slots['mean_task_completed'], X_naive).fit()\n\nnaive_ate = naive_model.params['ai_on']\nnaive_se  = naive_model.bse['ai_on']\n\nprint(\"=== Naive estimate (no carryover control) ===\")\nprint(f\"  ATE estimate : {naive_ate:.4f}\")\nprint(f\"  Std error    : {naive_se:.4f}\")\nprint(f\"  95% CI       : [{naive_ate - 1.96*naive_se:.4f},  {naive_ate + 1.96*naive_se:.4f}]\")\nprint(f\"n  True effect  : {TRUE_EFFECT}\")\nprint(f\"  Bias         : {naive_ate - TRUE_EFFECT:+.4f}\")\n<\/code><\/pre>\n<p><strong>\u0645\u062a\u0648\u0642\u0639 \u067e\u06cc\u062f\u0627\u0648\u0627\u0631:<\/strong><\/p>\n<pre><code class=\"language-text\">=== Naive estimate (no carryover control) ===\n  ATE estimate : 0.0688\n  Std error    : 0.0048\n  95% CI       : [0.0595,  0.0782]\n\n  True effect  : 0.06\n  Bias         : +0.0088\n<\/code><\/pre>\n<p>Naive OLS \u0627\u0634\u0627\u0631\u06d2 \u067e\u0631 \u0635\u0631\u0641 \u0628\u0627\u0626\u0646\u0631\u06cc AI \u067e\u0631 \u0627\u0648\u0633\u0637 \u06a9\u0627\u0645 \u06a9\u06cc \u062a\u06a9\u0645\u06cc\u0644 \u06a9\u0648 \u067e\u06cc\u0686\u06be\u06d2 \u0686\u06be\u0648\u0691\u062a\u0627 \u06c1\u06d2\u060c 48 \u0633\u0644\u0627\u0679\u0633 \u06a9\u0648 48 \u0622\u0632\u0627\u062f \u0645\u0634\u0627\u06c1\u062f\u0627\u062a \u06a9\u06d2 \u0637\u0648\u0631 \u067e\u0631 \u062f\u06cc\u06a9\u06be\u062a\u0627 \u06c1\u06d2 \u062c\u0633 \u0645\u06cc\u06ba \u06a9\u0648\u0626\u06cc \u0648\u0642\u062a\u06cc \u0688\u06be\u0627\u0646\u0686\u06c1 \u0646\u06c1\u06cc\u06ba \u06c1\u0648\u062a\u0627 \u06c1\u06d2\u06d4 \u06cc\u06c1 0.060 \u06a9\u06d2 \u062d\u0642\u06cc\u0642\u06cc \u0628\u0631\u0627\u06c1 \u0631\u0627\u0633\u062a \u0627\u062b\u0631 \u06a9\u06d2 \u0644\u06cc\u06d2 0.0688 \u06a9\u0627 ATE\u060c +0.0088 \u06a9\u0627 \u062a\u0639\u0635\u0628\u060c \u06cc\u0627 \u0645\u0635\u0646\u0648\u0639\u06cc \u0644\u0641\u0679 \u06a9\u0627 \u062a\u0642\u0631\u06cc\u0628\u0627\u064b \u067e\u0648\u0631\u0627 \u0641\u06cc\u0635\u062f \u067e\u0648\u0627\u0626\u0646\u0679 \u0648\u0627\u067e\u0633 \u06a9\u0631\u062a\u0627 \u06c1\u06d2\u06d4<\/p>\n<p>\u062a\u0639\u0635\u0628 \u0627\u0633 \u0628\u0627\u062a \u0633\u06d2 \u067e\u06cc\u062f\u0627 \u06c1\u0648\u062a\u0627 \u06c1\u06d2 \u06a9\u06c1 \u06a9\u06cc\u0631\u06cc \u0627\u0648\u0648\u0631 \u06a9\u0648 \u062f\u0648 \u06af\u0631\u0648\u067e\u0648\u06ba \u06a9\u06d2 \u062f\u0631\u0645\u06cc\u0627\u0646 \u06a9\u06cc\u0633\u06d2 \u062a\u0642\u0633\u06cc\u0645 \u06a9\u06cc\u0627 \u062c\u0627\u062a\u0627 \u06c1\u06d2\u06d4 3-\u0633\u0644\u0627\u0679 \u0622\u0646\/3-\u0633\u0644\u0627\u0679 \u0622\u0641 \u0688\u06cc\u0632\u0627\u0626\u0646 \u0645\u06cc\u06ba\u060c \u0628\u0644\u0627\u06a9 \u067e\u0631 \u06c1\u0631 AI \u06a9\u06d2 \u0633\u0644\u0627\u0679\u0633 1 \u0627\u0648\u0631 2 \u062f\u0648\u0646\u0648\u06ba \u0628\u0631\u0627\u06c1 \u0631\u0627\u0633\u062a \u067e\u0631\u0648\u0633\u06cc\u0633\u0646\u06af \u0627\u062b\u0631 (+0.060) \u0627\u0648\u0631 \u06a9\u06cc\u0631\u06cc \u0627\u0648\u0648\u0631 \u0627\u062b\u0631 (+0.030) \u062f\u0648\u0646\u0648\u06ba \u06a9\u0648 \u062d\u0627\u0635\u0644 \u06a9\u0631\u062a\u06d2 \u06c1\u06cc\u06ba\u060c \u062c\u0648 \u0646\u062a\u06cc\u062c\u06c1 \u06a9\u0648 \u0628\u06cc\u0633 +0.090 \u067e\u0631 \u062f\u06be\u06a9\u06cc\u0644\u062a\u06d2 \u06c1\u06cc\u06ba\u06d4<\/p>\n<p>\u0627\u06cc\u06a9 \u0633\u0627\u062f\u06c1 \u0646\u0645\u0648\u0646\u06c1 \u0627\u0646 \u062f\u0648 \u0634\u0631\u0627\u06a9\u062a\u0648\u06ba \u06a9\u0648 \u0627\u0644\u06af \u0646\u06c1\u06cc\u06ba \u06a9\u0631 \u0633\u06a9\u062a\u0627\u06d4 \u06c1\u0645 AI \u0633\u06d2 \u0644\u06cc\u0633 \u0633\u0644\u0627\u0679\u0633 \u0645\u06cc\u06ba \u0627\u0639\u0644\u06cc\u0670 \u0646\u062a\u0627\u0626\u062c \u062f\u06cc\u06a9\u06be\u062a\u06d2 \u06c1\u06cc\u06ba \u0627\u0648\u0631 \u0627\u0633 \u06a9\u06cc \u0648\u062c\u06c1 \u0628\u0631\u0627\u06c1 \u0631\u0627\u0633\u062a \u0639\u0644\u0627\u062c \u06a9\u0648 \u0642\u0631\u0627\u0631 \u062f\u06cc\u062a\u06d2 \u06c1\u06cc\u06ba\u06d4 \u0633\u0644\u0627\u0679\u0633 \u067e\u0631 24 AI \u0645\u06cc\u06ba \u0633\u06d2\u060c 16 \u06a9\u0648 \u0627\u0633 \u06a9\u0645\u067e\u0627\u0624\u0646\u0688 \u06a9\u0627 \u0627\u0646\u062c\u06a9\u0634\u0646 \u0645\u0644\u062a\u0627 \u06c1\u06d2\u060c \u062c\u0633 \u0633\u06d2 \u06af\u0631\u0648\u067e \u06a9\u06cc \u0627\u0648\u0633\u0637 \u0627\u0635\u0644 \u0628\u0631\u0627\u06c1 \u0631\u0627\u0633\u062a \u0627\u062b\u0631 \u0633\u06d2 \u06a9\u0627\u0641\u06cc \u0632\u06cc\u0627\u062f\u06c1 \u06c1\u0648\u062a\u06cc \u06c1\u06d2\u06d4<\/p>\n<p>AI-\u0622\u0641 \u0633\u0627\u0626\u06cc\u0688 \u067e\u0631\u060c \u06c1\u0631 \u0628\u0644\u0627\u06a9 \u0645\u06cc\u06ba \u067e\u06c1\u0644\u0627 \u0622\u0641 \u0633\u0644\u0627\u0679 +0.030 \u06a9\u06cc\u0631\u06cc \u0627\u0648\u0648\u0631 \u062d\u0627\u0635\u0644 \u06a9\u0631\u062a\u0627 \u06c1\u06d2\u060c \u062c\u0633 \u0633\u06d2 AI-\u0622\u0641 \u06af\u0631\u0648\u067e \u06a9\u06d2 \u0644\u06cc\u06d2 \u0628\u06cc\u0633 \u0644\u0627\u0626\u0646 \u0628\u0691\u06be \u062c\u0627\u062a\u06cc \u06c1\u06d2\u06d4 \u06cc\u06c1 \u062c\u0632\u0648\u06cc \u0637\u0648\u0631 \u067e\u0631 AI-on \u06af\u0631\u0648\u067e \u0627\u0641\u0631\u0627\u0637 \u0632\u0631 \u06a9\u0648 \u067e\u0648\u0631\u0627 \u06a9\u0631\u062a\u0627 \u06c1\u06d2\u060c \u0644\u06cc\u06a9\u0646 16 \u062c\u0627\u0645\u0639 AI-on \u0627\u0641\u0631\u0627\u0637 \u0632\u0631 \u06a9\u06d2 \u0633\u0644\u0627\u0679\u0633 8 AI-off \u06a9\u06cc\u0631\u06cc \u0627\u0648\u0648\u0631 \u0633\u0644\u0627\u0679\u0633 \u0633\u06d2 \u0632\u06cc\u0627\u062f\u06c1 \u06c1\u06cc\u06ba\u06d4 \u062d\u062a\u0645\u06cc \u0646\u062a\u06cc\u062c\u06c1 \u062a\u0642\u0631\u06cc\u0628\u0627\u064b +0.009 \u0641\u06cc\u0635\u062f \u067e\u0648\u0627\u0626\u0646\u0679\u0633 \u06a9\u0627 \u0645\u062b\u0628\u062a \u062a\u0639\u0635\u0628 \u06c1\u06d2\u06d4<\/p>\n<p>\u0627\u06cc\u06a9 \u0679\u06cc\u0645 \u062c\u0648 0.0688 \u067e\u0631 \u0639\u0645\u0644 \u06a9\u0631\u062a\u06cc \u06c1\u06d2 \u062c\u0628 \u0627\u0635\u0644 \u0627\u062b\u0631 0.060 \u06c1\u0648\u062a\u0627 \u06c1\u06d2 \u0648\u06c1 \u0645\u0648\u062c\u0648\u062f \u0633\u06d2 \u0628\u0691\u06d2 \u0627\u062b\u0631 \u06a9\u0627 \u0627\u0639\u0644\u0627\u0646 \u06a9\u0631\u06d2 \u06af\u06cc \u0627\u0648\u0631 \u0631\u0648\u0679\u0646\u06af \u0641\u0646\u06a9\u0634\u0646 \u06a9\u0648 \u062f\u0648\u0633\u0631\u06d2 \u0627\u0642\u062f\u0627\u0645\u0627\u062a \u067e\u0631 \u062a\u0631\u062c\u06cc\u062d \u062f\u06d2 \u06af\u06cc\u06d4<\/p>\n<h2 id=\"heading-step-3-carryover-adjusted-ols-regression\">\u0645\u0631\u062d\u0644\u06c1 3: \u06a9\u06cc\u0631\u06cc \u0627\u0648\u0648\u0631 \u0627\u06cc\u0688\u062c\u0633\u0679 \u0634\u062f\u06c1 OLS \u0631\u06cc\u06af\u0631\u06cc\u0634\u0646<\/h2>\n<p>\u0627\u0633 \u06a9\u0627 \u062d\u0644 \u06cc\u06c1 \u06c1\u06d2 \u06a9\u06c1 \u0631\u062c\u0639\u062a \u0645\u06cc\u06ba \u067e\u06cc\u0686\u06be\u06d2 \u0631\u06c1 \u062c\u0627\u0646\u06d2 \u0648\u0627\u0644\u06d2 \u0639\u0644\u0627\u062c \u06a9\u06d2 \u0627\u0634\u0627\u0631\u06d2 \u06a9\u0648 \u0634\u0627\u0645\u0644 \u06a9\u06cc\u0627 \u062c\u0627\u0626\u06d2\u06d4 \u06af\u062a\u0627\u0646\u06a9 \u06c1\u06d2\u06d4 <code>ai_on<\/code> \u0627\u0633 \u06a9\u06d2 \u0628\u0639\u062f \u06c1\u0645 \u0645\u0648\u062c\u0648\u062f\u06c1 \u0645\u062f\u062a \u06a9\u06d2 \u0639\u0644\u0627\u062c \u06a9\u06d2 \u0628\u0631\u0627\u06c1 \u0631\u0627\u0633\u062a \u0627\u062b\u0631 \u06a9\u06cc \u067e\u06cc\u0645\u0627\u0626\u0634 \u06a9\u0631\u062a\u06d2 \u06c1\u06cc\u06ba \u062c\u0628\u06a9\u06c1 \u067e\u0686\u06be\u0644\u06d2 \u062f\u0648\u0631 \u06a9\u06d2 \u0639\u0644\u0627\u062c \u06a9\u0648 \u0645\u0633\u062a\u0642\u0644 \u0631\u06a9\u06be\u062a\u06d2 \u06c1\u06cc\u06ba\u06d4 \u06cc\u06c1 \u0648\u06c1 \u0645\u0642\u062f\u0627\u0631 \u06c1\u06d2 \u062c\u0648 \u0622\u067e \u0686\u0627\u06c1\u062a\u06d2 \u06c1\u06cc\u06ba\u06d4<\/p>\n<pre><code class=\"language-python\"># Carryover-adjusted OLS: outcome ~ constant + ai_on + ai_on_lag1\nX_adj = sm.add_constant(slots[['ai_on', 'ai_on_lag1']])\nadj_model = sm.OLS(slots['mean_task_completed'], X_adj).fit()\n\nadj_ate      = adj_model.params['ai_on']\nadj_carryover = adj_model.params['ai_on_lag1']\nadj_se        = adj_model.bse['ai_on']\n\nprint(\"=== Carryover-adjusted estimate ===\")\nprint(adj_model.summary().tables[1])\n\nprint(f\"n  Direct ATE estimate  : {adj_ate:.4f}  (true: {TRUE_EFFECT})\")\nprint(f\"  Carryover estimate   : {adj_carryover:.4f}  (true: {CARRYOVER})\")\nprint(f\"  Residual bias        : {adj_ate - TRUE_EFFECT:+.4f}\")\n\n# How much did we remove?\nremoved = naive_ate - adj_ate\nprint(f\"n  Bias removed vs naive: {removed:.4f}\")\n<\/code><\/pre>\n<p><strong>\u0645\u062a\u0648\u0642\u0639 \u067e\u06cc\u062f\u0627\u0648\u0627\u0631:<\/strong><\/p>\n<pre><code class=\"language-text\">=== Carryover-adjusted estimate ===\n==============================================================================\n                 coef    std err          t      P>|t|      [0.025      0.975]\n------------------------------------------------------------------------------\nconst          0.5996      0.003    222.975      0.000       0.594       0.605\nai_on          0.0607      0.004     16.830      0.000       0.053       0.068\nai_on_lag1     0.0244      0.004      6.754      0.000       0.017       0.032\n==============================================================================\n\n  Direct ATE estimate  : 0.0607  (true: 0.06)\n  Carryover estimate   : 0.0244  (true: 0.03)\n  Residual bias        : +0.0007\n\n  Bias removed vs naive: 0.0081\n<\/code><\/pre>\n<p>\u0627\u06cc\u0688\u062c\u0633\u0679 \u0631\u06cc\u06af\u0631\u06cc\u0634\u0646 \u0645\u06cc\u06ba \u062f\u0648\u0646\u0648\u06ba \u0634\u0627\u0645\u0644 \u06c1\u06cc\u06ba\u06d4 <code>ai_on<\/code> (\u0645\u0648\u062c\u0648\u062f\u06c1 \u0633\u0644\u0627\u0679 \u067e\u0631\u0648\u0633\u06cc\u0633\u0646\u06af) \u0627\u0648\u0631 <code>ai_on_lag1<\/code> \u06c1\u0645 (\u067e\u0686\u06be\u0644\u06cc \u0633\u0644\u0627\u0679 \u067e\u0631\u0648\u0633\u06cc\u0633\u0646\u06af) \u06a9\u0648 \u0631\u06cc\u06af\u0631\u06cc\u0633\u0631 \u06a9\u06d2 \u0637\u0648\u0631 \u067e\u0631 \u0627\u0633\u062a\u0639\u0645\u0627\u0644 \u06a9\u0631\u062a\u06d2 \u06c1\u06cc\u06ba\u06d4<\/p>\n<p>\u0645\u0627\u0688\u0644 \u0627\u0628 \u06c1\u0631 \u0633\u0644\u0627\u0679 \u0645\u06cc\u06ba \u0627\u0639\u0644\u06cc \u0646\u062a\u0627\u0626\u062c \u06a9\u06d2 \u0688\u0631\u0627\u0626\u06cc\u0648\u0631\u0648\u06ba \u06a9\u0648 \u062a\u0648\u0691 \u062f\u06cc\u062a\u0627 \u06c1\u06d2\u06d4 \u06a9\u0686\u06be \u0644\u0641\u0679 \u0645\u0648\u062c\u0648\u062f\u06c1 \u062f\u0648\u0631 \u0645\u06cc\u06ba AI \u0631\u0648\u0679\u0646\u06af \u0633\u06d2 \u0622\u062a\u06cc \u06c1\u06cc\u06ba \u0627\u0648\u0631 \u06a9\u0686\u06be \u067e\u0686\u06be\u0644\u06d2 \u0627\u062f\u0648\u0627\u0631 \u06a9\u06d2 \u0628\u0642\u0627\u06cc\u0627 \u0633\u06d2 \u0622\u062a\u06cc \u06c1\u06cc\u06ba\u06d4 \u06af\u062a\u0627\u0646\u06a9 \u06c1\u06d2\u06d4 <code>ai_on<\/code> \u06c1\u0645 \u0645\u0648\u062c\u0648\u062f\u06c1 \u0645\u062f\u062a \u06a9\u06d2 \u0635\u0631\u0641 \u0628\u0631\u0627\u06c1 \u0631\u0627\u0633\u062a \u0627\u062b\u0631\u0627\u062a \u06a9\u0648 \u0627\u0644\u06af \u062a\u06be\u0644\u06af \u06a9\u0631\u062a\u06d2 \u06c1\u06cc\u06ba\u06d4<\/p>\n<p>ATE \u06a9\u0627 \u0628\u0631\u0627\u06c1 \u0631\u0627\u0633\u062a \u062a\u062e\u0645\u06cc\u0646\u06c1 0.0688 \u0633\u06d2 0.0607 \u062a\u06a9 \u06a9\u0645 \u06c1\u0648 \u062c\u0627\u062a\u0627 \u06c1\u06d2\u060c \u062c\u0633 \u0633\u06d2 0.060 \u06a9\u06cc \u062d\u0642\u06cc\u0642\u06cc \u0642\u062f\u0631 \u06a9\u0648 0.0007 \u06a9\u06d2 \u0627\u0646\u062f\u0631 \u0628\u062d\u0627\u0644 \u06a9\u06cc\u0627 \u062c\u0627\u062a\u0627 \u06c1\u06d2\u060c \u0628\u0642\u0627\u06cc\u0627 \u062a\u0639\u0635\u0628 \u0645\u0639\u06cc\u0627\u0631\u06cc \u063a\u0644\u0637\u06cc \u0633\u06d2 \u06a9\u0645 \u06c1\u0648\u062a\u0627 \u06c1\u06d2\u06d4<\/p>\n<p>\u06a9\u06cc\u0631\u06cc \u0627\u0648\u0648\u0631 \u06a9\u0627 \u062a\u062e\u0645\u06cc\u0646\u06c1 0.0244 \u06c1\u06d2 \u0627\u0648\u0631 \u0627\u0635\u0644 \u06a9\u06cc\u0631\u06cc \u0627\u0648\u0648\u0631 0.030 \u06c1\u06d2\u06d4 \u06a9\u0686\u06be \u06a9\u0645 \u0627\u0646\u062f\u0627\u0632\u06c1 \u0645\u062a\u0648\u0642\u0639 \u06c1\u06d2\u06d4 \u062a\u06cc\u0646 \u0633\u0644\u0627\u0679 \u0628\u0644\u0627\u06a9 \u0688\u06be\u0627\u0646\u0686\u06c1 \u062f\u0648\u0646\u0648\u06ba \u0633\u0644\u0627\u0679 \u06a9\u06d2 \u0633\u0627\u062a\u06be \u0627\u06cc\u06a9 \u0633\u0644\u0627\u0679 \u0628\u0646\u0627\u062a\u0627 \u06c1\u06d2\u06d4 <code>ai_on<\/code> \u0627\u0648\u0631 <code>ai_on_lag1<\/code> \u06cc\u06c1 1 \u06a9\u06d2 \u0628\u0631\u0627\u0628\u0631 \u06c1\u06d2 \u0627\u0648\u0631 \u06c1\u0644\u06a9\u06cc \u06c1\u0645 \u0622\u06c1\u0646\u06af\u06cc \u06a9\u0648 \u0645\u062a\u0639\u0627\u0631\u0641 \u06a9\u0631\u0627\u062a\u0627 \u06c1\u06d2 \u062c\u0648 \u06a9\u06cc\u0631\u06cc \u0627\u0648\u0648\u0631 \u06a9\u0648\u0641\u06cc\u0633\u06cc\u0646\u0679 \u06a9\u0648 \u0642\u062f\u0631\u06d2 \u06a9\u0645\u0632\u0648\u0631 \u06a9\u0631\u062a\u0627 \u06c1\u06d2\u06d4 \u0634\u0627\u0645\u0644 \u06a9\u0631\u0646\u0627 <code>ai_on_lag1<\/code> 0.0088 \u0633\u0627\u062f\u06c1 \u062a\u0639\u0635\u0628 \u0645\u06cc\u06ba \u0633\u06d2 0.0081 \u06a9\u0648 \u06c1\u0679\u0627 \u06a9\u0631\u060c \u06c1\u0645 \u0646\u06d2 \u062a\u0642\u0631\u06cc\u0628\u0627\u064b 92% \u0627\u0648\u067e\u0631 \u06a9\u06cc \u0645\u0633\u062e \u06a9\u0648 \u0628\u0627\u0632\u06cc\u0627\u0641\u062a \u06a9\u06cc\u0627\u06d4<\/p>\n<p>\u0645\u0635\u0646\u0648\u0639\u0627\u062a \u06a9\u06d2 \u062a\u0639\u06cc\u0646 \u0645\u06cc\u06ba \u062f\u0648\u0646\u0648\u06ba \u06af\u062a\u0627\u0646\u06a9\u0648\u06ba \u06a9\u06cc \u062a\u0634\u0631\u06cc\u062d \u0627\u06c1\u0645 \u06c1\u06d2\u06d4 \u06a9\u06c1 <code>ai_on<\/code> \u06af\u062a\u0627\u0646\u06a9 (0.0607) \u06c1\u06d2\u06d4 <strong>\u0628\u0631\u0627\u06c1 \u0631\u0627\u0633\u062a \u0627\u062b\u0631<\/strong>: AI \u0631\u0648\u0679\u0646\u06af \u062c\u0648 \u0645\u0648\u062c\u0648\u062f\u06c1 \u0633\u0644\u0627\u0679 \u0645\u06cc\u06ba \u0634\u0627\u0645\u0644 \u06a9\u06cc \u062c\u0627\u062a\u06cc \u06c1\u06d2 \u0627\u0633 \u0633\u06d2 \u0642\u0637\u0639 \u0646\u0638\u0631 \u06a9\u06c1 \u067e\u0686\u06be\u0644\u06d2 \u0633\u0644\u0627\u0679 \u0645\u06cc\u06ba \u06a9\u06cc\u0627 \u06c1\u0648\u0627 \u062a\u06be\u0627\u06d4 \u06a9\u06c1 <code>ai_on_lag1<\/code> \u06af\u062a\u0627\u0646\u06a9 (0.0244) \u06c1\u06d2\u06d4 <strong>\u0644\u06d2 \u062c\u0627\u0646\u06d2 \u06a9\u0627 \u0627\u062b\u0631<\/strong>: \u06cc\u06c1 \u0627\u06cc\u06a9 \u0628\u0642\u0627\u06cc\u0627 \u062c\u06be\u0679\u06a9\u0627 \u06c1\u06d2 \u062c\u0648 \u0631\u0648\u0679\u0646\u06af \u06a9\u06d2 \u0628\u0646\u062f \u06c1\u0648\u0646\u06d2 \u06a9\u06d2 \u0628\u0639\u062f \u0627\u06af\u0644\u06cc \u0633\u0644\u0627\u0679 \u062a\u06a9 \u0631\u06c1\u062a\u0627 \u06c1\u06d2\u06d4 \u062d\u0642\u06cc\u0642\u06cc LLM \u067e\u0644\u06cc\u0679 \u0641\u0627\u0631\u0645\u0632 \u0645\u06cc\u06ba\u060c \u06a9\u06cc\u0631\u06cc \u0627\u0648\u0648\u0631 \u0633\u06cc\u0634\u0646 \u0644\u06cc\u0648\u0644 \u06a9\u06cc \u062d\u0627\u0644\u062a \u0645\u06cc\u06ba \u062a\u0628\u062f\u06cc\u0644\u06cc\u0648\u06ba \u06a9\u06cc \u0639\u06a9\u0627\u0633\u06cc \u06a9\u0631 \u0633\u06a9\u062a\u0627 \u06c1\u06d2\u060c swarm inference caches\u060c \u06cc\u0627 \u0633\u0644\u0627\u0679 \u06a9\u06cc \u062d\u062f\u0648\u062f \u0645\u06cc\u06ba \u0635\u0627\u0631\u0641 \u06a9\u06d2 \u0631\u0648\u06cc\u06d2 \u06a9\u06cc \u0639\u06a9\u0627\u0633\u06cc \u06a9\u0631 \u0633\u06a9\u062a\u0627 \u06c1\u06d2\u06d4<\/p>\n<p>\u0627\u06af\u0631 <code>ai_on_lag2<\/code> \u0627\u0648\u0631 <code>ai_on_lag3<\/code> \u0627\u06af\u0631\u0686\u06c1 AIC \u06a9\u0648 \u06a9\u0645 \u06a9\u0631\u0646\u0627 \u0627\u0628 \u0628\u06be\u06cc \u0645\u0627\u067e\u0627 \u0645\u0627\u0688\u0644 \u0641\u0679 \u06a9\u0648 \u0628\u06c1\u062a\u0631 \u0628\u0646\u0627\u062a\u0627 \u06c1\u06d2\u060c \u0633\u0644\u0627\u0679 \u06a9\u06cc \u0644\u0645\u0628\u0627\u0626\u06cc \u0633\u0633\u0679\u0645 \u0645\u06cc\u0645\u0648\u0631\u06cc \u0633\u06d2 \u06a9\u0645 \u06c1\u06d2 \u0627\u0648\u0631 \u0645\u0632\u06cc\u062f \u062a\u0627\u062e\u06cc\u0631 \u06a9\u06cc \u0634\u0631\u0627\u0626\u0637 \u06a9\u06cc \u0636\u0631\u0648\u0631\u062a \u06c1\u06d2\u06d4 \u06c1\u0645 \u0627\u0633 \u0648\u0642\u062a \u062a\u06a9 \u062a\u0627\u062e\u06cc\u0631 \u06a9\u0627 \u0627\u0636\u0627\u0641\u06c1 \u06a9\u0631\u062a\u06d2 \u06c1\u06cc\u06ba \u062c\u0628 \u062a\u06a9 \u06a9\u06c1 AIC \u0645\u06cc\u06ba \u0628\u06c1\u062a\u0631\u06cc \u0646\u06c1\u06cc\u06ba \u0622\u062a\u06cc\u060c \u0627\u0648\u0631 \u067e\u0644\u06cc\u0679 \u0641\u0627\u0631\u0645 \u06a9\u06d2 \u0641\u0646 \u062a\u0639\u0645\u06cc\u0631 \u06a9\u06cc \u0628\u0646\u06cc\u0627\u062f \u067e\u0631 \u0645\u0639\u0642\u0648\u0644 \u0627\u0633\u062a\u0642\u0627\u0645\u062a \u067e\u0631 \u0627\u0648\u067e\u0631\u06cc \u062d\u062f \u0642\u0627\u0626\u0645 \u06a9\u0631\u0646\u06d2 \u06a9\u06d2 \u0644\u06cc\u06d2 \u0688\u0648\u0645\u06cc\u0646 \u06a9\u06d2 \u0639\u0644\u0645 \u06a9\u0627 \u0627\u0633\u062a\u0639\u0645\u0627\u0644 \u06a9\u0631\u062a\u06d2 \u06c1\u06cc\u06ba\u06d4<\/p>\n<h2 id=\"heading-step-4-hac-standard-errors-for-time-series-data\">\u0645\u0631\u062d\u0644\u06c1 4: \u0679\u0627\u0626\u0645 \u0633\u06cc\u0631\u06cc\u0632 \u0688\u06cc\u0679\u0627 \u06a9\u06d2 \u0644\u06cc\u06d2 HAC \u0645\u0639\u06cc\u0627\u0631\u06cc \u062e\u0631\u0627\u0628\u06cc\u06d4<\/h2>\n<p>\u062a\u0631\u0645\u06cc\u0645 \u0634\u062f\u06c1 OLS \u0645\u0627\u0688\u0644 \u062f\u0631\u0633\u062a \u067e\u0648\u0627\u0626\u0646\u0679 \u062a\u062e\u0645\u06cc\u0646\u06c1 \u0641\u0631\u0627\u06c1\u0645 \u06a9\u0631\u062a\u0627 \u06c1\u06d2\u06d4 \u062a\u0627\u06c1\u0645\u060c \u0631\u067e\u0648\u0631\u0679 \u06a9\u0631\u062f\u06c1 \u0645\u0639\u06cc\u0627\u0631\u06cc \u063a\u0644\u0637\u06cc\u0627\u06ba \u0641\u0631\u0636 \u06a9\u0631\u062a\u06cc \u06c1\u06cc\u06ba \u06a9\u06c1 \u0628\u0627\u0642\u06cc\u0627\u062a \u0648\u0642\u062a \u06a9\u06d2 \u0633\u0627\u062a\u06be \u063a\u06cc\u0631 \u0645\u0631\u0628\u0648\u0637 \u06c1\u06cc\u06ba\u06d4<\/p>\n<p>\u0633\u0644\u0627\u0679 \u06a9\u06cc \u0628\u0627\u0642\u06cc\u0627\u062a \u062a\u0645\u0627\u0645 \u0645\u0646\u0638\u0645 \u062a\u063a\u06cc\u0631\u0627\u062a \u06a9\u0648 \u0648\u0631\u0627\u062b\u062a \u0645\u06cc\u06ba \u062d\u0627\u0635\u0644 \u06a9\u0631\u062a\u06cc \u06c1\u06cc\u06ba \u062c\u0648 \u067e\u0631\u0648\u0633\u06cc\u0633\u0646\u06af \u0645\u06cc\u0679\u0631\u06a9\u0633 \u06a9\u06d2 \u0630\u0631\u06cc\u0639\u06d2 \u062d\u0627\u0635\u0644 \u0646\u06c1\u06cc\u06ba \u06a9\u06cc \u06af\u0626\u06cc \u06c1\u06cc\u06ba\u060c \u062c\u06cc\u0633\u06d2 \u0688\u06cc\u0645\u0627\u0646\u0688 \u0633\u0627\u0626\u06cc\u06a9\u0644\u060c \u0635\u0644\u0627\u062d\u06cc\u062a \u06a9\u06d2 \u0648\u0627\u0642\u0639\u0627\u062a\u060c \u0645\u0627\u0688\u0644 \u0648\u0631\u0698\u0646 \u06a9\u06cc \u062a\u0642\u0633\u06cc\u0645\u060c \u0627\u0648\u0631 \u0627\u06cc\u06a9 \u0633\u06d2 \u0632\u06cc\u0627\u062f\u06c1 \u0648\u0642\u062a \u06a9\u06d2 \u062f\u0648\u0631\u0627\u0646 \u0635\u0627\u0631\u0641 \u06a9\u06d2 \u0631\u0648\u06cc\u06d2 \u06a9\u06d2 \u067e\u06cc\u0679\u0631\u0646\u06d4 \u0627\u0633 \u062e\u0648\u062f \u06a9\u0627\u0631 \u062a\u0639\u0644\u0642 \u06a9\u06cc \u0648\u062c\u06c1 \u0633\u06d2 OLS \u0645\u0639\u06cc\u0627\u0631\u06cc \u063a\u0644\u0637\u06cc\u0627\u06ba \u0628\u06c1\u062a \u0686\u06be\u0648\u0679\u06cc \u06c1\u06cc\u06ba\u060c \u062c\u0648 t-statistic \u06a9\u0648 \u0628\u0691\u06be\u0627\u062a\u06cc \u06c1\u06cc\u06ba \u0627\u0648\u0631 \u0627\u062b\u0631 \u06a9\u0648 \u062d\u0642\u06cc\u0642\u062a \u0633\u06d2 \u06a9\u06c1\u06cc\u06ba \u0632\u06cc\u0627\u062f\u06c1 \u062f\u0631\u0633\u062a \u0637\u0631\u06cc\u0642\u06d2 \u0633\u06d2 \u0645\u0627\u067e\u0627 \u062c\u0627\u062a\u0627 \u062f\u06a9\u06be\u0627\u0626\u06cc \u062f\u06cc\u062a\u0627 \u06c1\u06d2\u06d4<\/p>\n<p>\u062a\u0635\u062d\u06cc\u062d heteroscedasticity and autocorrelation consistency (HAC) \u0645\u0639\u06cc\u0627\u0631\u06cc \u062e\u0631\u0627\u0628\u06cc \u06c1\u06d2\u060c \u062c\u0633\u06d2 Newey-West Standard error \u0628\u06be\u06cc \u06a9\u06c1\u0627 \u062c\u0627\u062a\u0627 \u06c1\u06d2\u06d4 \u0627\u06cc\u06a9 \u0628\u06cc\u0646\u0688\u0648\u062a\u06be \u067e\u06cc\u0631\u0627\u0645\u06cc\u0679\u0631 \u06a9\u0627 \u0627\u0633\u062a\u0639\u0645\u0627\u0644 \u06a9\u0631\u062a\u06d2 \u06c1\u0648\u0626\u06d2 \u0628\u0642\u0627\u06cc\u0627 \u0645\u06cc\u06ba \u0633\u06cc\u0631\u06cc\u0644 \u0627\u0631\u062a\u0628\u0627\u0637 \u06a9\u06d2 \u0644\u06cc\u06d2 \u062f\u0631\u0633\u062a \u06a9\u0631\u06cc\u06ba \u062c\u0648 \u062a\u0627\u062e\u06cc\u0631 \u06a9\u06cc \u062a\u0639\u062f\u0627\u062f \u06a9\u06d2 \u0645\u0633\u0627\u0648\u06cc \u06c1\u06d2 \u062c\u0633 \u06a9\u06cc \u0648\u062c\u06c1 \u0633\u06d2 \u067e\u0631\u06cc\u0634\u0627\u0646\u06cc \u06a9\u06cc \u062a\u0648\u0642\u0639 \u06c1\u06d2\u06d4<\/p>\n<pre><code class=\"language-python\">from statsmodels.stats.sandwich_covariance import cov_hac\nfrom statsmodels.stats.stattools import durbin_watson\n\n# First check for autocorrelation in the residuals\ndw_stat = durbin_watson(adj_model.resid)\nprint(f\"Durbin-Watson statistic: {dw_stat:.4f}\")\nprint(\"  DW near 2.0 = little autocorrelation in residuals.\")\nprint(\"  DW < 1.5 = positive serial correlation.\")\nprint(\"  DW > 2.5 = negative serial correlation.\")\nprint(\"  Apply HAC standard errors regardless -- DW only tests AR(1) structure.\")\n\n# Apply HAC correction (Newey-West), 3 lags\nhac_cov = cov_hac(adj_model, nlags=3)\nhac_se  = np.sqrt(np.diag(hac_cov))\n\nprint(\"n=== Standard error comparison ===\")\nprint(f\"  OLS SE on ai_on  : {adj_model.bse['ai_on']:.4f}\")\nprint(f\"  HAC SE on ai_on  : {hac_se[1]:.4f}\")\nprint(f\"  OLS t-stat       : {adj_model.tvalues['ai_on']:.2f}\")\nprint(f\"  HAC t-stat       : {adj_ate \/ hac_se[1]:.2f}\")\n\n# Construct HAC-based confidence interval manually\nhac_ci_lower = adj_ate - 1.96 * hac_se[1]\nhac_ci_upper = adj_ate + 1.96 * hac_se[1]\nprint(f\"n  HAC 95% CI: [{hac_ci_lower:.4f},  {hac_ci_upper:.4f}]\")\nprint(f\"  True effect {TRUE_EFFECT} inside CI: {hac_ci_lower < TRUE_EFFECT < hac_ci_upper}\")\n<\/code><\/pre>\n<p><strong>\u0645\u062a\u0648\u0642\u0639 \u067e\u06cc\u062f\u0627\u0648\u0627\u0631:<\/strong><\/p>\n<pre><code class=\"language-text\">Durbin-Watson statistic: 1.9628\n  DW near 2.0 = little autocorrelation in residuals.\n  DW < 1.5 = positive serial correlation.\n  DW > 2.5 = negative serial correlation.\n  Apply HAC standard errors regardless -- DW only tests AR(1) structure.\n\n=== Standard error comparison ===\n  OLS SE on ai_on  : 0.0036\n  HAC SE on ai_on  : 0.0037\n  OLS t-stat       : 16.83\n  HAC t-stat       : 16.41\n\n  HAC 95% CI: [0.0535,  0.0680]\n  True effect 0.06 inside CI: True\n<\/code><\/pre>\n<p>2.0 (1.9628) \u06a9\u06d2 \u0627\u0631\u062f \u06af\u0631\u062f Durbin-Watson \u06a9\u06d2 \u0627\u0639\u062f\u0627\u062f\u0648\u0634\u0645\u0627\u0631 \u0628\u062a\u0627\u062a\u06d2 \u06c1\u06cc\u06ba \u06a9\u06c1 \u0627\u0633 \u0645\u0635\u0646\u0648\u0639\u06cc \u0688\u06cc\u0679\u0627\u0633\u06cc\u0679 \u06a9\u06d2 \u0628\u0627\u0642\u06cc\u0627\u062a \u0645\u06cc\u06ba \u0628\u06c1\u062a \u06a9\u0645 AR(1) \u062e\u0648\u062f \u06a9\u0627\u0631 \u062a\u0639\u0644\u0642 \u06c1\u06d2\u060c \u0627\u0633 \u0644\u06cc\u06d2 HAC \u0627\u0648\u0631 OLS \u0645\u0639\u06cc\u0627\u0631\u06cc \u063a\u0644\u0637\u06cc\u0627\u06ba \u062a\u0642\u0631\u06cc\u0628\u0627\u064b \u0627\u06cc\u06a9 \u062c\u06cc\u0633\u06cc \u06c1\u06cc\u06ba\u06d4 HAC 95% CI [0.0535, 0.0680] 0.060 \u06a9\u06d2 \u062d\u0642\u06cc\u0642\u06cc \u0627\u062b\u0631 \u06a9\u06cc \u0634\u0645\u0648\u0644\u06cc\u062a \u0627\u0633 \u0628\u0627\u062a \u06a9\u06cc \u062a\u0635\u062f\u06cc\u0642 \u06a9\u0631\u062a\u06cc \u06c1\u06d2 \u06a9\u06c1 \u0627\u06cc\u0688\u062c\u0633\u0679 \u0634\u062f\u06c1 \u062a\u062e\u0645\u06cc\u0646\u06c1 \u062f\u0631\u0633\u062a \u06c1\u06cc\u06ba\u06d4<\/p>\n<p>\u067e\u0631\u0648\u0688\u06a9\u0634\u0646 LLM \u067e\u0644\u06cc\u0679 \u0641\u0627\u0631\u0645\u0632 \u0645\u06cc\u06ba\u060c \u062c\u06c1\u0627\u06ba \u0645\u0627\u0646\u06af \u0645\u0633\u0644\u0633\u0644 \u06af\u06be\u0646\u0679\u0648\u06ba (\u0635\u0628\u062d \u06a9\u06cc \u0628\u0691\u06be\u062a\u06cc \u06c1\u0648\u0626\u06cc\u060c \u062f\u0648\u067e\u06c1\u0631 \u06a9\u06d2 \u06a9\u06be\u0627\u0646\u06d2 \u06a9\u06d2 \u0648\u0642\u062a\u060c \u0634\u0627\u0645 \u06a9\u06cc \u0686\u0648\u0679\u06cc) \u0645\u06cc\u06ba \u0645\u0646\u0633\u0644\u06a9 \u06c1\u0648\u062a\u06cc \u06c1\u06d2\u060c OLS \u0645\u0639\u06cc\u0627\u0631\u06cc \u063a\u0644\u0637\u06cc\u0627\u06ba \u0645\u062b\u0628\u062a \u0633\u06cc\u0631\u06cc\u0644 \u0627\u0631\u062a\u0628\u0627\u0637 \u06a9\u06cc \u0648\u062c\u06c1 \u0633\u06d2 \u063a\u06cc\u0631 \u06cc\u0642\u06cc\u0646\u06cc \u0635\u0648\u0631\u062a\u062d\u0627\u0644 \u06a9\u0648 \u06a9\u0645 \u06a9\u0631\u062a\u06cc \u06c1\u06cc\u06ba\u06d4 \u0645\u06cc\u06ba \u0646\u06d2 \u0679\u06cc\u0645\u0648\u06ba \u06a9\u0648 \u0627\u0633 \u0642\u062f\u0645 \u06a9\u0648 \u0686\u06be\u0648\u0691\u062a\u06d2 \u06c1\u0648\u0626\u06d2 \u062f\u06cc\u06a9\u06be\u0627 \u06c1\u06d2 \u0627\u0648\u0631 \u0627\u06cc\u0633\u06d2 \u0627\u062b\u0631\u0627\u062a \u06a9\u06d2 \u0644\u06cc\u06d2 20+ \u06a9\u06d2 t-\u0627\u0639\u062f\u0627\u062f \u0648 \u0634\u0645\u0627\u0631 \u06a9\u06cc \u0627\u0637\u0644\u0627\u0639 \u062f\u06cc \u06c1\u06d2 \u062c\u0648 \u0646\u06c1\u06cc\u06ba \u0631\u06a9\u06be\u062a\u06d2 \u06c1\u06cc\u06ba\u06d4<\/p>\n<p>\u0627\u0646 \u0633\u06cc\u0679\u0646\u06af\u0632 \u0645\u06cc\u06ba HAC \u0645\u06cc\u06ba \u062a\u0631\u0645\u06cc\u0645 \u06a9\u0631\u0646\u0627 \u0627\u0646 \u0646\u0645\u0628\u0631\u0648\u06ba \u06a9\u0648 \u062d\u0642\u06cc\u0642\u062a \u067e\u0633\u0646\u062f\u0627\u0646\u06c1 \u0633\u0637\u062d \u062a\u06a9 \u06a9\u0645 \u06a9\u0631 \u062f\u06cc\u062a\u0627 \u06c1\u06d2\u060c \u0628\u0639\u0636 \u0627\u0648\u0642\u0627\u062a \"\u0627\u06c1\u0645\" \u0646\u062a\u0627\u0626\u062c \u06a9\u0648 \u063a\u06cc\u0631 \u062d\u062a\u0645\u06cc \u0646\u062a\u0627\u0626\u062c \u0645\u06cc\u06ba \u062a\u0628\u062f\u06cc\u0644 \u06a9\u0631 \u062f\u06cc\u062a\u0627 \u06c1\u06d2\u06d4 \u063a\u06cc\u0631 \u0646\u062a\u06cc\u062c\u06c1 \u062e\u06cc\u0632 \u0679\u0631\u0627\u0646\u0632\u06cc\u0634\u0646 \u0627\u0633\u06d2 \u06a9\u0631\u0646\u06d2 \u06a9\u0627 \u0635\u062d\u06cc\u062d \u0637\u0631\u06cc\u0642\u06c1 \u06c1\u06d2\u06d4 HAC \u06a9\u0627 \u0627\u0637\u0644\u0627\u0642 \u0628\u0637\u0648\u0631 \u0688\u06cc\u0641\u0627\u0644\u0679 \u0622\u0644 \u0679\u0627\u0626\u0645 \u0633\u06cc\u0631\u06cc\u0632 \u0631\u06cc\u06af\u0631\u06cc\u0634\u0646 \u062a\u062c\u0632\u06cc\u0648\u06ba \u067e\u0631 \u06c1\u0648\u062a\u0627 \u06c1\u06d2\u06d4 \u062e\u0648\u062f\u06a9\u0627\u0631 \u062a\u0639\u0644\u0642 \u06a9\u06cc \u0639\u062f\u0645 \u0645\u0648\u062c\u0648\u062f\u06af\u06cc \u06a9\u06cc \u06a9\u0648\u0626\u06cc \u0642\u06cc\u0645\u062a \u0646\u06c1\u06cc\u06ba \u06c1\u06d2 \u0627\u0648\u0631\u060c \u0627\u06af\u0631 \u0645\u0648\u062c\u0648\u062f \u06c1\u0648 \u062a\u0648\u060c \u06a9\u0627\u0641\u06cc \u062a\u062d\u0641\u0638 \u0641\u0631\u0627\u06c1\u0645 \u06a9\u0631\u062a\u0627 \u06c1\u06d2\u06d4<\/p>\n<p>\u06a9\u06c1 <code>nlags<\/code> \u067e\u06cc\u0631\u0627\u0645\u06cc\u0679\u0631\u0632 \u06a9\u0648 \u0645\u062d\u062a\u0627\u0637 \u0627\u0646\u062a\u062e\u0627\u0628 \u06a9\u06cc \u0636\u0631\u0648\u0631\u062a \u06c1\u06d2\u06d4 \u0627\u06cc\u06a9 \u0645\u0639\u0642\u0648\u0644 \u0688\u06cc\u0641\u0627\u0644\u0679 \u0633\u0644\u0627\u0679 \u06a9\u06cc \u062a\u0639\u062f\u0627\u062f \u06c1\u06d2 \u062c\u0633 \u06a9\u06cc \u062a\u0648\u0642\u0639 \u06c1\u06d2 \u06a9\u06c1 \u0632\u06cc\u0627\u062f\u06c1 \u0633\u06d2 \u0632\u06cc\u0627\u062f\u06c1 \u0688\u06cc\u0645\u0627\u0646\u0688 \u0633\u0627\u0626\u06cc\u06a9\u0644 \u067e\u0631 \u0645\u062d\u06cc\u0637 \u06c1\u06d2\u06d4 \u0627\u06af\u0631 \u0622\u067e \u06a9\u0627 \u067e\u0644\u06cc\u0679 \u0641\u0627\u0631\u0645 \u0645\u0636\u0628\u0648\u0637 \u0679\u0627\u0626\u0645 \u067e\u06cc\u0679\u0631\u0646 \u062f\u06a9\u06be\u0627\u062a\u0627 \u06c1\u06d2 \u0627\u0648\u0631 30 \u200b\u200b\u0645\u0646\u0679 \u06a9\u06cc \u0633\u0644\u0627\u0679 \u0627\u0633\u062a\u0639\u0645\u0627\u0644 \u06a9\u0631\u062a\u0627 \u06c1\u06d2\u060c \u062a\u0648 \u062f\u0631\u062c \u0630\u06cc\u0644 \u0633\u06cc\u0679 \u06a9\u0631\u06cc\u06ba: <code>nlags=4<\/code> \u06cc\u0627 <code>nlags=6<\/code> \u067e\u0691\u0648\u0633 \u06a9\u0627 \u0627\u062d\u0627\u0637\u06c1 \u06a9\u0631\u0646\u06d2 \u06a9\u06d2 \u0644\u0626\u06d2 2-3 \u06af\u06be\u0646\u0679\u06d2\u06d4 \u0627\u06af\u0631 \u0622\u067e 2 \u06af\u06be\u0646\u0679\u06d2 \u06a9\u06cc \u0633\u0644\u0627\u0679 \u0627\u0633\u062a\u0639\u0645\u0627\u0644 \u06a9\u0631\u062a\u06d2 \u06c1\u06cc\u06ba\u060c <code>nlags=2<\/code> \u06cc\u0627 <code>nlags=3<\/code> \u06cc\u06c1 \u0639\u0627\u0645 \u0637\u0648\u0631 \u067e\u0631 \u0645\u062a\u0639\u0644\u0642\u06c1 \u0631\u06cc\u0646\u062c \u06a9\u0627 \u0627\u062d\u0627\u0637\u06c1 \u06a9\u0631\u062a\u0627 \u06c1\u06d2\u06d4<\/p>\n<h2 id=\"heading-step-5-bootstrap-confidence-intervals\">\u0645\u0631\u062d\u0644\u06c1 5: \u0628\u0648\u0679\u0633\u0679\u0631\u06cc\u067e \u0627\u0639\u062a\u0645\u0627\u062f \u06a9\u0627 \u0648\u0642\u0641\u06c1<\/h2>\n<p>HAC \u06a9\u06cc \u0645\u0639\u06cc\u0627\u0631\u06cc \u063a\u0644\u0637\u06cc\u0648\u06ba \u06a9\u0648 \u062e\u0648\u062f\u06a9\u0627\u0631 \u062a\u0639\u0644\u0642 \u06a9\u06d2 \u0644\u06cc\u06d2 \u0627\u0633 \u0645\u0641\u0631\u0648\u0636\u06d2 \u06a9\u06d2 \u062a\u062d\u062a \u062f\u0631\u0633\u062a \u06a9\u06cc\u0627 \u062c\u0627\u062a\u0627 \u06c1\u06d2 \u06a9\u06c1 \u062e\u0648\u062f\u06a9\u0627\u0631 \u062a\u0639\u0644\u0642 \u06a9\u0627 \u0688\u06be\u0627\u0646\u0686\u06c1 \u0627\u06cc\u06a9 \u0645\u062e\u0635\u0648\u0635 \u067e\u06cc\u0631\u0627\u0645\u06cc\u0679\u0631 \u0641\u0627\u0631\u0645 \u06a9\u06cc \u067e\u06cc\u0631\u0648\u06cc \u06a9\u0631\u062a\u0627 \u06c1\u06d2\u06d4 \u0628\u0648\u0679\u0633\u0679\u0631\u06cc\u067e \u0633\u06cc \u0622\u0626\u06cc \u0627\u06cc\u0633\u06cc \u06a9\u0648\u0626\u06cc \u0642\u06cc\u0627\u0633 \u0646\u06c1\u06cc\u06ba \u06a9\u0631\u062a\u0627\u06d4 \u0648\u06c1 \u0633\u0644\u0627\u0679\u0633 \u06a9\u0648 \u062a\u0628\u062f\u06cc\u0644 \u06a9\u0631\u06a9\u06d2 \u0627\u0648\u0631 \u062a\u062e\u0645\u06cc\u0646\u06c1 \u0644\u06af\u0627\u0646\u06d2 \u0648\u0627\u0644\u06d2 \u06a9\u0627 \u06c1\u0631 \u0628\u0627\u0631 \u062f\u0648\u0628\u0627\u0631\u06c1 \u062d\u0633\u0627\u0628 \u0644\u06af\u0627 \u06a9\u0631 \u062a\u062e\u0645\u06cc\u0646\u06c1 \u06a9\u06cc \u063a\u06cc\u0631 \u06cc\u0642\u06cc\u0646\u06cc \u0635\u0648\u0631\u062a\u062d\u0627\u0644 \u06a9\u06cc \u0645\u0642\u062f\u0627\u0631 \u062f\u0631\u0633\u062a \u06a9\u0631\u062a\u06d2 \u06c1\u06cc\u06ba\u06d4<\/p>\n<pre><code class=\"language-python\">def bootstrap_ci(slots, B=500, seed=7):\n    \"\"\"Bootstrap CIs treating each slot as an independent observation.\n  \n    Each slot's ai_on_lag1 value is fixed from the original treatment schedule.\n    Resampling slots with replacement while keeping their original lag values\n    correctly quantifies estimation uncertainty without destroying the lag structure.\n    \"\"\"\n    rng  = np.random.default_rng(seed)\n    n    = len(slots)\n    naive_ates, adj_ates, carryover_ests = [], [], []\n\n    for _ in range(B):\n        idx = rng.integers(0, n, size=n)\n        s   = slots.iloc[idx]  # ai_on_lag1 stays as the original slot's value\n\n        X_n = sm.add_constant(s['ai_on'])\n        naive_ates.append(sm.OLS(s['mean_task_completed'], X_n).fit().params['ai_on'])\n\n        X_a = sm.add_constant(s[['ai_on', 'ai_on_lag1']])\n        m   = sm.OLS(s['mean_task_completed'], X_a).fit()\n        adj_ates.append(m.params['ai_on'])\n        carryover_ests.append(m.params['ai_on_lag1'])\n\n    naive_ci     = np.percentile(naive_ates,     [2.5, 97.5])\n    adj_ci       = np.percentile(adj_ates,       [2.5, 97.5])\n    carryover_ci = np.percentile(carryover_ests, [2.5, 97.5])\n\n    print(f\"n=== Bootstrap 95% confidence intervals (B={B}, seed={seed}) ===\")\n    print(f\"  Naive ATE        : [{naive_ci[0]:.4f},  {naive_ci[1]:.4f}]  \"\n          f\"(covers {TRUE_EFFECT}: {naive_ci[0] < TRUE_EFFECT < naive_ci[1]})\")\n    print(f\"  Adjusted ATE     : [{adj_ci[0]:.4f},  {adj_ci[1]:.4f}]  \"\n          f\"(covers {TRUE_EFFECT}: {adj_ci[0] < TRUE_EFFECT < adj_ci[1]})\")\n    print(f\"  Carryover effect : [{carryover_ci[0]:.4f},  {carryover_ci[1]:.4f}]  \"\n          f\"(covers {CARRYOVER}: {carryover_ci[0] < CARRYOVER < carryover_ci[1]})\")\n\n    return naive_ci, adj_ci, carryover_ci\n\nnaive_ci, adj_ci, carryover_ci = bootstrap_ci(slots)\n<\/code><\/pre>\n<p><strong>\u0645\u062a\u0648\u0642\u0639 \u067e\u06cc\u062f\u0627\u0648\u0627\u0631:<\/strong><\/p>\n<pre><code class=\"language-text\">=== Bootstrap 95% confidence intervals (B=500, seed=7) ===\n  Naive ATE        : [0.0596,  0.0783]  (covers 0.06: True)\n  Adjusted ATE     : [0.0541,  0.0683]  (covers 0.06: True)\n  Carryover effect : [0.0175,  0.0320]  (covers 0.03: True)\n<\/code><\/pre>\n<p>\u06c1\u0631 \u0628\u0648\u0679\u0633\u0679\u0631\u06cc\u067e \u062a\u06a9\u0631\u0627\u0631 48 \u0633\u0644\u0627\u0679\u0633 \u06a9\u0648 \u0645\u062a\u0628\u0627\u062f\u0644 \u06a9\u06d2 \u0633\u0627\u062a\u06be \u062f\u0648\u0628\u0627\u0631\u06c1 \u0646\u0645\u0648\u0646\u06c1 \u0628\u0646\u0627\u062a\u0627 \u06c1\u06d2\u060c \u062e\u0627\u0644\u0635 \u0627\u0648\u0631 \u0627\u06cc\u0688\u062c\u0633\u0679 OLS \u062f\u0648\u0646\u0648\u06ba \u0645\u0627\u0688\u0644\u0632 \u06a9\u0648 \u0631\u06cc\u0641\u0679 \u06a9\u0631\u062a\u0627 \u06c1\u06d2\u060c \u0627\u0648\u0631 \u06a9\u0644\u06cc\u062f\u06cc \u062a\u062e\u0645\u06cc\u0646\u0648\u06ba \u06a9\u0648 \u0631\u06cc\u06a9\u0627\u0631\u0688 \u06a9\u0631\u062a\u0627 \u06c1\u06d2\u06d4 500 \u0646\u0642\u0644\u0648\u06ba \u06a9\u06d2 2.5\u0648\u06cc\u06ba \u0627\u0648\u0631 97.5\u0648\u06cc\u06ba \u067e\u0631\u0633\u0646\u0679\u0627\u0626\u0644\u0632 \u0628\u0648\u0679\u0633\u0679\u0631\u06cc\u067e CI \u0641\u0631\u0627\u06c1\u0645 \u06a9\u0631\u062a\u06d2 \u06c1\u06cc\u06ba\u06d4<\/p>\n<p>\u06c1\u0631 \u0633\u0644\u0627\u0679 \u06a9\u06cc \u0627\u067e\u0646\u06cc \u0645\u0631\u0636\u06cc \u06c1\u0648\u062a\u06cc \u06c1\u06d2\u06d4 <code>ai_on_lag1<\/code> \u0686\u0648\u0646\u06a9\u06c1 \u06c1\u0645 \u0627\u0635\u0644 \u0639\u0644\u0627\u062c \u06a9\u06d2 \u0634\u06cc\u0688\u0648\u0644 \u0633\u06d2 \u0627\u0642\u062f\u0627\u0631 \u06a9\u0627 \u0627\u0633\u062a\u0639\u0645\u0627\u0644 \u06a9\u0631\u062a\u06d2 \u06c1\u06cc\u06ba\u060c \u062a\u0627\u062e\u06cc\u0631 \u06a9\u0627 \u0688\u06be\u0627\u0646\u0686\u06c1 \u06c1\u0631 \u0628\u0648\u0679\u0633\u0679\u0631\u06cc\u067e \u0688\u0631\u0627 \u0645\u06cc\u06ba \u0645\u062d\u0641\u0648\u0638 \u06c1\u0648\u062a\u0627 \u06c1\u06d2\u06d4 \u062f\u0648\u0628\u0627\u0631\u06c1 \u0646\u0645\u0648\u0646\u06d2 \u0644\u06cc\u0646\u06d2 \u0633\u06d2 \u063a\u06cc\u0631 \u0645\u0648\u062c\u0648\u062f \u0648\u0642\u062a\u06cc \u062a\u0639\u0644\u0642\u0627\u062a \u0645\u06cc\u06ba \u06c1\u06cc\u0631\u0627 \u067e\u06be\u06cc\u0631\u06cc \u06a9\u06cc\u06d2 \u0628\u063a\u06cc\u0631 \u062a\u062e\u0645\u06cc\u0646\u06d2 \u06a9\u06cc \u063a\u06cc\u0631 \u06cc\u0642\u06cc\u0646\u06cc \u0635\u0648\u0631\u062a\u062d\u0627\u0644 \u06a9\u0648 \u067e\u06a9\u0691\u062a\u0627 \u06c1\u06d2\u06d4<\/p>\n<p>\u062a\u06cc\u0646\u0648\u06ba 95% CIs \u0627\u067e\u0646\u06d2 \u0645\u062a\u0639\u0644\u0642\u06c1 \u0632\u0645\u06cc\u0646\u06cc \u0633\u0686\u0627\u0626\u06cc\u0648\u06ba \u06a9\u0627 \u0627\u062d\u0627\u0637\u06c1 \u06a9\u0631\u062a\u06d2 \u06c1\u06cc\u06ba\u06d4 \u0628\u0648\u0644\u06cc ATE CI [0.0596, 0.0783] \u06cc\u06c1 \u062d\u0642\u06cc\u0642\u06cc \u0627\u062b\u0631 (0.060) \u06a9\u0648 \u06af\u06be\u06cc\u0631\u06d2 \u06c1\u0648\u0626\u06d2 \u06c1\u06d2 \u0644\u06cc\u06a9\u0646 +0.009 \u0645\u062b\u0628\u062a \u062a\u0639\u0635\u0628 \u06a9\u06d2 \u0633\u0627\u062a\u06be \u0627\u0648\u067e\u0631 \u06a9\u06cc \u0637\u0631\u0641 \u0628\u0691\u06be\u062a\u0627 \u06c1\u06d2\u06d4 \u0627\u06cc\u0688\u062c\u0633\u0679 \u0634\u062f\u06c1 ATE CI [0.0541, 0.0683] \u06cc\u06c1 \u0632\u06cc\u0627\u062f\u06c1 \u0645\u0631\u06a9\u0632 \u0627\u0648\u0631 \u062a\u0646\u06af \u06c1\u06d2\u060c \u0627\u0635\u0644 \u0627\u062b\u0631 \u06a9\u06d2 \u0642\u0631\u06cc\u0628 \u06c1\u06d2\u06d4 \u06a9\u06cc\u0631\u06cc \u0627\u0648\u0648\u0631 CI [0.0175, 0.0320] \u06c1\u0645 0.030 \u06a9\u0627 \u0627\u0635\u0644 \u06a9\u06cc\u0631\u06cc \u0627\u0648\u0648\u0631 \u0634\u0627\u0645\u0644 \u06a9\u0631\u062a\u06d2 \u06c1\u06cc\u06ba \u0627\u0648\u0631 0 \u06a9\u0648 \u062e\u0627\u0631\u062c \u06a9\u0631 \u062f\u06cc\u062a\u06d2 \u06c1\u06cc\u06ba \u062a\u0627\u06a9\u06c1 \u06cc\u06c1 \u06cc\u0642\u06cc\u0646\u06cc \u0628\u0646\u0627\u06cc\u0627 \u062c\u0627 \u0633\u06a9\u06d2 \u06a9\u06c1 \u06a9\u06cc\u0631\u06cc \u0627\u0648\u0648\u0631 \u0627\u0639\u062f\u0627\u062f \u0648 \u0634\u0645\u0627\u0631 \u06a9\u06d2 \u0644\u062d\u0627\u0638 \u0633\u06d2 \u06a9\u0633\u06cc \u0645\u0633\u062a\u0642\u0644 \u0645\u0632\u0627\u062c\u06cc \u0633\u06d2 \u0645\u0645\u062a\u0627\u0632 \u06c1\u06d2\u06d4<\/p>\n<p>\u062e\u0627\u0631\u062c \u0634\u062f\u06c1 \u0635\u0641\u0631 \u0646\u062a\u0627\u0626\u062c \u0645\u0635\u0646\u0648\u0639\u0627\u062a \u06a9\u06d2 \u0641\u06cc\u0635\u0644\u0648\u06ba \u06a9\u06d2 \u0644\u06cc\u06d2 \u0627\u06c1\u0645 \u06c1\u06cc\u06ba\u06d4 \u0627\u06af\u0631 \u06a9\u06cc\u0631\u06cc \u0627\u0648\u0648\u0631 CI 0 \u067e\u0631 \u0645\u0634\u062a\u0645\u0644 \u06c1\u06d2\u060c \u062a\u0648 \u0627\u0633 \u0633\u06d2 \u0627\u0646\u06a9\u0627\u0631 \u0646\u06c1\u06cc\u06ba \u06a9\u06cc\u0627 \u062c\u0627 \u0633\u06a9\u062a\u0627 \u06a9\u06c1 \u06a9\u0648\u0626\u06cc \u0628\u06be\u06cc \u0628\u0644\u0646\u062f AI-\u0622\u0641 \u06a9\u06d2 \u0646\u062a\u0627\u0626\u062c \u0634\u0648\u0631 \u06a9\u0627 \u0646\u0645\u0648\u0646\u06c1 \u06c1\u06cc\u06ba \u0646\u06c1 \u06a9\u06c1 \u062d\u0642\u06cc\u0642\u06cc \u0627\u0633\u062a\u0642\u0627\u0645\u062a\u06d4<\/p>\n<h2 id=\"heading-validating-against-the-ground-truth\">\u0632\u0645\u06cc\u0646\u06cc \u0633\u0686\u0627\u0626\u06cc \u06a9\u06cc \u062a\u0635\u062f\u06cc\u0642<\/h2>\n<p>\u0645\u0639\u0644\u0648\u0645 \u062d\u0642\u06cc\u0642\u06cc \u062d\u0642\u0627\u0626\u0642 \u06a9\u06d2 \u062a\u06cc\u0646 \u0646\u06a9\u0627\u062a\u06cc \u062a\u062e\u0645\u06cc\u0646\u0648\u06ba \u06a9\u0648 \u0627\u06a9\u0679\u06be\u0627 \u06a9\u0631\u06cc\u06ba\u06d4<\/p>\n<pre><code class=\"language-python\">print(\"=\" * 52)\nprint(f\"{'Estimator':<30} {'Estimate':>8}  {'True':>6}  {'Bias':>7}\")\nprint(\"-\" * 52)\nprint(f\"{'Naive OLS (no lag)':<30} {naive_ate:>8.4f}  {TRUE_EFFECT:>6.4f}  {naive_ate - TRUE_EFFECT:>+7.4f}\")\nprint(f\"{'Carryover-adjusted OLS':<30} {adj_ate:>8.4f}  {TRUE_EFFECT:>6.4f}  {adj_ate - TRUE_EFFECT:>+7.4f}\")\nprint(f\"{'Carryover coefficient':<30} {adj_carryover:>8.4f}  {CARRYOVER:>6.4f}  {adj_carryover - CARRYOVER:>+7.4f}\")\nprint(\"=\" * 52)\n<\/code><\/pre>\n<p><strong>\u0645\u062a\u0648\u0642\u0639 \u067e\u06cc\u062f\u0627\u0648\u0627\u0631:<\/strong><\/p>\n<pre><code class=\"language-text\">====================================================\nEstimator                      Estimate    True     Bias\n----------------------------------------------------\nNaive OLS (no lag)               0.0688  0.0600  +0.0088\nCarryover-adjusted OLS           0.0607  0.0600  +0.0007\nCarryover coefficient            0.0244  0.0300  -0.0056\n====================================================\n<\/code><\/pre>\n<p>\u0645\u0648\u0627\u0632\u0646\u06c1 \u06a9\u06cc \u0645\u06cc\u0632 \u0628\u0627\u0644\u06a9\u0644 \u0648\u06c1\u06cc \u0638\u0627\u06c1\u0631 \u06a9\u0631\u062a\u06cc \u06c1\u06d2 \u062c\u0648 \u0645\u0639\u0644\u0648\u0645 \u0632\u0645\u06cc\u0646\u06cc \u0633\u0686\u0627\u0626\u06cc \u06a9\u06d2 \u0644\u06cc\u06d2 \u06c1\u0631 \u062a\u062e\u0645\u06cc\u0646\u06c1 \u0644\u06af\u0627\u0646\u06d2 \u0648\u0627\u0644\u0627 \u0628\u0627\u0632\u06cc\u0627\u0641\u062a \u06a9\u0631\u062a\u0627 \u06c1\u06d2\u06d4<\/p>\n<p>Naive OLS 0.0088 \u0641\u06cc\u0635\u062f \u067e\u0648\u0627\u0626\u0646\u0679\u0633 \u0633\u06d2 \u0627\u0648\u0648\u0631 \u0634\u0648\u0679 \u06a9\u0631\u062a\u0627 \u06c1\u06d2 \u06a9\u06cc\u0648\u0646\u06a9\u06c1 \u06cc\u06c1 \u0628\u0631\u0627\u06c1 \u0631\u0627\u0633\u062a AI \u0631\u0648\u0679\u0646\u06af \u0627\u062b\u0631\u0627\u062a \u06a9\u0648 \u06a9\u06cc\u0631\u06cc \u0627\u0648\u0648\u0631 \u0633\u06d2 \u0627\u0644\u06af \u0646\u06c1\u06cc\u06ba \u06a9\u0631 \u0633\u06a9\u062a\u0627 \u062c\u0648 AI \u0622\u0646 \u0627\u0648\u0631 \u0645\u0644\u062d\u0642\u06c1 AI \u0622\u0641 \u0633\u0644\u0627\u0679\u0633 \u06a9\u0648 \u0628\u0691\u06be\u0627\u062a\u0627 \u06c1\u06d2\u06d4 \u0627\u06cc\u0688\u062c\u0633\u0679 \u0634\u062f\u06c1 OLS 0.0007 \u06a9\u06d2 \u0627\u0646\u062f\u0631 \u062d\u0642\u06cc\u0642\u06cc \u0627\u062b\u0631 \u06a9\u0648 \u0628\u062d\u0627\u0644 \u06a9\u0631\u062a\u0627 \u06c1\u06d2\u060c \u062c\u0648 \u0627\u0639\u062a\u0645\u0627\u062f \u06a9\u06d2 \u0645\u0639\u0642\u0648\u0644 \u0648\u0642\u0641\u06d2 \u06a9\u06cc \u0686\u0648\u0691\u0627\u0626\u06cc \u06a9\u06d2 \u0627\u0646\u062f\u0631 \u06c1\u06d2\u06d4 \u06a9\u06cc\u0631\u06cc \u0627\u0648\u0648\u0631 \u06a9\u0627 \u06af\u062a\u0627\u0646\u06a9 0.030 \u06a9\u06cc \u0627\u0635\u0644 \u0642\u06cc\u0645\u062a \u06a9\u06d2 \u0645\u0642\u0627\u0628\u0644\u06d2 \u0645\u06cc\u06ba 0.0244 \u06c1\u06d2\u06d4<\/p>\n<p>\u0627\u0633\u06d2 \u0645\u0646\u0638\u0645 \u0637\u0631\u06cc\u0642\u06d2 \u0633\u06d2 \u06a9\u0645 \u0633\u0645\u062c\u06be\u0627 \u062c\u0627\u062a\u0627 \u06c1\u06d2\u06d4 <code>ai_on<\/code> \u0627\u0648\u0631 <code>ai_on_lag1<\/code> \u062a\u06cc\u0646 \u0633\u0644\u0627\u0679 \u0628\u0644\u0627\u06a9 \u06a9\u06cc \u062a\u0639\u0645\u06cc\u0631 \u0645\u06cc\u06ba\u060c \u06cc\u06c1 \u06a9\u0634\u0646\u062f\u06af\u06cc \u0627\u0633 \u0642\u0633\u0645 \u06a9\u06d2 \u062a\u0645\u0627\u0645 \u0688\u06cc\u0632\u0627\u0626\u0646\u0648\u06ba \u0645\u06cc\u06ba \u06c1\u0648\u062a\u06cc \u06c1\u06d2\u06d4<\/p>\n<p>\u0639\u0645\u0644\u06cc \u0645\u0636\u0645\u0631\u0627\u062a \u0627\u0633 \u0645\u0635\u0646\u0648\u0639\u06cc \u0645\u062b\u0627\u0644 \u0633\u06d2 \u0622\u06af\u06d2 \u0628\u0691\u06be\u062a\u06d2 \u06c1\u06cc\u06ba\u06d4 \u062d\u0642\u06cc\u0642\u06cc LLM \u067e\u0644\u06cc\u0679 \u0641\u0627\u0631\u0645\u0632 \u0645\u06cc\u06ba\u060c \u06a9\u06cc\u0631\u06cc \u0627\u0648\u0648\u0631 \u067e\u0631\u0648\u0633\u06cc\u0633\u0646\u06af \u0627\u062b\u0631 \u0633\u06d2 \u0632\u06cc\u0627\u062f\u06c1 \u06c1\u0648 \u0633\u06a9\u062a\u0627 \u06c1\u06d2\u06d4 \u0627\u06af\u0631 AI \u0631\u0648\u0679\u0646\u06af \u0633\u0633\u0679\u0645 \u0628\u0646\u06cc\u0627\u062f\u06cc \u0637\u0648\u0631 \u067e\u0631 \u062f\u0648\u0628\u0627\u0631\u06c1 \u062a\u0631\u062a\u06cc\u0628 \u062f\u06cc\u062a\u0627 \u06c1\u06d2 \u06a9\u06c1 \u06a9\u0633 \u0637\u0631\u062d \u0627\u0646\u0641\u0631\u0646\u0633 \u06a9\u0644\u0633\u0679\u0631 \u0635\u0627\u0631\u0641\u06cc\u0646 \u06a9\u06d2 \u0644\u06cc\u06d2 \u06af\u0631\u0645 \u06a9\u06cc\u0634 \u0633\u0644\u0627\u0679\u0633 \u06a9\u0648 \u0645\u062e\u062a\u0635 \u06a9\u0631\u062a\u0627 \u06c1\u06d2\u060c \u062a\u0648 \u067e\u06be\u0631 \u0628\u06be\u06cc AI \u0631\u0648\u0679\u0646\u06af \u06a9\u06d2 \u0628\u0646\u062f \u06c1\u0648\u0646\u06d2 \u06a9\u06d2 \u0628\u0639\u062f\u060c \u0628\u0639\u062f \u06a9\u06d2 \u0627\u062f\u0648\u0627\u0631 AI \u0631\u0648\u0679\u0646\u06af \u06a9\u06cc \u0634\u06a9\u0644 \u0645\u06cc\u06ba \u06a9\u0645\u067e\u06cc\u0648\u0679 \u06a9\u06cc \u062a\u0642\u0633\u06cc\u0645 \u06a9\u06d2 \u0648\u0627\u0631\u062b \u06c1\u0648\u06ba \u06af\u06d2\u06d4<\/p>\n<p>\u0627\u0646 \u062d\u0627\u0644\u0627\u062a \u06a9\u06d2 \u062a\u062d\u062a\u060c \u0633\u0627\u062f\u06c1 \u0627\u0646\u062f\u0627\u0632\u06d2 \u0627\u06cc\u06a9 \u0645\u06a9\u0645\u0644 \u06c1\u0645\u06cc\u0634\u06c1 \u0622\u0646 \u0631\u0648\u0644 \u0622\u0624\u0679 \u0645\u06cc\u06ba \u0645\u0634\u0627\u06c1\u062f\u06c1 \u06a9\u06cc\u06d2 \u06af\u0626\u06d2 \u0627\u062b\u0631\u0627\u062a \u06a9\u0648 \u0646\u0645\u0627\u06cc\u0627\u06ba \u0637\u0648\u0631 \u067e\u0631 \u0628\u0691\u06be\u0627 \u0633\u06a9\u062a\u06d2 \u06c1\u06cc\u06ba\u060c \u062c\u06c1\u0627\u06ba \u06a9\u0648\u0626\u06cc \u0679\u0631\u0627\u0646\u0632\u06cc\u0634\u0646 \u0645\u0648\u062c\u0648\u062f \u0646\u06c1\u06cc\u06ba \u06c1\u06d2 \u0627\u0648\u0631 \u0646\u06c1 \u06c1\u06cc \u06a9\u0648\u0626\u06cc \u06a9\u06cc\u0631\u06cc \u0627\u0648\u0648\u0631 \u0627\u0633\u0645\u06cc\u0679\u0631\u06cc\u0632 \u062c\u0645\u0639 \u06c1\u0648\u062a\u06cc \u06c1\u06d2\u06d4<\/p>\n<p>\u06c1\u0645\u06cc\u0634\u06c1 \u0644\u06d2 \u062c\u0627\u0646\u06d2 \u0648\u0627\u0644\u06d2 \u06af\u062a\u0627\u0646\u06a9 \u06a9\u0627 \u0627\u0646\u062f\u0627\u0632\u06c1 \u0644\u06af\u0627\u0626\u06cc\u06ba\u06d4 \u0627\u06af\u0631 \u06cc\u06c1 \u0627\u0639\u062f\u0627\u062f\u0648\u0634\u0645\u0627\u0631 \u06a9\u06d2 \u0644\u062d\u0627\u0638 \u0633\u06d2 \u0627\u06c1\u0645 \u06c1\u06d2 \u0627\u0648\u0631 \u0628\u0631\u0627\u06c1 \u0631\u0627\u0633\u062a ATE \u062a\u062e\u0645\u06cc\u0646\u06c1 \u06a9\u06d2 20% \u0633\u06d2 \u0632\u06cc\u0627\u062f\u06c1 \u06c1\u06d2\u060c \u062a\u0648 \u0633\u0627\u062f\u06c1 \u062a\u062e\u0645\u06cc\u0646\u06c1 \u0631\u0648\u0644 \u0622\u0624\u0679 \u0641\u06cc\u0635\u0644\u0648\u06ba \u06a9\u06d2 \u0644\u06cc\u06d2 \u0646\u0627\u0642\u0627\u0628\u0644 \u0627\u0639\u062a\u0628\u0627\u0631 \u06c1\u06d2\u06d4<\/p>\n<h2 id=\"heading-when-switchback-fails\">\u062c\u0628 \u0633\u0648\u0626\u0686 \u0628\u06cc\u06a9 \u0646\u0627\u06a9\u0627\u0645 \u06c1\u0648\u062c\u0627\u062a\u0627 \u06c1\u06d2\u06d4<\/h2>\n<p>\u0633\u0648\u0626\u0686 \u0628\u06cc\u06a9 \u0645\u0627\u0631\u06a9\u06cc\u0679 \u06a9\u06cc \u0645\u062f\u0627\u062e\u0644\u062a \u06a9\u0648 \u0686\u0627\u0631 \u0634\u0631\u0627\u0626\u0637 \u0645\u06cc\u06ba \u062d\u0644 \u06a9\u0631\u062a\u0627 \u06c1\u06d2 \u0627\u0648\u0631 \u062f\u06cc\u06af\u0631 \u0686\u0627\u0631 \u0634\u0631\u0627\u0626\u0637 \u0645\u06cc\u06ba \u0648\u0642\u0641\u06d2 \u062f\u06cc\u062a\u0627 \u06c1\u06d2\u06d4<\/p>\n<h3 id=\"heading-1-carryover-period-longer-than-the-slot-length\">1. \u0644\u06d2 \u062c\u0627\u0646\u06d2 \u06a9\u0627 \u062f\u0648\u0631\u0627\u0646\u06cc\u06c1 \u0633\u0644\u0627\u0679 \u06a9\u06cc \u0644\u0645\u0628\u0627\u0626\u06cc \u0633\u06d2 \u0632\u06cc\u0627\u062f\u06c1 \u06c1\u06d2\u06d4<\/h3>\n<p><em>\u0645\u0641\u0631\u0648\u0636\u0648\u06ba \u06a9\u06cc \u062e\u0644\u0627\u0641 \u0648\u0631\u0632\u06cc: \u200b\u200b(1) \u0635\u0641\u0631 \u06cc\u0627 \u0645\u062d\u062f\u0648\u062f \u06a9\u06cc\u0631\u06cc \u0627\u0648\u0648\u0631\u06d4<\/em><\/p>\n<p>\u0627\u06af\u0631 AI \u0631\u0648\u0679\u0646\u06af \u0628\u062f\u0644 \u062c\u0627\u062a\u06cc \u06c1\u06d2 \u06a9\u06c1 \u06a9\u0633 \u0637\u0631\u062d \u0627\u0646\u0641\u0631\u0646\u0633 \u06a9\u0644\u0633\u0679\u0631 \u0627\u067e\u0646\u06d2 \u06a9\u06cc\u0634\u06d2 \u06a9\u0648 \u0645\u062a\u0639\u062f\u062f \u06af\u06be\u0646\u0679\u0648\u06ba \u062a\u06a9 \u06af\u0631\u0645 \u06a9\u0631\u062a\u0627 \u06c1\u06d2\u060c \u062a\u0648 \u06a9\u06cc\u0631\u06cc \u0627\u0648\u0648\u0631 \u0646\u0635\u0641 \u0632\u0646\u062f\u06af\u06cc 60 \u06cc\u0627 90 \u0645\u0646\u0679 \u0633\u06d2 \u062a\u062c\u0627\u0648\u0632 \u06a9\u0631 \u0633\u06a9\u062a\u06cc \u06c1\u06d2\u06d4 30 \u0645\u0646\u0679 \u06a9\u06cc \u0633\u0644\u0627\u0679 \u06a9\u06cc \u0644\u0645\u0628\u0627\u0626\u06cc \u0633\u0633\u0679\u0645 \u0645\u06cc\u0645\u0648\u0631\u06cc \u0633\u06d2 \u06a9\u0645 \u06c1\u06d2\u060c \u0627\u0648\u0631 \u0627\u06cc\u06a9 \u062a\u0627\u062e\u06cc\u0631 \u06a9\u06cc \u0645\u062f\u062a \u06a9\u0648 \u0634\u0627\u0645\u0644 \u06a9\u0631\u0646\u06d2 \u0633\u06d2 \u067e\u0648\u0631\u06cc \u0627\u0633\u062a\u0642\u0627\u0645\u062a \u062d\u0627\u0635\u0644 \u0646\u06c1\u06cc\u06ba \u06c1\u0648 \u0633\u06a9\u062a\u06cc\u06d4 \u06a9\u06cc\u0631\u06cc \u0627\u0648\u0648\u0631 \u06a9\u0648 \u06a9\u0645 \u0633\u0645\u062c\u06be\u0627 \u062c\u0627\u0626\u06d2 \u06af\u0627 \u0627\u0648\u0631 \u0628\u0631\u0627\u06c1 \u0631\u0627\u0633\u062a \u0627\u062b\u0631 \u0627\u0646\u062f\u0627\u0632\u06d2 \u0645\u062a\u0639\u0635\u0628 \u0631\u06c1\u06cc\u06ba \u06af\u06d2\u06d4<\/p>\n<p>\u062a\u0634\u062e\u06cc\u0635: \u062f\u06be\u06cc\u0631\u06d2 \u062f\u06be\u06cc\u0631\u06d2 \u0645\u0632\u06cc\u062f \u062a\u0627\u062e\u06cc\u0631 \u06a9\u0631\u06cc\u06ba \u0627\u0648\u0631 \u0645\u0634\u0627\u06c1\u062f\u06c1 \u06a9\u0631\u06cc\u06ba \u06a9\u06c1 \u0622\u06cc\u0627 AIC \u0645\u06cc\u06ba \u0628\u06c1\u062a\u0631\u06cc \u0622\u0631\u06c1\u06cc \u06c1\u06d2\u06d4 \u0627\u06af\u0631 <code>ai_on_lag3<\/code> \u0627\u0648\u0631 <code>ai_on_lag4<\/code> \u06cc\u06c1 \u0627\u0628 \u0628\u06be\u06cc \u0641\u0679 \u06a9\u0648 \u0628\u06c1\u062a\u0631 \u0628\u0646\u0627\u062a\u0627 \u06c1\u06d2\u060c \u0644\u06cc\u06a9\u0646 \u0633\u0644\u0627\u0679 \u06a9\u06cc \u0644\u0645\u0628\u0627\u0626\u06cc \u0633\u0633\u0679\u0645 \u0645\u06cc\u0645\u0648\u0631\u06cc \u06a9\u06d2 \u0644\u06cc\u06d2 \u0628\u06c1\u062a \u06a9\u0645 \u06c1\u06d2\u06d4 \u0633\u0644\u0627\u0679\u0633 \u06a9\u0648 \u0628\u0691\u06be\u0627\u0646\u0627 \u0627\u0648\u0631 \u0645\u0632\u06cc\u062f \u0648\u0642\u0641\u06c1 \u06a9\u06cc \u0627\u0635\u0637\u0644\u0627\u062d\u0627\u062a \u0634\u0627\u0645\u0644 \u06a9\u0631\u0646\u0627 \u0627\u06cc\u06a9 \u06c1\u06cc \u0648\u0633\u0627\u0626\u0644 \u06a9\u06cc \u062a\u062c\u0627\u0631\u062a \u06a9\u0631\u062a\u0627 \u06c1\u06d2\u06d4 \u0627\u0633 \u06a9\u0627 \u0645\u0637\u0644\u0628 \u06cc\u06c1 \u06c1\u06d2 \u06a9\u06c1 \u0645\u0634\u0627\u06c1\u062f\u0627\u062a \u06a9\u06cc \u0645\u0648\u062b\u0631 \u062a\u0639\u062f\u0627\u062f \u06a9\u0645 \u06c1\u0648 \u062c\u0627\u062a\u06cc \u06c1\u06d2 \u0627\u0648\u0631 \u0627\u0639\u062a\u0645\u0627\u062f \u06a9\u0627 \u0648\u0642\u0641\u06c1 \u0648\u0633\u06cc\u0639 \u06c1\u0648 \u062c\u0627\u062a\u0627 \u06c1\u06d2\u06d4<\/p>\n<h3 id=\"heading-2-non-stationary-demand-confounding-slots\">2. \u063a\u06cc\u0631 \u0641\u06a9\u0633\u0688 \u0688\u06cc\u0645\u0627\u0646\u0688 \u0688\u0633\u0679\u0631\u0628\u0646\u0633 \u0633\u0644\u0627\u0679\u0633\u06d4<\/h3>\n<p><em>\u0645\u0641\u0631\u0648\u0636\u0648\u06ba \u06a9\u06cc \u062e\u0644\u0627\u0641 \u0648\u0631\u0632\u06cc: \u200b\u200b(2) \u0639\u0644\u0627\u062c \u06a9\u06d2 \u067e\u0648\u0631\u06d2 \u0634\u06cc\u0688\u0648\u0644 \u0645\u06cc\u06ba \u0633\u0679\u06cc\u0634\u0646\u0631\u06cc\u0679\u06cc \u06a9\u06cc \u0636\u0631\u0648\u0631\u062a \u06c1\u06d2\u06d4<\/em><\/p>\n<p>\u06c1\u0641\u062a\u06d2 \u06a9\u06d2 \u062f\u0646 \u06a9\u06cc \u0635\u0628\u062d \u0679\u0631\u06cc\u0641\u06a9 \u06a9\u06cc \u0628\u0691\u06be\u062a\u06cc \u06c1\u0648\u0626\u06cc \u062a\u0639\u062f\u0627\u062f\u060c \u06c1\u0641\u062a\u06d2 \u06a9\u06d2 \u0622\u062e\u0631 \u0645\u06cc\u06ba \u0634\u0627\u0645 \u06a9\u06cc \u0628\u0691\u06be\u062a\u06cc \u06c1\u0648\u0626\u06cc \u062a\u0639\u062f\u0627\u062f\u060c \u0627\u0648\u0631 \u062a\u0639\u06cc\u0646\u0627\u062a\u06cc \u06a9\u06d2 \u0628\u0639\u062f \u0627\u067e\u0646\u0627\u0646\u06d2 \u06a9\u06d2 \u0645\u0646\u062d\u0646\u06cc \u062e\u0637\u0648\u0637 \u0628\u0646\u06cc\u0627\u062f\u06cc \u0637\u0648\u0631 \u067e\u0631 \u0645\u062e\u062a\u0644\u0641 \u067e\u0644\u06cc\u0679 \u0641\u0627\u0631\u0645 \u0644\u0648\u0688 \u06a9\u06cc \u0635\u0648\u0631\u062a\u062d\u0627\u0644 \u067e\u06cc\u062f\u0627 \u06a9\u0631\u062a\u06d2 \u06c1\u06cc\u06ba\u06d4 \u0627\u06af\u0631 \u067e\u0631\u0648\u0633\u06cc\u0633\u0646\u06af \u06a9\u0627 \u0634\u06cc\u0688\u0648\u0644 \u063a\u06cc\u0631 \u0645\u062a\u0646\u0627\u0633\u0628 \u0637\u0648\u0631 \u067e\u0631 AI \u06a9\u0648 \u0632\u06cc\u0627\u062f\u06c1 \u0679\u0631\u06cc\u0641\u06a9 \u0648\u0627\u0644\u06cc \u0648\u0646\u0688\u0648\u0632 \u0645\u06cc\u06ba \u0633\u0644\u0627\u0679\u0633 \u067e\u0631 \u0627\u0648\u0631 AI \u06a9\u0648 \u06a9\u0645 \u0679\u0631\u06cc\u0641\u06a9 \u0648\u0627\u0644\u06cc \u0648\u0646\u0688\u0648\u0632 \u0645\u06cc\u06ba AI \u0622\u0641 \u0633\u0644\u0627\u0679\u0633 \u067e\u0631 \u0631\u06a9\u06be\u062a\u0627 \u06c1\u06d2\u060c \u062a\u0648 \u067e\u0631\u0648\u0633\u06cc\u0633\u0646\u06af \u06af\u062a\u0627\u0646\u06a9 \u0645\u0627\u0646\u06af \u06a9\u06d2 \u0641\u0631\u0642 \u06a9\u06d2 \u0633\u0627\u062a\u06be \u0633\u0627\u062a\u06be \u0631\u0648\u0679\u0646\u06af AI \u0627\u062b\u0631\u0627\u062a \u06a9\u0648 \u062c\u0630\u0628 \u06a9\u0631\u062a\u0627 \u06c1\u06d2\u06d4<\/p>\n<p>\u0631\u0648\u0632\u0627\u0646\u06c1 \u06a9\u06d2 \u0634\u06cc\u0688\u0648\u0644 \u06a9\u0648 \u0628\u06d2 \u062a\u0631\u062a\u06cc\u0628 \u0628\u0646\u0627\u0646\u0627\u060c \u0646\u06cc\u0632 \u0631\u06cc\u06af\u0631\u06cc\u0634\u0646 \u0645\u06cc\u06ba \u0648\u0642\u062a \u06a9\u06d2 \u0645\u0642\u0631\u0631\u06c1 \u0627\u062b\u0631\u0627\u062a \u06a9\u0648 \u0634\u0627\u0645\u0644 \u06a9\u0631\u0646\u0627\u060c \u0627\u0633 \u0645\u0633\u0626\u0644\u06d2 \u06a9\u0648 \u062d\u0644 \u06a9\u0631\u062a\u0627 \u06c1\u06d2\u06d4 \u0635\u0628\u062d\u060c \u062f\u0648\u067e\u06c1\u0631\u060c \u0634\u0627\u0645\u060c \u0627\u0648\u0631 \u0631\u0627\u062a \u0628\u06be\u0631 \u06a9\u06d2 \u0627\u0634\u0627\u0631\u06d2 \u06a9\u0627 \u0627\u06cc\u06a9 \u0633\u06cc\u0679 \u062f\u0646 \u0628\u06be\u0631 \u06a9\u06cc \u0645\u0627\u0646\u06af \u06a9\u06d2 \u0627\u062a\u0627\u0631 \u0686\u0691\u06be\u0627\u0624 \u06a9\u0648 \u062c\u0630\u0628 \u06a9\u0631\u062a\u0627 \u06c1\u06d2 \u062c\u0648 \u0639\u0644\u0627\u062c \u06a9\u06d2 \u062a\u062e\u0645\u06cc\u0646\u06d2 \u06a9\u0648 \u0622\u0644\u0648\u062f\u06c1 \u06a9\u0631 \u0633\u06a9\u062a\u0627 \u06c1\u06d2\u06d4<\/p>\n<h3 id=\"heading-3-ramp-up-effects-at-the-first-slot-of-each-on-period\">3. \u0631\u06cc\u0645\u067e \u0627\u067e \u0627\u062b\u0631 \u06c1\u0631 \u062f\u0648\u0631 \u06a9\u06d2 \u067e\u06c1\u0644\u06d2 \u0633\u0644\u0627\u0679 \u0645\u06cc\u06ba \u06c1\u0648\u062a\u0627 \u06c1\u06d2\u06d4<\/h3>\n<p><em>\u0645\u0641\u0631\u0648\u0636\u0648\u06ba \u06a9\u06cc \u062e\u0644\u0627\u0641 \u0648\u0631\u0632\u06cc: \u200b\u200b(3) \u0628\u0644\u0627\u06a9 \u0628\u0627\u0624\u0646\u0688\u0631\u06cc \u067e\u0631 \u06a9\u0648\u0626\u06cc \u0631\u06cc\u0645\u067e \u0627\u067e \u0646\u06c1\u06cc\u06ba \u06c1\u06d2\u06d4<\/em><\/p>\n<p>\u062d\u0642\u06cc\u0642\u06cc \u062f\u0646\u06cc\u0627 \u06a9\u06d2 LLM \u067e\u0644\u06cc\u0679 \u0641\u0627\u0631\u0645\u0632 \u0645\u06cc\u06ba\u060c \u067e\u06c1\u0644\u0627 AI-on \u0633\u0644\u0627\u0679 \u0627\u06a9\u062b\u0631 \u0628\u0639\u062f \u06a9\u06d2 \u0633\u0644\u0627\u0679\u0633 \u0633\u06d2 \u0628\u062f\u062a\u0631 \u06a9\u0627\u0631\u06a9\u0631\u062f\u06af\u06cc \u06a9\u0627 \u0645\u0638\u0627\u06c1\u0631\u06c1 \u06a9\u0631\u062a\u0627 \u06c1\u06d2\u06d4 \u0631\u0648\u0679\u0646\u06af \u0645\u0627\u0688\u0644 \u06a9\u0627 \u06a9\u06cc\u0634 \u0679\u06be\u0646\u0688\u0627 \u06c1\u06d2\u06d4 \u0645\u0627\u0646\u06af \u06a9\u06cc \u067e\u06cc\u0634\u0646 \u06af\u0648\u0626\u06cc \u06a9\u06cc \u067e\u0631\u062a \u0646\u06d2 \u062f\u0646 \u06a9\u06d2 \u0644\u06cc\u06d2 \u0633\u0648\u0627\u0644\u0627\u062a \u06a9\u06cc \u062a\u0642\u0633\u06cc\u0645 \u06a9\u0627 \u0645\u0634\u0627\u06c1\u062f\u06c1 \u0646\u06c1\u06cc\u06ba \u06a9\u06cc\u0627\u06d4<\/p>\n<p>\u06a9\u0648\u0644\u0688 \u0633\u0679\u0627\u0631\u0679 \u0633\u0644\u0627\u0679\u0633 \u06a9\u06d2 \u0633\u0627\u062a\u06be \u0633\u0627\u062a\u06be \u0633\u0679\u06cc\u0688\u06cc \u0633\u0679\u06cc\u0679 AI-\u0622\u0646 \u0633\u0644\u0627\u0679\u0633 \u0628\u06be\u06cc \u06a9\u0645 \u06a9\u0627\u0631\u06a9\u0631\u062f\u06af\u06cc \u06a9\u06d2 \u0627\u0628\u062a\u062f\u0627\u0626\u06cc \u06c1\u0648\u0646\u06d2 \u0648\u0627\u0644\u06d2 \u0627\u062f\u0648\u0627\u0631 \u06a9\u0648 \u0627\u0639\u0644\u06cc \u06a9\u0627\u0631\u06a9\u0631\u062f\u06af\u06cc \u06a9\u06d2 \u062a\u0648\u0627\u0632\u0646 \u06a9\u06d2 \u0633\u0627\u062a\u06be \u0627\u0648\u0633\u0637\u0627\u064b \u0646\u06a9\u0627\u0644\u062a\u06d2 \u06c1\u06cc\u06ba\u060c \u0627\u0648\u0631 ATE \u062a\u062e\u0645\u06cc\u0646\u06d2 \u067e\u0648\u0631\u06d2 \u0631\u0648\u0644 \u0622\u0624\u0679 \u0645\u06cc\u06ba \u062f\u06cc\u06a9\u06be\u06d2 \u06af\u0626\u06d2 \u0645\u0633\u062a\u062d\u06a9\u0645 \u0631\u06cc\u0627\u0633\u062a\u06cc \u0627\u062b\u0631\u0627\u062a \u06a9\u0648 \u06a9\u0645 \u0633\u0645\u062c\u06be\u062a\u06d2 \u06c1\u06cc\u06ba\u06d4 \u0645\u0639\u06cc\u0627\u0631\u06cc \u0645\u0634\u0642 \u06cc\u06c1 \u06c1\u06d2 \u06a9\u06c1 \u06c1\u0631 \u0622\u0646 \u067e\u06cc\u0631\u06cc\u0688 \u06a9\u06d2 \u067e\u06c1\u0644\u06d2 \u0633\u0644\u0627\u0679 \u06a9\u0648 \u0628\u0631\u0646 \u0627\u0646 \u0648\u0646\u0688\u0648 \u06a9\u06d2 \u0637\u0648\u0631 \u067e\u0631 \u0636\u0627\u0626\u0639 \u06a9\u06cc\u0627 \u062c\u0627\u0626\u06d2 \u0627\u0648\u0631 \u06c1\u0631 \u0628\u0644\u0627\u06a9 \u06a9\u06d2 \u0633\u0644\u0627\u0679 2 \u0627\u0648\u0631 3 \u0645\u06cc\u06ba ATE \u06a9\u0627 \u062a\u062e\u0645\u06cc\u0646\u06c1 \u0644\u06af\u0627\u06cc\u0627 \u062c\u0627\u0626\u06d2\u06d4<\/p>\n<h3 id=\"heading-4-period-autocorrelation-producing-overconfident-p-values\">4. \u062f\u0648\u0631\u0627\u0646\u06cc\u06c1 \u062e\u0648\u062f \u06a9\u0627\u0631 \u062a\u0639\u0644\u0642 \u062d\u062f \u0633\u06d2 \u0632\u06cc\u0627\u062f\u06c1 \u067e\u0631\u0627\u0639\u062a\u0645\u0627\u062f p-values \u200b\u200b\u067e\u06cc\u062f\u0627 \u06a9\u0631\u062a\u0627 \u06c1\u06d2\u06d4<\/h3>\n<p><em>\u062e\u0644\u0627\u0641 \u0648\u0631\u0632\u06cc \u0634\u062f\u06c1 \u0645\u0641\u0631\u0648\u0636\u0627\u062a: (4) \u0628\u0642\u0627\u06cc\u0627 \u062e\u0648\u062f \u06a9\u0627\u0631 \u062a\u0639\u0644\u0642 \u062d\u0644 \u06c1\u0648 \u06af\u06cc\u0627\u06d4<\/em><\/p>\n<p>Durbin-Watson \u06a9\u06cc \u062a\u0634\u062e\u06cc\u0635 \u067e\u06c1\u0644\u0627 \u0679\u06cc\u0633\u0679 \u06c1\u06d2\u060c \u0644\u06cc\u06a9\u0646 \u06cc\u06c1 \u0635\u0631\u0641 AR(1) \u062e\u0648\u062f\u06a9\u0627\u0631 \u062a\u0639\u0644\u0642 \u06a9\u0627 \u067e\u062a\u06c1 \u0644\u06af\u0627\u062a\u0627 \u06c1\u06d2\u06d4 \u062d\u0642\u06cc\u0642\u06cc \u062f\u0646\u06cc\u0627 \u06a9\u06cc LLM \u067e\u0644\u06cc\u0679 \u0641\u0627\u0631\u0645 \u0679\u0627\u0626\u0645 \u0633\u06cc\u0631\u06cc\u0632 \u0645\u06cc\u06ba \u0627\u06a9\u062b\u0631 \u0631\u0648\u0632\u0627\u0646\u06c1 \u06a9\u06cc \u0645\u0648\u0633\u0645\u06cc\u060c \u0645\u062e\u0635\u0648\u0635 \u0627\u0648\u0642\u0627\u062a \u0645\u06cc\u06ba \u0627\u0646\u0679\u0631\u0627 \u0688\u06d2 \u062e\u0648\u062f\u06a9\u0627\u0631 \u062a\u0639\u0644\u0642\u060c \u0627\u0648\u0631 \u0645\u0627\u0688\u0644 \u0648\u0631\u0698\u0646 \u06a9\u06cc \u062a\u0639\u06cc\u0646\u0627\u062a\u06cc \u06a9\u06d2 \u0628\u0639\u062f \u0633\u0627\u062e\u062a\u06cc \u0648\u0642\u0641\u06d2 \u06c1\u0648\u062a\u06d2 \u06c1\u06cc\u06ba\u06d4<\/p>\n<p>\u0645\u0627\u0688\u0644 \u06a9\u06cc \u0628\u0627\u0642\u06cc\u0627\u062a \u06a9\u0627 \u0645\u062c\u0645\u0648\u0639\u06cc ACF \u067e\u0644\u0627\u0679 \u06a9\u0631\u06cc\u06ba\u06d4 \u062a\u0627\u062e\u06cc\u0631 \u0645\u06cc\u06ba \u0627\u0636\u0627\u0641\u06d2 \u0628\u0627\u0645\u0639\u0646\u06cc \u0637\u0644\u0628 \u06a9\u06d2 \u0686\u06a9\u0631\u0648\u06ba \u06a9\u06d2 \u0645\u0633\u0627\u0648\u06cc \u06c1\u06cc\u06ba\u06d4 <code>nlags<\/code> \u067e\u06cc\u0631\u0627\u0645\u06cc\u0679\u0631 <code>cov_hac<\/code> \u0628\u0635\u0648\u0631\u062a \u062f\u06cc\u06af\u0631\u060c \u0622\u067e \u06a9\u0648 \u0628\u0648\u0679\u0633\u0679\u0631\u06cc\u067e CI \u067e\u0631 \u0633\u0648\u0626\u0686 \u06a9\u0631\u0646\u0627 \u0686\u0627\u06c1\u06cc\u06d2\u060c \u062c\u0648 \u06a9\u0633\u06cc \u0645\u062e\u0635\u0648\u0635 \u062e\u0648\u062f\u06a9\u0627\u0631 \u062a\u0639\u0644\u0642 \u06a9\u0627 \u0688\u06be\u0627\u0646\u0686\u06c1 \u0641\u0631\u0636 \u0646\u06c1\u06cc\u06ba \u06a9\u0631\u062a\u0627 \u06c1\u06d2\u06d4<\/p>\n<p>LLM \u067e\u0644\u06cc\u0679 \u0641\u0627\u0631\u0645\u0632 \u0645\u06cc\u06ba \u0633\u0648\u0626\u0686 \u0628\u06cc\u06a9 \u062a\u062c\u0632\u06cc\u06c1 \u0645\u06cc\u06ba \u063a\u0644\u0637 \u0645\u062b\u0628\u062a\u0627\u062a \u06a9\u06cc \u0633\u0628 \u0633\u06d2 \u0639\u0627\u0645 \u0648\u062c\u06c1 \u062e\u0648\u062f\u06a9\u0627\u0631 \u062a\u0639\u0644\u0642 \u06a9\u0648 \u062f\u0631\u0633\u062a \u06a9\u0631\u0646\u06d2 \u0645\u06cc\u06ba \u0646\u0627\u06a9\u0627\u0645\u06cc \u06c1\u06d2\u06d4<\/p>\n<p>\u062f\u0648 \u0627\u0636\u0627\u0641\u06cc \u0688\u06cc\u0632\u0627\u0626\u0646 \u06a9\u06cc \u0633\u0637\u062d \u06a9\u06cc \u0646\u0627\u06a9\u0627\u0645\u06cc \u06a9\u06d2 \u0637\u0631\u06cc\u0642\u0648\u06ba \u0633\u06d2 \u0628\u0627\u062e\u0628\u0631 \u0631\u06c1\u0646\u06d2 \u06a9\u06d2 \u0642\u0627\u0628\u0644 \u06c1\u06cc\u06ba\u06d4<\/p>\n<p>15 \u0645\u0646\u0679 \u0633\u06d2 \u06a9\u0645 \u06a9\u06cc \u0633\u0644\u0627\u0679 \u06a9\u06cc \u0644\u0645\u0628\u0627\u0626\u06cc \u06a9\u0627 \u0645\u0637\u0644\u0628 \u06c1\u06d2 \u06a9\u06c1 \u067e\u0644\u06cc\u0679 \u0641\u0627\u0631\u0645 \u0633\u0648\u0626\u0686\u0632 \u06a9\u06d2 \u062f\u0631\u0645\u06cc\u0627\u0646 \u0645\u0646\u0638\u0645 \u0646\u06c1\u06cc\u06ba \u06c1\u06d2\u06d4 \u0642\u0637\u0627\u0631 \u06a9\u06cc \u06af\u06c1\u0631\u0627\u0626\u06cc\u060c \u062c\u0627\u0631\u06cc \u0633\u06cc\u0634\u0646\u0632 \u06a9\u06cc \u062a\u0639\u062f\u0627\u062f\u060c \u0627\u0648\u0631 \u06a9\u06cc\u0634 \u0627\u0633\u0679\u06cc\u0679\u0633 \u0633\u0628 \u06a9\u0686\u06be \u067e\u0686\u06be\u0644\u06cc \u0645\u062f\u062a \u0633\u06d2 \u062c\u0627\u0631\u06cc \u0631\u06c1\u06d2 \u06af\u0627\u060c \u0622\u0644\u0648\u062f\u06af\u06cc \u06a9\u0648 \u0628\u0691\u06be\u0627\u062a\u0627 \u06c1\u06d2 \u0627\u0648\u0631 AI \u0622\u0641 \u067e\u06cc\u0631\u06cc\u0688\u0632 \u06a9\u0648 \u0645\u0633\u062a\u062d\u06a9\u0645 \u062d\u0627\u0644\u062a \u06a9\u06cc \u0633\u0631\u06af\u0631\u0645\u06cc \u06a9\u0627 \u0646\u0645\u0627\u0626\u0646\u062f\u06c1 \u0646\u06c1\u06cc\u06ba \u0628\u0646\u0627\u062a\u0627 \u06c1\u06d2\u06d4<\/p>\n<p>\u0633\u0644\u0627\u0679 \u06a9\u06cc \u0644\u0645\u0628\u0627\u0626\u06cc 4 \u06af\u06be\u0646\u0679\u06d2 \u0633\u06d2 \u0632\u06cc\u0627\u062f\u06c1 \u0639\u0644\u0627\u062c \u067e\u0631 \u0642\u0627\u0628\u0648 \u067e\u0627\u0646\u06d2 \u0648\u0627\u0644\u06d2 \u062c\u0648\u0691\u0648\u06ba \u06a9\u06cc \u062a\u0639\u062f\u0627\u062f \u06a9\u0648 \u06a9\u0645 \u06a9\u0631\u062a\u06cc \u06c1\u06d2\u060c \u0645\u0624\u062b\u0631 \u0646\u0645\u0648\u0646\u06d2 \u06a9\u06d2 \u0633\u0627\u0626\u0632 \u06a9\u0648 \u06a9\u0645 \u06a9\u0631\u062a\u06cc \u06c1\u06d2 \u0627\u0648\u0631 \u0627\u0639\u062a\u0645\u0627\u062f \u06a9\u06d2 \u0648\u0642\u0641\u0648\u06ba \u06a9\u0648 \u0627\u0633 \u0645\u0642\u0627\u0645 \u062a\u06a9 \u0628\u0691\u06be\u0627 \u062f\u06cc\u062a\u06cc \u06c1\u06d2 \u062c\u06c1\u0627\u06ba \u0642\u0627\u0628\u0644 \u0642\u062f\u0631 \u0633\u0627\u0626\u0632 \u06a9\u06d2 \u0627\u062b\u0631\u0627\u062a \u06a9\u0627 \u067e\u062a\u06c1 \u0646\u06c1\u06cc\u06ba \u0644\u06af\u0627\u06cc\u0627 \u062c\u0627 \u0633\u06a9\u062a\u0627\u06d4<\/p>\n<p>LLM \u067e\u0644\u06cc\u0679 \u0641\u0627\u0631\u0645 \u06a9\u06d2 \u0632\u06cc\u0627\u062f\u06c1 \u062a\u0631 \u062a\u062c\u0631\u0628\u0627\u062a \u06a9\u06d2 \u0644\u06cc\u06d2 \u0639\u0645\u0644\u06cc \u0645\u06cc\u0679\u06be\u06cc \u062c\u06af\u06c1 30 \u0645\u0646\u0679 \u0633\u06d2 2 \u06af\u06be\u0646\u0679\u06d2 \u0641\u06cc \u0633\u0644\u0627\u0679 \u06c1\u06d2\u060c \u062c\u0633 \u06a9\u0627 \u062d\u062a\u0645\u06cc \u0627\u0646\u0634\u0627\u0646\u06a9\u0646 \u0627\u0628\u062a\u062f\u0627\u0626\u06cc \u067e\u0627\u0626\u0644\u0679 \u0688\u06cc\u0679\u0627 \u0633\u06d2 \u062a\u062e\u0645\u06cc\u0646\u06c1 \u06a9\u06cc\u0631\u06cc \u0627\u0648\u0648\u0631 \u0646\u0635\u0641 \u0632\u0646\u062f\u06af\u06cc \u0633\u06d2 \u06c1\u0648\u062a\u0627 \u06c1\u06d2\u06d4<\/p>\n<h2 id=\"heading-when-to-use-switchback-vs-cluster-randomization\">\u0633\u0648\u0626\u0686 \u0628\u06cc\u06a9 \u0627\u0648\u0631 \u06a9\u0644\u0633\u0679\u0631 \u0631\u06cc\u0646\u0688\u0645\u0627\u0626\u0632\u06cc\u0634\u0646 \u06a9\u0628 \u0627\u0633\u062a\u0639\u0645\u0627\u0644 \u06a9\u0631\u06cc\u06ba\u06d4<\/h2>\n<p>\u0633\u0648\u0626\u0686 \u0628\u06cc\u06a9 \u0627\u0648\u0631 \u06a9\u0644\u0633\u0679\u0631 \u0631\u06cc\u0646\u0688\u0645\u0627\u0626\u0632\u06cc\u0634\u0646 \u0645\u062e\u062a\u0644\u0641 \u0645\u06cc\u06a9\u0627\u0646\u0632\u0645 \u06a9\u06d2 \u0630\u0631\u06cc\u0639\u06d2 \u0627\u06cc\u06a9 \u06c1\u06cc \u0645\u062f\u0627\u062e\u0644\u062a \u06a9\u0627 \u0645\u0633\u0626\u0644\u06c1 \u062d\u0644 \u06a9\u0631\u062a\u06cc \u06c1\u06d2\u06d4<\/p>\n<p>\u06a9\u0644\u0633\u0679\u0631 \u0631\u06cc\u0646\u0688\u0645\u0627\u0626\u0632\u06cc\u0634\u0646 \u0635\u0627\u0631\u0641\u06cc\u0646 \u06a9\u0648 \u062c\u063a\u0631\u0627\u0641\u06cc\u0627\u0626\u06cc \u0639\u0644\u0627\u0642\u06d2\u060c \u06a9\u0631\u0627\u06cc\u06c1 \u062f\u0627\u0631 ID\u060c \u06cc\u0627 \u062a\u0646\u0638\u06cc\u0645\u06cc \u0627\u06a9\u0627\u0624\u0646\u0679 \u06a9\u06d2 \u0644\u062d\u0627\u0638 \u0633\u06d2 \u063a\u06cc\u0631 \u0627\u0648\u0648\u0631 \u0644\u06cc\u067e\u0646\u06af \u062d\u0635\u0648\u06ba \u0645\u06cc\u06ba \u062a\u0642\u0633\u06cc\u0645 \u06a9\u0631\u062a\u06cc \u06c1\u06d2 \u0627\u0648\u0631 \u0628\u06cc\u06a9 \u0648\u0642\u062a \u067e\u0631\u0627\u0633\u06cc\u0633 \u0627\u0648\u0631 \u06a9\u0646\u0679\u0631\u0648\u0644 \u06a9\u06cc\u06d2 \u062c\u0627\u0646\u06d2 \u0648\u0627\u0644\u06d2 \u062d\u0635\u0648\u06ba \u06a9\u0648 \u062a\u0641\u0648\u06cc\u0636 \u06a9\u0631\u062a\u06cc \u06c1\u06d2\u06d4 \u0633\u0648\u0626\u0686 \u0628\u06cc\u06a9 \u067e\u0648\u0631\u06cc \u0622\u0628\u0627\u062f\u06cc \u06a9\u0648 \u0645\u062e\u062a\u0644\u0641 \u0627\u0648\u0642\u0627\u062a \u0645\u06cc\u06ba \u0639\u0644\u0627\u062c \u0627\u0648\u0631 \u06a9\u0646\u0679\u0631\u0648\u0644 \u06a9\u06d2 \u0644\u06cc\u06d2 \u062a\u0641\u0648\u06cc\u0636 \u06a9\u0631\u062a\u0627 \u06c1\u06d2\u06d4<\/p>\n<p>\u06a9\u0644\u0633\u0679\u0631 \u0631\u06cc\u0646\u0688\u0645\u0627\u0626\u0632\u06cc\u0634\u0646 \u0627\u0633 \u0648\u0642\u062a \u0627\u0686\u06be\u06cc \u0637\u0631\u062d \u06a9\u0627\u0645 \u06a9\u0631\u062a\u06cc \u06c1\u06d2 \u062c\u0628 \u06a9\u0627\u0641\u06cc \u0627\u0644\u06af \u06c1\u0648\u0646\u06d2 \u0648\u0627\u0644\u06d2 \u0633\u06cc\u06af\u0645\u0646\u0679 \u06c1\u0648\u06ba \u0627\u0648\u0631 \u0627\u0646\u0679\u0631 \u0633\u06cc\u06af\u0645\u0646\u0679 \u0633\u067e\u0644 \u0627\u0648\u0648\u0631 \u06a9\u0648 \u0646\u0638\u0631 \u0627\u0646\u062f\u0627\u0632 \u06a9\u06cc\u0627 \u062c\u0627 \u0633\u06a9\u06d2\u06d4 LLM SaaS \u067e\u0644\u06cc\u0679 \u0641\u0627\u0631\u0645\u0632 \u06a9\u06d2 \u0633\u0627\u062a\u06be \u0627\u0646\u0679\u0631\u067e\u0631\u0627\u0626\u0632 \u06a9\u0631\u0627\u06cc\u06c1 \u062f\u0627\u0631\u0648\u06ba \u06a9\u06d2 \u0633\u0627\u062a\u06be \u0648\u0642\u0641 \u0634\u062f\u06c1 \u06a9\u0645\u067e\u06cc\u0648\u0679 \u0633\u0644\u0627\u0626\u0633 \u067e\u0631\u060c \u06a9\u0644\u0633\u0679\u0631 \u0631\u06cc\u0646\u0688\u0645\u0627\u0626\u0632\u06cc\u0634\u0646 \u0641\u06cc \u06a9\u0631\u0627\u06cc\u06c1 \u062f\u0627\u0631 \u0645\u0645\u06a9\u0646 \u06c1\u06d2\u06d4 \u0627\u0633 \u06a9\u0627 \u0645\u0637\u0644\u0628 \u06c1\u06d2 \u06a9\u06c1 \u0627\u06cc\u06a9 \u06a9\u0631\u0627\u06cc\u06c1 \u062f\u0627\u0631 \u06a9\u06d2 \u0631\u0648\u0679\u0646\u06af \u06a9\u06d2 \u0641\u06cc\u0635\u0644\u06d2 \u062f\u0648\u0633\u0631\u06d2 \u06a9\u0631\u0627\u06cc\u06c1 \u062f\u0627\u0631 \u06a9\u06cc \u0633\u06cc\u0634\u0646 \u06a9\u06cc \u0635\u0644\u0627\u062d\u06cc\u062a \u06a9\u0648 \u062e\u062a\u0645 \u0646\u06c1\u06cc\u06ba \u06a9\u0631\u062a\u06d2 \u06c1\u06cc\u06ba\u06d4<\/p>\n<p>\u06a9\u0646\u0632\u06cc\u0648\u0645\u0631 LLM \u067e\u0644\u06cc\u0679 \u0641\u0627\u0631\u0645\u0632 \u06a9\u06d2 \u0644\u06cc\u06d2 \u062c\u06c1\u0627\u06ba \u062a\u0645\u0627\u0645 \u0635\u0627\u0631\u0641\u06cc\u0646 \u0627\u06cc\u06a9 \u06c1\u06cc \u0637\u0631\u062d \u06a9\u06d2 \u0642\u06cc\u0627\u0633\u0627\u062a \u06a9\u0627 \u0627\u0634\u062a\u0631\u0627\u06a9 \u06a9\u0631\u062a\u06d2 \u06c1\u06cc\u06ba\u060c \u0635\u0644\u0627\u062d\u06cc\u062a \u06a9\u0627 \u0631\u0633\u0627\u0648 \u0635\u0627\u0631\u0641 \u06a9\u06d2 \u062d\u0635\u06d2 \u06a9\u06cc \u062d\u062f\u0648\u062f \u06a9\u0648 \u0639\u0628\u0648\u0631 \u06a9\u0631\u062a\u0627 \u06c1\u06d2 \u0627\u0648\u0631 \u06a9\u0644\u0633\u0679\u0631 \u0631\u06cc\u0646\u0688\u0645\u0627\u0626\u0632\u06cc\u0634\u0646 \u0627\u0646\u06c1\u06cc\u06ba \u0627\u0644\u06af \u0646\u06c1\u06cc\u06ba \u06a9\u0631 \u0633\u06a9\u062a\u06cc\u06d4<\/p>\n<p>\u0633\u0648\u0626\u0686 \u0628\u06cc\u06a9 \u0627\u0633 \u0648\u0642\u062a \u0645\u0648\u0632\u0648\u06ba \u06c1\u0648\u062a\u0627 \u06c1\u06d2 \u062c\u0628 \u0627\u0633\u067e\u0644 \u0627\u0648\u0648\u0631 \u0633\u06cc\u06af\u0645\u0646\u0679 \u06a9\u06cc \u062d\u062f\u0648\u062f \u06a9\u0648 \u0639\u0628\u0648\u0631 \u06a9\u0631\u062a\u0627 \u06c1\u06d2 \u06cc\u0627 \u062c\u0628 \u0645\u0646\u0627\u0633\u0628 \u0637\u0631\u06cc\u0642\u06d2 \u0633\u06d2 \u0686\u0644\u0646\u06d2 \u0648\u0627\u0644\u06d2 \u06a9\u0644\u0633\u0679\u0631 \u062a\u062c\u0631\u0628\u06c1 \u06a9\u0648 \u0686\u0644\u0627\u0646\u06d2 \u06a9\u06d2 \u0644\u06cc\u06d2 \u06a9\u0627\u0641\u06cc \u0627\u0644\u06af \u06a9\u0631\u0646\u06d2 \u0648\u0627\u0644\u06d2 \u06a9\u0644\u0633\u0679\u0631\u0632 \u0646\u06c1 \u06c1\u0648\u06ba\u06d4<\/p>\n<p>\u0632\u06cc\u0627\u062f\u06c1 \u062a\u0631 \u0628\u0691\u06d2 \u067e\u0644\u06cc\u0679 \u0641\u0627\u0631\u0645\u0632 \u062f\u0648\u0646\u0648\u06ba \u06a9\u0627 \u0627\u0633\u062a\u0639\u0645\u0627\u0644 \u06a9\u0631\u062a\u06d2 \u06c1\u06cc\u06ba: \u067e\u0644\u06cc\u0679 \u0641\u0627\u0631\u0645 \u06a9\u06d2 \u0648\u0633\u06cc\u0639 \u0627\u0646\u0641\u0631\u0627\u0633\u0679\u0631\u06a9\u0686\u0631 \u06a9\u06cc \u062a\u0628\u062f\u06cc\u0644\u06cc\u0648\u06ba \u06a9\u06d2 \u0644\u06cc\u06d2 \u0633\u0648\u0626\u0686 \u0628\u06cc\u06a9 \u062c\u06c1\u0627\u06ba \u06a9\u0648\u0626\u06cc \u0648\u0627\u0636\u062d \u0633\u06cc\u06af\u0645\u0646\u0679 \u06a9\u06cc \u062d\u062f\u0648\u062f \u0645\u0648\u062c\u0648\u062f \u0646\u06c1\u06cc\u06ba \u06c1\u06cc\u06ba\u060c \u0627\u0648\u0631 \u06a9\u0631\u0627\u06cc\u06c1 \u062f\u0627\u0631 \u06cc\u0627 \u062c\u063a\u0631\u0627\u0641\u06cc\u0627\u0626\u06cc \u0639\u0644\u0627\u0642\u06d2 \u06a9\u06d2 \u0644\u062d\u0627\u0638 \u0633\u06d2 \u062f\u0627\u0626\u0631\u06c1 \u06a9\u0627\u0631 \u06a9\u06cc \u0627\u06c1\u0644\u06cc\u062a \u06a9\u06d2 \u0644\u06cc\u06d2 \u06a9\u0644\u0633\u0679\u0631 \u0631\u06cc\u0646\u0688\u0645\u0627\u0626\u0632\u06cc\u0634\u0646\u06d4<\/p>\n<p>\u0627\u0646\u062a\u062e\u0627\u0628 \u0646\u06cc\u0686\u06d2 \u0622\u062a\u0627 \u06c1\u06d2 \u062c\u06c1\u0627\u06ba \u0645\u062f\u0627\u062e\u0644\u062a \u06a9\u0648 \u0645\u0645\u06a9\u0646\u06c1 \u0637\u0648\u0631 \u067e\u0631 \u06a9\u0627\u0679\u0627 \u062c\u0627\u0633\u06a9\u062a\u0627 \u06c1\u06d2\u06d4 \u0648\u0642\u062a \u0627\u06cc\u06a9 \u0642\u062f\u0631\u062a\u06cc \u062d\u062f \u06c1\u06d2 \u06a9\u06cc\u0648\u0646\u06a9\u06c1 \u0646\u0638\u0627\u0645 \u0633\u0644\u0627\u0679 \u06a9\u06cc \u0644\u0645\u0628\u0627\u0626\u06cc \u0633\u06d2 \u0632\u06cc\u0627\u062f\u06c1 \u062a\u06cc\u0632\u06cc \u0633\u06d2 \u0635\u0627\u0641 \u06c1\u0648\u062a\u0627 \u06c1\u06d2\u060c \u0627\u0633 \u0644\u06cc\u06d2 \u067e\u0644\u06cc\u0679 \u0641\u0627\u0631\u0645 \u062f\u0648\u0633\u0631\u06cc \u062d\u0627\u0644\u062a \u067e\u0631 \u062c\u0627\u0646\u06d2 \u0633\u06d2 \u067e\u06c1\u0644\u06d2 \u0627\u06cc\u06a9 \u062d\u0627\u0644\u062a \u06a9\u06d2 \u0627\u062b\u0631\u0627\u062a \u06a9\u0648 \u067e\u0648\u0631\u06cc \u0637\u0631\u062d \u067e\u0631\u0648\u0633\u06cc\u0633 \u06a9\u0631\u062a\u0627 \u06c1\u06d2\u06d4 \u0633\u06cc\u06af\u0645\u0646\u0679 ID \u0627\u06cc\u06a9 \u0641\u0637\u0631\u06cc \u062d\u062f \u06c1\u0648\u062a\u06cc \u06c1\u06d2 \u062c\u0628 \u0648\u0633\u0627\u0626\u0644 \u06a9\u06d2 \u062a\u0627\u0644\u0627\u0628 \u062d\u0642\u06cc\u0642\u062a \u0645\u06cc\u06ba \u0627\u0648\u0648\u0631\u0644\u06cc\u067e \u0646\u06c1\u06cc\u06ba \u06c1\u0648\u062a\u06d2 \u06c1\u06cc\u06ba\u06d4 \u0627\u06af\u0631 \u06a9\u0648\u0626\u06cc \u0628\u06be\u06cc \u0628\u0627\u0624\u0646\u0688\u0631\u06cc \u0646\u06c1\u06cc\u06ba \u0631\u06a9\u06be\u062a\u06cc \u06c1\u06d2\u060c \u062a\u0648 \u06c1\u0645 \u0648\u062c\u06c1 \u06a9\u06d2 \u062a\u062e\u0645\u06cc\u0646\u06d2 \u06a9\u06d2 \u062f\u0627\u0626\u0631\u06d2 \u0645\u06cc\u06ba \u06c1\u06cc\u06ba\u060c \u0686\u0627\u06c1\u06d2 \u0645\u0635\u0646\u0648\u0639\u06cc \u06a9\u0646\u0679\u0631\u0648\u0644 \u06a9\u06d2 \u0637\u0631\u06cc\u0642\u06d2 \u06c1\u0648\u06ba\u060c \u0645\u0645\u0627\u062b\u0644 \u06a9\u0646\u0679\u0631\u0648\u0644 \u0633\u06d2 \u0641\u0631\u0642 \u0645\u06cc\u06ba \u0641\u0631\u0642\u060c \u06cc\u0627 \u0645\u062f\u0627\u062e\u0644\u062a\u06cc \u0645\u06cc\u06a9\u0627\u0646\u0632\u0645 \u06a9\u06d2 \u0633\u0627\u062e\u062a\u06cc \u0645\u0627\u0688\u0644\u06d4<\/p>\n<h2 id=\"heading-what-to-do-next\">\u0622\u06af\u06d2 \u06a9\u06cc\u0627 \u06a9\u0631\u0646\u0627 \u06c1\u06d2\u06d4<\/h2>\n<p>\u0627\u06af\u0631 \u0633\u0648\u0626\u0686 \u0628\u06cc\u06a9 \u062a\u062c\u0632\u06cc\u06c1 \u0627\u0686\u06be\u06cc \u0637\u0631\u062d \u0633\u06d2 \u0634\u0646\u0627\u062e\u062a \u0634\u062f\u06c1 \u06a9\u06cc\u0631\u06cc \u0627\u0648\u0648\u0631 \u0645\u062f\u062a \u06a9\u06d2 \u0633\u0627\u062a\u06be \u0627\u06cc\u06a9 \u0627\u06c1\u0645 \u0645\u062b\u0628\u062a \u0628\u0631\u0627\u06c1 \u0631\u0627\u0633\u062a \u0627\u062b\u0631 \u062f\u06a9\u06be\u0627\u062a\u0627 \u06c1\u06d2\u060c \u062a\u0648 \u0627\u06af\u0644\u0627 \u0645\u0634\u06a9\u0644 \u0633\u0648\u0627\u0644 \u06cc\u06c1 \u06c1\u06d2 \u06a9\u06c1 \u06a9\u06cc\u0627 AI \u0631\u0648\u0679\u0646\u06af \u0627\u0646\u0641\u0631\u0627\u0633\u0679\u0631\u06a9\u0686\u0631 \u06a9\u06cc \u0644\u0627\u06af\u062a \u06a9\u0648 \u062f\u06cc\u06a9\u06be\u062a\u06d2 \u06c1\u0648\u0626\u06d2 \u0627\u062b\u0631 \u06a9\u0627 \u0633\u0627\u0626\u0632 \u0645\u06a9\u0645\u0644 \u0631\u0648\u0644 \u0622\u0624\u0679 \u06a9\u0627 \u062c\u0648\u0627\u0632 \u067e\u06cc\u0634 \u06a9\u0631\u062a\u0627 \u06c1\u06d2\u06d4 \u067e\u0631\u06cc\u0645\u06cc\u0645 \u0645\u0627\u0688\u0644 \u06a9\u06cc \u0642\u06cc\u0645\u062a \u0645\u0639\u06cc\u0627\u0631\u06cc \u0645\u0627\u0688\u0644 \u0633\u06d2 \u0632\u06cc\u0627\u062f\u06c1 \u0641\u06cc \u0633\u0648\u0627\u0644 \u06c1\u06d2\u06d4 \u0622\u06cc\u0627 6pp \u06a9\u06cc \u062a\u06a9\u0645\u06cc\u0644 \u06a9\u06cc \u0634\u0631\u062d \u0645\u06cc\u06ba \u0627\u0636\u0627\u0641\u06c1 \u0627\u0636\u0627\u0641\u06cc \u062a\u062e\u0645\u06cc\u0646\u06c1 \u0644\u0627\u06af\u062a \u06a9\u0627 \u0627\u062d\u0627\u0637\u06c1 \u06a9\u0631\u062a\u0627 \u06c1\u06d2 \u0627\u0633 \u06a9\u0627 \u0627\u0646\u062d\u0635\u0627\u0631 \u067e\u0631\u0648\u0688\u06a9\u0679 \u06a9\u06d2 \u0645\u0646\u06cc\u0679\u0627\u0626\u0632\u06cc\u0634\u0646 \u06a9\u06d2 \u0637\u0631\u06cc\u0642\u06c1 \u06a9\u0627\u0631 \u067e\u0631 \u06c1\u06d2\u06d4<\/p>\n<p>\u06a9\u06cc\u0631\u06cc \u0627\u0648\u0648\u0631 \u06a9\u06d2 \u062a\u062e\u0645\u06cc\u0646\u06d2 \u0628\u06be\u06cc \u0627\u0646 \u0641\u06cc\u0635\u0644\u0648\u06ba \u067e\u0631 \u0627\u062b\u0631 \u0627\u0646\u062f\u0627\u0632 \u06c1\u0648\u062a\u06d2 \u06c1\u06cc\u06ba\u06d4<\/p>\n<p>\u0627\u06cc\u06a9 \u0628\u0691\u06d2 \u06a9\u06cc\u0631\u06cc \u0627\u0648\u0648\u0631 \u06af\u062a\u0627\u0646\u06a9 \u06a9\u0627 \u0645\u0637\u0644\u0628 \u06cc\u06c1 \u06c1\u06d2 \u06a9\u06c1 \u062c\u0628 \u06c1\u0645\u06cc\u0634\u06c1 \u0686\u0644\u0646\u06d2 \u0648\u0627\u0644\u06cc \u0631\u0648\u0679\u0646\u06af \u067e\u0631 \u0633\u0648\u0626\u0686 \u06a9\u0631\u062a\u06d2 \u06c1\u06cc\u06ba \u062a\u0648\u060c \u067e\u06cc\u0645\u0627\u0626\u0634 \u0634\u062f\u06c1 \u0644\u0641\u0679 \u0645\u06cc\u06ba \u0633\u06d2 \u06a9\u0686\u06be \u0636\u0627\u0626\u0639 \u06c1\u0648 \u062c\u0627\u062a\u06cc \u06c1\u06d2 \u0627\u0648\u0631 \u0645\u0646\u062a\u0642\u0644\u06cc \u06a9\u06cc \u062a\u0648\u0627\u0632\u0646 \u062e\u062a\u0645 \u06c1\u0648 \u062c\u0627\u062a\u06cc \u06c1\u06d2\u06d4 \u06a9\u0627\u0631\u0622\u0645\u062f \u0644\u0627\u06af\u062a \u0633\u06d2 \u0641\u0627\u0626\u062f\u06c1 \u06a9\u06d2 \u062d\u0633\u0627\u0628\u0627\u062a \u06a9\u06d2 \u0644\u06cc\u06d2 \u0633\u0627\u062f\u06c1 \u0627\u0646\u062f\u0627\u0632\u0648\u06ba \u06a9\u06d2 \u0628\u062c\u0627\u0626\u06d2 \u0628\u0631\u0627\u06c1 \u0631\u0627\u0633\u062a ATE \u06a9\u06cc \u0636\u0631\u0648\u0631\u062a \u06c1\u0648\u062a\u06cc \u06c1\u06d2 \u062c\u0648 \u0628\u063a\u06cc\u0631 \u06a9\u0633\u06cc \u062a\u0627\u062e\u06cc\u0631 \u06a9\u06d2 \u0627\u06cc\u0688\u062c\u0633\u0679\u0645\u0646\u0679 \u06a9\u06d2 \u062d\u0627\u0635\u0644 \u06a9\u06cc\u06d2 \u062c\u0627 \u0633\u06a9\u062a\u06d2 \u06c1\u06cc\u06ba\u06d4 \u0627\u0633 \u06a9\u0627 \u0645\u0637\u0644\u0628 \u06c1\u06d2 \u06a9\u06c1 \u0622\u067e \u06a9\u0648 \u0627\u0646\u0641\u0631\u0627\u0633\u0679\u0631\u06a9\u0686\u0631 \u0645\u06cc\u06ba \u0633\u0631\u0645\u0627\u06cc\u06c1 \u06a9\u0627\u0631\u06cc \u0634\u0631\u0648\u0639 \u06a9\u0631\u0646\u06d2 \u0633\u06d2 \u067e\u06c1\u0644\u06d2 \u062a\u06a9\u0645\u06cc\u0644 \u06a9\u06cc \u0634\u0631\u062d\u0648\u06ba \u0645\u06cc\u06ba \u0627\u0636\u0627\u0641\u06d2\u060c \u062a\u0645\u0627\u0645 \u0679\u0631\u06cc\u0641\u06a9 \u0645\u06cc\u06ba \u0627\u0636\u0627\u0641\u06cc \u062a\u062e\u0645\u06cc\u0646\u06c1 \u0644\u0627\u06af\u062a\u060c \u0627\u0648\u0631 \u06c1\u0631 \u062a\u062e\u0645\u06cc\u0646\u06c1 \u06a9\u06d2 \u0644\u06cc\u06d2 \u0627\u0639\u062a\u0645\u0627\u062f \u06a9\u06d2 \u0648\u0642\u0641\u0648\u06ba \u06a9\u06cc \u0622\u0645\u062f\u0646\u06cc \u06a9\u06d2 \u0627\u062b\u0631\u0627\u062a \u06a9\u06cc \u0636\u0631\u0648\u0631\u062a \u06c1\u06d2\u06d4<\/p>\n<p>\u0627\u06af\u0631 \u0631\u0648\u0679\u0646\u06af AI \u0633\u0648\u0627\u0644\u0627\u062a \u06a9\u06cc \u0627\u0642\u0633\u0627\u0645 \u06cc\u0627 \u0635\u0627\u0631\u0641 \u06a9\u06d2 \u062d\u0635\u0648\u06ba \u0645\u06cc\u06ba \u0645\u062e\u062a\u0644\u0641 \u0627\u062b\u0631\u0627\u062a \u06a9\u0648 \u0638\u0627\u06c1\u0631 \u06a9\u0631\u062a\u0627 \u06c1\u06d2\u060c \u062a\u0648 \u0627\u06af\u0644\u0627 \u062a\u062c\u0632\u06cc\u06c1 \u0645\u0631\u062d\u0644\u06c1 \u0627\u067e\u0644\u0641\u0679 \u0645\u0627\u0688\u0644\u0646\u06af \u06c1\u06d2\u06d4 \u0627\u0633 \u06a9\u0627 \u0645\u0637\u0644\u0628 \u06c1\u06d2 \u06a9\u06c1 \u0622\u067e \u06cc\u06c1 \u0627\u0646\u062f\u0627\u0632\u06c1 \u0644\u06af\u0627\u0646\u06d2 \u06a9\u06d2 \u0644\u06cc\u06d2 \u0627\u06cc\u06a9 \u0645\u0627\u0688\u0644 \u0628\u0646\u0627 \u0633\u06a9\u062a\u06d2 \u06c1\u06cc\u06ba \u06a9\u06c1 \u067e\u0631\u06cc\u0645\u06cc\u0645 \u0631\u0648\u0679\u0646\u06af \u0633\u06d2 \u06a9\u0648\u0646 \u0633\u06d2 \u0633\u0648\u0627\u0644\u0627\u062a \u0633\u0628 \u0633\u06d2 \u0632\u06cc\u0627\u062f\u06c1 \u0641\u0627\u0626\u062f\u06c1 \u0645\u0646\u062f \u06c1\u0648\u06ba \u06af\u06d2\u060c \u062c\u0633 \u0633\u06d2 \u0622\u067e \u0627\u0646\u06c1\u06cc\u06ba \u0645\u0646\u062a\u062e\u0628 \u0637\u0631\u06cc\u0642\u06d2 \u0633\u06d2 \u0631\u0648\u0679 \u06a9\u0631 \u0633\u06a9\u062a\u06d2 \u06c1\u06cc\u06ba \u0627\u0648\u0631 \u0632\u06cc\u0627\u062f\u06c1 \u062a\u0631 \u06a9\u0627\u0645\u0648\u06ba \u06a9\u0648 \u06a9\u0645 \u0642\u06cc\u0645\u062a \u067e\u0631 \u0645\u06a9\u0645\u0644 \u06a9\u0631\u0646\u06d2 \u06a9\u06d2 \u0641\u0648\u0627\u0626\u062f \u062d\u0627\u0635\u0644 \u06a9\u0631 \u0633\u06a9\u062a\u06d2 \u06c1\u06cc\u06ba\u06d4<\/p>\n<p>\u06cc\u06c1\u0627\u06ba \u067e\u0631 \u0627\u0646\u062c\u0627\u0645 \u062f\u06cc\u0627 \u062c\u0627\u0646\u06d2 \u0648\u0627\u0644\u0627 \u06a9\u0627\u0632\u0644 \u0634\u0646\u0627\u062e\u062a\u06cc \u06a9\u0627\u0645\u060c \u0628\u0634\u0645\u0648\u0644 \u0633\u0648\u0626\u0686 \u0628\u06cc\u06a9 \u0688\u06cc\u0632\u0627\u0626\u0646\u060c \u06a9\u06cc\u0631\u06cc \u0627\u0648\u0648\u0631 \u0627\u06cc\u0688\u062c\u0633\u0679\u0645\u0646\u0679\u060c \u0627\u0648\u0631 \u0627\u06cc\u0686 \u0627\u06d2 \u0633\u06cc \u06a9\u06cc \u0627\u0635\u0644\u0627\u062d\u060c \u063a\u06cc\u0631\u062c\u0627\u0646\u0628\u062f\u0627\u0631\u0627\u0646\u06c1 \u0622\u0628\u0627\u062f\u06cc ATE \u0641\u0631\u0627\u06c1\u0645 \u06a9\u0631\u062a\u0627 \u06c1\u06d2 \u062c\u0648 \u0645\u062a\u0639\u0644\u0642\u06c1 \u0627\u0636\u0627\u0641\u06c1 \u0645\u0627\u0688\u0644 \u06a9\u06cc\u0644\u06cc\u0628\u0631\u06cc\u0679 \u06a9\u0631\u0646\u06d2 \u06a9\u06d2 \u0644\u06cc\u06d2 \u0627\u06cc\u06a9 \u0628\u0646\u06cc\u0627\u062f\u06cc \u0633\u0686\u0627\u0626\u06cc \u06a9\u06d2 \u0637\u0648\u0631 \u067e\u0631 \u062f\u0631\u06a9\u0627\u0631 \u06c1\u06d2\u06d4<\/p>\n<p>\u0645\u06a9\u0645\u0644 \u0633\u0627\u062a\u06be\u06cc \u06a9\u0648\u0688 \u06cc\u06c1\u0627\u06ba \u0645\u0648\u062c\u0648\u062f \u06c1\u06d2: <code>06_switchback\/<\/code>\u067e\u0627\u0646\u0686\u0648\u06ba \u0645\u0631\u0627\u062d\u0644 \u06a9\u06d2 \u0633\u0627\u062a\u06be \u0627\u06cc\u06a9 \u0646\u0648\u0679 \u0628\u06a9\u060c \u0627\u06cc\u06a9 \u0641\u06af\u0631 \u062c\u0646\u0631\u06cc\u0634\u0646 \u0627\u0633\u06a9\u0631\u067e\u0679\u060c \u0627\u0648\u0631 \u0688\u06cc\u0679\u0627 \u0633\u06cc\u0679 \u062c\u0646\u0631\u06cc\u0634\u0646 \u06a9\u0648\u0688 \u0634\u0627\u0645\u0644 \u06c1\u06d2\u06d4<\/p>\n<\/p><\/div>\n","protected":false},"excerpt":{"rendered":"<p>\u0622\u067e \u06a9\u06cc \u0679\u06cc\u0645 LLM SaaS \u067e\u0644\u06cc\u0679 \u0641\u0627\u0631\u0645 \u06a9\u06d2 \u0644\u06cc\u06d2 \u0630\u06c1\u06cc\u0646 \u0627\u0633\u062a\u0641\u0633\u0627\u0631 \u0631\u0648\u0679\u0646\u06af \u06a9\u06cc \u0635\u0644\u0627\u062d\u06cc\u062a\u06cc\u06ba \u0641\u0631\u0627\u06c1\u0645 \u06a9\u0631\u06d2 \u06af\u06cc\u06d4 \u06cc\u06c1 \u0641\u06cc\u0686\u0631 \u06c1\u0631 \u0622\u0646\u06d2 \u0648\u0627\u0644\u06cc \u062f\u0631\u062e\u0648\u0627\u0633\u062a \u06a9\u0648 \u062d\u0642\u06cc\u0642\u06cc \u0648\u0642\u062a \u0645\u06cc\u06ba \u067e\u0691\u06be\u062a\u0627 \u06c1\u06d2 \u0627\u0648\u0631 \u0641\u06cc\u0635\u0644\u06c1 \u06a9\u0631\u062a\u0627 \u06c1\u06d2 \u06a9\u06c1 \u0622\u06cc\u0627 \u0627\u0633\u06d2 \u062a\u06cc\u0632 \u0631\u0641\u062a\u0627\u0631 \u0645\u0639\u06cc\u0627\u0631\u06cc \u0645\u0627\u0688\u0644 \u06cc\u0627 \u0632\u06cc\u0627\u062f\u06c1 \u067e\u0631\u0641\u0627\u0631\u0645\u0646\u0633 \u067e\u0631\u06cc\u0645\u06cc\u0645 \u0645\u0627\u0688\u0644 \u067e\u0631 \u0628\u06be\u06cc\u062c\u0646\u0627 \u06c1\u06d2\u06d4 \u0622\u0641 \u0644\u0627\u0626\u0646 \u062a\u0634\u062e\u06cc\u0635 \u0645\u06cc\u06ba\u060c \u06a9\u0627\u0645 \u06a9\u06cc \u062a\u06a9\u0645\u06cc\u0644 [&hellip;]<\/p>\n","protected":false},"author":7,"featured_media":26096,"comment_status":"closed","ping_status":"closed","sticky":false,"template":"","format":"standard","meta":{"site-sidebar-layout":"default","site-content-layout":"","ast-site-content-layout":"default","site-content-style":"default","site-sidebar-style":"default","ast-global-header-display":"","ast-banner-title-visibility":"","ast-main-header-display":"","ast-hfb-above-header-display":"","ast-hfb-below-header-display":"","ast-hfb-mobile-header-display":"","site-post-title":"","ast-breadcrumbs-content":"","ast-featured-img":"","footer-sml-layout":"","ast-disable-related-posts":"","theme-transparent-header-meta":"","adv-header-id-meta":"","stick-header-meta":"","header-above-stick-meta":"","header-main-stick-meta":"","header-below-stick-meta":"","astra-migrate-meta-layouts":"default","ast-page-background-enabled":"default","ast-page-background-meta":{"desktop":{"background-color":"var(--ast-global-color-5)","background-image":"","background-repeat":"repeat","background-position":"center center","background-size":"auto","background-attachment":"scroll","background-type":"","background-media":"","overlay-type":"","overlay-color":"","overlay-opacity":"","overlay-gradient":""},"tablet":{"background-color":"","background-image":"","background-repeat":"repeat","background-position":"center center","background-size":"auto","background-attachment":"scroll","background-type":"","background-media":"","overlay-type":"","overlay-color":"","overlay-opacity":"","overlay-gradient":""},"mobile":{"background-color":"","background-image":"","background-repeat":"repeat","background-position":"center center","background-size":"auto","background-attachment":"scroll","background-type":"","background-media":"","overlay-type":"","overlay-color":"","overlay-opacity":"","overlay-gradient":""}},"ast-content-background-meta":{"desktop":{"background-color":"var(--ast-global-color-4)","background-image":"","background-repeat":"repeat","background-position":"center center","background-size":"auto","background-attachment":"scroll","background-type":"","background-media":"","overlay-type":"","overlay-color":"","overlay-opacity":"","overlay-gradient":""},"tablet":{"background-color":"var(--ast-global-color-4)","background-image":"","background-repeat":"repeat","background-position":"center center","background-size":"auto","background-attachment":"scroll","background-type":"","background-media":"","overlay-type":"","overlay-color":"","overlay-opacity":"","overlay-gradient":""},"mobile":{"background-color":"var(--ast-global-color-4)","background-image":"","background-repeat":"repeat","background-position":"center center","background-size":"auto","background-attachment":"scroll","background-type":"","background-media":"","overlay-type":"","overlay-color":"","overlay-opacity":"","overlay-gradient":""}},"footnotes":""},"categories":[1],"tags":[],"class_list":["post-26095","post","type-post","status-publish","format-standard","has-post-thumbnail","hentry","category-blog"],"_links":{"self":[{"href":"https:\/\/umang.pk\/ur\/wp-json\/wp\/v2\/posts\/26095","targetHints":{"allow":["GET"]}}],"collection":[{"href":"https:\/\/umang.pk\/ur\/wp-json\/wp\/v2\/posts"}],"about":[{"href":"https:\/\/umang.pk\/ur\/wp-json\/wp\/v2\/types\/post"}],"author":[{"embeddable":true,"href":"https:\/\/umang.pk\/ur\/wp-json\/wp\/v2\/users\/7"}],"replies":[{"embeddable":true,"href":"https:\/\/umang.pk\/ur\/wp-json\/wp\/v2\/comments?post=26095"}],"version-history":[{"count":1,"href":"https:\/\/umang.pk\/ur\/wp-json\/wp\/v2\/posts\/26095\/revisions"}],"predecessor-version":[{"id":26097,"href":"https:\/\/umang.pk\/ur\/wp-json\/wp\/v2\/posts\/26095\/revisions\/26097"}],"wp:featuredmedia":[{"embeddable":true,"href":"https:\/\/umang.pk\/ur\/wp-json\/wp\/v2\/media\/26096"}],"wp:attachment":[{"href":"https:\/\/umang.pk\/ur\/wp-json\/wp\/v2\/media?parent=26095"}],"wp:term":[{"taxonomy":"category","embeddable":true,"href":"https:\/\/umang.pk\/ur\/wp-json\/wp\/v2\/categories?post=26095"},{"taxonomy":"post_tag","embeddable":true,"href":"https:\/\/umang.pk\/ur\/wp-json\/wp\/v2\/tags?post=26095"}],"curies":[{"name":"wp","href":"https:\/\/api.w.org\/{rel}","templated":true}]}}