বাণিজ্যিক ফ্রন্টিয়ার এআই মডেলগুলোকে নিরাপদ রাখতে কোটি কোটি ডলার খরচ করে আরএলএইচএফ ও কঠোর নিয়মাবলী দিয়ে প্রশিক্ষণ দেওয়া হয়—যাতে তারা সাইবার হামলা বা বিপজ্জনক অস্ত্রের তথ্য না দেয়। তবুও এই সুবিশাল মডেলগুলো অ্যাডভারসারিয়াল আক্রমণ ও জেলব্রেক (Jailbreaks)-এর মুখে অবিশ্বাস্যরকম ভঙ্গুর। নিউরাল ভেক্টরের উচ্চ-মাত্রিক জ্যামিতিকে কাজে লাগিয়ে Greedy Coordinate Gradient (GCG) এবং অ্যাক্টিভেশন স্টিয়ারিংয়ের মাধ্যমে গবেষকরা প্রকাশ করেছেন কৃত্রিম বুদ্ধিমত্তার সুরক্ষার সূক্ষ্ম ফাটলগুলো।
১. জিসিজি (GCG) ইউনিভার্সাল সাফিক্স অ্যাটাক
২০২৩ সালে কার্নেগি মেলন বিশ্ববিদ্যালয়ের গবেষকরা GCG আক্রমণ উদ্ভাবন করেন। ক্ষতিকর কোনো প্রশ্নের শেষে বিশেষ কিছু এলোমেলো চিহ্ন ও অক্ষরের লেজ (Suffix) এমনভাবে অপটিমাইজ করা হয় যা মডেলের নিরাপত্তা ফিল্টারকে অন্ধ করে দেয়। মডেলটি বাধ্য হয়ে “Sure, here is how…” লিখে বিপজ্জনক তথ্য দিতে শুরু করে। এই পদ্ধতি প্রায় সমস্ত শীর্ষস্থানীয় মডেলে সফলভাবে নিরাপত্তা ব্যবস্থা ভেঙে ফেলতে সক্ষম হয়।
২. মেনি-শট (Many-Shot) কনটেক্সট জেলব্রেক
২০২৪ সালে অ্যানথ্রপিক আবিষ্কার করে যে বড় কনটেক্সট উইন্ডো থাকলে কোনো জটিল কোড ছাড়াই জেলব্রেক করা সম্ভব। প্রম্পটের ভেতর শত শত কৃত্রিম প্রশ্ন-উত্তরের উদাহরণ সাজিয়ে দিলে মডেলের ইন-কনটেক্সট লার্নিং ক্ষমতা তার নিরাপত্তা প্রশিক্ষণকে ছাপিয়ে যায় এবং সে যেকোনো নিষিদ্ধ নির্দেশ পালন করতে শুরু করে।
৩. রিফিউজাল ভেক্টর ও স্টিয়ারিং
গবেষণায় দেখা গেছে যে মডেলের সমস্ত নিরাপত্তা প্রশিক্ষণ মূলত তার অভ্যন্তরীণ নিউরনে একটিমাত্র গাণিতিক দিক ভেক্টরের ($mathbf{v}_{text{refusal}}$) ওপর দাঁড়িয়ে আছে। অস্ত্রোপচারের মতো সেই একমাত্র দিকটি ওজন থেকে বিয়োগ করে দিলে মডেলটির সমস্ত নিরাপত্তা চেতনা তৎক্ষণাৎ বিলুপ্ত হয়ে যায়। আবার বিপরীতভাবে, ইনফারেন্সের সময় সেই ভেক্টরের মান বাড়িয়ে দিলে (Activation Steering) যেকোনো আক্রমণ সত্ত্বেও মডেলকে শতভাগ সুরক্ষিত রাখা সম্ভব হয়।
Share:
শাকিল মাহমুদ সজল
সফটওয়্যার প্রকৌশলী ও লেখক, ঢাকা, বাংলাদেশ। কম্পিউটার বিজ্ঞান, পদার্থবিজ্ঞান, ইতিহাস ও ভাবনার সমন্বয়ে ব্যক্তিগত নোট ও প্রবন্ধ সংকলন।
Editorial Dispatch
Curiosity & Articles Delivered to Your Inbox
Receive thoughtful articles on software architecture, physical sciences, history, and systems. No algorithms, no sponsors, no noise.
আন্তঃসম্পর্কিত জ্ঞানচর্চা ও পাঠপরিক্রমা ফ্রন্টিয়ার এআই: স্বায়ত্তশাসিত এজেন্ট, অ্যালাইনমেন্ট ও এজিআই দিগন্ত→লার্জ ল্যাঙ্গুয়েজ মডেল ও জেনারেটিভ এআই
চিন্তার ধারাবাহিকতা: সংযুক্ত বিষয় ও সংকলন
প্যাসিভ টেক্সট অনুমানের সীমানা ছাড়িয়ে স্বায়ত্তশাসিত এজেন্টিক যুক্তি, টেস্ট-টাইম কম্পিউট এবং রিইনফোর্সমেন্ট প্ল্যানিং — লার্জ ল্যাঙ্গুয়েজ মডেল ও জেনারেটিভ এআই।
টোকেনাইজেশন ও স্কেলিং সূত্র থেকে মেগাট্রন ডিস্ট্রিবিউটেড ক্লাস্টার, ফ্ল্যাশ-অ্যাটেনশন, লোরা, আরএলএইচএফ, ডিপিও, ডিফিউশন এসডিই এবং মাল্টিমোডাল মডেলের ২০ খণ্ডের আধুনিক প্রযুক্তির মহাকাব্য।
প্রস্তাবিত প্রবেশদ্বার ও গুরুত্বপূর্ণ মাইলফলক পর্বসমূহ:
জন ভন নিউম্যান কীভাবে প্রত্যাশিত উপযোগিতা, সম্ভাব্যতা সিমপ্লেক্স এবং মিনিম্যাক্স উপপাদ্যের মাধ্যমে মানব সংঘাতের প্রথম গাণিতিক ব্যাকরণ রচনা করেছিলেন।
(updated )•1 min read
সম্পাদকীয় একাডেমি
লার্নার পোর্টাল ও ক্লাউড সিঙ্ক
বিশ্বব্যাপী সকল পাঠক, গবেষক ও শিক্ষার্থীদের জন্য উন্মুক্ত। গুগল বা যেকোনো ব্যক্তিগত ইমেইল দিয়ে সুরক্ষিতভাবে সাইন ইন করে পাঠ্যক্রমের অগ্রগতি সিঙ্ক ও চূড়ান্ত পরীক্ষায় অংশ নিন।
অথবা যেকোনো ইমেইল দিয়ে প্রবেশ করুন
🎓
Enrolled Academic Curricula (33 Disciplines)
The Great Equations (MATH-101)20 Parts • Mathematical Physics & Epistemology
The Story of Physics (PHYS-101)20 Parts • Classical & Modern Theoretical Physics
The Universal Chronicle (COSM-101)20 Parts • Astrophysics & Big History Cosmology
The Evolutionary Odyssey (BIOL-101)20 Parts • Paleobiology, Genetics & Macroevolution
The Story of Consciousness (PHIL-101)20 Parts • Cognitive Neuroscience & Philosophy of Mind
The History of Computing and AI (COMP-101)20 Parts • Computer Architecture & Machine Intelligence
The History of Bengal (HIST-101)20 Parts • Regional Historiography & Geopolitical Economy
The Epic of Human Civilization (CIV-101)20 Parts • World History & Civilizational Anthropology
The Evolution of Money & Markets (ECON-101)20 Parts • Monetary History, Central Banking & Macroeconomics
The Story of Chemistry (CHEM-101)20 Parts • Molecular Sciences, Quantum Bonding & Nanotechnology
The Story of Genetics (GEN-101)20 Parts • Molecular Biology, Genomics & Synthetic Life
The History of Philosophy (PHIL-101)20 Parts • Epistemology, Classical Metaphysics & Continental Thought
Game Theory & Mechanism Design (GAME-101)20 Parts • Strategic Interaction, Mechanism Design & Algorithmic Economics