گوگل اعلام کرد امروز که در حال آغاز یک بحث عمومی در مورد توسعه پروتکلها و دستورالعملهای جدید برای نحوه دسترسی و استفاده سیستمهای هوش مصنوعی به محتوای وبسایتها است. در یک پست وبلاگ، گوگل میخواهد «استانداردهای فنی و اخلاقی را برای فعال کردن انتخاب و کنترل ناشر وب برای موارد استفاده از هوش مصنوعی و تحقیقاتی در حال ظهور» بررسی کند.
این اعلامیه پس از کنفرانس اخیر گوگل I/O انجام میشود، جایی که این شرکت در مورد محصولات جدید هوش مصنوعی و اصول هوش مصنوعی خود با هدف اطمینان از منصفانه، شفاف و پاسخگو بودن سیستم های هوش مصنوعی صحبت کرد.
در پست وبلاگ گوگل آمده است:
ما معتقدیم که همه از یک اکوسیستم محتوای پر جنب و جوش سود میبرند. کلید این امر این است که ناشران وب انتخاب و کنترل معناداری بر محتوای خود داشته باشند و فرصت هایی برای کسب ارزش از مشارکت در اکوسیستم وب داشته باشند.
گوگل اذعان میکند که استانداردهای فنی مانند robots.txt تقریباً 30 سال پیش ایجاد شده و قبل از فناوریهای مدرن هوش مصنوعی که میتواند دادههای وب را در مقیاس وسیع تجزیه و تحلیل کند، توسعه یافته است. Robots.txt به ناشران این امکان را میدهد که مشخص کنند موتورهای جستجو چگونه محتوای آنها را می خزند و فهرست میکنند. با این حال، مکانیسمهایی برای پرداختن به اینکه چگونه سیستمهای هوش مصنوعی ممکن است از دادهها برای آموزش الگوریتمها یا توسعه محصولات جدید استفاده کنند، ندارد.
در این مطلب بخوانید
انتقاد از روشهای جمع آوری داده های گوگل
اعلامیه گوگل در حالی منتشر می شود که با انتقادهایی مبنی بر میزان داده هایی که قبلاً از سراسر وب برای آموزش سیستم های هوش مصنوعی و مدل های زبان خود جمع آوری کرده است، مواجه است.
این شیوههای جمعآوری دادهها در بهروزرسانی خطمشی رازداری Google آمده است.
هوش مصنوعی به داده ها متکی است, اما چقدر زیاد است؟
سیستمهای هوش مصنوعی برای عملکرد، بهبود و نفع جامعه به مقادیر زیادی داده نیاز دارند. با این حال، هرچه هوش مصنوعی به دادههای بیشتری دسترسی داشته باشد، خطرات برای حریم خصوصی شخصی بیشتر میشود.
با نگاه به آینده
فراخوان گوگل برای بحث، گامی در مسیر درست است، اما این شرکت باید بازخوردهایی را که دریافت میکند، دنبال کند.
گوگل در مواجهه با این چالش ها تنها نیست. هر شرکت فناوری که هوش مصنوعی را توسعه می دهد به داده های جمع آوری شده از وب متکی است. بحث باید شامل کل صنعت فناوری باشد، نه فقط گوگل.
بیشتر بخوانید:
تأثیرات عملی بر ناشران محتوا و وبسایتها
بحث عمومی گوگل در مورد نحوه استفاده هوش مصنوعی از محتوای وب، هرچند ضروری است، اما سؤالات عملی متعددی را برای ناشران محتوا و صاحبان وبسایتها ایجاد میکند. این تغییرات پتانسیل دارد که مدلهای کسبوکار فعلی را دگرگون کرده و فرصتهای جدیدی را نیز به وجود آورد. درک این تأثیرات و آمادگی برای آنها، کلید بقا و رشد در اکوسیستم دیجیتال آینده است.
چالشهای پیشروی ناشران در عصر هوش مصنوعی
با گسترش روزافزون هوش مصنوعی، ناشران با چالشهای پیچیدهای روبرو هستند. یکی از بزرگترین نگرانیها، «از دست دادن کنترل» بر نحوه استفاده از محتواست. سیستمهای هوش مصنوعی میتوانند محتوا را برای آموزش مدلهای خود استخراج کرده و سپس خلاصهها یا پاسخهایی را مستقیماً به کاربران ارائه دهند، بدون اینکه ترافیک مستقیمی به وبسایت اصلی هدایت شود. این امر میتواند منجر به کاهش قابل توجه بازدیدکنندگان و در نتیجه کاهش درآمد حاصل از تبلیغات یا فروش شود. علاوه بر این، «ابهامات قانونی» در مورد مالکیت فکری محتوای تولید شده توسط هوش مصنوعی، که بر اساس دادههای موجود آموزش دیده، یک چالش بزرگ است. ناشران نگرانند که محتوای باارزش آنها بدون پرداخت هزینه یا ذکر منبع، توسط سیستمهای هوش مصنوعی بازتولید شود. تخمین زده میشود که در ایران تا سال ۱۴۰۵، بیش از ۴۰ درصد از جستجوهای اطلاعاتی کاربران از طریق رابطهای هوش مصنوعی انجام شود که این موضوع لزوم بازنگری در مدلهای درآمدی را دوچندان میکند.
گامهای اولیه برای محافظت از محتوا و کسب ارزش
در مواجهه با این چالشها، ناشران میتوانند گامهای عملی برای محافظت از محتوای خود و کسب ارزش از آن بردارند. اولین گام، «بازنگری در شرایط و ضوابط» (Terms of Service) وبسایت است. افزودن بندهایی که صراحتاً نحوه استفاده از محتوا توسط سیستمهای هوش مصنوعی را مشخص میکند، میتواند مبنایی قانونی برای اقدامات آینده فراهم آورد. گام بعدی، «کاوش در پروتکلهای جدید» است. اگرچه گوگل هنوز استانداردهای جدیدی را معرفی نکرده، اما ناشران میتوانند به دنبال راهکارهایی باشند که به آنها امکان میدهد تا دسترسی هوش مصنوعی را به صورت جزئیتر کنترل کنند. همچنین، تمرکز بر «ارائه ارزش منحصر به فرد» که به راحتی توسط هوش مصنوعی قابل بازتولید نباشد، حیاتی است. این شامل تحلیلهای عمیق، نظرات تخصصی، دادههای اختصاصی، یا تجربیات شخصی است که هوش مصنوعی نمیتواند به سادگی آنها را تولید کند. برای مثال، یک وبسایت خبری میتواند بر گزارشهای میدانی و تحقیقات اختصاصی تمرکز کند که ارزش افزوده بالایی دارند.
ابزارهای موجود و آینده برای مدیریت دسترسی هوش مصنوعی
همانطور که در متن اصلی مقاله اشاره شد، پروتکل robots.txt که حدود ۳۰ سال پیش توسعه یافته، دیگر برای پیچیدگیهای عصر هوش مصنوعی کافی نیست. نیاز به ابزارها و پروتکلهای جدیدی که به ناشران امکان کنترل دقیقتری بر محتوای خود در برابر سیستمهای هوش مصنوعی بدهد، بیش از هر زمان دیگری احساس میشود.
محدودیتهای Robots.txt و نیاز به پروتکلهای جدید
Robots.txt عمدتاً برای مدیریت خزش و ایندکسگذاری محتوا توسط موتورهای جستجو طراحی شده است. اما مشکل اینجاست که یک مدل هوش مصنوعی برای آموزش، نیازی به “ایندکس کردن” محتوا ندارد؛ بلکه صرفاً به “دسترسی” به دادهها برای تحلیل و یادگیری نیاز دارد. Robots.txt نمیتواند بین یک ربات موتور جستجو و یک ربات هوش مصنوعی که برای آموزش مدل زبانی خزش میکند، تمایز قائل شود. این خلأ، نیاز به توسعه «متا تگهای جدید» یا «هدرهای HTTP اختصاصی» را برجسته میکند که به طور خاص برای هوش مصنوعی طراحی شده باشند. به عنوان مثال، میتوان تگهایی مانند <meta name="robots-ai" content="noindex, nofollow, noarchive, notrain"> را تصور کرد که به طور صریح به سیستمهای هوش مصنوعی دستور میدهد که محتوا را برای آموزش استفاده نکنند. همچنین، ابتکاراتی مانند C2PA (Coalition for Content Provenance and Authenticity) در حال توسعه استانداردهایی برای «اصالت محتوا» هستند که میتواند به ناشران کمک کند تا منبع و مالکیت محتوای خود را در دنیای هوش مصنوعی تأیید کنند.
نقش بلاکچین و توکنسازی در حفاظت از مالکیت فکری
فناوری بلاکچین پتانسیل قابل توجهی برای حل برخی از چالشهای مالکیت فکری در عصر هوش مصنوعی دارد. با استفاده از بلاکچین، ناشران میتوانند «زمانبندی و تأیید مالکیت» محتوای خود را به صورت غیرقابل تغییر ثبت کنند. هر قطعه محتوا میتواند به عنوان یک هش در یک بلاکچین عمومی ثبت شود، که نشان میدهد محتوا در یک زمان مشخص وجود داشته و متعلق به چه کسی بوده است. علاوه بر این، «توکنسازی» محتوا از طریق NFTها میتواند یک راهکار برای کسب ارزش مستقیم از محتوا باشد. ناشران میتوانند نسخههای منحصر به فرد یا حقوق استفاده خاص از محتوای خود را به صورت NFT بفروشند. همچنین، مدلهای «پرداخت خرد» (micropayment) مبتنی بر بلاکچین میتوانند به سیستمهای هوش مصنوعی اجازه دهند تا در ازای هر بار استفاده از یک قطعه محتوا برای آموزش یا تولید پاسخ، مبلغ ناچیزی را به ناشر پرداخت کنند. با توجه به رشد سریع فناوری بلاکچین در ایران، پیشبینی میشود تا سال ۱۴۰۵، حداقل ۱۰ درصد از وبسایتهای بزرگ ایرانی، از نوعی سیستم توکنسازی برای محتوای خاص خود استفاده کنند.
اندازهگیری و ارزیابی تأثیر هوش مصنوعی بر ترافیک و درآمد
با تغییر نحوه تعامل کاربران با اطلاعات از طریق هوش مصنوعی، روشهای سنتی اندازهگیری موفقیت وبسایتها نیز باید تکامل یابند. صرفاً تکیه بر ترافیک مستقیم و رتبهبندی کلمات کلیدی ممکن است دیگر تصویر کاملی از ارزش محتوا ارائه ندهد.
شاخصهای کلیدی عملکرد (KPIs) در عصر هوش مصنوعی
در دنیایی که هوش مصنوعی میتواند خلاصهای از محتوای شما را مستقیماً در نتایج جستجو یا چتباتها ارائه دهد، نیاز به تعریف مجدد KPIها احساس میشود. در کنار ترافیک مستقیم، ناشران باید به شاخصهای دیگری نیز توجه کنند:
- ذکر برند (Brand Mentions): تعداد دفعاتی که نام برند یا وبسایت شما توسط سیستمهای هوش مصنوعی یا در پاسخهای تولید شده توسط آنها ذکر میشود.
- تحلیل احساسات (Sentiment Analysis): بررسی نحوه بازتاب محتوای شما در پاسخهای هوش مصنوعی و واکنش کاربران به آن.
- تبدیلهای غیرمستقیم (Indirect Conversions): ردیابی کاربرانی که پس از تعامل با محتوای شما از طریق هوش مصنوعی (مثلاً با خواندن یک خلاصه)، در نهایت به وبسایت شما مراجعه کرده و اقدام مورد نظر را انجام میدهند.
راهکارهای عملی برای تحلیل دادهها
برای پیادهسازی این رویکردهای جدید، ناشران به ابزارهای تحلیلی پیشرفتهتری نیاز دارند. در اینجا یک جدول گامبهگام برای تحلیل دادهها در عصر هوش مصنوعی ارائه شده است:
| گام | توضیح | ابزارهای پیشنهادی |
|---|---|---|
| ۱. شناسایی ترافیک AI-Driven | تلاش برای تفکیک ترافیک ورودی که مستقیماً از موتورهای جستجو میآید، از ترافیکی که ممکن است از طریق تعاملات اولیه با هوش مصنوعی هدایت شده باشد. | Google Analytics 4 (GA4)، ابزارهای تحلیل لاگ سرور |
| ۲. رصد ذکر برند و احساسات | استفاده از ابزارهای مانیتورینگ برای پیگیری ذکر نام برند یا وبسایت در فضای آنلاین، از جمله در پاسخهای هوش مصنوعی. | Google Alerts، Brandwatch، Mention |
| ۳. مدلسازی انتساب پیشرفته | انتقال از مدلهای انتساب ساده به مدلهای پیچیدهتر که سهم هر نقطه تماس (از جمله تعاملات هوش مصنوعی) را در مسیر تبدیل کاربر در نظر میگیرند. | GA4 (مدلهای انتساب مبتنی بر داده)، پلتفرمهای تحلیل بازاریابی |
| ۴. آزمایش A/B برای محتوای AI-Friendly | آزمایش فرمتهای مختلف محتوا (مثلاً خلاصههای کوتاه، پرسش و پاسخهای ساختاریافته) برای مشاهده اینکه کدام یک بهتر توسط هوش مصنوعی پردازش و ارائه میشوند. | Optimizely، ابزارهای A/B تست داخلی |
با پیادهسازی این رویکردها، ناشران میتوانند درک عمیقتری از نحوه تأثیرگذاری هوش مصنوعی بر عملکرد وبسایت خود پیدا کرده و استراتژیهای محتوایی و بازاریابی خود را به گونهای تنظیم کنند که از این تغییرات به نفع خود بهره ببرند. تخمین زده میشود که وبسایتهایی که تا سال ۱۴۰۵ این شاخصها را به کار گیرند، تا ۲۰ درصد در حفظ و افزایش ارزش محتوای خود موفقتر باشند.
برای اجرای حرفهای این کار میتوانید از خدمات دیجیتال مارکتینگ کمک بگیرید.



