Her geçen gün daha fazla insan ChatGPT, Perplexity ve diğer yapay zeka araçlarını içerik aramak ve özetlemek için kullanıyor. Daha önceki SEO’dan SAO’ya adlı yazılarımdan birinde tartışıldığı gibi, web sitelerine ve bloglara yapılan ziyaretlerin çoğunluğunun yapay zeka ajanlarından gelmesi sadece bir zaman meselesi.

İçeriğinizi dil modelleri için erişilebilir hale getirmek söz konusu olduğunda, karmaşık tarama çözümlerinden daha basit bir yol var - özellikle Astro ile oluşturulmuş statik olarak oluşturulmuş siteler için. Bu yazıda, blog içeriğinizi LLM’lere temiz ve yapılandırılmış bir biçimde sunan bir llms.txt dosyası oluşturma konusunda size yol göstereceğim.

llms.txt nedir?

Bir llms.txt dosyası kavramsal olarak robots.txt’ye benzer ancak özellikle dil modelleri için tasarlanmıştır. LLM’lerin ayrıştırması ve anlaması kolay olan içeriğinizin yapılandırılmış, metin tabanlı bir temsilini sağlar.

LLM’ler bağlantılar aracılığıyla birden çok sayfada gezinmekte pek iyi değildir. Bunun yerine, LLM’ler içeriği tek bir sayfadan kazımakta ve hafızalarında saklamakta çok iyidir. İşte burada llms.txt paha biçilmez hale geliyor.

Crawl4AI Gibi Tarama Araçları Neden Aşırıya Kaçabilir?

Crawl4AI gibi araçlar, LLM’ler için güçlü web sitesi tarama yetenekleri sunar. Dinamik siteler için LLMs.txt oluşturmak için ideal olsalar da, statik siteler için aşırıya kaçabilirler.

Özellikle Astro siteleri için, içeriğin genellikle frontmatter içeren markdown dosyaları olarak depolandığı durumlarda, doğrudan sunulmaya hazır mükemmel bir şekilde yapılandırılmış içeriğiniz zaten var.

Astro’da Bir llms.txt Uç Noktası Uygulama

Astro siteniz için LLMs.txt dosyalarını şu şekilde oluşturabilirsiniz.

src/pages/llms.txt.ts (veya Astro yapılandırmanıza bağlı olarak src/pages/api/llms.txt.ts) konumunda bir dosya oluşturun ve aşağıdaki kodu ekleyin:

import { getCollection } from "astro:content";
import type { APIRoute } from "astro";

export const GET: APIRoute = async () => {
    try {
        // Tüm içerik koleksiyonlarını getirin
        const [blogs, features, transcriptions, alternatives, help] = await Promise.all([
            getCollection("blog"),
            getCollection("features"), 
            getCollection("transcription"),
            getCollection("alternatives"),
            getCollection("help")
        ]);

        // Blogları tarihe göre sırala (en yeni önce)
        const sortedBlogs = blogs
            .filter(post => !post.data.draft)
            .sort((a, b) => new Date(b.data.date).getTime() - new Date(a.data.date).getTime());

        // Taslak olmayan içeriği filtrele
        const activeFeatures = features.filter(item => !item.data.draft);
        const activeTranscriptions = transcriptions.filter(item => !item.data.draft);
        const activeAlternatives = alternatives.filter(item => !item.data.draft);

        const content = `# Web Sitenizin Adı - Eksiksiz İçerik Rehberi

Bu belge, web sitenizdeki tüm içeriği içerir.

Web Sitesi: https://yourwebsite.com
Son Güncelleme: ${new Date().toISOString().split('T')[0]}

## Blog İçeriği

${sortedBlogs
    .map((post) => `#

## ${post.data.title}

URL: https://yourwebsite.com/blog/${post.data.slug || post.id}
Yayınlandı: ${post.data.date}
Kategori: ${post.data.category}
Yazar: ${post.data.author}
Açıklama: ${post.data.description}

${post.body}

---`).join('\n\n')}

## Ek İçerik Bölümleri

${activeFeatures
    .map((feature) => `#

## ${feature.data.title}

URL: https://yourwebsite.com/${feature.data.slug}
Kategori: ${feature.data.category}
${feature.data.description}

${feature.body}

---`).join('\n\n')}

---

Bu içerik, yapay zeka asistanlarının web sitenizin tekliflerini anlamalarına ve doğru bilgi sağlamalarına yardımcı olmak için sağlanmıştır.`;

        return new Response(content, {
            headers: { 
                "Content-Type": "text/plain; charset=utf-8",
                "Cache-Control": "public, max-age=3600" // 1 saat önbelleğe al
            },
        });
    } catch (error) {
        console.error('llms.txt oluşturulurken hata:', error);
        return new Response('llms.txt oluşturulurken hata', { status: 500 });
    }
};

Bu Kod Nasıl Çalışır?

Bu kod bir API uç noktası oluşturur:

1. getCollection() kullanarak içerik koleksiyonlarınızdaki tüm gönderileri getirir
2. Yalnızca yayınlanan makaleleri dahil etmek için taslak içeriği filtreler
3. En son içeriği ilk önce göstermek için içeriği tarihe göre sıralar
4. Site başlığınızla başlayan yapılandırılmış bir metin dosyası oluşturur
5. Her gönderi için şunları içerir:
   • Gönderi başlığı bir başlık olarak
   • Gönderiye doğrudan bir bağlantı
   • Meta veriler (tarih, kategori, yazar, açıklama)
   • Tam gönderi içeriği
6. Uygun hata günlüğü ile hataları düzgün bir şekilde ele alır
7. Performans için önbelleğe alma dahil uygun başlıkları ayarlar

İçerik Yapınıza Göre Özelleştirme

Koleksiyon Adlarını Ayarlama

Yukarıdaki örnek birden çok koleksiyon kullanır. Yalnızca bir blog koleksiyonunuz varsa, basitleştirin:

export const GET: APIRoute = async () => {
    const posts = await getCollection("blog"); // Koleksiyon adınızı ayarlayın
    
    const publishedPosts = posts
        .filter(post => !post.data.draft)
        .sort((a, b) => new Date(b.data.date).getTime() - new Date(a.data.date).getTime());

    const content = `# Blog Adınız

${publishedPosts
    .map((post) => `# ${post.data.title}

https://yourwebsite.com/blog/${post.data.slug || post.id}

${post.data.description}

${post.body}
`).join('\n\n')}`;

    return new Response(content, {
        headers: { "Content-Type": "text/plain; charset=utf-8" },
    });
};

İçerik Filtreleme Ekleme

Belirli kategorileri hariç tutmak veya yalnızca öne çıkan içeriği dahil etmek isteyebilirsiniz:

// Yalnızca öne çıkan gönderileri dahil et
const featuredPosts = posts.filter(post => post.data.featured && !post.data.draft);

// Belirli kategorileri hariç tut
const filteredPosts = posts.filter(post => 
    !post.data.draft && !['internal', 'private'].includes(post.data.category)
);

llms.txt Kullanmanın Faydaları

1. Gelişmiş Yapay Zeka Keşfedilebilirliği

Yapay zeka araçları, birden çok sayfayı taramadan tüm içerik kitaplığınızı hızlı bir şekilde anlayabilir.

2. Yapay Zeka Yanıtları İçin Daha İyi Bağlam

Kullanıcılar içeriğinizle ilgili sorular sorduğunda, yapay zeka modelleri kapsamlı, yapılandırılmış bilgilere erişebilir.

3. Yapay Zeka Çağı için SEO

Arama yapay zeka destekli sonuçlara doğru evrimleşirken, yapay zeka tüketimi için yapılandırılmış içeriğe sahip olmak çok önemlidir.

4. Performans Avantajları

Statik oluşturma, llms.txt dosyanızın derleme zamanında oluşturulduğu anlamına gelir ve hızlı yanıt süreleri sağlar.

llms.txt Uygulamanızı Test Etme

Uç noktayı uyguladıktan sonra, aşağıdakileri yaparak test edin:

1. Uç noktayı doğrudan ziyaret edin: https://yoursite.com/llms.txt
2. Tüm gönderilerin dahil olduğundan emin olmak için içerik yapısını kontrol edin
3. Biçimlendirmenin temiz ve okunabilir olduğunu doğrulayın
4. llms.txt içeriğinizi analiz etmelerini isteyerek yapay zeka araçlarıyla test edin

llms.txt için En İyi Uygulamalar

İçeriği Güncel Tutun

Yeni içerik yayınladığınızda sitenizi yeniden oluşturarak llms.txt’nizi düzenli olarak güncelleyin.

İlgili Meta Verileri Ekleyin

Yapay zekanın bağlamı anlamasına yardımcı olmak için yayın tarihlerini, kategorileri ve açıklamaları ekleyin.

İçeriği Açıkça Yapılandırın

Bölümler arasında tutarlı başlık biçimleri ve net ayırıcılar kullanın.

Dosya Boyutunu İzleyin

Yüzlerce gönderiye sahip siteler için, dosyayı yönetilebilir tutmak için içeriği sayfalandırmayı veya filtrelemeyi düşünün.

Sonuç

Astro web siteniz için bir llms.txt dosyası oluşturmak, içeriğinizi yapay zeka dil modelleri için erişilebilir hale getirmenin basit bir yoludur. Bu yaklaşım, sitenizin içeriğinin yapılandırılmış ve kapsamlı bir görünümünü oluşturmak için Astro’nun içerik koleksiyonlarından yararlanır.

Yapay zeka içerik keşfi için giderek daha önemli hale geldikçe, llms.txt uygulamak web sitenizi yapay zeka destekli arama ortamında daha iyi görünürlük için konumlandırır. Uygulama basittir, performanslıdır ve Astro derleme sürecinizin bir parçası olarak bakımı kolaydır.

İçeriğinizin yapay zeka destekli arama ve keşfin geleceğine hazır olduğundan emin olmak için llms.txt’yi bugün uygulamaya başlayın.

Sıkça Sorulan Sorular

llms.txt ve sitemap.xml arasındaki fark nedir?

sitemap.xml sayfalarınızı arama motoru tarayıcıları için listelerken, llms.txt gerçek içeriği dil modellerinin anlaması ve işlemesi için optimize edilmiş bir biçimde sağlar.

llms.txt dosyamı ne sıklıkla güncellemeliyim?

Astro sitenizi yeniden oluşturduğunuzda llms.txt dosyanız otomatik olarak güncellenir, bu nedenle içerik yayınlama programınızla güncel kalır.

llms.txt’ye resim ve medya ekleyebilir miyim?

llms.txt metin tabanlıdır, bu nedenle dosyaların kendileri yerine resim ve medya açıklamaları ekleyin. Yapay zekanın etkili bir şekilde işleyebileceği metinsel içeriğe odaklanın.

llms.txt SEO’mu etkileyecek mi?

Hayır, llms.txt geleneksel SEO’yu olumsuz etkilemez. İçeriği yapay zeka araçları için erişilebilir hale getirerek mevcut SEO stratejinizi tamamlamak üzere tasarlanmıştır.

llms.txt dosyam ne kadar büyük olmalı?

Katı bir sınır yoktur, ancak makul tutun. Yüzlerce gönderiye sahip siteler için, yalnızca en önemli veya en son içeriğinizi dahil etmek için filtrelemeyi düşünün.