<?xml version="1.0" encoding="utf-8" standalone="yes"?> <?xml-stylesheet href="https://maik.io/pretty-feed-v3.xsl" type="text/xsl"?>

<rss version="2.0" xmlns:atom="http://www.w3.org/2005/Atom" xmlns:content="http://purl.org/rss/1.0/modules/content/">
  <channel>
    <title>crawlers on maik.io</title>
    <link>https://maik.io/tags/crawlers/</link>
    <description>Recent content in crawlers on maik.io</description>
    <generator>maik.io</generator>
    <language>de-de</language>
    <lastBuildDate>Wed, 02 Jul 2025 19:51:27 +0200</lastBuildDate>
    <atom:link href="https://maik.io/tags/crawlers/index.xml" rel="self" type="application/rss+xml" />
    <item>
      <title>Block AI crawlers</title>
      <link>https://maik.io/notes/2025-07-02-block-ai-crawlers/</link>
      <pubDate>Wed, 02 Jul 2025 19:51:27 +0200</pubDate>
      <guid>https://maik.io/notes/2025-07-02-block-ai-crawlers/</guid>
      <description>&lt;p&gt;Matthew Prince schreibt in »&lt;a href=&#34;https://blog.cloudflare.com/content-independence-day-no-ai-crawl-without-compensation/&#34; title=&#34;Content Independence Day: no AI crawl without compensation!&#34; target=&#34;_blank&#34; &gt;Content Independence Day: no AI crawl without compensation!&lt;/a&gt;« für cloudflare.com&lt;/p&gt;
&lt;blockquote&gt;
&lt;p&gt;That changes today, July 1, what we’re calling Content Independence Day. Cloudflare, along with a majority of the world’s leading publishers and AI companies, is changing the default to block AI crawlers unless they pay creators for their content. That content is the fuel that powers AI engines, and so it’s only fair that content creators are compensated directly for it.&lt;/p&gt;</description>
      <content:encoded>
      <![CDATA[<p>Matthew Prince schreibt in »<a href="https://blog.cloudflare.com/content-independence-day-no-ai-crawl-without-compensation/" title="Content Independence Day: no AI crawl without compensation!" target="_blank" >Content Independence Day: no AI crawl without compensation!</a>« für cloudflare.com</p>
<blockquote>
<p>That changes today, July 1, what we’re calling Content Independence Day. Cloudflare, along with a majority of the world’s leading publishers and AI companies, is changing the default to block AI crawlers unless they pay creators for their content. That content is the fuel that powers AI engines, and so it’s only fair that content creators are compensated directly for it.</p>
</blockquote>
<p>Das ist spannend, denn über Cloudflare läuft rund ein Fünftel des gesamten Internetverkehrs. Wenn das funktioniert, ziehen andere Anbieter wahrscheinlich nach. Für Hostinganbieter könnte das ein echter Vorteil sein. Ihre Server würden entlastet und vielleicht ließe sich das Ganze sogar querfinanzieren, vorausgesetzt, die Rechteinhaber machen mit. Möglich, dass sich daraus ein Katz-und-Maus-Spiel entwickelt. Auf jeden Fall bleibt es interessant.</p>
]]>    
      <![CDATA[<br><br><hr><br><small><p>Vielen Dank fürs Lesen! Wenn du Lust auf noch mehr Gedanken, Updates und ab und zu einen Blick hinter die Kulissen hast, folge mir doch gern auf <a href="https://maik.io/mastodon">Mastodon</a> oder <a href="https://maik.io/instagram">Instagram</a>.</p><p>Hast du Fragen oder Feedback? Schreib mir gern eine <a href="https://maik.io/email">E-Mail</a>.</p></small>]]>
      </content:encoded>  
    </item>      
  </channel>
</rss>