「meta robotsタグ」は、従来の意味での独立したファイル拡張子やファイル形式ではなく、HTMLドキュメントの`<head>セクション内で使用される特定の種類のHTMLメタタグです。その主な目的は、GooglebotやBingbotなどのウェブクローラー(ボット)に対し、ウェブページのコンテンツをどのようにインデックス化し表示すべきかについての指示を提供することです。このタグはname="robots"属性を使用し、index、noindex、follow、nofollow、none、またはallといったディレクティブ(指示)を含みます。例えば、<meta name="robots" content="noindex, nofollow">`は、検索エンジンに対してそのページをインデックス化せず、ページ上のいかなるリンクもたどらないように指示します。これはSEO(検索エンジン最適化)およびウェブサイト管理において極めて重要であり、ウェブマスターが自身のサイトのどの部分が検索エンジン結果ページ(SERPs)に表示されるか、また特定のリンクを通じてどれだけの「リンクエクイティ」が渡されるかを制御できるようにします。