meta robots
Googlebotにクロールさせたくない時に指定するなどする
content属性
defaultは
index/follow index
follow
ページをindexさせない
noindex & follow は長期的には、 noindex & nofollow と同じページ内の<a>のリンクを辿らせない
noarchive
ページのCacheをさせない
unavailable_after
指定日時をすぎたら検索結果に表示させないようにする
noimageindex
notranslate
none
noindex/nofollow と同じcontent属性の各項目をどういうユースケースで使うのか