「クローリング」関連の最新 ニュース・レビュー・解説 記事 まとめ

Construction Xross 建設技術展2025関東：
ハンマー打撃時の衝撃を装置で再現、遠隔から岩判定　力触覚フィードバック技術を活用
竹中土木は、遠隔地から岩検ハンマーの触感的判断が行える遠隔岩判定システムを開発した。作業者の安全性を確保しながら、従来の打撃検査と近い感覚で岩盤の硬軟を把握可能だ。（2025/11/27）

小寺信良のIT大作戦：
「Sora 2」が踏んだ虎の尾　国内から怒りの声明続出も、立ちはだかる著作権法の“属地主義”
米OpenAIの動画生成AI「Sora 2」が日本のアニメキャラクターを無断生成できる問題で、政府や出版社が相次いで抗議。だが日本の著作権法は国内にしか適用されず、OpenAIのオプトアウト方式も技術的限界を抱える。ディズニーは即座に対応したのに、なぜ日本企業は後手に回るのか。AI学習と著作権の複雑な関係を整理する。（2025/11/14）

小寺信良の「プロフェッショナル×DX」：
"非クリエイター層"に本腰のAdobe　生成AIで激変するクリエイティブ領域、それを担うAI戦略とは
10月28日から30日の3日間、米国ロサンゼルスにて米Adobe MAX 2025が開催された。クリエイティブ・デザイン界の巨人であるAdobeの、今年から来年にかけて展開される新機能が一気に見られる機会であり、世界中から注目されるイベントである。筆者も現地に赴き、このイベントに参加する機会を得た。（2025/11/13）

AmazonにAIブラウザ「Comet」での代理購入ブロックを要求されたPerplexity、「いじめ」と反発
Perplexityは、AmazonからAIブラウザ「Comet」による代理購入機能の停止を要求され、これを「いじめ」だと批判した。Amazonは「顧客体験を低下させる」と主張する一方、Perplexityは「ユーザーの選択への脅威」であり「恐喝に屈しない」と反論した。（2025/11/5）

「対応しなきゃ」では手遅れになるかも　AIセキュリティへの解像度を上げよう
生成AI活用が進む一方で、AIそのものを守るセキュリティ対策については意識が向いていない企業もある。本稿はパブリックAI／プライベートAIでそれぞれ起きがちなリスクを整理し、目指すべき対策の方向性を示す。（2025/10/22）

Narwalが常に洗浄する水拭きロボット掃除機「Flowシリーズ」を発売　エントリーロボット掃除機「Freo S」とスティック型掃除機「S30」も投入
Narwalが、新型のフラグシップ水拭きロボット掃除機を発売する。「Flow」という名前の通り、掃除の“流れ”を意識した機能強化を施したことが特徴だ。（2025/10/16）

BOOTH、“常識的な範囲のスクレイピング”許容へ　ガイドラインの変更方針明かす
ピクシブは、クリエイター向けマーケット「BOOTH」に対するスクレイピング行為のガイドラインを見直すと発表した。今後、常識的な範囲であればスクレイピングを許容する方針だという。（2025/10/10）

Cloudflareの全ユーザーが無料で利用可能：
AIクローラーによるコンテンツ利用をカスタマイズ、Cloudflareがサービスを提供開始
Cloudflareは、「robots.txt」の管理サービスを提供すると発表した。Webサイト運営者はAIによる要約生成や推論利用を含むデータ使用に関して、他者への利用方針（プレファレンス）を明示的に設定できるようになる。（2025/10/7）

ファインディ株式会社提供Webキャスト
識者が解説：生成AI基盤を構築するためのデータ連携と組織作り
（2025/10/2）

i-Construction 2.0：
90キロ離れた建機の遠隔操縦に成功、マルチリンク通信を活用　大成建設
大成建設は、複数のLTE回線と衛星通信を同時に活用する「マルチリンク通信」を利用して、直線距離で約90キロ離れた建設現場の複数台の建設機械を遠隔操縦することに成功した。（2025/9/19）

半数以上がMetaのAIクローラー？：
AIの「フェッチャー」と「クローラー」がWebインフラに負荷　ファストリーが警鐘
ファストリーはWebトラフィック分析調査の結果を発表した。それによると、「フェッチャーbot」による大量リクエストがWebインフラに深刻な影響を及ぼしているという。（2025/9/19）

AIクローラーが収益モデルを破壊
AIの“ただ乗り”に「ノー」を宣告　Cloudflareのブロック機能が歓迎される
AIモデルのトレーニングに無断で使われるWebコンテンツが問題視される中、Cloudflareが「AIクローラー」のアクセス制御機能を標準搭載すると発表。一部の事業者は熱烈に歓迎している。（2025/8/18）

i-Construction 2.0：
遠隔操作型建機にロボットハンド搭載、がれきや電線を確実に把持　熊谷組が公開実験
熊谷組は、ロボットハンドを遠隔操作可能な小型バックホウに搭載し、把持性能を検証する動作実験を、茨城県つくば市の技術研究所で公開した。（2025/8/13）

Perplexityはブロックされたサイトを「ステルスクローリング」している──Cloudflareが告発
Cloudflareは、AI検索のPerplexityがサイト運営者のブロック設定を回避して「ステルスクローリング」を行っていると告発。robots.txtで拒否しても、クローラー情報を隠してアクセスを試みているという。Cloudflareは対策を強化したと発表した。（2025/8/5）

ものづくり ワールド［東京］2025：
交渉人AIが取引条件生成から交渉／合意まで自動化、対AIも交渉可能
NECは「第37回 ものづくり ワールド［東京］」の構成展の1つ「設計・製造ソリューション展」において、AIエージェントや生成AIなどを取り入れた、業務改革に向けた最新ソリューションを紹介した。（2025/7/22）

数字で見るAIクローラーの影響：
「AIはどれだけ巡回し、どれだけ人を連れてくるのか」　Cloudflareが可視化
Cloudflareは、AIモデルによるWebサイトのクロールに関する影響を分析した結果を発表した。AIクローラーは、膨大な量のWebページをクロールしているが、従来とは異なり、Webサイトへのトラフィック還元が極めて少ないという特徴があるという。（2025/7/8）

セキュリティニュースアラート：
CloudflareがAIクローラー対策を実装　Webコンテンツの無断収集をブロック
CloudflareはAIクローラーによるWebコンテンツの無断収集を初期設定でブロックする機能を導入した。Webサイト運営者はAIの利用目的に応じてアクセスの可否を選択できる。（2025/7/4）

Cloudflare、AI時代のクリエイター支援策を発表 「コンテンツ独立記念日」宣言
Cloudflareは7月1日に「コンテンツ独立記念日」を宣言し、AI時代におけるクリエイターの権利保護と収益化を支援する新構想を発表した。AIクローラーをデフォルトでブロックし、コンテンツ利用に応じて課金する「pay per crawl」の導入などを目指す。（2025/7/2）

第7回 国際 建設・測量展：
360度旋回キャリアダンプに16トンモデル登場　自動運転フォワーダのプロトタイプも展示、諸岡
諸岡は、機体の上部が360度旋回する「クルクルキャリア」シリーズの新型車「MST160CR」を発表した。最大積載量16トンながら車幅を3メートル未満に収めて搬送時の誘導車を不要とした。最高速度は時速13.14キロ。（2025/6/26）

間違いだらけの製造業デジタルマーケティング（28）：
AI時代における製造業のコンテンツ戦略
デジタルマーケティングを実践できている企業はそう多くない。本連載では「製造業のための正しいデジタルマーケティング知識」を伝えていく。第28回は、AI検索の台頭を踏まえ、AI引用最適化の要点と、業界リーダーとしてのポジションを確立するHQコンテンツ戦略について解説する。（2025/6/12）

Google検索の進化に注目【前編】
Google検索に「AI Overviews」が組み込まれた“本当の狙い”を読み解く
Google検索に新しく導入されたAI機能「AI Overviews」は、これまでの情報検索の在り方をどう変える存在なのか。Googleが見据える次世代の検索体験について考察する。（2025/6/6）

本田雅一のクロスオーバーデジタル：
合法的な「コンテンツ利用」と「生成AI活用」の実現に向けての第一歩　アドビがクリエイター支援ツールに取り組む理由
アドビが、デジタルコンテンツの来歴を記録するWebアプリ「Adobe Content Authenticity」をパブリックβとして提供を開始した。生成AIが当たり前に使われるように今だからこそ、コンテンツの来歴や権利をしっかり管理することで、クリエイターの新しいチャンスにつなげることが必要だ。（2025/5/13）

Perplexityを徹底解説【前編】
検索AIツール「Perplexity」の独自の強みとは？　プランごとの違いは？
検索AIツール「Perplexity」は、「ChatGPT」をはじめとする他のAIツールと何が違うのか。独自の強みやプランごとの違いについて解説する。（2025/5/1）

小寺信良のIT大作戦：
ネットにあふれたAI製「ジブリ風画像」――最近の事例から考える「AIに学習されない自由」
3月26日に行われたOpenAIのGPT-4oのアップデートでは、画像生成機能が大幅に改善され、多くのユーザーがこの機能のために殺到した。3月31日には、無料ユーザーにもこの機能が開放され、SNSでは多くのスタジオジブリ風自画像があふれた。AIと著作権の関係は今どうなっているのか、最新の事情を組み入れながら、整理しておこう。（2025/4/11）

AI時代、検索市場の勢力図に変化？【第4回】
AI検索「ChatGPT Search」が登場しても「Google検索」が使われ続ける理由
OpenAIのAI検索ツール「ChatGPT Search」が登場し、検索市場に君臨してきた「Google検索」との競争は新たな局面を迎えている。今後、検索市場の勢力図はどう変化していくのか。（2025/3/31）

Cybersecurity Dive：
RansomHubが高度なマルウェア拡散キャンペーンを展開中　技術的な詳細を解説
2024年に現れたランサムウェアグループ「RansomHub」がマルウェア・アズ・ア・サービスを使った高度なマルウェア拡散キャンペーンを実行していることが明らかになった。その技術的な詳細を解説しよう。（2025/3/28）

SEOタイムズ編集部が初心者向けにわかりやすく解説：
SEOに欠かせない「インデックス」について徹底解説【初心者必見】
今回は、SEOにおける「インデックス」について、わかりやすく解説します。（2025/3/28）

AI時代、検索市場の勢力図に変化？【第3回】
「Google検索」は「ChatGPT Search」があっても“オワコン化”しない訳
OpenAIのAI検索ツール「ChatGPT Search」は、検索の在り方を大きく変える可能性がある。一方で、「Google検索」に代表される従来型の検索が不要になるとは言い難い。それはなぜなのか。（2025/3/28）

「AIモデルが直面している緊急性の高い脅威」とは：
AIを包括的に保護するツール群「Cloudflare for AI」発表　何をどう守るのか、4つの機能にまとめて紹介
Cloudflareは「Cloudflare for AI」を発表した。AIアプリケーションの可視化やセキュリティ、制御を提供する包括的なツール群で、同社は、AIモデルが直面している緊急性の高い脅威からの保護を可能にするとしている。（2025/3/27）

「生成AIサービスの人気度」も分かる：
生成AI流行の影に何がある？　「AI botとクローラーのトラフィック傾向」などをCloudflareが公開
Cloudflareは、生成AIに関するさまざまなメトリクスを参照できるWebページ「AI Insights」を新たに公開した。AI分野の最新傾向や情報を提供し、「AIの変化と進化の様子をより理解できるようにする」としている。（2025/2/26）

製品動向：
中型油圧ショベルマルチブーム仕様機の受注を開始、日立建機
日立建機は、運転席からのスイッチ操作だけでフロント部分を交換できる中型油圧ショベルマルチブーム仕様機「KMC400P-7」の受注を国内で開始する。（2025/2/21）

EGセキュアソリューションズがセキュリティレポートを発表：
攻撃の半数以上が“あの手口”　2024年に「急増して急減したサイバー攻撃」の実態とは
EGセキュアソリューションズは「SiteGuard セキュリティレポート（2024.4Q）」を発表した。攻撃種別で最も多かったのはバッファーオーバーフローだったが、急増と急減という独特の動きを見せている。背景には何があるのか。（2025/2/10）

トレンドやパターンをインタラクティブなグラフで可視化：
インターネットトラフィックに見る、人気の生成AIサービス　Cloudflareが明らかに
Cloudflareは、世界のインターネットのトラフィック、セキュリティ、パフォーマンス、使用状況などのトレンドやパターンをほぼリアルタイムに可視化した「Cloudflare Radar」サイトに、新たに「AI Insights」ページを開設した。（2025/2/7）

AI時代の検索はどう変わるのか【中編】
「AI検索」と「Google検索」は全くの別物？　根本的な違いは
AIを搭載した検索エンジンと、「Google検索」をはじめとする従来型の検索エンジンの仕組みは何が異なるのか。それぞれの特徴と違いについて詳しく解説する。（2025/2/5）

セキュリティニュースアラート：
ChatGPTクローラーに脆弱性　標的WebサイトにDDoS攻撃を実行可能
セキュリティ研究者はOpenAIのChatGPTクローラーに重大な脆弱性が存在することを発表した。この脆弱性が悪用されるとChatGPT APIを通じて、標的のWebサイトに大規模なDDoS攻撃を仕掛けられる可能性がある。攻撃が簡単な点も問題視されている。（2025/1/22）

mixi2は「クローリング禁止」「生成AIのトレーニングに活用しない」
MIXIは新SNS「mixi2」で、「問い合わせを多くいただいていた」という生成AIについての考え方を公表した。（2025/1/16）

ITmedia Mobile読者に聞く：
「mixi2」を使う理由と使わない理由、実装してほしい機能は？：読者アンケート結果発表
ITmedia Mobileでは読者アンケート企画として、MIXIが2024年12月16日にサービスを開始した「mixi2」について聞きました。2024年12月19日から2025年1月5日までアンケートを実施したところ、148件の回答が集まりました。mixi2を使う理由と使わない理由は？（2025/1/10）

SEOタイムズ編集部が初心者向けにわかりやすく解説：
ポータルサイトの集客UPに欠かせないSEO対策　一般的なWebサイトと何が違う？
今回は、ポータルサイトのSEO対策に取り組みたいあなたへ、具体的な方法をわかりやすく解説します。（2024/12/27）

SEOタイムズ編集部が初心者向けにわかりやすく解説：
Webサイトリニューアル時のSEOチェックポイント　順位を落とさないために必須の12の対応を解説
何らかの目的があって進めるリニューアルではあるものの、検索順位がその代償になってしまう事態は避けたいもの。今回はWebサイトリニューアルとSEOの関係についてわかりやすく解説します。（2024/12/26）

約700のドメインを利用組織ごとで運用、廃棄ルールは形骸化：
NTTドコモのドメイン名オークション出品事例を教訓に考える“ドメイン終活”の在り方
近年、利用してきたドメイン名を廃止したところ、第三者に悪用されるというケースが複数報告されている。2024年11月に開催された「JPAAWG 7th General Meeting」では、NTTドコモの三浦未来氏と日本DNSオペレーターズグループ／NTTコミュニケーションズの髙田美紀氏が登壇。利用を終えたドメイン名の廃棄などライフサイクル管理をテーマに講演した。（2024/12/25）

人気サービス、接続、速度、セキュリティなどを網羅：
2024年インターネットトレンド、「ChatGPT」「Starlink」「Log4Shell」の使用状況は？　Web開発で人気の言語や技術は？　Cloudflare調査
Cloudflareは、インターネットのトレンドやパターンをさまざまな指標で分析した5回目の年次報告書「Cloudflare Radar 2024 Year in Review」を発表した。（2024/12/12）

SEOタイムズ編集部が初心者向けにわかりやすく解説：
低品質コンテンツがSEOに与える影響は？　低品質になってしまう4つの原因と改善方法
検索エンジンのランキングアルゴリズムの妨げとなる低品質コンテンツは、検索順位の低下やトラフィックの減少など、SEOに悪影響を及ぼします。この記事で対策をしっかり学びましょう。（2024/11/29）

車両デザイン：
ヤンマーデザインは3.0へ、「本質デザイン」と「柔和剛健」でさらなる進化
ヤンマーホールディングスが、次世代ヤンマーデザインの“ありたき姿”を視覚化した「YANMAR PRODUCT VISION（YPV）」をはじめとするブランド／デザイン戦略について説明。併せて、YPVに基づくコンセプト農機「YPV-L」などを展示する「YANMAR DESIGN みらいのけしき展」を報道陣に先行公開した。（2024/11/8）

約5日間「資産状況が全く確認できない」状態に　マネフォ、SBI証券の連携で不具合　原因は
マネーフォワードが運営する家計簿サービス「マネーフォワードME」とSBI証券の連携障害が発生し、資産の増減が確認できない状況が長時間続いた。ネットでは「マネーフォワードのSBI証券連携が何日も復旧せず、資産状況が全く確認できない状態が続いている。いつになったら直るのか」といった声も上がっている。一体何があったのか。（2024/10/30）

2024年第3四半期で最も多かった攻撃は？：
セキュリティ専門家も「何かがおかしいけれど、攻撃とは言い切れない」と判断に迷う現象が急増　EGセキュアソリューションズ
EGセキュアソリューションズは「SiteGuard セキュリティレポート（2024.3Q）」を発表した。2024年第3四半期における「攻撃種別」「月別」「接続元（国別）」の3つの観点での攻撃傾向および特に注目すべき2つの攻撃手法について詳しく解説している。（2024/10/29）

「見えないWeb攻撃」──情報漏えい対策の盲点：
チケットなどの“買い占め・転売”にいそしむ「スクレイパーbot」と、検知技術の戦い
巧妙さを増したスクレイパーと呼ばれるbotの実態と、それを検知する最新テクノロジー。戦いの場で、いま何が起きているのか。（2024/10/31）

「コンテンツの使用に対して公平な対価が支払われるべき」：
AIクローラー／スクレイパーbotを分析・ブロックし、サイト使用料を請求できる機能をCloudflareが発表　どうやって識別している？
Cloudflareは、AI関連のクローラーやbotからのアクセスを分析、制御できるツールの一般提供を開始した。「どのような規模のサイトでも、コンテンツの使用に対して公平な対価が支払われるべき」とし、AIプロバイダーにサイトのコンテンツ使用料を請求できる収益化機能も発表した。（2024/10/16）

製品動向：
リチウムイオンバッテリー搭載の“かに型”クレーンを欧州で発売
古河ユニックは、充電式のリチウムイオンバッテリーを搭載したミニクローラクレーン「UM325C」を欧州で販売開始した。最大吊上能力3230キロ、走行時の車幅は一般的なドアを通過できる750ミリ。AC200Vで満充電時間約3時間の高速充電を実現した。（2024/10/7）

電動化：
電動ミニクローラクレーンにリチウムイオン電池を搭載、欧州で発売
古河ユニックがリチウムイオン電池を搭載したミニクローラクレーン「UM325C」を開発し、欧州で発売した。（2024/10/7）

ITmedia Security Now！：
PR：「クラウドは狩り場」――ホワイトハッカーと語らうリスクと対策　“情シスあるある”な課題の解消方法は
（2024/9/30）