ITmedia総合  >  キーワード一覧  > 

クローリング に関する記事 クローリング に関する質問

「クローリング」最新記事一覧

再検証「ロボット大国・日本」(10):
「あの現場で動けるロボットはQuinceしかない」〜原発ロボットを開発する千葉工大・小柳副所長(前編)
震災から1年――。今なお予断を許さない東京電力・福島第一原子力発電所の事故。この過酷な現場に投入されたのが、千葉工業大学 未来ロボット技術研究センター(fuRo)が開発したレスキューロボット「原発対応版Quince(クインス)」だ。本稿では、開発責任者でfuRo副所長を務める小柳栄次氏に、これまでの開発について、そして今後のレスキューロボットについて話を聞いた。(2012/3/9)

mixiページ、開始3日目で8万ページ超に クローラー制限を謝罪
mixiページが開始から3日目で8万ページ超に。負荷を考慮して検索クローラーの対象外になるよう設定していたことを明らかにした。(2011/9/2)

Google+のフォロワー数、トップはFacebookのザッカーバーグCEO
TwitterCounter創業者のバン・ザンテン氏が公開した非公式のGoogle+フォロワー数トップ100リストでは、GoogleのペイジCEOを押さえてライバルFacebookのザッカーバーグCEOがトップに立っている。(2011/7/5)

原因は「Twitterとの契約切れ」──Googleリアルタイム検索の一時停止
Googleリアルタイム検索が一時停止したのはTwitterとの契約が切れたためだった。(2011/7/5)

YouTube、特定サイトが選んだ動画を一覧できる「おなじみの動画」ページを発表
YouTubeの動画プレーヤーの下に登場した「おなじみの動画」から、お気に入りの“キュレーター”サイトを見つけられるかもしれない。(2011/6/13)

業務課題別おススメForce.comアプリ紹介【第2回】
ソーシャルメディアマーケティングを支援する3つのForce.comアプリケーション
FacebookやTwitterをはじめとするソーシャルメディア。これらのデータや運用をSalesforce CRMと連携することで、顧客の生の声を生かしたマーケティングが可能になる。(2011/5/31)

Amazon EC2で「Cluster Instances」の入札購入が可能に
Amazon EC2のHPCサービスが、入札方式の課金モデルで安価に利用できるようになった。まずは米国の一部地域でスタートした。(2011/4/8)

仕事耕具:
ScanSnapをセルフメンテ、PFUから消耗品パッケージ「ScanAid」
ScanSnapシリーズなどのスキャナ製品をセルフメンテナンスできるキット「ScanAid」が登場。重なった原稿を分離するパッドや、原稿を送るピックローラーなどに加え、清掃用ツールも同梱する。(2011/4/4)

ホワイトペーパー:
STOP! その過剰なロボットアクセス! 大切なお客様を守る企業は密かに採用しています。
Webサーバの処理に影響を与える特定ユーザの過剰なアクセス(自動巡回ツール、ダウンロードツール、クローラー、ロボット、買い占め)から一般ユーザのアクセスを守り、システムを安定稼働させ、運用も容易な機能がWebアクセスシェイパから新登場(提供:NTTアドバンステクノロジ)。(2011/3/4)

橘十徳の「いいトシして玩具三昧」:
障害物を乗り越える快感、ヨコモ「nanoQLO」
ヨコモの「nanoQLO(ナノクロ)」は、部屋の中で障害物を走破する楽しさを味わえる新感覚の4WDカーだ。その極小のボディーに秘められた性能を生かし、あらゆる凹凸を縦横無尽に走破する醍醐味を満喫しよう。(2011/3/1)

後発なのに大ヒット 携帯ブログ「DECOLOG」がつかんだ“女心”
07年にスタートした携帯ブログ「DECOLOG」は、デコメ素材で簡単にページを装飾でき、エロい広告もゼロ。おしゃれさやかわいさを追求している点が若い女性に支持され、月間60億PVを稼ぎ出す。(2011/1/27)

「SIerとしての責務を果たせていなかった」 図書館システム問題でMDIS謝罪
「SIerとしての責務を果たせていなかった」――三菱電機インフォメーションシステムズは、岡崎市立図書館などに納入した図書館システムで、アクセス障害や個人情報流出を引き起こしたことについて謝罪した。(2010/11/30)

ソーシャルメディアを活用した企業支援サービス アビーム
Twitterなどのソーシャルメディアから抽出した顧客データを活用した、統合的な企業支援サービスをアビームが発表した。(2010/11/11)

Web感染型マルウェア対策【第5回】
「Webサイトの火災報知器」でWebサイトの不正改ざんを検知
2009年末に比べ騒がれなくなったWebサイト改ざん被害。沈静化したかと思いきや2010年6月に再度急増しているとセキュアブレインは言う。同社が提唱するWebサイト向け火災報知器とはどのようなものか。(2010/8/25)

powered by Bing:
Yahoo!、有料検索の25%でMicrosoftのBingを利用
MicrosoftとYahoo!のGoogle対抗提携に基づくアルゴリズム移行作業が始まった。Webサイト管理者は自社サイトをBingの結果に正しく反映させるため、サイトを修正する必要があるかもしれない。(2010/7/22)

脳型コンピューター、テレパシー、平均寿命200歳――孫社長が語った「最後の大ぼら」
「私が現役社長として行う一番大事なスピーチ」――。ソフトバンクが行った「新30年ビジョン発表会」で、孫社長が300年後の世界と今後30年のビジョンを語った。孫氏は、CPUのトランジスタ数が2018年には大脳の神経細胞の総数を超え、100年後には1垓(がい)倍になると予想。人智を超えた脳型コンピューターが生まれると話す。(2010/6/28)

ASFのトッププロジェクトとなった「Apache Nutch」、バージョン1.1を公開
Lucene/Solrを土台とする大規模なWeb検索向けフレームワークとして注目を集める「Apache Nutch」のメジャーアップデートがリリースされた。Hadoopやコンテンツ検出/分析用の軽量ツールキット「Tika」などとも統合できる。(2010/6/21)

スマートフォンに最適化したWebサイトを構築――アイスリーデザインがサービス提供
アイスリーデザインが、iPhone、Andorid端末などのスマートフォンに最適化したWebサイトを構築するサービスを開始した。(2010/6/18)

最強フレームワーカーへの道:
面倒くさがり屋にピッタリのCMS「Jimdo」――カスタマイズ編
WYSWYGでWebサイトを制作できる「Jimdo」。独自のインタフェースで1時間足らずでサイトを完成できる。とはいえ、無料版には限界もあるので、有料版でカスタマイズに挑戦してみた。(2010/4/6)

キーワードの“話題性”が分かるNAVER「トピック検索」
検索サイト「NAVER」に、キーワードに関連したはてブやTwitterの人気記事やニュース記事を検索できる検索機能「トピック検索」が加わった。(2010/3/30)

ギミック満載:
なんだかすごいR/C「スーパーショベル」、CCPが発売
工事車輌の動きや音をリアルに再現。アームの昇降や“超信地旋回”が楽しめるR/Cのショベルカーが登場した。(2010/2/15)

生き残れるITエンジニアの「仕事術」:
第3回 とにかく開発しまくれ! カヤック流「お薦めツール」6選
1年で99個のWebアプリケーション制作を達成したカヤックの「BM11」(ブッコミイレブン)。日々休まず開発しているBM11メンバーが、「開発現場に役立つおすすめツール」を厳選して紹介する。(2010/2/10)

「まとめ」人気で急成長 NAVERに聞く「人を信じる検索」
「NAVERまとめ」人気でNAVERへのアクセスが拡大している。目指すのは「人を信じる」検索。人手を加えた検索で、次世代の検索プラットフォームを築きたいという。(2010/2/1)

空きリソースに対して条件を入札:
Amazon EC2の課金モデルに入札方式が追加
Amazon Web Servicesのクラウドコンピューティングサービス「Amazon EC2」で、入札方式でリソースを利用できる新課金モデル「Spot Instances」がスタートした。(2009/12/15)

ウェブ学会シンポジウム:
長尾館長が語る、Google検索の限界とその先
「Googleが圧倒的に便利という時代ではなくなってきている」――国会図書館の長尾真館長は、次世代検索の必要性や図書館での取り組みなどについて話した。(2009/12/7)

MSとNews Corp.の提携のうわさにもGoogleは余裕の態度
News Corp.がGoogleからニュースコンテンツを引き上げるといううわさの渦中で、Googleは「どうぞご自由に」とばかりに新クローラーを発表した。実際のところ、コンテンツ除外のメリットはあるだろうか?(2009/12/3)

Google、メディアによるGoogle Newsの“検索ブロック”を簡易化
Googleが、ニュースメディアがGoogleからコンテンツを削除するのを助けるための新しいクローラを発表した。(2009/12/3)

リクルートエージェントのWebマーケティング刷新:
経営戦略と結び付かないWeb構造改革は失敗する
Webマーケティングの改善を試みるも、思った成果を上げられないと腐心する企業は少なくない。リクルートエージェントが1年以上にわたって実施した「Web構造改革」からは、課題の個々を改善するのではなく、経営戦略やコスト削減とどう結び付くかをまでを考えることが成功の秘訣であることが分かる。(2009/11/20)

Google、Ajaxサイトを検索可能にする方法を説明
Googleが、従来インデックス化できなかったAjaxを使ったコンテンツの内容を、検索結果に表示できるようにする方法を提案した。(2009/10/9)

「Googleドキュメント」の文書、間もなく検索可能に
ユーザーが公開設定にしているGoogleドキュメントの文書がGoogleの検索インデックスに含まれるようになる。(2009/9/21)

セキュリティ対策技術の基礎を知る:
不正プログラムをあぶり出すウイルス対策ソフトの最新検出技術とは?
ウイルス対策ソフトの意義とは、不正なプログラムを検知、駆除することだろう。ウイルス対策ソフトはどのようにして不正なプログラムを見つけ出すのだろうか。最新の検出技術の中身をひも解いてみよう。(2009/9/20)

新機能の背景を聞く:
「新ウイルスバスターは国内ユーザーに最適化」とトレンドマイクロ
Mac対応やオンライン連係のスキャン機能などを搭載したウイルスバスター2010だが、トレンドマイクロは「国内ユーザーに受け入れられる取り組みを続けた結果」と話す。(2009/9/3)

“両刀使い”に:
MacもWindowsも1本で3台まで――「ウイルスバスター2010」発表
トレンドマイクロが最新セキュリティスイート「ウイルスバスター2010」の発表会を実施した。最新版では1つのパッケージでWindowsとMacの両方を3台まで保護できる。(2009/9/2)

匿名性の高いP2Pファイル交換ソフト「Perfect Dark」人気
匿名性の高いP2Pファイル交換ソフト「Perfect Dark」が人気を高めているようだ。ネットエージェントの調査によると、国内で1日当たりの平均3万5000人が利用している。(2009/5/14)

WinnyやShareのデータも:
第三のP2Pソフトに注意、情報の不正流通につながる恐れ
ネットエージェントは、P2Pソフト「Perfect Dark」を利用した不正なデータ流通が増える恐れがあると警告している。(2009/5/14)

「Doblog」投稿不能のまま1カ月 ブロガー移転先分かる「難民キャンプ」出現
NTTデータのブログサービス「Doblog」で1カ月以上にわたって記事を投稿できない状態が続いている。ユーザーの1人が、Doblogユーザーの移転先を収集・公開する「Doblog難民キャンプ」を開設した。(2009/3/10)

NEWS
ミラポイント、「証拠保全」に強いメールアーカイバの新モデル
ハードウェアを一新、7Tバイトディスクを搭載したメールアーカイブアプライアンスの新製品を4月にリリース。アーカイブメールの検索機能が向上し、OutlookやNotesからもシームレスにアクセスできる。(2009/3/5)

「いかに技術者の心に刺さるか」 ライブドア、自社サービスのソースコード公開を強化
ライブドアは、ソースコードを公開しているサービスをまとめて紹介する「EDGE src」をオープンした。「コードがきれいに書けたから」と、新開発したApacheモジュールも新たに公開した。(2009/2/9)

「クローリングしてる暇あるなら論文書いたら?」――ライブドア、研究者向けにSBMデータ提供
ライブドアは、「livedoorクリップ」で公開しているURLなどのデータを研究者に提供する。(2009/1/15)

Googleのアクセス解析を携帯サイトで――エクスブリッジがライブラリ公開
(2009/1/7)

64ビットOSでも運用:
大規模トラフィック対応を強化、アクセス解析の最新版発売
オーリック・システムズは、64ビットOS環境での運用に対応したWebサイトアクセス解析ソフト「RTmetrics」の最新版を発売した。(2008/12/25)

地方の求人情報を自動収集 求人検索「転職in」
「転職in」は、企業サイトなどから求人情報を自動収集する求人サイトだ。地方の中小企業を中心に掲載し、大手求人サイトと差別化した。(2008/12/17)

モバイル検索エンジンで世界を目指す──エフルートとプリファード、LLP設立の狙い
モバイル向けの検索サービスで定評のあるエフルートが、画像検索を皮切りに、検索エンジンを大幅に刷新するという。新たにプリファードインフラストラクチャーと有限責任事業組合(LLP)を設立するのもそのためだ。両社の狙いや、両社が目指すモバイル検索の今後を聞いた。(2008/12/17)

ファイル共有ソフトの「現在利用者」、1割超える──ACCSなど調査
ACCSなどが毎年実施しているファイル共有ソフトの利用実態調査で、過去1年間に使ったことがあるという「現在利用者」の割合が初めて1割を超えた。(2008/12/12)

ウィジェットで目立たず“息抜きmixi”――FLO:Q上での広告配信も
ソニーのウィジェットサービス「FLO:Q」で、デスクトップウィジェット「mixi checker」の無償ダウンロード提供が始まった。マイミクシィ新着日記などの更新情報をデスクトップ上で確認できる。(2008/12/4)

Microsoft、Webマスター向けマルウェア検知ツールを発表
MicrosoftのWebマスター向けサービスに、セキュリティ関連の新機能が加わった。(2008/11/27)

「もうITだけじゃない」 はてなブックマークが25日にリニューアル
はてなブックマークが25日にリニューアルする。検索機能やコミュニティー機能を強化。UIも改善し、“非IT”ユーザーを取り込む狙いだ。(2008/11/5)

Leverage OSS:
Hadoopを用いたクラスタコンピューティング環境の構築
ペタバイト規模のデータを格納させる分散コンピューティング用プラットフォームを探しているのであれば、安価かつ効率的でスケーラビリティと信頼性を兼ね備えたプラットフォームであるHadoopの使用を検討すべきだろう。(2008/11/5)

Lookup! せんせーしょん:
次元を超えた画像解析技術――「Deep Zoom」と「Photosynth」を体験する
超ズームの次の一手は想像のななめ上どころか、次元を超えていた。日本の誇る文化をモチーフにした実例で、Photosynthの魅力に迫る。(2008/10/17)

増え続けるスパムブログの現状は ライブドアが検索に新技術、9割排除
「livedoorブログ検索」で、検索結果からスパムを排除する新たなフィルタリング技術を開発した。スパムブログは日々進化しており、人間の目で見てもスパムと分からないものもあるという。(2008/10/10)


節電・蓄電・発電に取り組む企業へ

スマートジャパンは、節電・蓄電・発電に取り組む企業の課題解決サイトです。日本各地の企業・自治体にとって喫緊の課題である電力の有効活用と安定確保に向け、節電・蓄電・発電のための製品検討や導入に役立つ情報を提供します。
節電・蓄電・発電に取り組む企業の課題解決サイト - スマートジャパン