Content-Length: 224808 | pFad | https://b.hatena.ne.jp/chezou/20120221#bookmark-81825145
Command Technica：はじめてrsyncを使う方が知っておきたい6つのルール (1/2) - ITmedia エンタープライズ
Linuxなどを利用する上で、「これはどうやったら実現できるのだろう」と思うことは数知れない。本連載では、ユーザーがひんぱんに遭遇するであろう問題と、その解決方法を解説する。上級者には新たな発見を、初心者には上級者への道の手引きとなるだろう。 ファイルやディレクトリをバックアップ／同期するためのツールは幾つも存在していますが、rsyncはとりわけ大きな人気を誇っているといってよいでしょう。変更分を検出して差分のみを転送することで、ネットワーク経由でも効率的にバックアップ／同期が行える点や、sshなどのリモートシェル経由での利用が可能な点など、機能の洗練度はさすがに登場から10年以上たっているだけのことはあります。バックアップやミラーリングなどの用途であれば、基本的にはコピー元とコピー先でわずかな違いしか発生しないはずで、ファイルの相違部分だけを転送するrsyncは効率的に機能します。 そん
Wafの勉強をしてみた – philo式
ビルドシステムは make を始め幾つかありますが、21世紀になって make は無いわーということで他のものを探していたところ、Waf がいいという話を聞いたので調べてみました。 まず当たるのは本家の “The Waf Book” です。かなりの力作で、これを読めば Waf の全てがわかるでしょう。英語ですけどね。 これはこれでよくまとまっているんですが、英語&長い!!ということで私の脳では一気に処理できない!!ということで、こちらを読みつつ、”純粋関数型雑記帳“さんの”waf チュートリアル“という記事も参考にさせて頂きました。これはとてもわかりやすいです。執筆者の tanakh さんに感謝です!! 追記としては Windows の VS2008 でも使えた!!(exe,lib,dllどれもさくっと生成できた) “wscriptの基本的な書き方”の項目にある ”set_options”
Introduction to Information Retrieval
Online edition (c) 2009 Cambridge UP DRAFT! © April 1, 2009 Cambridge University Press. Feedback welcome. 443 20 Web crawling and indexes 20.1 Overview Web crawling is the process by which we gather pages from the Web, in order to index them and support a search engine. The objective of crawling is to quickly and efficiently gather as many useful web pages as possible, together with the link struc
NutchTutorial - NUTCH - Apache Software Foundation
IntroductionNutch is a well matured, production ready Web crawler. Nutch 1.x enables fine grained configuration, relying on Apache Hadoop data structures, which are great for batch processing. Being pluggable and modular of course has it's benefits, Nutch provides extensible interfaces such as Parse, Index and ScoringFilter's for custom implementations e.g. Apache Tika for parsing. Additonally, pl
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
処理を実行中です
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
Fetched URL: https://b.hatena.ne.jp/chezou/20120221#bookmark-81825145
Alternative Proxies:
クロールを順を追って実行する - Nutch調査録（mwSoft）
GPソフト Wiki - Create
