999精品在线视频,手机成人午夜在线视频,久久不卡国产精品无码,中日无码在线观看,成人av手机在线观看,日韩精品亚洲一区中文字幕,亚洲av无码人妻,四虎国产在线观看 ?

網(wǎng)站資源信息自動(dòng)采集技術(shù)

2020-08-25 00:51:18馬浩銘
湖北農(nóng)機(jī)化 2020年12期
關(guān)鍵詞:進(jìn)程程序數(shù)據(jù)庫(kù)

馬浩銘

(新疆質(zhì)信通工程檢測(cè)技術(shù)有限公司,新疆 烏魯木齊 830011)

1 信息采集器

1.1 Index程序的參數(shù)設(shè)置

-n number 索引指定數(shù)目的文檔后退出。注意:在運(yùn)行index-n number后,運(yùn)行index-D程序。如果用戶使用多線程,索引的文檔數(shù)目會(huì)比預(yù)定的值高一些。

-N number 設(shè)置運(yùn)行索引線程的數(shù)量。只有對(duì)多個(gè)網(wǎng)站進(jìn)行索引時(shí),多線程索引才有意義。兩個(gè)線程或多個(gè)線程不能同時(shí)對(duì)同一站點(diǎn)進(jìn)行索引。

-R number 運(yùn)行解析進(jìn)程的數(shù)目。默認(rèn)是線程數(shù)/5+1。如果用戶的服務(wù)器解析慢的時(shí)候,用戶需要增加默認(rèn)值。

1.2 重新索引控制參數(shù)設(shè)置

-a 重新索引所有的文檔,并忽略文檔的失效狀態(tài)。默認(rèn)情況下,只有比Period時(shí)間早的文檔才被重新索引。

-m 存儲(chǔ)文檔中詞和超鏈接,忽略文檔的修改狀態(tài)。沒有這個(gè)參數(shù)時(shí),只有修改的文檔才會(huì)被重新索引。

-o 優(yōu)先抓深度淺的文檔。這里的跳躍指的是文檔的深度值。

-M繼續(xù)索引先前索引任務(wù)的URLs。這些URLs會(huì)被存儲(chǔ)在臨時(shí)MySQL數(shù)據(jù)庫(kù)中,這常用于調(diào)試目的。

1.3 實(shí)時(shí)數(shù)據(jù)庫(kù)索引選項(xiàng)

-T URL索引URL到實(shí)時(shí)數(shù)據(jù)庫(kù)中,需要注意的是,用戶不能增加太多的文檔到實(shí)時(shí)數(shù)據(jù)庫(kù)中,否則檢索實(shí)時(shí)數(shù)據(jù)庫(kù)會(huì)非常地慢。實(shí)際上實(shí)時(shí)數(shù)據(jù)庫(kù)文檔的限制是依賴于硬件的,大約1000個(gè)urls,效果會(huì)比較好。實(shí)時(shí)數(shù)據(jù)庫(kù)的文檔歸并到主數(shù)據(jù)庫(kù)的命令是index-D。這個(gè)參數(shù)選項(xiàng)在重新索引經(jīng)常需要改變的網(wǎng)頁(yè)時(shí)候非常有用。用戶可以及時(shí)地看到結(jié)果,用戶可以使用-A參數(shù)一起使用。

1.4 清理數(shù)據(jù)庫(kù)

-C清理數(shù)據(jù)庫(kù)。用戶可以控制參數(shù)來限制清理數(shù)據(jù)庫(kù)的范圍。……

登錄APP查看全文

猜你喜歡
進(jìn)程程序數(shù)據(jù)庫(kù)
債券市場(chǎng)對(duì)外開放的進(jìn)程與展望
試論我國(guó)未決羈押程序的立法完善
“程序猿”的生活什么樣
英國(guó)與歐盟正式啟動(dòng)“離婚”程序程序
數(shù)據(jù)庫(kù)
數(shù)據(jù)庫(kù)
數(shù)據(jù)庫(kù)
數(shù)據(jù)庫(kù)
創(chuàng)衛(wèi)暗訪程序有待改進(jìn)
社會(huì)進(jìn)程中的新聞學(xué)探尋
主站蜘蛛池模板: 99re视频在线| 国产欧美中文字幕| 青青草原国产免费av观看| 精品无码视频在线观看| 91精品综合| 中国毛片网| 国产免费网址| 中文字幕在线日本| 亚洲国产午夜精华无码福利| 五月综合色婷婷| 一级毛片网| 欧美国产精品拍自| 91成人免费观看| 亚洲色图另类| 欧美区国产区| 欧美高清三区| 18禁高潮出水呻吟娇喘蜜芽| 91人妻日韩人妻无码专区精品| 网久久综合| 精品国产成人三级在线观看 | 久久国产高潮流白浆免费观看| 国产小视频免费| 亚洲av无码成人专区| 日日噜噜夜夜狠狠视频| 亚洲成人黄色网址| 国内精品久久久久久久久久影视| 亚洲最新地址| 少妇人妻无码首页| 亚洲成A人V欧美综合天堂| 国产精品主播| 伦精品一区二区三区视频| 毛片久久网站小视频| 国产主播在线观看| 九色在线观看视频| 亚洲品质国产精品无码| 久久精品人人做人人综合试看| 伊人激情久久综合中文字幕| 免费在线看黄网址| 久久无码免费束人妻| 欧美日韩久久综合| 2021国产精品自产拍在线| 亚洲精品老司机| 国产精品浪潮Av| 粗大猛烈进出高潮视频无码| 白丝美女办公室高潮喷水视频| 成人夜夜嗨| 欧美中文字幕在线二区| 亚洲一区色| 青青操视频在线| 亚洲网综合| 国产在线视频二区| 久久一本精品久久久ー99| 视频一区视频二区日韩专区 | 亚洲制服丝袜第一页| 亚洲av成人无码网站在线观看| 素人激情视频福利| 真人高潮娇喘嗯啊在线观看| 黄色网站不卡无码| av一区二区无码在线| 国产毛片高清一级国语| 在线免费观看AV| 国产丝袜一区二区三区视频免下载| 久久综合伊人77777| 免费观看亚洲人成网站| 久久99国产综合精品女同| 亚洲欧美自拍视频| 成人一级免费视频| 欧美中出一区二区| 98超碰在线观看| 日本爱爱精品一区二区| 日a本亚洲中文在线观看| 国产打屁股免费区网站| 国产在线专区| 高清不卡毛片| 国产一区二区影院| 色婷婷成人网| 欧美亚洲国产视频| 国产一级做美女做受视频| 国产伦精品一区二区三区视频优播 | 99这里只有精品免费视频| 精品無碼一區在線觀看 | 日韩在线第三页|