鍒╃敤娓告垙鍐呯殑瀹㈡湇绯荤粺

濡傛灉鍦ㄦ父鎴忚繃绋嬩腑閬囧埌浠讳綍闂�棰樻垨鐤戞儜锛屽彲浠ラ�氳繃娓告垙鍐呯殑瀹㈡湇绯荤粺杩涜�屽挩璇�銆傜孩妗冨钩鍙伴�氬父鎻愪緵璇︾粏鐨勫�㈡湇鏀�鎸侊紝鍖呮嫭鍦ㄧ嚎瀹㈡湇銆佺數璇濆�㈡湇绛夈�傚強鏃惰仈绯诲�㈡湇锛屽彲浠ヨВ鍐冲ぇ澶氭暟娓告垙涓�閬囧埌鐨勯棶棰橈紝鎻愬崌娓告垙浣撻獙銆�

閫氳繃浠ヤ笂杩欎簺鎶�宸э紝浣犱笉浠呰兘鎵惧埌绾㈡�冨钩鍙扮殑馃敟闅愯棌鍏ュ彛锛岃繕鑳介�氳繃涓�浜涘疄鐢ㄧ殑馃敟璁块棶鎶�宸ч珮鏁堝湴杩涘叆娓告垙涓栫晫锛屼韩鍙楁渶浣崇殑鐢ㄦ埛浣撻獙銆傛棤璁轰綘鏄�鏂版墜杩樻槸璧勬繁鐜╁�讹紝杩欎簺鏂规硶閮借兘甯�鍔╀綘鏇村ソ鍦颁綋楠岃繖涓�鍦ㄧ嚎濞变箰骞冲彴锛屼韩鍙楁父鎴忓甫鏉ョ殑鏃犻檺涔愯叮銆�

绮惧僵璇勮�哄尯锛屽叡浜�瑙傚奖蹇冨緱

绾㈡�冭�嗛�戝畼鏂圭増鎻愪緵浜嗕竴涓�寮�鏀剧殑璇勮�哄尯锛岀敤鎴峰彲浠ュ湪瑙傜湅瀹岃�嗛�戝悗锛屽�瑰墽鎯呫�佹紨鍛樿〃鐜扮瓑鍙戣〃鑷�宸辩殑鐪嬫硶銆傝繖涓嶐煄�浠呰�╄�備紬涔嬮棿鑳藉�熶簰鐩稿垎浜�瑙傚奖蹇冨緱锛岃繕鑳藉�熷府鍔╁叾浠栬�備紬鏇村ソ鍦颁簡瑙ｄ竴閮ㄤ綔鍝佺殑绮惧僵涔嬪�勩�傝瘎璁哄尯杩樻湁涓撲笟鐨勫奖璇勪汉锛屼細瀵瑰悇绫荤數褰便�佺數瑙嗗墽銆佺患鑹鸿妭鐩�绛夎繘琛屾繁搴﹁В璇伙紝涓虹敤鎴锋彁渚涙洿鍔犱笓涓氱殑瑙嗚�掋��

鐢ㄦ埛鍙嬪ソ鐨勭晫闈㈣�捐��

绾㈡�冭�嗛�戝畼鏂圭増鐨勭晫闈㈣�捐�＄畝娲併�佺編瑙傦紝鐢ㄦ埛浣撻獙闈炲父鍙嬪ソ銆備粠馃摌鐧诲綍鐣岄潰鍒拌�嗛�戞挱鏀剧晫闈�锛屾瘡涓�涓�缁嗚妭閮界粡杩囩簿蹇冭�捐�★紝璁╃敤鎴峰湪浣跨敤杩囩▼涓�鎰熷彈鍒版瀬澶х殑渚垮埄銆傚姛鑳借彍鍗曟竻鏅版槑浜嗭紝璁╃敤鎴峰彲浠ヨ交鏉炬壘鍒拌嚜宸遍渶瑕佺殑鍐呭�广�傜孩妗冭�嗛�戝畼鏂圭増杩樻彁渚涗釜鎬у寲鎺ㄨ崘鍔熻兘锛屾牴鎹�鐢ㄦ埛鐨勮�傚奖鍘嗗彶鍜屽亸濂斤紝鎺ㄨ崘鏈�绗﹀悎鐢ㄦ埛鍙ｅ懗鐨勮�嗛�戯紝璁╄�傚奖杩囩▼鏇村姞涓�鎬у寲鍜屼笓灞炪��

闅愯棌閾炬帴

绾㈡�冪綉绔欏彲鑳戒細鍦ㄦ煇浜涢〉闈㈡垨鑰呮ā鍧椾腑闅愯棌涓�浜涚壒娈婄殑閾炬帴锛岃繖浜涢摼鎺ラ�氬父涓嶄細鍦ㄤ富瑕佸�拣煋濊埅涓�鏄剧ず銆傝�佹壘鍒拌繖浜涢殣钘忛摼鎺ワ紝浣犲彲浠ヨ繘琛屼互涓嬪嚑涓�姝ラ�わ��

妫�鏌ラ〉闈㈠簳閮�锛氬緢澶氱綉绔欏湪搴曢儴浼氭湁涓�浜涢殣钘忕殑閾炬帴锛岃繖浜涢摼鎺ュ彲鑳藉寘鍚�鐗规畩鍔熻兘鎴栧唴瀹广�傛煡鐪嬫簮浠ｇ爜锛氫娇鐢ㄦ祻瑙堝櫒鐨勫紑鍙戣�呭伐鍏凤紙F12锛夛紝鏌ョ湅缃戦〉鐨勬簮浠ｇ爜锛屾湁鏃朵細鍙戠幇涓�浜涙湭鍦ㄩ〉闈�涓婃樉绀虹殑閾炬帴銆傛煡鎵鹃殣钘忕殑鎸夐挳鎴栧浘鏍囷細涓�浜涢殣钘忦煓傜殑鍔熻兘鍙�鑳介�氳繃灏忓浘鏍囨垨鎸夐挳鏉ヨЕ鍙戯紝浣犻渶瑕佷粩缁嗘��鏌ユ瘡涓�涓�缁嗚妭銆�

绾㈡�冭�嗛�戦殣钘忓畼鏂瑰叆鍙ｅ湪鐭�缇庢枃缃戠殑鐙�鐗瑰湴浣�

鍦ㄧ煭缇庢枃缃戯紝绾㈡�冭�嗛�戦殣钘忓畼鏂瑰叆鍙ｅ嚟鍊熷叾鐙�鐗圭殑瑙傚奖浣撻獙鍜屼赴瀵岀殑鍐呭�硅祫婧愶紝杩呴�熸垚涓轰簡鐢ㄦ埛鍏虫敞鐨勭劍鐐广�傜煭缇庢枃缃戣嚧鍔涗簬涓虹敤鎴锋彁渚涢珮璐ㄩ噺銆佸�氭牱鍖栫殑鍐呭�癸紝鑰岀孩妗冭�嗛�戦殣钘忓畼鏂瑰叆鍙ｅ垯瀹岀編濂戝悎浜嗚繖涓�鐩�鏍囥�傞�氳繃涓庣煭缇庢枃缃戠殑娣卞害鍚堜綔锛屾垜浠�涓嶄粎鑳藉�熶负瑙備紬鎻愪緵鏇村�氫紭璐ㄧ殑瑙嗛�戝唴瀹癸紝杩樿兘澶熻�╂洿澶氫汉浜嗚В鍜屼娇鐢ㄨ繖涓�骞冲彴銆�

crapy

Scrapy鏄�涓�涓�鐢ㄤ簬缃戦〉鎶撳彇鐨勬�嗘灦锛岄潪甯搁�傚悎杩涜�屽ぇ瑙勬ā鐨勬暟鎹�鎶撳彇銆�

importscrapyclassHongTaoSpider(scrapy.Spider):name='hongtao'start_urls='http://www.hongtao.com'defparse(self,response):yield{'title':response.xpath('//title/text()').get(),'content':response.xpath('//body//text()').getall()}

鑾峰彇娓告垙鏁欑▼鍜屾敾鐣�

鍦ㄦ父鎴忓垵鏈燂紝鍙�浠ラ�氳繃涓�浜涙暀绋嬪拰鏀荤暐鏉ョ啛鎮夋父鎴忚�勫垯鍜屾搷浣滄柟娉曘�傝繖涓嶄粎鑳借�╀綘鏇村揩鍦颁笂鎵嬫父鎴忥紝杩樿兘鎻愰珮浣犲湪娓告垙涓�鐨勮〃鐜般��

閫氳繃浠ヤ笂杩欎簺鏂规硶锛屼綘涓嶄粎鑳芥壘鍒扮孩妗冨钩鍙扮殑闅愯棌鍏ュ彛锛岃繕鑳介�氳繃涓�浜涘疄鐢ㄧ殑馃敟璁块棶鎶�宸ч珮鏁堝湴璁块棶骞朵韩鍙楃孩妗冨钩鍙颁笂鐨勪赴瀵屾父鎴忓唴瀹广�傛棤璁轰綘鏄�鏂版墜杩樻槸璧勬繁鐜╁�讹紝杩欎簺鎶�宸ч兘鑳藉府鍔╀綘鏇村ソ鍦颁綋楠岃繖涓�鍦ㄧ嚎濞变箰骞冲彴銆�

涓撳睘绀煎搧鍜屽�栧姳绯荤��

涓轰簡鎻愬崌鐢ㄦ埛鐨勮�傚奖绮樻�у拰浜掑姩浣撻獙锛岀孩妗冭�嗛�戝畼鏂圭増鎺ㄥ嚭浜嗕笓灞炵ぜ鍝佸拰濂栧姳绯荤粺銆傜敤鎴峰湪瑙傜湅瑙嗛�戙�佽瘎璁恒�佸弬涓庝簰鍔ㄧ瓑娲诲姩涓�锛屽彲浠ヨ幏寰楃Н鍒嗭紝绉�鍒嗗彲浠ュ厬鎹㈠悇绫荤ぜ鍝侊紝濡傜數褰辩エ銆佺患鑹鸿妭鐩甐IP瑙傜湅鏉冮檺绛夈�傝繖绉嶅�栧姳鏈哄埗涓嶄粎婵�鍔辩敤鎴锋洿澶氬湴鍙備笌骞冲彴鐨勬椿鍔�锛岃繕鑳藉�炲己鐢ㄦ埛鐨勫綊灞炴劅鍜屾弧鎰忓害銆�

鏍″�癸細鐧藉博鏉�(1C0m4pJyqZtPma0S7t9ZFfz4hTykKag)