成人在线亚洲_国产日韩视频一区二区三区_久久久国产精品_99国内精品久久久久久久

您的位置:首頁技術(shù)文章
文章詳情頁

網(wǎng)頁爬蟲 - Java爬蟲已獲取圖片鏈接但是無法下載圖片

瀏覽:189日期:2023-12-10 14:58:56

問題描述

利用爬蟲在html中獲取的相應(yīng)圖片資源src的代碼是這樣的

網(wǎng)頁爬蟲 - Java爬蟲已獲取圖片鏈接但是無法下載圖片

但是再通過代碼將資源轉(zhuǎn)成鏈接的形式下載圖片的時候,就報了400的錯誤

網(wǎng)頁爬蟲 - Java爬蟲已獲取圖片鏈接但是無法下載圖片

然而,我使用chrome去測試鏈接是否存在是,發(fā)現(xiàn),真正對方網(wǎng)站服務(wù)器能夠識別的是

網(wǎng)頁爬蟲 - Java爬蟲已獲取圖片鏈接但是無法下載圖片

也就是說我通過網(wǎng)頁獲得圖片資源的鏈接是http://www.neofactory.co.jp/i... 2.jpg然而,正常能夠獲取圖片的鏈接是http://www.neofactory.co.jp/i...

請各位大神指導(dǎo)之后應(yīng)該怎么辦,我在網(wǎng)上查了好多資料,還是沒有解決辦法。ps:奇怪的是我用Firefox的話,上面的那個鏈接也能得到圖片,我就百思不得其解了。

代碼:

public class Image {

private String urlNeo='';public String getUrlNeo() { return urlNeo;}public void setUrlNeo(String urlNeo) { this.urlNeo = urlNeo;}public String getHtml() throws Exception{ ArrayList<String> list=new ArrayList<String>();String line=''; String Html=''; URL url=new URL(urlNeo); URLConnection connection=url.openConnection(); InputStream in=connection.getInputStream(); InputStreamReader isr=new InputStreamReader(in); BufferedReader br=new BufferedReader(isr); while((line=br.readLine())!=null){Html+=line;list.add(line); } br.close(); isr.close(); in.close(); return Html;}public String getImgSrc() throws Exception{ String html=getHtml(); String IMGURL_REG_xpath='//p[1]/p[2]/p[2]/p/node()'; String imginfomation=''; JXDocument jxDocument = new JXDocument(html); imginfomation=(jxDocument.sel(IMGURL_REG_xpath).toString()).substring(1,jxDocument.sel(IMGURL_REG_xpath).toString().length() - 1); return imginfomation;}public List<String> getImgXpath() throws Exception{ String str=''; String IMGSRC_REG = 'img.product.w.*.jpg'; List<String> list1=new ArrayList<String>(); List<String> list2=new ArrayList<String>(); String listimg = getImgSrc(); Matcher matcher = Pattern.compile(IMGSRC_REG).matcher(listimg); while (matcher.find()) {list1.add(matcher.group()); } for(int i=1;i<=(list1.size()/2);i++){int j=i*2;list2.add(list1.get(j-1)); } return list2;}public void download(String admin_no) throws Exception{ List<String> list=new ArrayList<String>(); list=getImgXpath(); for(String img:list){System.out.println(img);String url='http://www.neofactory.co.jp/'+img;URL uri=new URL(url);URLConnection con=uri.openConnection();con.setConnectTimeout(5000);InputStream in=con.getInputStream();byte[] buf=new byte[1024];int length=0; File sf=new File('D:item_neo_photo'+admin_no);if(!sf.exists()){ sf.mkdirs();}String[] a=img.split('/');OutputStream os=new FileOutputStream(sf.getPath()+''+a[a.length-1]);while((length=in.read(buf))!=-1){ os.write(buf, 0, length);}os.close();in.close(); }}

}

問題解答

回答1:

直接把域名+獲取的img src屬性拼起來不行么

回答2:

url編碼下

標簽: java
相關(guān)文章:
成人在线亚洲_国产日韩视频一区二区三区_久久久国产精品_99国内精品久久久久久久
久久另类ts人妖一区二区| 国产剧情一区在线| 国产麻豆精品一区二区| 性欧美精品高清| 一区二区三区91| 在线观看一区视频| 中文字幕不卡在线观看| 99久久精品国产导航| 26uuu久久天堂性欧美| 成人av网站大全| 日韩精品一区二区三区在线观看 | 亚洲国产精品一区| 中文字幕一区免费在线观看| 午夜久久tv| 国产精品第五页| 极品尤物久久久av免费看| 成人欧美一区二区三区视频网页 | 在线观看亚洲a| 免费人成在线不卡| 欧美日韩小视频| 国产原创一区二区三区| 欧美精品亚洲一区二区在线播放| 美国十次了思思久久精品导航| 欧美三级日韩在线| 国产福利视频一区二区三区| 日韩一卡二卡三卡四卡| 成人亚洲精品久久久久软件| 精品人伦一区二区色婷婷| 色综合色狠狠天天综合色| 国产精品看片你懂得| 尤物精品在线| 亚洲线精品一区二区三区八戒| 欧美一级专区| 麻豆国产欧美一区二区三区| 777午夜精品视频在线播放| 风间由美一区二区av101| 精品国产3级a| 欧美+日本+国产+在线a∨观看| 欧美激情中文不卡| 亚洲茄子视频| 日本中文字幕一区二区视频| 91精品国产福利在线观看 | 成人av在线播放网站| 久久久久久久久久久久久女国产乱| 色综合天天性综合| 一区二区三区中文免费| 久久精品三级| 国产一区二区三区免费播放| 久久久午夜电影| 中文久久精品| 免费的国产精品| 日韩欧美一区二区不卡| 欧美日韩成人| 亚洲成人高清在线| 欧美一区二区在线不卡| 欧美日韩另类丝袜其他| 亚洲午夜久久久| 制服丝袜激情欧洲亚洲| 女人香蕉久久**毛片精品| 一区二区三区在线看| 欧美日韩高清影院| 欧美精品尤物在线| 午夜成人免费电影| 日韩视频一区二区三区| 亚洲精品裸体| 久久国产精品72免费观看| 成人综合在线视频| 国产精品久久久久影院老司| 久久永久免费| 99re视频这里只有精品| 亚洲成人激情社区| 日韩欧美第一区| 亚洲欧洲日本国产| 韩国一区二区视频| 国产精品热久久久久夜色精品三区| 老色鬼久久亚洲一区二区| hitomi一区二区三区精品| 亚洲人成精品久久久久| 欧美色国产精品| 国产精品hd| 免费在线观看不卡| 国产欧美一区二区三区沐欲| 久久一区免费| 欧美高清视频一区| 免费日本视频一区| 国产精品久久午夜| 欧美日韩国产高清一区二区三区 | 久久99这里只有精品| 国产精品视频免费| 欧美亚洲国产bt| 亚洲高清视频一区| 国内精品伊人久久久久av一坑| 国产精品久久久久久久浪潮网站| 在线观看日韩电影| 久久久精彩视频| 欧美国产视频在线观看| 美女在线观看视频一区二区| 国产精品视频九色porn| 欧美电影一区二区| 欧美一区二区三区在线免费观看| 日韩国产欧美在线观看| 国产午夜久久久久| 欧美日韩国产天堂| 亚洲福利久久| 成人高清视频免费观看| 麻豆久久久久久久| 亚洲欧美另类小说| 26uuu久久天堂性欧美| 欧美性受极品xxxx喷水| 亚洲国产精品久久久久久女王| 国产成人在线色| 婷婷久久综合九色综合伊人色| 中文字幕不卡三区| 6080国产精品一区二区| 国产精品久久久久久久久婷婷| 成人激情小说网站| 精品国产99国产精品| 91福利资源站| 国内自拍视频一区二区三区| 国产美女精品在线| 午夜精品久久久久久久久久| 久久精品在线观看| 欧美另类高清zo欧美| 国产一级久久| 欧美日韩1区| 成人黄色免费短视频| 蜜臀av一区二区在线观看| 亚洲免费在线观看| 国产女同互慰高潮91漫画| 日本黄色一区二区| 99成人在线| 欧美~级网站不卡| 国产激情视频一区二区在线观看| 丝袜美腿高跟呻吟高潮一区| 日韩理论片中文av| 国产色综合久久| 日韩亚洲欧美高清| 精品视频1区2区| 久久黄色影院| 国产亚洲激情| 日韩午夜在线电影| 欧美成人女星排行榜| 欧美日韩国产首页| 欧美日韩国产综合网| 国产传媒日韩欧美成人| 精油按摩中文字幕久久| 一区二区三区四区视频精品免费 | 久久国产精品久久久久久电车| 狠狠色综合网站久久久久久久| 国产91精品露脸国语对白| 日韩电影一区二区三区四区| 亚洲视频一区在线| 国产日韩欧美精品电影三级在线| 884aa四虎影成人精品一区| 久久精品卡一| 美女视频一区免费观看| 亚洲国产一区在线| 欧美高清不卡| 99精品欧美一区| 成人妖精视频yjsp地址| 经典三级视频一区| 久久97超碰国产精品超碰| 五月激情综合网| 亚洲一区二区三区免费视频| 成人免费视频在线观看| 国产欧美日韩另类一区| 精品国产乱码久久久久久夜甘婷婷 | 精品奇米国产一区二区三区| 欧美日韩极品在线观看一区| 久久这里只有| 午夜宅男久久久| 亚洲一区观看| 久久不射网站| 国产日韩欧美一区二区| 最新亚洲激情| 在线观看成人av电影| 黄色在线成人| 狠狠入ady亚洲精品| 欧美日韩三级| 欧美日韩天堂| 狠狠88综合久久久久综合网| 欧美日韩影院| 激情久久久久| 在线播放精品| 国产精品一区二区欧美| 国产精品一区二区你懂得| 国产伦精品一区二区| 亚洲一区二区动漫| 国产亚洲毛片| 国产精品一区二区三区四区五区| 国产偷久久久精品专区| 欧美亚洲三级| 久久综合影音| 久久亚洲二区| 色婷婷综合久久久中文字幕| 在线观看国产日韩| 欧美日韩情趣电影| 欧美一二三区在线| 欧美成人伊人久久综合网| 26uuu亚洲|