網站首頁 編程語言 正文
前言
有玩過爬蟲的人應該都有過在又臭又長的HTML中找尋信息的經歷,雖然有各種工具和各種框架可以輔助查找,但是解析HTML的規則也是人想的,制定規則也是十分麻煩的。
恰好在個人的項目中,需要從某個網站中爬取圖片,好在需求比較簡單,所以試著使用正則表達式來解決。
分析
每個網站中展示圖片的地方,無非就是img標簽或者style中background-image和background,先解決img標簽中的圖片。
首先,地址在標簽的src屬性之中,所以找尋src的位置是必須的。但是不只有img標簽擁有src屬性,video和style也同樣擁有src屬性。因此,只匹配src的位置是不夠,還得確保這個src的位置在img標簽中。
然后,就是匹配src后面的地址,匹配地址的方法已經有許多文章描述過了,不再多說,但本文中用了一個比較取巧的方式去匹配。
總的思路就是先匹配src的位置,在獲取圖片地址。
正則表達式
- 首先是匹配src的位置,既然是找位置,那就需要用的正則表達式中預查(?),因為需要的圖片地址是在src后面,所以用反向肯定預查,所以初步確定正則表達式可寫成:
/(?<=判斷條件)/ 至于反向肯定預查的判斷條件,就是在img之后的src,所以正則表達式改成如下: /(?<=(img src="))/ 之所以匹配src=", 是因為想要直接就匹配到地址的開頭位置,于是就順手加上。
但是,因為img和src之間可能還存在class或者其他自定義屬性,所以還要加上這些可能存在字符的匹配。但是因為這些字符的種類比較多,如雙引號"",英文、數字、甚至是中文等等,一一匹配過于麻煩,有個取巧的方式就是匹配非>。
眾所周知,>在HTML中是一個標簽的結尾,所以它不可能出現在img標簽內的img字符和src字符的中間,所以匹配位置的正則表達式可寫成: /(?<=(img[^>]*src="))/
可以看到,能夠成功找到圖片地址的開頭位置。
- 既然位置找到了,那剩下的就是匹配地址了。這里可以使用其他相關文章說的匹配地址的正則表達式,但是和上面一樣,同樣可以取巧。
在HTML
標簽中,圖片地址是以雙引號"
開頭和結尾的,上面的匹配位置已經匹配到圖片開頭的雙引號之后,那么圖片地址還剩下一個雙引號,就是結尾的那個。
那么,直接匹配所有連續不為"
的字符不就可以了,思路可能有點復雜,但是寫起來簡單:
/[^"]*/
- 因此,總的正則表達式為:
/(?<=(img[^>]*src="))[^"]*/g
結尾加個g
是表示匹配所有符合條件的字符串,現在就可以匹配出圖片地址了:
總結
原文鏈接:https://juejin.cn/post/7107036013582614536
相關推薦
- 2023-10-10 批量快捷創建新數組的幾種方式
- 2022-06-13 nginx?location/區別詳解_nginx
- 2022-11-27 C++?Array容器的顯示和隱式實例化詳細介紹_C 語言
- 2022-07-13 Collection和Collections有什么區別?
- 2023-07-06 mybatis-plus 分頁查詢出現count()而不是count(*)
- 2022-12-25 React安裝node-sass失敗解決方案分享_React
- 2022-12-11 Golang?內存模型The?Go?Memory?Model_Golang
- 2024-01-09 IDEA錯誤: 找不到或無法加載主類 com.atguigu.springcloud.EurekaS
- 最近更新
-
- window11 系統安裝 yarn
- 超詳細win安裝深度學習環境2025年最新版(
- Linux 中運行的top命令 怎么退出?
- MySQL 中decimal 的用法? 存儲小
- get 、set 、toString 方法的使
- @Resource和 @Autowired注解
- Java基礎操作-- 運算符,流程控制 Flo
- 1. Int 和Integer 的區別,Jav
- spring @retryable不生效的一種
- Spring Security之認證信息的處理
- Spring Security之認證過濾器
- Spring Security概述快速入門
- Spring Security之配置體系
- 【SpringBoot】SpringCache
- Spring Security之基于方法配置權
- redisson分布式鎖中waittime的設
- maven:解決release錯誤:Artif
- restTemplate使用總結
- Spring Security之安全異常處理
- MybatisPlus優雅實現加密?
- Spring ioc容器與Bean的生命周期。
- 【探索SpringCloud】服務發現-Nac
- Spring Security之基于HttpR
- Redis 底層數據結構-簡單動態字符串(SD
- arthas操作spring被代理目標對象命令
- Spring中的單例模式應用詳解
- 聊聊消息隊列,發送消息的4種方式
- bootspring第三方資源配置管理
- GIT同步修改后的遠程分支