python 重定向獲取真實url
- 2020 年 1 月 7 日
- 筆記
樓主在做公司項目的時候遇到url重定向的問題,因此上網簡單查找,作出如下結果
由於使用的是語言是python所以以下是python的簡單解決方案
http_headers = { 'Accept': '*/*','Connection': 'keep-alive', 'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/53.0.2785.116 Safari/537.36'} def get_real_url(url): rs = requests.get(url,headers=http_headers,timeout=10) rs.url
以上代碼未有重試機制,下面加上重試機制加以完善
def get_real_url(url,try_count = 1): if try_count > 3: return url try: rs = requests.get(url,headers=http_headers,timeout=10) if rs.status_code > 400: return get_real_url(url,try_count+1) return rs.url except: return get_real_url(url, try_count + 1)