亚洲av成人无遮挡网站在线观看,少妇性bbb搡bbb爽爽爽,亚洲av日韩精品久久久久久,兔费看少妇性l交大片免费,无码少妇一区二区三区

  免費(fèi)注冊(cè) 查看新帖 |

Chinaunix

  平臺(tái) 論壇 博客 文庫(kù)
最近訪問(wèn)板塊 發(fā)新帖
查看: 5486 | 回復(fù): 2
打印 上一主題 下一主題

菜鳥(niǎo)請(qǐng)教一個(gè)關(guān)于python生成json文件的問(wèn)題~ [復(fù)制鏈接]

論壇徽章:
0
跳轉(zhuǎn)到指定樓層
1 [收藏(0)] [報(bào)告]
發(fā)表于 2014-04-23 11:34 |只看該作者 |倒序?yàn)g覽
我現(xiàn)在需要登陸一個(gè)鑒權(quán)的網(wǎng)站,然后將服務(wù)器生成的html保存成json文件,然后解析其中的數(shù)據(jù)
鑒權(quán)的代碼如下
username = "xxx"
password = "xxx"
login_url = "xxx"
base_url = "xxx"
body =  (('j_username',username ), ('j_password',password))
cj = cookielib.CookieJar()
opener = urllib2.build_opener(urllib2.HTTPCookieProcessor(cj))
opener.addheaders = [('User-agent',
        'Mozilla/4.0 (compatible; MSIE 6.0; Windows NT 5.1)')]
urllib2.install_opener(opener)
req = urllib2.Request(login_url,urllib.urlencode(body))
try:
    u = urllib2.urlopen(req)
except urllib2.HTTPError as e:
   print e.code

鑒權(quán)通過(guò)以后需要抓取服務(wù)器頁(yè)面上的數(shù)據(jù):
u = urllib2.urlopen(base_url)
調(diào)用的這個(gè)函數(shù)返回的是一個(gè)html格式的數(shù)據(jù),現(xiàn)在需要解析其中的數(shù)據(jù),用json.loads(u)無(wú)法執(zhí)行 因?yàn)閡的格式不是string類(lèi)型的,如果保存為json格式的文件然后再解析,用urllib.urlretrieve()這個(gè)函數(shù),因?yàn)閡rllib沒(méi)有綁定用戶名和密碼 所以只能下載鑒權(quán)的頁(yè)面,請(qǐng)教各位大俠如果不下載為json文件,應(yīng)該如何解析u = urllib2.urlopen(req)生成的html或者有沒(méi)有其他辦法保存html為json的格式

論壇徽章:
1
子鼠
日期:2014-05-04 13:59:31
2 [報(bào)告]
發(fā)表于 2014-04-23 15:25 |只看該作者
本帖最后由 修杰_JIANG 于 2014-04-23 15:34 編輯

urllib2.urlopen 返回一個(gè)文件對(duì)象吧



論壇徽章:
0
3 [報(bào)告]
發(fā)表于 2014-04-26 16:43 |只看該作者
1. 代碼沒(méi)用高亮扣分!
2. “調(diào)用的這個(gè)函數(shù)返回的是一個(gè)html格式的數(shù)據(jù)”,到底返回啥,敢不敢貼出來(lái),mime type到底寫(xiě)了啥你造嗎?
3. “json.loads(u)無(wú)法執(zhí)行 因?yàn)閡的格式不是string類(lèi)型的”,轉(zhuǎn)換。
4. “用urllib.urlretrieve()這個(gè)函數(shù),因?yàn)閡rllib沒(méi)有綁定用戶名和密碼 所以只能下載鑒權(quán)的頁(yè)面”,cookie是啥?
5. “應(yīng)該如何解析u = urllib2.urlopen(req)生成的html或者有沒(méi)有其他辦法保存html為json的格式”,觀察下返回結(jié)果,自己寫(xiě)函數(shù)提取之!
6. 推薦python requests庫(kù),業(yè)界出了這么好用的接口,性能算個(gè)屁!
7. 負(fù)分!
您需要登錄后才可以回帖 登錄 | 注冊(cè)

本版積分規(guī)則 發(fā)表回復(fù)

  

北京盛拓優(yōu)訊信息技術(shù)有限公司. 版權(quán)所有 京ICP備16024965號(hào)-6 北京市公安局海淀分局網(wǎng)監(jiān)中心備案編號(hào):11010802020122 niuxiaotong@pcpop.com 17352615567
未成年舉報(bào)專區(qū)
中國(guó)互聯(lián)網(wǎng)協(xié)會(huì)會(huì)員  聯(lián)系我們:huangweiwei@itpub.net
感謝所有關(guān)心和支持過(guò)ChinaUnix的朋友們 轉(zhuǎn)載本站內(nèi)容請(qǐng)注明原作者名及出處

清除 Cookies - ChinaUnix - Archiver - WAP - TOP