用python3.6寫的爬蟲,requests庫,post獲取數(shù)據(jù)。
地址:http://epub.sipo.gov.cn/index...
想要獲得的數(shù)據(jù)在:
例如 2018.05.29 發(fā)明授權數(shù)據(jù)已更新。
我想要的數(shù)據(jù)在這里。
下面是代碼,代碼是通過curl to python直接生成的,https://curl.trillworks.com/。
import requests
cookies = {
'_gscu_1718069323': '17199139j8xock20',
'_gscu_2029180466': '223759791wmvjx10',
'yunsuo_session_verify': '3e812c4367705399100bb98f9e16b577',
'_gscu_7281245': '2237647502dqei93',
'_gscbrs_1718069323': '1',
'_va_ref': '%5B%22%22%2C%22%22%2C1529994977%2C%22https%3A%2F%2Fwww.baidu.com%2Flink%3Furl%3DYaZu8t1kmMcsPYzfoQs86UdJDoO2kofb1oFU3viiKsCJIZ9yL_m1n0AQxswq9DvavpQ4EjzqFXLs94pAhFN_c_%26wd%3D%26eqid%3Dfb76c07900017f6f000000035b31dec2%22%5D',
'_va_id': '516b758a68708fa6.1522634492.10.1529994977.1529994977.',
'JSESSIONID': 'B2D82513C17C3136F8F3CDD4E789B31D',
'WEB': '20111130',
'Hm_lvt_06635991e58cd892f536626ef17b3348': '1528852861,1528852902,1528853005,1530495309',
'_gscbrs_7281245': '1',
'TY_SESSION_ID': 'fb5e77db-26bb-4657-84b0-412460f717e9',
'Hm_lpvt_06635991e58cd892f536626ef17b3348': '1530498299',
'_gscs_7281245': '3049530864pnz237|pv:22',
'keycookie': '4d8222a825',
'expirecookie': '1530498797',
}
headers = {
'Connection': 'keep-alive',
'Cache-Control': 'max-age=0',
'Origin': 'http://epub.sipo.gov.cn',
'Upgrade-Insecure-Requests': '1',
'Content-Type': 'text/plain;charset=UTF-8',
'User-Agent': 'Mozilla/5.0 (Macintosh; Intel Mac OS X 10_13_1) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/67.0.3396.99 Safari/537.36',
'Accept': 'image/webp,image/apng,image/*,*/*;q=0.8',
'Referer': 'http://epub.sipo.gov.cn/patentoutline.action',
'Accept-Encoding': 'gzip, deflate',
'Accept-Language': 'zh-CN,zh;q=0.9',
'Intervention': '<https://www.chromestatus.com/feature/5718547946799104>; level="warning"',
}
data = [
('showType', '1'),
('strSources', ''),
('strWhere', 'PD=\'2018.06.26\''),
('numSortMethod', '5'),
('strLicenseCode', ''),
('numIp', '0'),
('numIpc', ''),
('numIg', ''),
('numIgc', ''),
('numIgd', ''),
('numUg', ''),
('numUgc', ''),
('numUgd', ''),
('numDg', ''),
('numDgc', ''),
('pageSize', '3'),
('pageNow', '1'),
]
response = requests.post('http://epub.sipo.gov.cn/patentoutline.action', headers=headers, cookies=cookies, data=data)
返回結果是沒有查詢結果:
北大青鳥APTECH成立于1999年。依托北京大學優(yōu)質雄厚的教育資源和背景,秉承“教育改變生活”的發(fā)展理念,致力于培養(yǎng)中國IT技能型緊缺人才,是大數(shù)據(jù)專業(yè)的國家
達內教育集團成立于2002年,是一家由留學海歸創(chuàng)辦的高端職業(yè)教育培訓機構,是中國一站式人才培養(yǎng)平臺、一站式人才輸送平臺。2014年4月3日在美國成功上市,融資1
北大課工場是北京大學校辦產(chǎn)業(yè)為響應國家深化產(chǎn)教融合/校企合作的政策,積極推進“中國制造2025”,實現(xiàn)中華民族偉大復興的升級產(chǎn)業(yè)鏈。利用北京大學優(yōu)質教育資源及背
博為峰,中國職業(yè)人才培訓領域的先行者
曾工作于聯(lián)想擔任系統(tǒng)開發(fā)工程師,曾在博彥科技股份有限公司擔任項目經(jīng)理從事移動互聯(lián)網(wǎng)管理及研發(fā)工作,曾創(chuàng)辦藍懿科技有限責任公司從事總經(jīng)理職務負責iOS教學及管理工作。
浪潮集團項目經(jīng)理。精通Java與.NET 技術, 熟練的跨平臺面向對象開發(fā)經(jīng)驗,技術功底深厚。 授課風格 授課風格清新自然、條理清晰、主次分明、重點難點突出、引人入勝。
精通HTML5和CSS3;Javascript及主流js庫,具有快速界面開發(fā)的能力,對瀏覽器兼容性、前端性能優(yōu)化等有深入理解。精通網(wǎng)頁制作和網(wǎng)頁游戲開發(fā)。
具有10 年的Java 企業(yè)應用開發(fā)經(jīng)驗。曾經(jīng)歷任德國Software AG 技術顧問,美國Dachieve 系統(tǒng)架構師,美國AngelEngineers Inc. 系統(tǒng)架構師。