用 pillow 模塊把各式圖片轉換成像素集,然后轉成 numpy 數(shù)組,最后保存到文件。
請參考下面的代碼
# -*- coding: utf-8 -*-
from PIL import Image
import numpy as np
def images_to_array(image_files, array_file):
""" 將多個圖像文件保存成 numpy 數(shù)組,并存儲到 .npy 文件。
"""
data = []
for filename in image_files:
data.append(np.array(Image.open(filename)))
np.save(array_file, data)
def load_images(array_file):
""" 從 .npy 文件讀取所有圖像數(shù)組。
"""
return np.load(array_file)
images_to_array(['1.png', '2.png'], '1.npy')
load_images('1.npy')
參考資料
已解決
def parse(self, response):
li_list = response.css("div.list_cont.Left_list_cont.Left_list_cont1 > div.tab_tj > div > div > ul > li")
url_list = []
for li in li_list:
item = CardItem()
href = li.css("a::attr(href)").extract_first()
item['href'] = href
item['title'] = li.css("a::attr(title)").extract_first()
url_list.append(href)
yield item
for i in url_list:
print("->>> %s" % i)
yield scrapy.Request(url=i, callback=self.detail_parse, headers=self.headers)
問題已解決,又被js坑了(下次一定記?。?。
那個頁面我選擇的標簽是用js動態(tài)添加的,所以什么都爬不到就正常了。然后我又分析了一下用爬蟲獲取的頁面,是已經(jīng)登錄成功了的。
循環(huán)引用問題,已解決
試一試
text.encode('latin-1').decode('unicode_escape')
超時錯誤是服務端問題,又不是客戶端問題。網(wǎng)絡出錯很正常啊,重試就好。
上面的情況都有一個共同點,好像都轉換成了數(shù)字0了,才有打印臺的結果表現(xiàn)
顯然并不都是把start
當成0處理的....
1.先說MDN上寫了的,也就是負整數(shù)的情況。
對于start
,MDN描述為:
...如果該參數(shù)為負數(shù),則表示從原數(shù)組中的倒數(shù)第幾個元素開始提取,slice(-2)表示提取原數(shù)組中的倒數(shù)第二個元素到最后一個元素(包含最后一個元素)。
也就是對于題目中arr.splice(-2, 1)
的例子,提取之前arr = [9, 8, 2, 1]
,此時start為-2 + 4 = 3,因此行為等價于arr.splice(3, 1),結果2被抽走了,符合描述。
2.剩下的都是MDN未描述清楚的,這里要去看ECMA-262規(guī)范,這里以最新的規(guī)范做說明。
首先找到22.1.3.25 Array.prototype.splice的描述:
關于start的處理在這兩步完成,最后起作用的值是actualStart。
所以第一步是把start
進行ToInteger
處理:
然后發(fā)現(xiàn)又進了一個ToNumber
處理....
以入?yún)?code>undefined為例,首先經(jīng)過ToNumber
,返回NaN
;
然后根據(jù)ToInteger
的第二點,返回+0
;
最后根據(jù)Splice
的第四點,返回min(+0, length)
,也就是+0
;
因此undefined
作為start
傳入,最后是被當做+0
處理的。
剩下的你自己分析吧...
@可好了 謝謝你的回復,我已經(jīng)把需要的飛機場代碼給爬取到了我是使用的這個地址拼裝的http://flights.ctrip.com/inte... ,現(xiàn)在的主要是效率,太低。模擬一次請求,需要大概20秒的時間,才能把整個航線的航班數(shù)據(jù)爬取下來。 多線程的跑selenium 有很多問題。今天在看一下
很久沒有看到問得這么詳細的問題了,不過你只不過是缺少了一個請求頭
import requests
headers = {
'User-Agent': 'Mozilla/5.0 (Macintosh; Intel Mac OS X 10_11_6) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/67.0.3396.99 Safari/537.36'
}
r = requests.get('http://music.163.com/api/playlist/detail?id=108101671', headers=headers)
print r.text
其實直接
print(p1);
就可以
map
的返回值是一個數(shù)組,這個問題用forEach
比較合適
let newArr = [];
arr01.forEach(a1 => {
arr02.forEach(a2 => {
newArr.push({
account: a1.account,
city: a2.city
});
});
});
angle['ratio']
不是表格嗎?angle
是表格,angle['ratio']
是選出 'ratio'
那一列的數(shù)據(jù)。n
判斷相等?angle['ratio']==n
不是返回的是布爾值嗎,為什么能作為angle[angle['ratio']==n]
的索引?ratio
那列數(shù)據(jù)之后,數(shù)組中的每個元素分別與 n
進行比較,得到一個 bool 數(shù)組。選出 [0.5, 0.75, 1.0, 1.5, 1.75]
判斷是否與1相等,得到 [false, false, true, false, false]
。numpy 提供了 bool 數(shù)組索引的機制,所以返回 true 對應的那一行。temp.index[0]
是什么意思?temp
這張表的第 0 行的索引值。這里你在構建 angle
的時候沒有指定索引,所以默認用數(shù)字做索引,所以返回 0。return
返回的是元組?return beta1, beta2, alpha
,python 中對于多返回值是用 tuple 打包處理的P.S.
看到前面我以為你 pandas 基礎為 0,看到最后一個問題我才知道你 python 基礎為 0,好好找本書看看吧。
自己分析百度云盤的接口。然后在自己服務器搭個中轉。一般百度接口也會換的。github
上看到很多這樣的案例了。。。技術無罪
numpy 的 random 機制和 Python 標準庫的 random 模塊機制是一樣的,當我們設置相同的 seed,每次生成的隨機數(shù)相同。
如果不設置 seed,則每次會生成不同的隨機數(shù)。
這里引用 stackoverflow 上的最高票解答
>>> numpy.random.seed(0) ; numpy.random.rand(4)
array([ 0.55, 0.72, 0.6 , 0.54])
>>> numpy.random.seed(0) ; numpy.random.rand(4)
array([ 0.55, 0.72, 0.6 , 0.54])
appkey估計是寫死的,你多試幾個就知道了
sign估計是前端js加密的,建議單步調(diào)試找加密方法
為何不嘗試下beautifulsoup4呢(笑)
北大青鳥APTECH成立于1999年。依托北京大學優(yōu)質雄厚的教育資源和背景,秉承“教育改變生活”的發(fā)展理念,致力于培養(yǎng)中國IT技能型緊缺人才,是大數(shù)據(jù)專業(yè)的國家
北大青鳥中博軟件學院創(chuàng)立于2003年,作為華東區(qū)著名互聯(lián)網(wǎng)學院和江蘇省首批服務外包人才培訓基地,中博成功培育了近30000名軟件工程師走向高薪崗位,合作企業(yè)超4
中公教育集團創(chuàng)建于1999年,經(jīng)過二十年潛心發(fā)展,已由一家北大畢業(yè)生自主創(chuàng)業(yè)的信息技術與教育服務機構,發(fā)展為教育服務業(yè)的綜合性企業(yè)集團,成為集合面授教學培訓、網(wǎng)
達內(nèi)教育集團成立于2002年,是一家由留學海歸創(chuàng)辦的高端職業(yè)教育培訓機構,是中國一站式人才培養(yǎng)平臺、一站式人才輸送平臺。2014年4月3日在美國成功上市,融資1
曾工作于聯(lián)想擔任系統(tǒng)開發(fā)工程師,曾在博彥科技股份有限公司擔任項目經(jīng)理從事移動互聯(lián)網(wǎng)管理及研發(fā)工作,曾創(chuàng)辦藍懿科技有限責任公司從事總經(jīng)理職務負責iOS教學及管理工作。
浪潮集團項目經(jīng)理。精通Java與.NET 技術, 熟練的跨平臺面向對象開發(fā)經(jīng)驗,技術功底深厚。 授課風格 授課風格清新自然、條理清晰、主次分明、重點難點突出、引人入勝。
精通HTML5和CSS3;Javascript及主流js庫,具有快速界面開發(fā)的能力,對瀏覽器兼容性、前端性能優(yōu)化等有深入理解。精通網(wǎng)頁制作和網(wǎng)頁游戲開發(fā)。
具有10 年的Java 企業(yè)應用開發(fā)經(jīng)驗。曾經(jīng)歷任德國Software AG 技術顧問,美國Dachieve 系統(tǒng)架構師,美國AngelEngineers Inc. 系統(tǒng)架構師。