字節(jié)流是由字節(jié)組成的,
專注于為中小企業(yè)提供成都網(wǎng)站制作、成都網(wǎng)站建設(shè)服務(wù),電腦端+手機(jī)端+微信端的三站合一,更高效的管理,為中小企業(yè)固原免費(fèi)做網(wǎng)站提供優(yōu)質(zhì)的服務(wù)。我們立足成都，凝聚了一批互聯(lián)網(wǎng)行業(yè)人才，有力地推動(dòng)了上1000+企業(yè)的穩(wěn)健成長(zhǎng)，幫助中小企業(yè)通過(guò)網(wǎng)站建設(shè)實(shí)現(xiàn)規(guī)模擴(kuò)充和轉(zhuǎn)變。
字節(jié)流是最基本的，所有的InputStrem和OutputStream的子類都是，主要用在處理二進(jìn)制數(shù)據(jù)，它是按字節(jié)來(lái)處理的
字符流和字節(jié)流都是什么
流就是stream. 一個(gè)連續(xù)的字節(jié)隊(duì)列。
流是程序輸入或輸出的一個(gè)連續(xù)的字節(jié)序列，設(shè)備（例如鼠標(biāo)，鍵盤，磁盤，屏幕和打印機(jī)）的輸入和輸出都是用流來(lái)處理的。在C語(yǔ)言中，所有的流均以文件的形式出現(xiàn)---不一定是物理磁盤文件，還可以是對(duì)應(yīng)與某個(gè)輸入/輸出源的邏輯文件
流(streams)在I/O系統(tǒng)中是一種I/O機(jī)制和功能，或者稱為streams子系統(tǒng)。它本身并不是一個(gè)物理設(shè)備的概念。
引入流的目的：
傳統(tǒng)的字符設(shè)備驅(qū)動(dòng)程序框架有許多缺點(diǎn)，這表現(xiàn)在：
。內(nèi)核與字符設(shè)備驅(qū)動(dòng)程序間接口的抽象層次太高
。內(nèi)核沒(méi)有為字符設(shè)備提供可靠的緩沖區(qū)分配和管理功能
。許多系統(tǒng)對(duì)字符設(shè)備的界面是把數(shù)據(jù)看成是FIFO（先進(jìn)先出）的字節(jié)流，因此沒(méi)有識(shí)別消息邊界，區(qū)分普通設(shè)備和控制信息，以及判定不同消息優(yōu)先級(jí)的能力，也沒(méi)有字節(jié)流流量控制
。在網(wǎng)絡(luò)數(shù)據(jù)傳輸設(shè)備中這些問(wèn)題更突出。網(wǎng)絡(luò)中數(shù)據(jù)傳輸是基于消息或數(shù)據(jù)分組的。
流的概念：
用通訊中的術(shù)語(yǔ)來(lái)說(shuō)，流是全雙工的處理過(guò)程，它是內(nèi)核中驅(qū)動(dòng)程序和用戶進(jìn)程之間的數(shù)據(jù)傳輸通道。
從流的構(gòu)造上來(lái)說(shuō)，它由一個(gè)流頭，一個(gè)流驅(qū)動(dòng)程序尾，以及其間的零個(gè)或若干個(gè)可選模塊構(gòu)成 。流頭是一個(gè)用戶級(jí)接口，它允許用戶應(yīng)用程序通過(guò)系統(tǒng)調(diào)用接口來(lái)訪問(wèn)流。驅(qū)動(dòng)程序尾與底層設(shè)備通信。在流的中間的模塊是處理數(shù)據(jù)的。
字節(jié)流與字符流主要的區(qū)別是他們的的處理對(duì)象
字節(jié)流是由字節(jié)組成的,字符流是由字符組成的. Java里字符由兩個(gè)字節(jié)組成.
字節(jié)流是最基本的，所有的InputStrem和OutputStream的子類都是，主要用在處理二進(jìn)制數(shù)據(jù)，它是按字節(jié)來(lái)處理的
但實(shí)際中很多的數(shù)據(jù)是文本，又提出了字符流的概念，它是按虛擬機(jī)的encode來(lái)處理，也就是要進(jìn)行字符集的轉(zhuǎn)化。在從字節(jié)流轉(zhuǎn)化為字符流時(shí)，實(shí)際上就是byte[]轉(zhuǎn)化為String時(shí)，
public String(byte bytes[]， String charsetName)
有一個(gè)關(guān)鍵的參數(shù)字符集編碼，通常我們都省略了，那系統(tǒng)就用操作系統(tǒng)默認(rèn)的lang
流式傳輸主要指將整個(gè)音頻和視頻及三維媒體等多媒體文件經(jīng)過(guò)特定的壓縮方式解析成一個(gè)個(gè)壓縮包，由視頻服務(wù)器向用戶計(jì)算機(jī)順序或?qū)崟r(shí)傳送。在采用流式傳輸方式的系統(tǒng)中，用戶不必像采用下載方式那樣等到整個(gè)文件全部下載完畢，而是只需經(jīng)過(guò)幾秒或幾十秒的啟動(dòng)延時(shí)即可在用戶的計(jì)算機(jī)上利用解壓設(shè)備對(duì)壓縮的A/V、3D等多媒體文件解壓后進(jìn)行播放和觀看。此時(shí)多媒體文件的剩余部分將在后臺(tái)的服務(wù)器內(nèi)繼續(xù)下載。
你用網(wǎng)頁(yè)的方式，讓人點(diǎn)擊，服務(wù)器采集，簡(jiǎn)直是弱爆了。每個(gè)人的點(diǎn)擊循環(huán)1000次，來(lái)個(gè)100人同時(shí)點(diǎn)，你要用的是普通的虛擬機(jī)就不行了。
最好是換種方式實(shí)現(xiàn)，不要通過(guò)網(wǎng)頁(yè)進(jìn)行采集。
可以非常簡(jiǎn)單的在數(shù)據(jù)庫(kù)的表，創(chuàng)建一個(gè)采集隊(duì)列，后臺(tái)執(zhí)行一個(gè)crontab的計(jì)劃任務(wù)，去完成隊(duì)列里的采集任務(wù)。
mysql_query函數(shù)查詢的方式是查詢出全部結(jié)果后緩存到內(nèi)存中，這樣就會(huì)出現(xiàn)超內(nèi)存的現(xiàn)象，使用另外一個(gè)函數(shù)mysql_unbuffered_query可以解決這個(gè)問(wèn)題，mysql_unbuffered_query不會(huì)緩存結(jié)果集，而是查詢出來(lái)數(shù)據(jù)后立馬對(duì)結(jié)果集進(jìn)行操作，也就是便查詢邊返回，這樣就不會(huì)出現(xiàn)超出內(nèi)存的現(xiàn)象，但是使用mysql_unbuffered_query的是時(shí)候不能使用 mysql_num_rows() 和 mysql_data_seek()。并且向 MySQL 發(fā)送一條新的 SQL 查詢之前，必須提取掉所有未緩存的 SQL 查詢所產(chǎn)生的結(jié)果行。例如：
使用緩存結(jié)果集的代碼：
function selecttest()
{
try {
$pdo = new PDO("mysql:host=localhost;dbname=test", 'root', '123456');
// 不使用緩存結(jié)果集方式
// $pdo-setAttribute(PDO::MYSQL_ATTR_USE_BUFFERED_QUERY, false);
$sth = $pdo-prepare('select * from test');
$sth-execute();
echo '最初占用內(nèi)存大?。? . memory_get_usage() . "\n";
$i = 0;
while ($result = $sth-fetch(PDO::FETCH_ASSOC)) {
$i += 1;
if ($i 10) {
break;
}
sleep(1);
print_r($result);
echo '占用內(nèi)存大?。? . memory_get_usage() . "\n";
}
} catch (Exception $e) {
echo $e-getMessage();
}
}
執(zhí)行時(shí)將會(huì)報(bào)超出內(nèi)存的錯(cuò)誤：
Fatal error: Allowed memory size of 134217728 bytes exhausted (tried to allocate 204800000 bytes) in E:\ProgramDevelopment\RuntimeEnvironment\xampp\htdocs\test\test.php on line 56
Call Stack:
0.0005 135392 1. {main}() E:\ProgramDevelopment\RuntimeEnvironment\xampp\htdocs\test\test.php:0
0.0005 135568 2. test-selecttest() E:\ProgramDevelopment\RuntimeEnvironment\xampp\htdocs\test\test.php:85
0.0050 142528 3. PDOStatement-execute() E:\ProgramDevelopment\RuntimeEnvironment\xampp\htdocs\test\test.php:56
將上面代碼中的$pdo-setAttribute(PDO::MYSQL_ATTR_USE_BUFFERED_QUERY, false);一行的注釋去掉后將不在緩存結(jié)果集，這時(shí)運(yùn)行該函數(shù)的結(jié)果如下：
最初占用內(nèi)存大?。?44808
Array
(
[id] = 1
[a] = v
[b] = w
[c] = i
)
占用內(nèi)存大?。?45544
Array
(
[id] = 2
[a] = b
[b] = l
[c] = q
)
占用內(nèi)存大小：145544
Array
(
[id] = 3
[a] = m
[b] = p
[c] = h
)
占用內(nèi)存大?。?45536
Array
(
[id] = 4
[a] = j
[b] = i
[c] = b
)
占用內(nèi)存大?。?45536
可以看到，這時(shí)返回一條數(shù)據(jù)內(nèi)存占用非常的小，也就700多字節(jié)，這樣就不會(huì)出現(xiàn)超出內(nèi)存的錯(cuò)誤了。
php處理數(shù)據(jù)時(shí)會(huì)有一個(gè)等待時(shí)間，就是所說(shuō)的超時(shí)時(shí)間，而且如果使用mysql的話，它也有一個(gè)超時(shí)時(shí)間，運(yùn)行一串代碼時(shí)間如果超過(guò)配置文件的時(shí)間，會(huì)被中斷不運(yùn)行。第一種你可以修改php配置文件timeout的運(yùn)行時(shí)間，第二你可以分批處理大量數(shù)據(jù)，注意是分批處理，就OK了。
使用緩存，比如memcache,redis,因?yàn)樗鼈兪窃趦?nèi)存中運(yùn)行，所以處理數(shù)據(jù)，返回?cái)?shù)據(jù)非?？欤钥梢詰?yīng)對(duì)高并發(fā)。
2.增加帶寬和機(jī)器性能，1M的帶寬同時(shí)處理的流量肯定有限，所以在資源允許的情況下，大帶寬，多核cpu,高內(nèi)存是一個(gè)解決方案。
3.分布式，讓多個(gè)訪問(wèn)分到不同的機(jī)器上去處理，每個(gè)機(jī)器處理的請(qǐng)求就相對(duì)減少了。
簡(jiǎn)單說(shuō)些常用技術(shù)，負(fù)載均衡，限流，加速器等
在現(xiàn)代 PHP 特性中，流或許是最出色但使用率最低的。雖然 PHP 4.3 就引入了流，但是很多開(kāi)發(fā)者并不知道流的存在，因?yàn)槿藗兒苌偬峒傲?，而且流的文檔也很匱乏。PHP 官方文檔對(duì)流的解釋如下：
可能看完這段解釋后還是云里霧里，我們簡(jiǎn)化一下，流的作用是在出發(fā)地和目的地之間傳輸數(shù)據(jù)。出發(fā)地和目的地可以是文件、命令行進(jìn)程、網(wǎng)絡(luò)連接、ZIP 或 TAR 壓縮文件、臨時(shí)內(nèi)存、標(biāo)準(zhǔn)輸入或輸出，或者是通過(guò) PHP 流封裝協(xié)議實(shí)現(xiàn)的任何其他資源。
如果你讀寫過(guò)文件，就用過(guò)流；如果你從 php://stdin 讀取過(guò)數(shù)據(jù)，或者把輸入寫入 php://stdout ，也用過(guò)流。流為 PHP 的很多 IO 函數(shù)提供了底層實(shí)現(xiàn)，如 file_get_contents、fopn、fread 和 fwrite 等。PHP 的流函數(shù)提供了不同資源的統(tǒng)一接口。
我們可以把流比作管道，把水（資源數(shù)據(jù)）從一個(gè)地方引到另一個(gè)地方。在水從出發(fā)地到目的地的過(guò)程中，我們可以過(guò)濾水，可以改變水質(zhì)，可以添加水，也可以排出水。
流式數(shù)據(jù)的種類各異，每種類型需要獨(dú)特的協(xié)議，以便讀寫數(shù)據(jù)，我們稱這些協(xié)議為 流封裝協(xié)議 。例如，我們可以讀寫文件系統(tǒng)，可以通過(guò) HTTP、HTTPS 或 SSH 與遠(yuǎn)程 Web 服務(wù)器通信，還可以打開(kāi)并讀寫 ZIP、RAR 或 PHAR 壓縮文件。這些通信方式都包含下述相同的過(guò)程：
1.開(kāi)始通信
2.讀取數(shù)據(jù)
3.寫入數(shù)據(jù)
4.結(jié)束通信
雖然過(guò)程是一樣的，但是讀寫文件系統(tǒng)中文件的方式與收發(fā) HTTP 消息的方式有所不同，流封裝協(xié)議的作用是使用通用的接口封裝這種差異。
每個(gè)流都有一個(gè)協(xié)議和一個(gè)目標(biāo)。指定協(xié)議和目標(biāo)的方法是使用流標(biāo)識(shí)符：scheme://target，其中 scheme 是流的封裝協(xié)議，target 是流的數(shù)據(jù)源。
http://流封裝協(xié)議
下面使用 HTTP 流封裝協(xié)議創(chuàng)建了一個(gè)與 Flicker API 通信的 PHP 流：
不要以為這是普通的網(wǎng)頁(yè) URL，file_get_contents() 函數(shù)的字符串參數(shù)其實(shí)是一個(gè)流標(biāo)識(shí)符。http 協(xié)議會(huì)讓 PHP 使用 HTTP 流封裝協(xié)議，在這個(gè)參數(shù)中，http 之后是流的目標(biāo)。
我們通常使用 file_get_contents()、fopen()、fwrite() 和 fclose() 等函數(shù)讀寫文件系統(tǒng)，因?yàn)?PHP 默認(rèn)使用的流封裝協(xié)議是 file://，所以我們很少認(rèn)為這些函數(shù)使用的是 PHP 流。下面的示例演示了使用 file:// 流封裝協(xié)議創(chuàng)建一個(gè)讀寫 /etc/hosts 文件的流：
我們通常會(huì)省略掉 file:// 協(xié)議，因?yàn)檫@是 PHP 使用的默認(rèn)值。
php://流封裝協(xié)議
編寫命令行腳本的 PHP 開(kāi)發(fā)者會(huì)感激 php:// 流封裝協(xié)議，這個(gè)流封裝協(xié)議的作用是與 PHP 腳本的標(biāo)準(zhǔn)輸入、標(biāo)準(zhǔn)輸出和標(biāo)準(zhǔn)錯(cuò)誤文件描述符通信。我們可以使用 PHP 提供的文件系統(tǒng)函數(shù)打開(kāi)、讀取或?qū)懭胂旅嫠膫€(gè)流：
1. php://stdin ：這是個(gè)只讀 PHP 流，其中的數(shù)據(jù)來(lái)自標(biāo)準(zhǔn)輸入。PHP 腳本可以使用這個(gè)流接收命令行傳入腳本的信息；
2. php://stdout ：把數(shù)據(jù)寫入當(dāng)前的輸出緩沖區(qū)，這個(gè)流只能寫，無(wú)法讀或?qū)ぶ罚?/p>
3. php://memory ：從系統(tǒng)內(nèi)存中讀取數(shù)據(jù)，或者把數(shù)據(jù)寫入系統(tǒng)內(nèi)存。缺點(diǎn)是系統(tǒng)內(nèi)存有限，所有使用 php://temp 更安全；
4. php://temp ：和 php://memory 類似，不過(guò)，沒(méi)有可用內(nèi)存時(shí)，PHP 會(huì)把數(shù)據(jù)寫入這個(gè)臨時(shí)文件。
其他流封裝協(xié)議
PHP 和 PHP 擴(kuò)展還提供了很多其他流封裝協(xié)議，例如，與 ZIP 和 TAR 壓縮文件、FTP 服務(wù)器、數(shù)據(jù)壓縮庫(kù)、Amazon API、Dropbox API 等通信的流封裝協(xié)議。需要注意的是，PHP 中的 fopen()、fgets()、fputs()、feof() 以及 fclose() 等函數(shù)不僅可以用來(lái)處理文件系統(tǒng)中的文件，還可以在所有支持這些函數(shù)的流封裝協(xié)議中使用。
自定義流封裝協(xié)議
我們還可以自己編寫 PHP 流封裝協(xié)議。PHP 提供了一個(gè)示例 StreamWrapper 類，演示如何編寫自定義的流封裝協(xié)議，支持部分或全部 PHP 文件系統(tǒng)函數(shù)。關(guān)于如何編寫，具體請(qǐng)參考以下文檔：
有些 PHP 流能夠接受一系列可選的參數(shù)，這些參數(shù)叫流上下文，用于定制流的行為。不同的流封裝協(xié)議使用的流上下文有所不同，流上下文使用 stream_context_create() 函數(shù)創(chuàng)建，這個(gè)函數(shù)返回的上下文對(duì)象可以傳入大多數(shù)文件系統(tǒng)函數(shù)。
例如，你知道可以使用 file_get_contents() 發(fā)送 HTTP POST 請(qǐng)求嗎？使用一個(gè)流上下文對(duì)象即可實(shí)現(xiàn)：
流過(guò)濾器
目前為止我們討論了如何打開(kāi)流，讀取流中的數(shù)據(jù)，以及把數(shù)據(jù)寫入流。不過(guò)，PHP 流真正強(qiáng)大的地方在于過(guò)濾、轉(zhuǎn)換、添加或刪除流中傳輸?shù)臄?shù)據(jù)，例如，我們可以打開(kāi)一個(gè)流處理 Markdown 文件，在把文件內(nèi)容讀入內(nèi)存的過(guò)程中自動(dòng)將其轉(zhuǎn)化為 HTML。
運(yùn)行該腳本，輸出的都是大寫字母：
我們還可以使用 php://filter 流封裝協(xié)議把過(guò)濾器附加到流上，不過(guò)，使用這種方式之前必須先打開(kāi) PHP 流：
這個(gè)方式實(shí)現(xiàn)效果和 stream_filter_append() 函數(shù)一樣，但是相比之下更為繁瑣。不過(guò)，PHP 的某些文件系統(tǒng)函數(shù)在調(diào)用后無(wú)法附加過(guò)濾器，例如 file() 和 fpassthru()，使用這些函數(shù)時(shí)只能使用 php://filter 流封裝協(xié)議附加流過(guò)濾器。
自定義流過(guò)濾器
我們還可以編寫自定義的流過(guò)濾器。其實(shí)，大多數(shù)情況下都要使用自定義的流過(guò)濾器，自定義的流過(guò)濾器是個(gè) PHP 類，繼承內(nèi)置的 php_user_filter 類（ ），且必須實(shí)現(xiàn) filter()、onCreate() 和 onClose() 方法，最后，必須使用 stream_filter_register() 函數(shù)注冊(cè)自定義的流過(guò)濾器。
然后，我們必須使用 stream_filter_register() 函數(shù)注冊(cè)這個(gè)自定義的 DirtyWordsFilter 流過(guò)濾器：
第一個(gè)參數(shù)用于標(biāo)識(shí)這個(gè)自定義過(guò)濾器的過(guò)濾器名，第二個(gè)參數(shù)是這個(gè)自定義過(guò)濾器的類名。接下來(lái)就可以使用這個(gè)自定義的流過(guò)濾器了：
修改 test.txt 內(nèi)容如下：
運(yùn)行上面的自定義過(guò)濾器腳本，結(jié)果如下：
stream_bucket_append函數(shù)：為隊(duì)列添加數(shù)據(jù)
stream_bucket_make_writeable函數(shù)：從操作的隊(duì)列中返回一個(gè)數(shù)據(jù)對(duì)象
stream_bucket_new函數(shù)：為當(dāng)前隊(duì)列創(chuàng)建一個(gè)新的數(shù)據(jù)
stream_bucket_prepend函數(shù)：預(yù)備數(shù)據(jù)到隊(duì)列
stream_context_create函數(shù)：創(chuàng)建數(shù)據(jù)流上下文
stream_context_get_default函數(shù)：獲取默認(rèn)的數(shù)據(jù)流上下文
stream_context_get_options函數(shù)：獲取數(shù)據(jù)流的設(shè)置
stream_context_set_option函數(shù)：對(duì)數(shù)據(jù)流、數(shù)據(jù)包或者上下文進(jìn)行設(shè)置
stream_context_set_params函數(shù)：為數(shù)據(jù)流、數(shù)據(jù)包或者上下文設(shè)置參數(shù)
stream_copy_to_stream函數(shù)：在數(shù)據(jù)流之間進(jìn)行復(fù)制操作
stream_filter_append函數(shù)：為數(shù)據(jù)流添加過(guò)濾器
stream_filter_prepend函數(shù)：為數(shù)據(jù)流預(yù)備添加過(guò)濾器
stream_filter_register函數(shù)：注冊(cè)一個(gè)數(shù)據(jù)流的過(guò)濾器并作為PHP類執(zhí)行
stream_filter_remove函數(shù)：從一個(gè)數(shù)據(jù)流中移除過(guò)濾器
stream_get_contents函數(shù)：讀取數(shù)據(jù)流中的剩余數(shù)據(jù)到字符串
stream_get_filters函數(shù)：返回已經(jīng)注冊(cè)的數(shù)據(jù)流過(guò)濾器列表
stream_get_line函數(shù)：按照給定的定界符從數(shù)據(jù)流資源中獲取行
stream_get_meta_data函數(shù)：從封裝協(xié)議文件指針中獲取報(bào)頭/元數(shù)據(jù)
stream_get_transports函數(shù)：返回注冊(cè)的Socket傳輸列表
stream_get_wrappers函數(shù)：返回注冊(cè)的數(shù)據(jù)流列表
stream_register_wrapper函數(shù)：注冊(cè)一個(gè)用PHP類實(shí)現(xiàn)的URL封裝協(xié)議
stream_select函數(shù)：接收數(shù)據(jù)流數(shù)組并等待它們狀態(tài)的改變
stream_set_blocking函數(shù)：將一個(gè)數(shù)據(jù)流設(shè)置為堵塞或者非堵塞狀態(tài)
stream_set_timeout函數(shù)：對(duì)數(shù)據(jù)流進(jìn)行超時(shí)設(shè)置
stream_set_write_buffer函數(shù)：為數(shù)據(jù)流設(shè)置緩沖區(qū)
stream_socket_accept函數(shù)：接受由函數(shù)stream_ socket_server()創(chuàng)建的Socket連接
stream_socket_client函數(shù)：打開(kāi)網(wǎng)絡(luò)或者UNIX主機(jī)的Socket連接
stream_socket_enable_crypto函數(shù)：為一個(gè)已經(jīng)連接的Socket打開(kāi)或者關(guān)閉數(shù)據(jù)加密
stream_socket_get_name函數(shù)：獲取本地或者網(wǎng)絡(luò)Socket的名稱
stream_socket_pair函數(shù)：創(chuàng)建兩個(gè)無(wú)區(qū)別的Socket數(shù)據(jù)流連接
stream_socket_recvfrom函數(shù)：從Socket獲取數(shù)據(jù)，不管其連接與否
stream_socket_sendto函數(shù)：向Socket發(fā)送數(shù)據(jù)，不管其連接與否
stream_socket_server函數(shù)：創(chuàng)建一個(gè)網(wǎng)絡(luò)或者UNIX Socket服務(wù)端
stream_wrapper_restore函數(shù)：恢復(fù)一個(gè)事先注銷的數(shù)據(jù)包
stream_wrapper_unregister函數(shù)：注銷一個(gè)URL地址包
整合資料
本文整合于以下兩篇文章
重慶分公司
重慶分公司
