晨鸟科技
标题:
[转]c# Stream的问题
[打印本页]
作者:
Star
时间:
2011-2-18 11:06
标题:
[转]c# Stream的问题
转自:
http://dev.csdn.net/author/Knigh ... 2e82863cbddb78.html
& _ A" V' k& I7 h: c2 W
( O1 H# T( {9 k; S! l
IO操作基本上需要用到Stream相关的子类,因此这类问题在CSDN问得也是比较多。其实对于Stream来说,操作起来比较简单,只要对细节的处理稍微注意一下,相信在使用它的时候也会得心应手。
: J {) c2 {6 |, H5 k V
4 `8 v3 M* z3 o* n. b5 D
对于Stream相关的问题,大致分如下几类。
0 c, Z9 t: T9 g
5 w7 s, s8 [9 ^- W. c. z
问题一,基本操作的问题;
6 M* S( L8 ^. b8 c! ]5 T1 o
4 o Z0 I: U8 s, f( q% x
问题二,编码的问题;
, r; a: p# D. a `, U3 L6 G
: L6 a9 V4 w3 s+ i- z! i
问题三,尾部处理问题;
( Q7 L6 J3 i/ Z U
* b0 e2 D0 p3 l- }" d/ i
问题四,Stream缓存问题;
, b. Q. V- I6 a" c( {/ R
; \# [$ w* h0 R: r5 i
问题五,资源释放问题;
8 G3 P5 n, z4 M' w! c+ @) G5 j
# i9 T- o% `# q
最后一个问题,说说如何使用Stream来更新大文件部分数据。
}* c y% J( I' R! a9 J
( s, j y5 }- P. T* G; y. {% M s
对于
问题一
,基本操作的问题,主要是读写问题,主要是出现在文件数据比较大,需要循环写或者读的时候。此时正确读的形式如下。
( H4 a* O" F! }
5 I) F6 w. d" m- n8 x8 T
// Open a file to read
2 i9 w$ I, O" R# F2 l- h" c
, i2 l0 j- v- B) o
using( FileStream fs = new FileStream( yourFile,
/ T3 ?9 k2 g# f
% e. r& J5 u0 {+ q
FileMode.Open, FileAccess.Read,
z$ _7 F( Z: _
0 J1 L7 _4 K; \1 k) _8 Z- R
FileShare.None ) )
! `$ R$ j1 D2 P# K8 \+ V
, z% ?7 u* K- ?- z; p! j: p
{
+ o) b# s, u! F) A3 k/ G
4 h9 a! T5 a0 s1 l: O; m/ B
int nRealRead = 0;
( I5 X# ^# P; d0 c( R
8 K }" A& S M( L% Z
byte[] bBuffer = new byte[1024];
2 v( j) `4 n" n |; I+ |8 g
% H' r8 u( M( W- G
do
" b+ w. q4 z4 S( ]5 u
5 t, D5 m3 m/ s2 d7 S, b9 i
{
0 h' v3 e% Y8 r8 p7 x
) a. U, U; H5 b8 Y7 E9 z9 F
// Read data
$ a" I; z! X6 c2 Z
5 s' ]* l5 o: t" t+ i
nRealRead = fs.Read( bBuffer, 0, 1024 );
5 h6 G- P5 p: `2 v& `* G: f% j
0 I0 \7 T/ L' k
// Output data
0 j& J0 H+ `+ J! }8 X- ]9 F- J
. W/ X/ J( C0 H
Debug.WriteLine( Encoding.Default.GetString( bBuffer, 0, nRealRead ) );
; X3 k6 f% W8 F7 [7 [) M8 e9 ^5 u/ g ^
2 @" \$ v/ y; Y/ w7 h& W
}while( nRealRead == 1024 );
. k# A) t0 K+ D; ?
5 ?. L, ]: N; }, ?5 e1 e `
}
) \- O1 a _9 [
) z2 z0 K- G* F1 z6 N
可是大多数人第一次完成这样操作的时候,都会在“nRealRead = fs.Read( bBuffer, 0, 1024 );”这一句犯错误。认为第二个参数的偏移量对于Stream而设的,所以认为应该用累加的值,也就是目前总共读了多少的字节数。这里需要理解一下Stream的操作,当进行读或者写操作的时候,Stream的游标会根据所读或者所写得字节而自动向前跟进;其次Stream.Read或者Stream.Write这两个方法中第二个参数是针对第一个Buffer参数而言的,而不是对于Stream的,因此不要在这个地方犯错误。
- M1 I5 Z" q3 s. G% r0 r
5 r6 a9 C. P& g% u9 t3 U. _9 j! \
基本问题还牵扯的就是文件打开的方式。有人经常问,如何同时用两个Stream打开同一个文件。其实默认的Stream打开方式是独享的,因此当不指明文件为访问共享的时候,后打开文件操作就会出现异常,因此需要向我上面所写的那样。还有,如果需要指定当前Stream的起始位置,可以通过Seek方法或者设置Position属性来完成。
1 P4 ]0 Q) R1 `/ w9 ?' U7 G: @
$ i9 ~+ m1 i" r0 Q$ z2 c7 K: A9 _
对于
问题二
,编码问题。有人使用Stream的子类,例如StreamReader之类来打开一个文本文件,发现读出来的数据是乱码,造成这个原因大多数由于文件中含有中文字符,同时打开文件的时候没有指明编码方式。由于英文和中文的编码方式不同,因此在不指明编码的时候有时会造成读取中文错误。此时只要使用StreamReader类型中含有Encoding参数的构造函数即可,例如:
. k. S" H0 Z( _; @# `
! q W8 Z6 A0 Q% n
using( StreamReader sr = new StreamReader( yourFile, Encoding.Default ) )
, [2 b% h8 e4 h8 r
4 u% G2 U Z% V: a3 ~* c- k" w
这里只是采用系统默认的编码方式,但有可能不太适合你文件的编码方式,因此需要在实际应用去调试和变换这个参数。
" H# @+ a! v; X" p, E$ Z5 _9 X
- v, K Y, C+ I6 G* `8 K
问题三
是,Stream尾部处理问题。此类问题所展现的现象如,复制文件的时候文件会增大。因此在使用Stream.Read和Stream.Write的时候,要通过方法的返回值,来标明真正读和写的字节数,就像前面所写的那样。
& j! @* }9 R0 m f5 C d
+ P# R ?/ {, X8 ~
// Read data
Z9 {5 ^$ l3 e2 f& p/ [; n
3 e* T4 w2 |- n$ N4 H! d
nRealRead = fs.Read( bBuffer, 0, 1024 );
9 a) {6 m/ _, X' R9 j k+ a' H
5 I0 d: r! T& J1 x3 w
// Output data
9 k0 j. F% C6 y9 Q4 t8 c
& t- O/ P" H1 A9 P9 B
Debug.WriteLine( Encoding.Default.GetString( bBuffer, 0, nRealRead ) );
; q1 B, s# O8 y% Q. {, B; O
6 l) {8 M* t( H- f' H. W
此时在输出的时候用的不是“1024”,而是“nRealRead”做为字节有效标示。
0 F3 { a# ?( w
: E$ h. @9 g, T3 J/ @
对于
问题四
,Stream缓存的问题,这主要表现在写的时候。为了避免频繁操作IO而降低效率,大多数Stream采用异步写的方式,也就是Stream对象要配备有一定的缓存,来暂时保存写的数据。但缓存是有限的,当缓存已满后会造成后续写的数据不能写入,从而导致数据丢失。那么此时需要显示的调用Stream.Flush方法,来把缓存的数据写入到文件中并清空缓存。其实这并不是唯一方法,在一些Stream的子类中还提供了设置BufferSize的方法,或者提供了设置AutoFlush属性来实现自动写入等等,因此这里大家可以根据不同需要而选择不同方法来完成。
- N& ~( X( x3 o/ W
+ w# N: E( j4 x, G6 A
对于Stream的释放问题,这可能不单单是使用Stream的问题,可能是使用C#编程而造成的不良习惯。虽说C#的资源是受托管的,但是对于Stream来说,如果不及时释放,那么当其他线程或者进程使用此文件的时候就会造成无法打开的现象(由于Stream大多数都是以独享方式打开),而且没有及时关闭,所占用的Buffer无法及时释放。对于资源释放问题,我为此专门写过一篇文章,如果有兴趣的话不妨看看。
3 N5 y+ \' Y! d. U, q
9 e5 e+ H7 Z! _& R' Y9 p! U7 E
http://blog.csdn.net/Knight94/archive/2006/08/05/1023352.aspx
6 _- `7 |( j j. V! g: L" _4 P' _
1 y" k" n3 e' Q# ]$ ]7 v
因此养成一个好的习惯至关重要。其实释放Stream很简单,要么显示的调用其的Close和Dispose这两个方法,要么使用using程序块,就像我前面所写的那样。
2 Y, u- i# t. h2 G: \: J, u
6 Z, j/ i4 ~0 D' U
最后一个
就是如何使用Stream来更新大文件。比较常见的就是,当文件比较大,但是需要修改的部分很少,因此想要通过Stream直接在某个位置进行类似于删除、插入或者替换等操作。
2 l! g1 w. {: Q3 E2 S4 _( Z
# ?! P, w- C, W% F! o2 i
对于一个文件的更新操作,大致分为三种,这里主要是考虑更新的位置和更新数据长度。
. ]- F! T" [# ^/ J4 u, A% \
9 J, N, B* x2 W2 V# I% p
第一种对于文件尾扩展的操作,内容长度不限;
& x% Z2 Y' {- B2 J' x
* F4 `( O& u; g
第二种等字节的替换操作,位置不限;
! v* q7 o. D5 P% n* k! t
/ B9 ^/ d/ J; Z& T$ i6 }0 D
最后一种就是位置不固定,字节数不确定。
( e7 ^5 @" Q( u W2 i4 \) f
9 w! ^" g* G% f* c, w! @/ e/ E7 C
上面所说的前两种,进行处理比较简单。对于第一种,只要设置FileMode的时候增加Append标示即可。而对于等字节的替换,就更简单了,直接通过Stream.Seek找到指定的位置,然后调用Stream.Write即可。
& c' c4 ]' b# a
9 O+ t0 z0 u) M% G5 v" O; L
而最后一个,是最麻烦的。比较简单的解决方式,创建一个临时文件,然后一边读一边写,遇到需要修改的,先读出来再修改最后再写入。等全部写完了,删除旧文件,修改临时文件的名称为原来名字。
, L. W" E8 O/ E# Z8 j) Y; L3 b
8 J: ]6 y& F0 U7 i$ E7 w
比较麻烦的解决方式,就是通过Share方式,用一个读Stream和一个写Stream直接操纵源文件。这里需要注意的是,为了保证新写的数据不要冲掉还没读出来的数据,也就是说要控制写Stream所写的位置不要超过要读的位置。举例说,目前需要读的位置是文件的800字节处,也就是说800字节以后还没读出来处理,此时写Stream在写完数据后,Stream的位置不能超过800字节,如果写采用的是缓存,那么超过800位置的数据不要立刻通过Flush进行提交。总的来说,通过两个Stream来操作同一个文件,对于这一点要特别注意,处理不好要造成死循环。
" x/ W3 |/ R% g1 B5 e) Y7 e6 H
$ W* }# e- O% b+ @! b
Stream的问题相对比较简单,大多数人操作的时候不注意细节。所以我这里只是稍加说明,不做特别细的说明。
作者:
Star
时间:
2011-2-18 11:17
EB_EXP中Stream读写(大)文件的应用
( P" ^, o. l( h+ a& \
* L) u! V' N/ N: p3 D# `
读文件
" E) j! N: K7 o8 l/ x) Z
WebRequest webReq = WebRequest.Create(updateFileUrl);
# U2 }) P0 E& Z8 ?, [9 G2 ]
WebResponse webRes = webReq.GetResponse();
% K4 C; u+ p8 Y* n9 S
fileLength = webRes.ContentLength;
+ H" X2 m/ l$ C/ _
* ]! c6 z! ~* L/ \* L8 X- V
lbState.Text = "正在下载更新文件,请稍后...";
( h/ d1 n1 s' t+ S$ i6 @/ {
pbDownFile.Value = 0;
2 F$ l, E1 o; J
pbDownFile.Maximum = (int)fileLength;
- C: C' h' U; {& D& [3 d9 Q. I" v
3 F0 }1 o# ?# P; L( d! z
Stream srm = webRes.GetResponseStream();
$ U& ?" y3 C) A
StreamReader srmReader = new StreamReader(srm);
' D, e; Z4 L* P2 f! i# S7 I
byte[] bufferbyte = new byte[fileLength];
: ^9 e7 h- ~; i0 P* D7 X
int allByte = (int)bufferbyte.Length;
. U7 W3 Q8 f) a- ~! b% D
int startByte = 0;
2 B0 q4 z0 U4 y* G; ?0 s1 j
while (allByte > 0)
; G& P4 l1 }: {. J* |$ a, p
{
% t/ Z* _: J" R8 K! ]
Application.DoEvents();//让系统在百忙之中来响应其他事件
+ D6 d7 P2 t* d; u
int downByte = srm.Read(bufferbyte, startByte, allByte);//此方式不能传输大文件
5 K; W& k1 f, S$ o
if (downByte == 0) { break; };
+ u9 ?4 P$ T, {8 f! V4 O9 w
startByte += downByte;
! s+ N2 v0 f ?0 W" I g
allByte -= downByte;
/ l6 e5 J, ?% S( j8 Y; e$ c, n4 u
& ` L1 G8 B. M: P V% M
}
复制代码
写文件
1 a3 k+ c N5 j. v
string tempPath = tempUpdatePath + UpdateFile;
. a# w; C2 Y! f: X& N5 H
CreateDirtory(tempPath);
4 b- w: T2 V; {( z# E2 X# N
FileStream fs = new FileStream(tempPath, FileMode.OpenOrCreate, FileAccess.Write);
: T5 M3 e& a% Q2 R
fs.Write(bufferbyte, 0, bufferbyte.Length);
: p9 A% I8 R: r
srm.Close();
X9 J/ l q/ d% g- F8 J
srmReader.Close();
# l5 Y# V: P9 e* d: h
fs.Close();
复制代码
欢迎光临 晨鸟科技 (http://www.chenniao.com/cprofessor/)
Powered by Discuz! X3.2