]> git.sur5r.net Git - bacula/bacula/blob - bacula/src/stored/append.c
b76f77b1db0acf06d22ed7200683e158f18ec7c6
[bacula/bacula] / bacula / src / stored / append.c
1 /*
2  * Append code for Storage daemon
3  *  Kern Sibbald, May MM
4  *
5  *  Version $Id$
6  */
7 /*
8    Copyright (C) 2000, 2001, 2002 Kern Sibbald and John Walker
9
10    This program is free software; you can redistribute it and/or
11    modify it under the terms of the GNU General Public License as
12    published by the Free Software Foundation; either version 2 of
13    the License, or (at your option) any later version.
14
15    This program is distributed in the hope that it will be useful,
16    but WITHOUT ANY WARRANTY; without even the implied warranty of
17    MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE. See the GNU
18    General Public License for more details.
19
20    You should have received a copy of the GNU General Public
21    License along with this program; if not, write to the Free
22    Software Foundation, Inc., 59 Temple Place - Suite 330, Boston,
23    MA 02111-1307, USA.
24
25  */
26
27 #include "bacula.h"
28 #include "stored.h"
29
30 extern int  FiledDataChan;            /* File daemon data channel (port) */
31 extern int BaculaTapeVersion;         /* Version number */
32 extern char BaculaId[];               /* Id string */
33
34 /* Responses sent to the File daemon */
35 static char OK_data[]    = "3000 OK data\n";
36
37 /* 
38  *  Append Data sent from File daemon   
39  *
40  */
41 int do_append_data(JCR *jcr) 
42 {
43    int32_t n;
44    long file_index, stream, last_file_index;
45    BSOCK *ds;
46    BSOCK *fd_sock = jcr->file_bsock;
47    int ok = TRUE;
48    DEVICE *dev = jcr->device->dev;
49    DEV_RECORD rec;
50    DEV_BLOCK  *block;
51    
52    Dmsg0(10, "Start append data.\n");
53
54    /* Tell File daemon to send data */
55    bnet_fsend(fd_sock, OK_data);
56
57    sm_check(__FILE__, __LINE__, False);
58
59 // jcr->spool_attributes = 1;
60    if (!jcr->no_attributes && jcr->spool_attributes) {
61       open_spool_file(jcr, jcr->dir_bsock);
62    }
63
64    ds = fd_sock;
65
66    if (!bnet_set_buffer_size(ds, MAX_NETWORK_BUFFER_SIZE, BNET_SETBUF_WRITE)) {
67       jcr->JobStatus = JS_Cancelled;
68       Jmsg(jcr, M_FATAL, 0, _("Unable to set network buffer size.\n"));
69       return 0;
70    }
71
72    Dmsg1(20, "Begin append device=%s\n", dev_name(dev));
73
74    block = new_block(dev);
75
76    /* 
77     * Acquire output device for writing.  Note, after acquiring a
78     *   device, we MUST release it, which is done at the end of this
79     *   subroutine.
80     */
81    Dmsg0(100, "just before acquire_device\n");
82    if (!acquire_device_for_append(jcr, dev, block)) {
83       jcr->JobStatus = JS_Cancelled;
84       free_block(block);
85       return 0;
86    }
87    sm_check(__FILE__, __LINE__, False);
88
89    Dmsg0(100, "Just after acquire_device_for_append\n");
90    /*
91     * Write Begin Session Record
92     */
93    if (!write_session_label(jcr, block, SOS_LABEL)) {
94       jcr->JobStatus = JS_Cancelled;
95       Jmsg1(jcr, M_FATAL, 0, _("Write session label failed. ERR=%s\n"),
96          strerror_dev(dev));
97       ok = FALSE;
98    }
99
100    sm_check(__FILE__, __LINE__, False);
101
102    memset(&rec, 0, sizeof(rec));
103
104    /* 
105     * Get Data from File daemon, write to device   
106     */
107    jcr->VolFirstFile = 0;
108    time(&jcr->run_time);              /* start counting time for rates */
109    for (last_file_index = 0; ok && !job_cancelled(jcr); ) {
110       char info[100];
111
112       /* Read Stream header from the File daemon.
113        *  The stream header consists of the following:
114        *    file_index (sequential Bacula file index)
115        *    stream     (arbitrary Bacula number to distinguish parts of data)
116        *    info       (Info for Storage daemon -- compressed, encryped, ...)
117        */
118       if ((n=bget_msg(ds)) < 0) { 
119          Jmsg1(jcr, M_FATAL, 0, _("Error reading data header from FD. ERR=%s\n"),
120             bnet_strerror(ds));
121          ok = FALSE;
122          break;
123       }
124       if (n == 0 || job_cancelled(jcr)) {
125          break;                       /* all done */
126       }
127       sm_check(__FILE__, __LINE__, False);
128       ds->msg[ds->msglen] = 0;
129       if (sscanf(ds->msg, "%ld %ld %100s", &file_index, &stream, info) != 3) {
130          Jmsg1(jcr, M_FATAL, 0, _("Malformed data header from FD: %s\n"), ds->msg);
131          ok = FALSE;
132          break;
133       }
134       Dmsg2(190, "<filed: Header FilInx=%d stream=%d\n", file_index, stream);
135
136       if (!(file_index > 0 && (file_index == last_file_index ||
137           file_index == last_file_index + 1))) {
138          Jmsg0(jcr, M_FATAL, 0, _("File index from FD not positive or sequential\n"));
139          ok = FALSE;
140          break;
141       }
142       if (file_index != last_file_index) {
143          jcr->JobFiles = file_index;
144          if (jcr->VolFirstFile == 0) {
145             jcr->VolFirstFile = file_index;
146          }
147          last_file_index = file_index;
148       }
149       
150       /* Read data stream from the File daemon.
151        *  The data stream is just raw bytes
152        */
153       sm_check(__FILE__, __LINE__, False);
154       while ((n=bget_msg(ds)) > 0 && !job_cancelled(jcr)) {
155
156          sm_check(__FILE__, __LINE__, False);
157          rec.VolSessionId = jcr->VolSessionId;
158          rec.VolSessionTime = jcr->VolSessionTime;
159          rec.FileIndex = file_index;
160          rec.Stream = stream;
161          rec.data_len = ds->msglen;
162          rec.data = ds->msg;            /* use message buffer */
163
164          Dmsg4(250, "before writ_rec FI=%d SessId=%d Strm=%s len=%d\n",
165             rec.FileIndex, rec.VolSessionId, stream_to_ascii(rec.Stream), 
166             rec.data_len);
167           
168          while (!write_record_to_block(block, &rec)) {
169             Dmsg2(150, "!write_record_to_block data_len=%d rem=%d\n", rec.data_len,
170                        rec.remainder);
171             if (!write_block_to_device(jcr, dev, block)) {
172                Dmsg2(90, "Got write_block_to_dev error on device %s. %s\n",
173                   dev_name(dev), strerror_dev(dev));
174                Jmsg(jcr, M_FATAL, 0, _("Cannot fixup device error. %s\n"),
175                      strerror_dev(dev));
176                ok = FALSE;
177                break;
178             }
179          }
180          sm_check(__FILE__, __LINE__, False);
181          if (!ok) {
182             Dmsg0(400, "Not OK\n");
183             break;
184          }
185          jcr->JobBytes += rec.data_len;   /* increment bytes this job */
186          Dmsg4(190, "write_record FI=%s SessId=%d Strm=%s len=%d\n",
187             FI_to_ascii(rec.FileIndex), rec.VolSessionId, 
188             stream_to_ascii(rec.Stream), rec.data_len);
189          /* Send attributes and MD5 to Director for Catalog */
190          if (stream == STREAM_UNIX_ATTRIBUTES || stream == STREAM_MD5_SIGNATURE) {
191             if (!jcr->no_attributes) {
192                if (jcr->spool_attributes && jcr->dir_bsock->spool_fd) {
193                   jcr->dir_bsock->spool = 1;
194                }
195                if (!dir_update_file_attributes(jcr, &rec)) {
196                   Jmsg(jcr, M_FATAL, 0, _("Error updating file attributes. ERR=%s\n"),
197                      bnet_strerror(jcr->dir_bsock));
198                   ok = FALSE;
199                   jcr->dir_bsock->spool = 0;
200                   break;
201                }
202                jcr->dir_bsock->spool = 0;
203             }
204          }
205          sm_check(__FILE__, __LINE__, False);
206       }
207       if (n < 0) {
208          Jmsg1(jcr, M_FATAL, 0, _("Network error on data channel. ERR=%s\n"),
209             bnet_strerror(ds));
210          ok = FALSE;
211          break;
212       }
213    }
214    /* 
215     *******FIXME***** we should put the ok status in the End of
216     * session label 
217     *
218     *   We probably need a new flag that says "Do not attempt
219     *   to write because there is no tape".
220     */
221    sm_check(__FILE__, __LINE__, False);
222    Dmsg0(90, "Write_end_session_label()\n");
223    if (!write_session_label(jcr, block, EOS_LABEL)) {
224       Jmsg1(jcr, M_FATAL, 0, _("Error writting end session label. ERR=%s\n"),
225           strerror_dev(dev));
226       ok = FALSE;
227    }
228    /* Write out final block of this session */
229    if (!write_block_to_device(jcr, dev, block)) {
230       Pmsg0(000, "Set ok=FALSE after write_block_to_device.\n");
231       ok = FALSE;
232    }
233
234    /* Release the device */
235    if (!release_device(jcr, dev, block)) {
236       Pmsg0(000, "Error in release_device\n");
237       ok = FALSE;
238    }
239
240    free_block(block);
241
242    if (jcr->spool_attributes && jcr->dir_bsock->spool_fd) {
243       bnet_despool(jcr->dir_bsock);
244       close_spool_file(jcr, jcr->dir_bsock);
245    }
246
247    Dmsg0(90, "return from do_append_data()\n");
248    return ok ? 1 : 0;
249 }