1*9da22751SDavid van Moolenbroek /* $NetBSD: kvm.c,v 1.101 2014/02/19 20:21:22 dsl Exp $ */
2*9da22751SDavid van Moolenbroek
3*9da22751SDavid van Moolenbroek /*-
4*9da22751SDavid van Moolenbroek * Copyright (c) 1989, 1992, 1993
5*9da22751SDavid van Moolenbroek * The Regents of the University of California. All rights reserved.
6*9da22751SDavid van Moolenbroek *
7*9da22751SDavid van Moolenbroek * This code is derived from software developed by the Computer Systems
8*9da22751SDavid van Moolenbroek * Engineering group at Lawrence Berkeley Laboratory under DARPA contract
9*9da22751SDavid van Moolenbroek * BG 91-66 and contributed to Berkeley.
10*9da22751SDavid van Moolenbroek *
11*9da22751SDavid van Moolenbroek * Redistribution and use in source and binary forms, with or without
12*9da22751SDavid van Moolenbroek * modification, are permitted provided that the following conditions
13*9da22751SDavid van Moolenbroek * are met:
14*9da22751SDavid van Moolenbroek * 1. Redistributions of source code must retain the above copyright
15*9da22751SDavid van Moolenbroek * notice, this list of conditions and the following disclaimer.
16*9da22751SDavid van Moolenbroek * 2. Redistributions in binary form must reproduce the above copyright
17*9da22751SDavid van Moolenbroek * notice, this list of conditions and the following disclaimer in the
18*9da22751SDavid van Moolenbroek * documentation and/or other materials provided with the distribution.
19*9da22751SDavid van Moolenbroek * 3. Neither the name of the University nor the names of its contributors
20*9da22751SDavid van Moolenbroek * may be used to endorse or promote products derived from this software
21*9da22751SDavid van Moolenbroek * without specific prior written permission.
22*9da22751SDavid van Moolenbroek *
23*9da22751SDavid van Moolenbroek * THIS SOFTWARE IS PROVIDED BY THE REGENTS AND CONTRIBUTORS ``AS IS'' AND
24*9da22751SDavid van Moolenbroek * ANY EXPRESS OR IMPLIED WARRANTIES, INCLUDING, BUT NOT LIMITED TO, THE
25*9da22751SDavid van Moolenbroek * IMPLIED WARRANTIES OF MERCHANTABILITY AND FITNESS FOR A PARTICULAR PURPOSE
26*9da22751SDavid van Moolenbroek * ARE DISCLAIMED. IN NO EVENT SHALL THE REGENTS OR CONTRIBUTORS BE LIABLE
27*9da22751SDavid van Moolenbroek * FOR ANY DIRECT, INDIRECT, INCIDENTAL, SPECIAL, EXEMPLARY, OR CONSEQUENTIAL
28*9da22751SDavid van Moolenbroek * DAMAGES (INCLUDING, BUT NOT LIMITED TO, PROCUREMENT OF SUBSTITUTE GOODS
29*9da22751SDavid van Moolenbroek * OR SERVICES; LOSS OF USE, DATA, OR PROFITS; OR BUSINESS INTERRUPTION)
30*9da22751SDavid van Moolenbroek * HOWEVER CAUSED AND ON ANY THEORY OF LIABILITY, WHETHER IN CONTRACT, STRICT
31*9da22751SDavid van Moolenbroek * LIABILITY, OR TORT (INCLUDING NEGLIGENCE OR OTHERWISE) ARISING IN ANY WAY
32*9da22751SDavid van Moolenbroek * OUT OF THE USE OF THIS SOFTWARE, EVEN IF ADVISED OF THE POSSIBILITY OF
33*9da22751SDavid van Moolenbroek * SUCH DAMAGE.
34*9da22751SDavid van Moolenbroek */
35*9da22751SDavid van Moolenbroek
36*9da22751SDavid van Moolenbroek #include <sys/cdefs.h>
37*9da22751SDavid van Moolenbroek #if defined(LIBC_SCCS) && !defined(lint)
38*9da22751SDavid van Moolenbroek #if 0
39*9da22751SDavid van Moolenbroek static char sccsid[] = "@(#)kvm.c 8.2 (Berkeley) 2/13/94";
40*9da22751SDavid van Moolenbroek #else
41*9da22751SDavid van Moolenbroek __RCSID("$NetBSD: kvm.c,v 1.101 2014/02/19 20:21:22 dsl Exp $");
42*9da22751SDavid van Moolenbroek #endif
43*9da22751SDavid van Moolenbroek #endif /* LIBC_SCCS and not lint */
44*9da22751SDavid van Moolenbroek
45*9da22751SDavid van Moolenbroek #include <sys/param.h>
46*9da22751SDavid van Moolenbroek #include <sys/lwp.h>
47*9da22751SDavid van Moolenbroek #include <sys/proc.h>
48*9da22751SDavid van Moolenbroek #include <sys/ioctl.h>
49*9da22751SDavid van Moolenbroek #include <sys/stat.h>
50*9da22751SDavid van Moolenbroek #include <sys/sysctl.h>
51*9da22751SDavid van Moolenbroek
52*9da22751SDavid van Moolenbroek #include <sys/core.h>
53*9da22751SDavid van Moolenbroek #include <sys/exec.h>
54*9da22751SDavid van Moolenbroek #include <sys/kcore.h>
55*9da22751SDavid van Moolenbroek #include <sys/ksyms.h>
56*9da22751SDavid van Moolenbroek #include <sys/types.h>
57*9da22751SDavid van Moolenbroek
58*9da22751SDavid van Moolenbroek #include <uvm/uvm_extern.h>
59*9da22751SDavid van Moolenbroek
60*9da22751SDavid van Moolenbroek #include <machine/cpu.h>
61*9da22751SDavid van Moolenbroek
62*9da22751SDavid van Moolenbroek #include <ctype.h>
63*9da22751SDavid van Moolenbroek #include <errno.h>
64*9da22751SDavid van Moolenbroek #include <fcntl.h>
65*9da22751SDavid van Moolenbroek #include <limits.h>
66*9da22751SDavid van Moolenbroek #include <nlist.h>
67*9da22751SDavid van Moolenbroek #include <paths.h>
68*9da22751SDavid van Moolenbroek #include <stdarg.h>
69*9da22751SDavid van Moolenbroek #include <stdio.h>
70*9da22751SDavid van Moolenbroek #include <stdlib.h>
71*9da22751SDavid van Moolenbroek #include <string.h>
72*9da22751SDavid van Moolenbroek #include <unistd.h>
73*9da22751SDavid van Moolenbroek #include <kvm.h>
74*9da22751SDavid van Moolenbroek
75*9da22751SDavid van Moolenbroek #include "kvm_private.h"
76*9da22751SDavid van Moolenbroek
77*9da22751SDavid van Moolenbroek static int _kvm_get_header(kvm_t *);
78*9da22751SDavid van Moolenbroek static kvm_t *_kvm_open(kvm_t *, const char *, const char *,
79*9da22751SDavid van Moolenbroek const char *, int, char *);
80*9da22751SDavid van Moolenbroek static int clear_gap(kvm_t *, bool (*)(void *, const void *, size_t),
81*9da22751SDavid van Moolenbroek void *, size_t);
82*9da22751SDavid van Moolenbroek static off_t Lseek(kvm_t *, int, off_t, int);
83*9da22751SDavid van Moolenbroek static ssize_t Pread(kvm_t *, int, void *, size_t, off_t);
84*9da22751SDavid van Moolenbroek
85*9da22751SDavid van Moolenbroek char *
kvm_geterr(kvm_t * kd)86*9da22751SDavid van Moolenbroek kvm_geterr(kvm_t *kd)
87*9da22751SDavid van Moolenbroek {
88*9da22751SDavid van Moolenbroek return (kd->errbuf);
89*9da22751SDavid van Moolenbroek }
90*9da22751SDavid van Moolenbroek
91*9da22751SDavid van Moolenbroek const char *
kvm_getkernelname(kvm_t * kd)92*9da22751SDavid van Moolenbroek kvm_getkernelname(kvm_t *kd)
93*9da22751SDavid van Moolenbroek {
94*9da22751SDavid van Moolenbroek return kd->kernelname;
95*9da22751SDavid van Moolenbroek }
96*9da22751SDavid van Moolenbroek
97*9da22751SDavid van Moolenbroek /*
98*9da22751SDavid van Moolenbroek * Report an error using printf style arguments. "program" is kd->program
99*9da22751SDavid van Moolenbroek * on hard errors, and 0 on soft errors, so that under sun error emulation,
100*9da22751SDavid van Moolenbroek * only hard errors are printed out (otherwise, programs like gdb will
101*9da22751SDavid van Moolenbroek * generate tons of error messages when trying to access bogus pointers).
102*9da22751SDavid van Moolenbroek */
103*9da22751SDavid van Moolenbroek void
_kvm_err(kvm_t * kd,const char * program,const char * fmt,...)104*9da22751SDavid van Moolenbroek _kvm_err(kvm_t *kd, const char *program, const char *fmt, ...)
105*9da22751SDavid van Moolenbroek {
106*9da22751SDavid van Moolenbroek va_list ap;
107*9da22751SDavid van Moolenbroek
108*9da22751SDavid van Moolenbroek va_start(ap, fmt);
109*9da22751SDavid van Moolenbroek if (program != NULL) {
110*9da22751SDavid van Moolenbroek (void)fprintf(stderr, "%s: ", program);
111*9da22751SDavid van Moolenbroek (void)vfprintf(stderr, fmt, ap);
112*9da22751SDavid van Moolenbroek (void)fputc('\n', stderr);
113*9da22751SDavid van Moolenbroek } else
114*9da22751SDavid van Moolenbroek (void)vsnprintf(kd->errbuf,
115*9da22751SDavid van Moolenbroek sizeof(kd->errbuf), fmt, ap);
116*9da22751SDavid van Moolenbroek
117*9da22751SDavid van Moolenbroek va_end(ap);
118*9da22751SDavid van Moolenbroek }
119*9da22751SDavid van Moolenbroek
120*9da22751SDavid van Moolenbroek void
_kvm_syserr(kvm_t * kd,const char * program,const char * fmt,...)121*9da22751SDavid van Moolenbroek _kvm_syserr(kvm_t *kd, const char *program, const char *fmt, ...)
122*9da22751SDavid van Moolenbroek {
123*9da22751SDavid van Moolenbroek va_list ap;
124*9da22751SDavid van Moolenbroek size_t n;
125*9da22751SDavid van Moolenbroek
126*9da22751SDavid van Moolenbroek va_start(ap, fmt);
127*9da22751SDavid van Moolenbroek if (program != NULL) {
128*9da22751SDavid van Moolenbroek (void)fprintf(stderr, "%s: ", program);
129*9da22751SDavid van Moolenbroek (void)vfprintf(stderr, fmt, ap);
130*9da22751SDavid van Moolenbroek (void)fprintf(stderr, ": %s\n", strerror(errno));
131*9da22751SDavid van Moolenbroek } else {
132*9da22751SDavid van Moolenbroek char *cp = kd->errbuf;
133*9da22751SDavid van Moolenbroek
134*9da22751SDavid van Moolenbroek (void)vsnprintf(cp, sizeof(kd->errbuf), fmt, ap);
135*9da22751SDavid van Moolenbroek n = strlen(cp);
136*9da22751SDavid van Moolenbroek (void)snprintf(&cp[n], sizeof(kd->errbuf) - n, ": %s",
137*9da22751SDavid van Moolenbroek strerror(errno));
138*9da22751SDavid van Moolenbroek }
139*9da22751SDavid van Moolenbroek va_end(ap);
140*9da22751SDavid van Moolenbroek }
141*9da22751SDavid van Moolenbroek
142*9da22751SDavid van Moolenbroek void *
_kvm_malloc(kvm_t * kd,size_t n)143*9da22751SDavid van Moolenbroek _kvm_malloc(kvm_t *kd, size_t n)
144*9da22751SDavid van Moolenbroek {
145*9da22751SDavid van Moolenbroek void *p;
146*9da22751SDavid van Moolenbroek
147*9da22751SDavid van Moolenbroek if ((p = malloc(n)) == NULL)
148*9da22751SDavid van Moolenbroek _kvm_err(kd, kd->program, "%s", strerror(errno));
149*9da22751SDavid van Moolenbroek return (p);
150*9da22751SDavid van Moolenbroek }
151*9da22751SDavid van Moolenbroek
152*9da22751SDavid van Moolenbroek /*
153*9da22751SDavid van Moolenbroek * Wrapper around the lseek(2) system call; calls _kvm_syserr() for us
154*9da22751SDavid van Moolenbroek * in the event of emergency.
155*9da22751SDavid van Moolenbroek */
156*9da22751SDavid van Moolenbroek static off_t
Lseek(kvm_t * kd,int fd,off_t offset,int whence)157*9da22751SDavid van Moolenbroek Lseek(kvm_t *kd, int fd, off_t offset, int whence)
158*9da22751SDavid van Moolenbroek {
159*9da22751SDavid van Moolenbroek off_t off;
160*9da22751SDavid van Moolenbroek
161*9da22751SDavid van Moolenbroek errno = 0;
162*9da22751SDavid van Moolenbroek
163*9da22751SDavid van Moolenbroek if ((off = lseek(fd, offset, whence)) == -1 && errno != 0) {
164*9da22751SDavid van Moolenbroek _kvm_syserr(kd, kd->program, "Lseek");
165*9da22751SDavid van Moolenbroek return ((off_t)-1);
166*9da22751SDavid van Moolenbroek }
167*9da22751SDavid van Moolenbroek return (off);
168*9da22751SDavid van Moolenbroek }
169*9da22751SDavid van Moolenbroek
170*9da22751SDavid van Moolenbroek ssize_t
_kvm_pread(kvm_t * kd,int fd,void * buf,size_t size,off_t off)171*9da22751SDavid van Moolenbroek _kvm_pread(kvm_t *kd, int fd, void *buf, size_t size, off_t off)
172*9da22751SDavid van Moolenbroek {
173*9da22751SDavid van Moolenbroek ptrdiff_t moff;
174*9da22751SDavid van Moolenbroek void *newbuf;
175*9da22751SDavid van Moolenbroek size_t dsize;
176*9da22751SDavid van Moolenbroek ssize_t rv;
177*9da22751SDavid van Moolenbroek off_t doff;
178*9da22751SDavid van Moolenbroek
179*9da22751SDavid van Moolenbroek /* If aligned nothing to do. */
180*9da22751SDavid van Moolenbroek if (((off % kd->fdalign) | (size % kd->fdalign)) == 0) {
181*9da22751SDavid van Moolenbroek return pread(fd, buf, size, off);
182*9da22751SDavid van Moolenbroek }
183*9da22751SDavid van Moolenbroek
184*9da22751SDavid van Moolenbroek /*
185*9da22751SDavid van Moolenbroek * Otherwise must buffer. We can't tolerate short reads in this
186*9da22751SDavid van Moolenbroek * case (lazy bum).
187*9da22751SDavid van Moolenbroek */
188*9da22751SDavid van Moolenbroek moff = (ptrdiff_t)off % kd->fdalign;
189*9da22751SDavid van Moolenbroek doff = off - moff;
190*9da22751SDavid van Moolenbroek dsize = moff + size + kd->fdalign - 1;
191*9da22751SDavid van Moolenbroek dsize -= dsize % kd->fdalign;
192*9da22751SDavid van Moolenbroek if (kd->iobufsz < dsize) {
193*9da22751SDavid van Moolenbroek newbuf = realloc(kd->iobuf, dsize);
194*9da22751SDavid van Moolenbroek if (newbuf == NULL) {
195*9da22751SDavid van Moolenbroek _kvm_syserr(kd, 0, "cannot allocate I/O buffer");
196*9da22751SDavid van Moolenbroek return (-1);
197*9da22751SDavid van Moolenbroek }
198*9da22751SDavid van Moolenbroek kd->iobuf = newbuf;
199*9da22751SDavid van Moolenbroek kd->iobufsz = dsize;
200*9da22751SDavid van Moolenbroek }
201*9da22751SDavid van Moolenbroek rv = pread(fd, kd->iobuf, dsize, doff);
202*9da22751SDavid van Moolenbroek if (rv < size + moff)
203*9da22751SDavid van Moolenbroek return -1;
204*9da22751SDavid van Moolenbroek memcpy(buf, kd->iobuf + moff, size);
205*9da22751SDavid van Moolenbroek return size;
206*9da22751SDavid van Moolenbroek }
207*9da22751SDavid van Moolenbroek
208*9da22751SDavid van Moolenbroek /*
209*9da22751SDavid van Moolenbroek * Wrapper around the pread(2) system call; calls _kvm_syserr() for us
210*9da22751SDavid van Moolenbroek * in the event of emergency.
211*9da22751SDavid van Moolenbroek */
212*9da22751SDavid van Moolenbroek static ssize_t
Pread(kvm_t * kd,int fd,void * buf,size_t nbytes,off_t offset)213*9da22751SDavid van Moolenbroek Pread(kvm_t *kd, int fd, void *buf, size_t nbytes, off_t offset)
214*9da22751SDavid van Moolenbroek {
215*9da22751SDavid van Moolenbroek ssize_t rv;
216*9da22751SDavid van Moolenbroek
217*9da22751SDavid van Moolenbroek errno = 0;
218*9da22751SDavid van Moolenbroek
219*9da22751SDavid van Moolenbroek if ((rv = _kvm_pread(kd, fd, buf, nbytes, offset)) != nbytes &&
220*9da22751SDavid van Moolenbroek errno != 0)
221*9da22751SDavid van Moolenbroek _kvm_syserr(kd, kd->program, "Pread");
222*9da22751SDavid van Moolenbroek return (rv);
223*9da22751SDavid van Moolenbroek }
224*9da22751SDavid van Moolenbroek
225*9da22751SDavid van Moolenbroek static kvm_t *
_kvm_open(kvm_t * kd,const char * uf,const char * mf,const char * sf,int flag,char * errout)226*9da22751SDavid van Moolenbroek _kvm_open(kvm_t *kd, const char *uf, const char *mf, const char *sf, int flag,
227*9da22751SDavid van Moolenbroek char *errout)
228*9da22751SDavid van Moolenbroek {
229*9da22751SDavid van Moolenbroek struct stat st;
230*9da22751SDavid van Moolenbroek int ufgiven;
231*9da22751SDavid van Moolenbroek
232*9da22751SDavid van Moolenbroek kd->pmfd = -1;
233*9da22751SDavid van Moolenbroek kd->vmfd = -1;
234*9da22751SDavid van Moolenbroek kd->swfd = -1;
235*9da22751SDavid van Moolenbroek kd->nlfd = -1;
236*9da22751SDavid van Moolenbroek kd->alive = KVM_ALIVE_DEAD;
237*9da22751SDavid van Moolenbroek kd->procbase = NULL;
238*9da22751SDavid van Moolenbroek kd->procbase_len = 0;
239*9da22751SDavid van Moolenbroek kd->procbase2 = NULL;
240*9da22751SDavid van Moolenbroek kd->procbase2_len = 0;
241*9da22751SDavid van Moolenbroek kd->lwpbase = NULL;
242*9da22751SDavid van Moolenbroek kd->lwpbase_len = 0;
243*9da22751SDavid van Moolenbroek kd->nbpg = getpagesize();
244*9da22751SDavid van Moolenbroek kd->swapspc = NULL;
245*9da22751SDavid van Moolenbroek kd->argspc = NULL;
246*9da22751SDavid van Moolenbroek kd->argspc_len = 0;
247*9da22751SDavid van Moolenbroek kd->argbuf = NULL;
248*9da22751SDavid van Moolenbroek kd->argv = NULL;
249*9da22751SDavid van Moolenbroek kd->vmst = NULL;
250*9da22751SDavid van Moolenbroek kd->vm_page_buckets = NULL;
251*9da22751SDavid van Moolenbroek kd->kcore_hdr = NULL;
252*9da22751SDavid van Moolenbroek kd->cpu_dsize = 0;
253*9da22751SDavid van Moolenbroek kd->cpu_data = NULL;
254*9da22751SDavid van Moolenbroek kd->dump_off = 0;
255*9da22751SDavid van Moolenbroek kd->fdalign = 1;
256*9da22751SDavid van Moolenbroek kd->iobuf = NULL;
257*9da22751SDavid van Moolenbroek kd->iobufsz = 0;
258*9da22751SDavid van Moolenbroek
259*9da22751SDavid van Moolenbroek if (flag & KVM_NO_FILES) {
260*9da22751SDavid van Moolenbroek kd->alive = KVM_ALIVE_SYSCTL;
261*9da22751SDavid van Moolenbroek return(kd);
262*9da22751SDavid van Moolenbroek }
263*9da22751SDavid van Moolenbroek
264*9da22751SDavid van Moolenbroek /*
265*9da22751SDavid van Moolenbroek * Call the MD open hook. This sets:
266*9da22751SDavid van Moolenbroek * usrstack, min_uva, max_uva
267*9da22751SDavid van Moolenbroek */
268*9da22751SDavid van Moolenbroek if (_kvm_mdopen(kd)) {
269*9da22751SDavid van Moolenbroek _kvm_err(kd, kd->program, "md init failed");
270*9da22751SDavid van Moolenbroek goto failed;
271*9da22751SDavid van Moolenbroek }
272*9da22751SDavid van Moolenbroek
273*9da22751SDavid van Moolenbroek ufgiven = (uf != NULL);
274*9da22751SDavid van Moolenbroek if (!ufgiven) {
275*9da22751SDavid van Moolenbroek #ifdef CPU_BOOTED_KERNEL
276*9da22751SDavid van Moolenbroek /* 130 is 128 + '/' + '\0' */
277*9da22751SDavid van Moolenbroek static char booted_kernel[130];
278*9da22751SDavid van Moolenbroek int mib[2], rc;
279*9da22751SDavid van Moolenbroek size_t len;
280*9da22751SDavid van Moolenbroek
281*9da22751SDavid van Moolenbroek mib[0] = CTL_MACHDEP;
282*9da22751SDavid van Moolenbroek mib[1] = CPU_BOOTED_KERNEL;
283*9da22751SDavid van Moolenbroek booted_kernel[0] = '/';
284*9da22751SDavid van Moolenbroek booted_kernel[1] = '\0';
285*9da22751SDavid van Moolenbroek len = sizeof(booted_kernel) - 2;
286*9da22751SDavid van Moolenbroek rc = sysctl(&mib[0], 2, &booted_kernel[1], &len, NULL, 0);
287*9da22751SDavid van Moolenbroek booted_kernel[sizeof(booted_kernel) - 1] = '\0';
288*9da22751SDavid van Moolenbroek uf = (booted_kernel[1] == '/') ?
289*9da22751SDavid van Moolenbroek &booted_kernel[1] : &booted_kernel[0];
290*9da22751SDavid van Moolenbroek if (rc != -1)
291*9da22751SDavid van Moolenbroek rc = stat(uf, &st);
292*9da22751SDavid van Moolenbroek if (rc != -1 && !S_ISREG(st.st_mode))
293*9da22751SDavid van Moolenbroek rc = -1;
294*9da22751SDavid van Moolenbroek if (rc == -1)
295*9da22751SDavid van Moolenbroek #endif /* CPU_BOOTED_KERNEL */
296*9da22751SDavid van Moolenbroek uf = _PATH_UNIX;
297*9da22751SDavid van Moolenbroek }
298*9da22751SDavid van Moolenbroek else if (strlen(uf) >= MAXPATHLEN) {
299*9da22751SDavid van Moolenbroek _kvm_err(kd, kd->program, "exec file name too long");
300*9da22751SDavid van Moolenbroek goto failed;
301*9da22751SDavid van Moolenbroek }
302*9da22751SDavid van Moolenbroek if (flag & ~O_RDWR) {
303*9da22751SDavid van Moolenbroek _kvm_err(kd, kd->program, "bad flags arg");
304*9da22751SDavid van Moolenbroek goto failed;
305*9da22751SDavid van Moolenbroek }
306*9da22751SDavid van Moolenbroek if (mf == 0)
307*9da22751SDavid van Moolenbroek mf = _PATH_MEM;
308*9da22751SDavid van Moolenbroek if (sf == 0)
309*9da22751SDavid van Moolenbroek sf = _PATH_DRUM;
310*9da22751SDavid van Moolenbroek
311*9da22751SDavid van Moolenbroek /*
312*9da22751SDavid van Moolenbroek * Open the kernel namelist. If /dev/ksyms doesn't
313*9da22751SDavid van Moolenbroek * exist, open the current kernel.
314*9da22751SDavid van Moolenbroek */
315*9da22751SDavid van Moolenbroek if (ufgiven == 0)
316*9da22751SDavid van Moolenbroek kd->nlfd = open(_PATH_KSYMS, O_RDONLY | O_CLOEXEC, 0);
317*9da22751SDavid van Moolenbroek if (kd->nlfd < 0) {
318*9da22751SDavid van Moolenbroek if ((kd->nlfd = open(uf, O_RDONLY | O_CLOEXEC, 0)) < 0) {
319*9da22751SDavid van Moolenbroek _kvm_syserr(kd, kd->program, "%s", uf);
320*9da22751SDavid van Moolenbroek goto failed;
321*9da22751SDavid van Moolenbroek }
322*9da22751SDavid van Moolenbroek strlcpy(kd->kernelname, uf, sizeof(kd->kernelname));
323*9da22751SDavid van Moolenbroek } else {
324*9da22751SDavid van Moolenbroek strlcpy(kd->kernelname, _PATH_KSYMS, sizeof(kd->kernelname));
325*9da22751SDavid van Moolenbroek /*
326*9da22751SDavid van Moolenbroek * We're here because /dev/ksyms was opened
327*9da22751SDavid van Moolenbroek * successfully. However, we don't want to keep it
328*9da22751SDavid van Moolenbroek * open, so we close it now. Later, we will open
329*9da22751SDavid van Moolenbroek * it again, since it will be the only case where
330*9da22751SDavid van Moolenbroek * kd->nlfd is negative.
331*9da22751SDavid van Moolenbroek */
332*9da22751SDavid van Moolenbroek close(kd->nlfd);
333*9da22751SDavid van Moolenbroek kd->nlfd = -1;
334*9da22751SDavid van Moolenbroek }
335*9da22751SDavid van Moolenbroek
336*9da22751SDavid van Moolenbroek if ((kd->pmfd = open(mf, flag | O_CLOEXEC, 0)) < 0) {
337*9da22751SDavid van Moolenbroek _kvm_syserr(kd, kd->program, "%s", mf);
338*9da22751SDavid van Moolenbroek goto failed;
339*9da22751SDavid van Moolenbroek }
340*9da22751SDavid van Moolenbroek if (fstat(kd->pmfd, &st) < 0) {
341*9da22751SDavid van Moolenbroek _kvm_syserr(kd, kd->program, "%s", mf);
342*9da22751SDavid van Moolenbroek goto failed;
343*9da22751SDavid van Moolenbroek }
344*9da22751SDavid van Moolenbroek if (S_ISCHR(st.st_mode) && strcmp(mf, _PATH_MEM) == 0) {
345*9da22751SDavid van Moolenbroek /*
346*9da22751SDavid van Moolenbroek * If this is /dev/mem, open kmem too. (Maybe we should
347*9da22751SDavid van Moolenbroek * make it work for either /dev/mem or /dev/kmem -- in either
348*9da22751SDavid van Moolenbroek * case you're working with a live kernel.)
349*9da22751SDavid van Moolenbroek */
350*9da22751SDavid van Moolenbroek if ((kd->vmfd = open(_PATH_KMEM, flag | O_CLOEXEC, 0)) < 0) {
351*9da22751SDavid van Moolenbroek _kvm_syserr(kd, kd->program, "%s", _PATH_KMEM);
352*9da22751SDavid van Moolenbroek goto failed;
353*9da22751SDavid van Moolenbroek }
354*9da22751SDavid van Moolenbroek kd->alive = KVM_ALIVE_FILES;
355*9da22751SDavid van Moolenbroek if ((kd->swfd = open(sf, flag | O_CLOEXEC, 0)) < 0) {
356*9da22751SDavid van Moolenbroek if (errno != ENXIO) {
357*9da22751SDavid van Moolenbroek _kvm_syserr(kd, kd->program, "%s", sf);
358*9da22751SDavid van Moolenbroek goto failed;
359*9da22751SDavid van Moolenbroek }
360*9da22751SDavid van Moolenbroek /* swap is not configured? not fatal */
361*9da22751SDavid van Moolenbroek }
362*9da22751SDavid van Moolenbroek } else {
363*9da22751SDavid van Moolenbroek kd->fdalign = DEV_BSIZE; /* XXX */
364*9da22751SDavid van Moolenbroek /*
365*9da22751SDavid van Moolenbroek * This is a crash dump.
366*9da22751SDavid van Moolenbroek * Initialize the virtual address translation machinery.
367*9da22751SDavid van Moolenbroek *
368*9da22751SDavid van Moolenbroek * If there is no valid core header, fail silently here.
369*9da22751SDavid van Moolenbroek * The address translations however will fail without
370*9da22751SDavid van Moolenbroek * header. Things can be made to run by calling
371*9da22751SDavid van Moolenbroek * kvm_dump_mkheader() before doing any translation.
372*9da22751SDavid van Moolenbroek */
373*9da22751SDavid van Moolenbroek if (_kvm_get_header(kd) == 0) {
374*9da22751SDavid van Moolenbroek if (_kvm_initvtop(kd) < 0)
375*9da22751SDavid van Moolenbroek goto failed;
376*9da22751SDavid van Moolenbroek }
377*9da22751SDavid van Moolenbroek }
378*9da22751SDavid van Moolenbroek return (kd);
379*9da22751SDavid van Moolenbroek failed:
380*9da22751SDavid van Moolenbroek /*
381*9da22751SDavid van Moolenbroek * Copy out the error if doing sane error semantics.
382*9da22751SDavid van Moolenbroek */
383*9da22751SDavid van Moolenbroek if (errout != 0)
384*9da22751SDavid van Moolenbroek (void)strlcpy(errout, kd->errbuf, _POSIX2_LINE_MAX);
385*9da22751SDavid van Moolenbroek (void)kvm_close(kd);
386*9da22751SDavid van Moolenbroek return (0);
387*9da22751SDavid van Moolenbroek }
388*9da22751SDavid van Moolenbroek
389*9da22751SDavid van Moolenbroek /*
390*9da22751SDavid van Moolenbroek * The kernel dump file (from savecore) contains:
391*9da22751SDavid van Moolenbroek * kcore_hdr_t kcore_hdr;
392*9da22751SDavid van Moolenbroek * kcore_seg_t cpu_hdr;
393*9da22751SDavid van Moolenbroek * (opaque) cpu_data; (size is cpu_hdr.c_size)
394*9da22751SDavid van Moolenbroek * kcore_seg_t mem_hdr;
395*9da22751SDavid van Moolenbroek * (memory) mem_data; (size is mem_hdr.c_size)
396*9da22751SDavid van Moolenbroek *
397*9da22751SDavid van Moolenbroek * Note: khdr is padded to khdr.c_hdrsize;
398*9da22751SDavid van Moolenbroek * cpu_hdr and mem_hdr are padded to khdr.c_seghdrsize
399*9da22751SDavid van Moolenbroek */
400*9da22751SDavid van Moolenbroek static int
_kvm_get_header(kvm_t * kd)401*9da22751SDavid van Moolenbroek _kvm_get_header(kvm_t *kd)
402*9da22751SDavid van Moolenbroek {
403*9da22751SDavid van Moolenbroek kcore_hdr_t kcore_hdr;
404*9da22751SDavid van Moolenbroek kcore_seg_t cpu_hdr;
405*9da22751SDavid van Moolenbroek kcore_seg_t mem_hdr;
406*9da22751SDavid van Moolenbroek size_t offset;
407*9da22751SDavid van Moolenbroek ssize_t sz;
408*9da22751SDavid van Moolenbroek
409*9da22751SDavid van Moolenbroek /*
410*9da22751SDavid van Moolenbroek * Read the kcore_hdr_t
411*9da22751SDavid van Moolenbroek */
412*9da22751SDavid van Moolenbroek sz = Pread(kd, kd->pmfd, &kcore_hdr, sizeof(kcore_hdr), (off_t)0);
413*9da22751SDavid van Moolenbroek if (sz != sizeof(kcore_hdr))
414*9da22751SDavid van Moolenbroek return (-1);
415*9da22751SDavid van Moolenbroek
416*9da22751SDavid van Moolenbroek /*
417*9da22751SDavid van Moolenbroek * Currently, we only support dump-files made by the current
418*9da22751SDavid van Moolenbroek * architecture...
419*9da22751SDavid van Moolenbroek */
420*9da22751SDavid van Moolenbroek if ((CORE_GETMAGIC(kcore_hdr) != KCORE_MAGIC) ||
421*9da22751SDavid van Moolenbroek (CORE_GETMID(kcore_hdr) != MID_MACHINE))
422*9da22751SDavid van Moolenbroek return (-1);
423*9da22751SDavid van Moolenbroek
424*9da22751SDavid van Moolenbroek /*
425*9da22751SDavid van Moolenbroek * Currently, we only support exactly 2 segments: cpu-segment
426*9da22751SDavid van Moolenbroek * and data-segment in exactly that order.
427*9da22751SDavid van Moolenbroek */
428*9da22751SDavid van Moolenbroek if (kcore_hdr.c_nseg != 2)
429*9da22751SDavid van Moolenbroek return (-1);
430*9da22751SDavid van Moolenbroek
431*9da22751SDavid van Moolenbroek /*
432*9da22751SDavid van Moolenbroek * Save away the kcore_hdr. All errors after this
433*9da22751SDavid van Moolenbroek * should do a to "goto fail" to deallocate things.
434*9da22751SDavid van Moolenbroek */
435*9da22751SDavid van Moolenbroek kd->kcore_hdr = _kvm_malloc(kd, sizeof(kcore_hdr));
436*9da22751SDavid van Moolenbroek memcpy(kd->kcore_hdr, &kcore_hdr, sizeof(kcore_hdr));
437*9da22751SDavid van Moolenbroek offset = kcore_hdr.c_hdrsize;
438*9da22751SDavid van Moolenbroek
439*9da22751SDavid van Moolenbroek /*
440*9da22751SDavid van Moolenbroek * Read the CPU segment header
441*9da22751SDavid van Moolenbroek */
442*9da22751SDavid van Moolenbroek sz = Pread(kd, kd->pmfd, &cpu_hdr, sizeof(cpu_hdr), (off_t)offset);
443*9da22751SDavid van Moolenbroek if (sz != sizeof(cpu_hdr))
444*9da22751SDavid van Moolenbroek goto fail;
445*9da22751SDavid van Moolenbroek if ((CORE_GETMAGIC(cpu_hdr) != KCORESEG_MAGIC) ||
446*9da22751SDavid van Moolenbroek (CORE_GETFLAG(cpu_hdr) != CORE_CPU))
447*9da22751SDavid van Moolenbroek goto fail;
448*9da22751SDavid van Moolenbroek offset += kcore_hdr.c_seghdrsize;
449*9da22751SDavid van Moolenbroek
450*9da22751SDavid van Moolenbroek /*
451*9da22751SDavid van Moolenbroek * Read the CPU segment DATA.
452*9da22751SDavid van Moolenbroek */
453*9da22751SDavid van Moolenbroek kd->cpu_dsize = cpu_hdr.c_size;
454*9da22751SDavid van Moolenbroek kd->cpu_data = _kvm_malloc(kd, cpu_hdr.c_size);
455*9da22751SDavid van Moolenbroek if (kd->cpu_data == NULL)
456*9da22751SDavid van Moolenbroek goto fail;
457*9da22751SDavid van Moolenbroek sz = Pread(kd, kd->pmfd, kd->cpu_data, cpu_hdr.c_size, (off_t)offset);
458*9da22751SDavid van Moolenbroek if (sz != cpu_hdr.c_size)
459*9da22751SDavid van Moolenbroek goto fail;
460*9da22751SDavid van Moolenbroek offset += cpu_hdr.c_size;
461*9da22751SDavid van Moolenbroek
462*9da22751SDavid van Moolenbroek /*
463*9da22751SDavid van Moolenbroek * Read the next segment header: data segment
464*9da22751SDavid van Moolenbroek */
465*9da22751SDavid van Moolenbroek sz = Pread(kd, kd->pmfd, &mem_hdr, sizeof(mem_hdr), (off_t)offset);
466*9da22751SDavid van Moolenbroek if (sz != sizeof(mem_hdr))
467*9da22751SDavid van Moolenbroek goto fail;
468*9da22751SDavid van Moolenbroek offset += kcore_hdr.c_seghdrsize;
469*9da22751SDavid van Moolenbroek
470*9da22751SDavid van Moolenbroek if ((CORE_GETMAGIC(mem_hdr) != KCORESEG_MAGIC) ||
471*9da22751SDavid van Moolenbroek (CORE_GETFLAG(mem_hdr) != CORE_DATA))
472*9da22751SDavid van Moolenbroek goto fail;
473*9da22751SDavid van Moolenbroek
474*9da22751SDavid van Moolenbroek kd->dump_off = offset;
475*9da22751SDavid van Moolenbroek return (0);
476*9da22751SDavid van Moolenbroek
477*9da22751SDavid van Moolenbroek fail:
478*9da22751SDavid van Moolenbroek if (kd->kcore_hdr != NULL) {
479*9da22751SDavid van Moolenbroek free(kd->kcore_hdr);
480*9da22751SDavid van Moolenbroek kd->kcore_hdr = NULL;
481*9da22751SDavid van Moolenbroek }
482*9da22751SDavid van Moolenbroek if (kd->cpu_data != NULL) {
483*9da22751SDavid van Moolenbroek free(kd->cpu_data);
484*9da22751SDavid van Moolenbroek kd->cpu_data = NULL;
485*9da22751SDavid van Moolenbroek kd->cpu_dsize = 0;
486*9da22751SDavid van Moolenbroek }
487*9da22751SDavid van Moolenbroek return (-1);
488*9da22751SDavid van Moolenbroek }
489*9da22751SDavid van Moolenbroek
490*9da22751SDavid van Moolenbroek /*
491*9da22751SDavid van Moolenbroek * The format while on the dump device is: (new format)
492*9da22751SDavid van Moolenbroek * kcore_seg_t cpu_hdr;
493*9da22751SDavid van Moolenbroek * (opaque) cpu_data; (size is cpu_hdr.c_size)
494*9da22751SDavid van Moolenbroek * kcore_seg_t mem_hdr;
495*9da22751SDavid van Moolenbroek * (memory) mem_data; (size is mem_hdr.c_size)
496*9da22751SDavid van Moolenbroek */
497*9da22751SDavid van Moolenbroek int
kvm_dump_mkheader(kvm_t * kd,off_t dump_off)498*9da22751SDavid van Moolenbroek kvm_dump_mkheader(kvm_t *kd, off_t dump_off)
499*9da22751SDavid van Moolenbroek {
500*9da22751SDavid van Moolenbroek kcore_seg_t cpu_hdr;
501*9da22751SDavid van Moolenbroek size_t hdr_size;
502*9da22751SDavid van Moolenbroek ssize_t sz;
503*9da22751SDavid van Moolenbroek
504*9da22751SDavid van Moolenbroek if (kd->kcore_hdr != NULL) {
505*9da22751SDavid van Moolenbroek _kvm_err(kd, kd->program, "already has a dump header");
506*9da22751SDavid van Moolenbroek return (-1);
507*9da22751SDavid van Moolenbroek }
508*9da22751SDavid van Moolenbroek if (ISALIVE(kd)) {
509*9da22751SDavid van Moolenbroek _kvm_err(kd, kd->program, "don't use on live kernel");
510*9da22751SDavid van Moolenbroek return (-1);
511*9da22751SDavid van Moolenbroek }
512*9da22751SDavid van Moolenbroek
513*9da22751SDavid van Moolenbroek /*
514*9da22751SDavid van Moolenbroek * Validate new format crash dump
515*9da22751SDavid van Moolenbroek */
516*9da22751SDavid van Moolenbroek sz = Pread(kd, kd->pmfd, &cpu_hdr, sizeof(cpu_hdr), dump_off);
517*9da22751SDavid van Moolenbroek if (sz != sizeof(cpu_hdr)) {
518*9da22751SDavid van Moolenbroek _kvm_err(kd, 0, "read %zx bytes at offset %"PRIx64
519*9da22751SDavid van Moolenbroek " for cpu_hdr instead of requested %zu",
520*9da22751SDavid van Moolenbroek sz, dump_off, sizeof(cpu_hdr));
521*9da22751SDavid van Moolenbroek return (-1);
522*9da22751SDavid van Moolenbroek }
523*9da22751SDavid van Moolenbroek if ((CORE_GETMAGIC(cpu_hdr) != KCORE_MAGIC)
524*9da22751SDavid van Moolenbroek || (CORE_GETMID(cpu_hdr) != MID_MACHINE)) {
525*9da22751SDavid van Moolenbroek _kvm_err(kd, 0, "invalid magic in cpu_hdr");
526*9da22751SDavid van Moolenbroek return (0);
527*9da22751SDavid van Moolenbroek }
528*9da22751SDavid van Moolenbroek hdr_size = ALIGN(sizeof(cpu_hdr));
529*9da22751SDavid van Moolenbroek
530*9da22751SDavid van Moolenbroek /*
531*9da22751SDavid van Moolenbroek * Read the CPU segment.
532*9da22751SDavid van Moolenbroek */
533*9da22751SDavid van Moolenbroek kd->cpu_dsize = cpu_hdr.c_size;
534*9da22751SDavid van Moolenbroek kd->cpu_data = _kvm_malloc(kd, kd->cpu_dsize);
535*9da22751SDavid van Moolenbroek if (kd->cpu_data == NULL) {
536*9da22751SDavid van Moolenbroek _kvm_err(kd, kd->program, "no cpu_data");
537*9da22751SDavid van Moolenbroek goto fail;
538*9da22751SDavid van Moolenbroek }
539*9da22751SDavid van Moolenbroek sz = Pread(kd, kd->pmfd, kd->cpu_data, cpu_hdr.c_size,
540*9da22751SDavid van Moolenbroek dump_off + hdr_size);
541*9da22751SDavid van Moolenbroek if (sz != cpu_hdr.c_size) {
542*9da22751SDavid van Moolenbroek _kvm_err(kd, kd->program, "size %zu != cpu_hdr.csize %"PRIu32,
543*9da22751SDavid van Moolenbroek sz, cpu_hdr.c_size);
544*9da22751SDavid van Moolenbroek goto fail;
545*9da22751SDavid van Moolenbroek }
546*9da22751SDavid van Moolenbroek hdr_size += kd->cpu_dsize;
547*9da22751SDavid van Moolenbroek
548*9da22751SDavid van Moolenbroek /*
549*9da22751SDavid van Moolenbroek * Leave phys mem pointer at beginning of memory data
550*9da22751SDavid van Moolenbroek */
551*9da22751SDavid van Moolenbroek kd->dump_off = dump_off + hdr_size;
552*9da22751SDavid van Moolenbroek if (Lseek(kd, kd->pmfd, kd->dump_off, SEEK_SET) == -1) {
553*9da22751SDavid van Moolenbroek _kvm_err(kd, kd->program, "failed to seek to %" PRId64,
554*9da22751SDavid van Moolenbroek (int64_t)kd->dump_off);
555*9da22751SDavid van Moolenbroek goto fail;
556*9da22751SDavid van Moolenbroek }
557*9da22751SDavid van Moolenbroek
558*9da22751SDavid van Moolenbroek /*
559*9da22751SDavid van Moolenbroek * Create a kcore_hdr.
560*9da22751SDavid van Moolenbroek */
561*9da22751SDavid van Moolenbroek kd->kcore_hdr = _kvm_malloc(kd, sizeof(kcore_hdr_t));
562*9da22751SDavid van Moolenbroek if (kd->kcore_hdr == NULL) {
563*9da22751SDavid van Moolenbroek _kvm_err(kd, kd->program, "failed to allocate header");
564*9da22751SDavid van Moolenbroek goto fail;
565*9da22751SDavid van Moolenbroek }
566*9da22751SDavid van Moolenbroek
567*9da22751SDavid van Moolenbroek kd->kcore_hdr->c_hdrsize = ALIGN(sizeof(kcore_hdr_t));
568*9da22751SDavid van Moolenbroek kd->kcore_hdr->c_seghdrsize = ALIGN(sizeof(kcore_seg_t));
569*9da22751SDavid van Moolenbroek kd->kcore_hdr->c_nseg = 2;
570*9da22751SDavid van Moolenbroek CORE_SETMAGIC(*(kd->kcore_hdr), KCORE_MAGIC, MID_MACHINE,0);
571*9da22751SDavid van Moolenbroek
572*9da22751SDavid van Moolenbroek /*
573*9da22751SDavid van Moolenbroek * Now that we have a valid header, enable translations.
574*9da22751SDavid van Moolenbroek */
575*9da22751SDavid van Moolenbroek if (_kvm_initvtop(kd) == 0)
576*9da22751SDavid van Moolenbroek /* Success */
577*9da22751SDavid van Moolenbroek return (hdr_size);
578*9da22751SDavid van Moolenbroek
579*9da22751SDavid van Moolenbroek fail:
580*9da22751SDavid van Moolenbroek if (kd->kcore_hdr != NULL) {
581*9da22751SDavid van Moolenbroek free(kd->kcore_hdr);
582*9da22751SDavid van Moolenbroek kd->kcore_hdr = NULL;
583*9da22751SDavid van Moolenbroek }
584*9da22751SDavid van Moolenbroek if (kd->cpu_data != NULL) {
585*9da22751SDavid van Moolenbroek free(kd->cpu_data);
586*9da22751SDavid van Moolenbroek kd->cpu_data = NULL;
587*9da22751SDavid van Moolenbroek kd->cpu_dsize = 0;
588*9da22751SDavid van Moolenbroek }
589*9da22751SDavid van Moolenbroek return (-1);
590*9da22751SDavid van Moolenbroek }
591*9da22751SDavid van Moolenbroek
592*9da22751SDavid van Moolenbroek static int
clear_gap(kvm_t * kd,bool (* write_buf)(void *,const void *,size_t),void * cookie,size_t size)593*9da22751SDavid van Moolenbroek clear_gap(kvm_t *kd, bool (*write_buf)(void *, const void *, size_t),
594*9da22751SDavid van Moolenbroek void *cookie, size_t size)
595*9da22751SDavid van Moolenbroek {
596*9da22751SDavid van Moolenbroek char buf[1024];
597*9da22751SDavid van Moolenbroek size_t len;
598*9da22751SDavid van Moolenbroek
599*9da22751SDavid van Moolenbroek (void)memset(buf, 0, size > sizeof(buf) ? sizeof(buf) : size);
600*9da22751SDavid van Moolenbroek
601*9da22751SDavid van Moolenbroek while (size > 0) {
602*9da22751SDavid van Moolenbroek len = size > sizeof(buf) ? sizeof(buf) : size;
603*9da22751SDavid van Moolenbroek if (!(*write_buf)(cookie, buf, len)) {
604*9da22751SDavid van Moolenbroek _kvm_syserr(kd, kd->program, "clear_gap");
605*9da22751SDavid van Moolenbroek return -1;
606*9da22751SDavid van Moolenbroek }
607*9da22751SDavid van Moolenbroek size -= len;
608*9da22751SDavid van Moolenbroek }
609*9da22751SDavid van Moolenbroek
610*9da22751SDavid van Moolenbroek return 0;
611*9da22751SDavid van Moolenbroek }
612*9da22751SDavid van Moolenbroek
613*9da22751SDavid van Moolenbroek /*
614*9da22751SDavid van Moolenbroek * Write the dump header by calling write_buf with cookie as first argument.
615*9da22751SDavid van Moolenbroek */
616*9da22751SDavid van Moolenbroek int
kvm_dump_header(kvm_t * kd,bool (* write_buf)(void *,const void *,size_t),void * cookie,int dumpsize)617*9da22751SDavid van Moolenbroek kvm_dump_header(kvm_t *kd, bool (*write_buf)(void *, const void *, size_t),
618*9da22751SDavid van Moolenbroek void *cookie, int dumpsize)
619*9da22751SDavid van Moolenbroek {
620*9da22751SDavid van Moolenbroek kcore_seg_t seghdr;
621*9da22751SDavid van Moolenbroek long offset;
622*9da22751SDavid van Moolenbroek size_t gap;
623*9da22751SDavid van Moolenbroek
624*9da22751SDavid van Moolenbroek if (kd->kcore_hdr == NULL || kd->cpu_data == NULL) {
625*9da22751SDavid van Moolenbroek _kvm_err(kd, kd->program, "no valid dump header(s)");
626*9da22751SDavid van Moolenbroek return (-1);
627*9da22751SDavid van Moolenbroek }
628*9da22751SDavid van Moolenbroek
629*9da22751SDavid van Moolenbroek /*
630*9da22751SDavid van Moolenbroek * Write the generic header
631*9da22751SDavid van Moolenbroek */
632*9da22751SDavid van Moolenbroek offset = 0;
633*9da22751SDavid van Moolenbroek if (!(*write_buf)(cookie, kd->kcore_hdr, sizeof(kcore_hdr_t))) {
634*9da22751SDavid van Moolenbroek _kvm_syserr(kd, kd->program, "kvm_dump_header");
635*9da22751SDavid van Moolenbroek return (-1);
636*9da22751SDavid van Moolenbroek }
637*9da22751SDavid van Moolenbroek offset += kd->kcore_hdr->c_hdrsize;
638*9da22751SDavid van Moolenbroek gap = kd->kcore_hdr->c_hdrsize - sizeof(kcore_hdr_t);
639*9da22751SDavid van Moolenbroek if (clear_gap(kd, write_buf, cookie, gap) == -1)
640*9da22751SDavid van Moolenbroek return (-1);
641*9da22751SDavid van Moolenbroek
642*9da22751SDavid van Moolenbroek /*
643*9da22751SDavid van Moolenbroek * Write the CPU header
644*9da22751SDavid van Moolenbroek */
645*9da22751SDavid van Moolenbroek CORE_SETMAGIC(seghdr, KCORESEG_MAGIC, 0, CORE_CPU);
646*9da22751SDavid van Moolenbroek seghdr.c_size = ALIGN(kd->cpu_dsize);
647*9da22751SDavid van Moolenbroek if (!(*write_buf)(cookie, &seghdr, sizeof(seghdr))) {
648*9da22751SDavid van Moolenbroek _kvm_syserr(kd, kd->program, "kvm_dump_header");
649*9da22751SDavid van Moolenbroek return (-1);
650*9da22751SDavid van Moolenbroek }
651*9da22751SDavid van Moolenbroek offset += kd->kcore_hdr->c_seghdrsize;
652*9da22751SDavid van Moolenbroek gap = kd->kcore_hdr->c_seghdrsize - sizeof(seghdr);
653*9da22751SDavid van Moolenbroek if (clear_gap(kd, write_buf, cookie, gap) == -1)
654*9da22751SDavid van Moolenbroek return (-1);
655*9da22751SDavid van Moolenbroek
656*9da22751SDavid van Moolenbroek if (!(*write_buf)(cookie, kd->cpu_data, kd->cpu_dsize)) {
657*9da22751SDavid van Moolenbroek _kvm_syserr(kd, kd->program, "kvm_dump_header");
658*9da22751SDavid van Moolenbroek return (-1);
659*9da22751SDavid van Moolenbroek }
660*9da22751SDavid van Moolenbroek offset += seghdr.c_size;
661*9da22751SDavid van Moolenbroek gap = seghdr.c_size - kd->cpu_dsize;
662*9da22751SDavid van Moolenbroek if (clear_gap(kd, write_buf, cookie, gap) == -1)
663*9da22751SDavid van Moolenbroek return (-1);
664*9da22751SDavid van Moolenbroek
665*9da22751SDavid van Moolenbroek /*
666*9da22751SDavid van Moolenbroek * Write the actual dump data segment header
667*9da22751SDavid van Moolenbroek */
668*9da22751SDavid van Moolenbroek CORE_SETMAGIC(seghdr, KCORESEG_MAGIC, 0, CORE_DATA);
669*9da22751SDavid van Moolenbroek seghdr.c_size = dumpsize;
670*9da22751SDavid van Moolenbroek if (!(*write_buf)(cookie, &seghdr, sizeof(seghdr))) {
671*9da22751SDavid van Moolenbroek _kvm_syserr(kd, kd->program, "kvm_dump_header");
672*9da22751SDavid van Moolenbroek return (-1);
673*9da22751SDavid van Moolenbroek }
674*9da22751SDavid van Moolenbroek offset += kd->kcore_hdr->c_seghdrsize;
675*9da22751SDavid van Moolenbroek gap = kd->kcore_hdr->c_seghdrsize - sizeof(seghdr);
676*9da22751SDavid van Moolenbroek if (clear_gap(kd, write_buf, cookie, gap) == -1)
677*9da22751SDavid van Moolenbroek return (-1);
678*9da22751SDavid van Moolenbroek
679*9da22751SDavid van Moolenbroek return (int)offset;
680*9da22751SDavid van Moolenbroek }
681*9da22751SDavid van Moolenbroek
682*9da22751SDavid van Moolenbroek static bool
kvm_dump_header_stdio(void * cookie,const void * buf,size_t len)683*9da22751SDavid van Moolenbroek kvm_dump_header_stdio(void *cookie, const void *buf, size_t len)
684*9da22751SDavid van Moolenbroek {
685*9da22751SDavid van Moolenbroek return fwrite(buf, len, 1, (FILE *)cookie) == 1;
686*9da22751SDavid van Moolenbroek }
687*9da22751SDavid van Moolenbroek
688*9da22751SDavid van Moolenbroek int
kvm_dump_wrtheader(kvm_t * kd,FILE * fp,int dumpsize)689*9da22751SDavid van Moolenbroek kvm_dump_wrtheader(kvm_t *kd, FILE *fp, int dumpsize)
690*9da22751SDavid van Moolenbroek {
691*9da22751SDavid van Moolenbroek return kvm_dump_header(kd, kvm_dump_header_stdio, fp, dumpsize);
692*9da22751SDavid van Moolenbroek }
693*9da22751SDavid van Moolenbroek
694*9da22751SDavid van Moolenbroek kvm_t *
kvm_openfiles(const char * uf,const char * mf,const char * sf,int flag,char * errout)695*9da22751SDavid van Moolenbroek kvm_openfiles(const char *uf, const char *mf, const char *sf,
696*9da22751SDavid van Moolenbroek int flag, char *errout)
697*9da22751SDavid van Moolenbroek {
698*9da22751SDavid van Moolenbroek kvm_t *kd;
699*9da22751SDavid van Moolenbroek
700*9da22751SDavid van Moolenbroek if ((kd = malloc(sizeof(*kd))) == NULL) {
701*9da22751SDavid van Moolenbroek (void)strlcpy(errout, strerror(errno), _POSIX2_LINE_MAX);
702*9da22751SDavid van Moolenbroek return (0);
703*9da22751SDavid van Moolenbroek }
704*9da22751SDavid van Moolenbroek kd->program = 0;
705*9da22751SDavid van Moolenbroek return (_kvm_open(kd, uf, mf, sf, flag, errout));
706*9da22751SDavid van Moolenbroek }
707*9da22751SDavid van Moolenbroek
708*9da22751SDavid van Moolenbroek kvm_t *
kvm_open(const char * uf,const char * mf,const char * sf,int flag,const char * program)709*9da22751SDavid van Moolenbroek kvm_open(const char *uf, const char *mf, const char *sf, int flag,
710*9da22751SDavid van Moolenbroek const char *program)
711*9da22751SDavid van Moolenbroek {
712*9da22751SDavid van Moolenbroek kvm_t *kd;
713*9da22751SDavid van Moolenbroek
714*9da22751SDavid van Moolenbroek if ((kd = malloc(sizeof(*kd))) == NULL) {
715*9da22751SDavid van Moolenbroek (void)fprintf(stderr, "%s: %s\n",
716*9da22751SDavid van Moolenbroek program ? program : getprogname(), strerror(errno));
717*9da22751SDavid van Moolenbroek return (0);
718*9da22751SDavid van Moolenbroek }
719*9da22751SDavid van Moolenbroek kd->program = program;
720*9da22751SDavid van Moolenbroek return (_kvm_open(kd, uf, mf, sf, flag, NULL));
721*9da22751SDavid van Moolenbroek }
722*9da22751SDavid van Moolenbroek
723*9da22751SDavid van Moolenbroek int
kvm_close(kvm_t * kd)724*9da22751SDavid van Moolenbroek kvm_close(kvm_t *kd)
725*9da22751SDavid van Moolenbroek {
726*9da22751SDavid van Moolenbroek int error = 0;
727*9da22751SDavid van Moolenbroek
728*9da22751SDavid van Moolenbroek if (kd->pmfd >= 0)
729*9da22751SDavid van Moolenbroek error |= close(kd->pmfd);
730*9da22751SDavid van Moolenbroek if (kd->vmfd >= 0)
731*9da22751SDavid van Moolenbroek error |= close(kd->vmfd);
732*9da22751SDavid van Moolenbroek if (kd->nlfd >= 0)
733*9da22751SDavid van Moolenbroek error |= close(kd->nlfd);
734*9da22751SDavid van Moolenbroek if (kd->swfd >= 0)
735*9da22751SDavid van Moolenbroek error |= close(kd->swfd);
736*9da22751SDavid van Moolenbroek if (kd->vmst)
737*9da22751SDavid van Moolenbroek _kvm_freevtop(kd);
738*9da22751SDavid van Moolenbroek kd->cpu_dsize = 0;
739*9da22751SDavid van Moolenbroek if (kd->cpu_data != NULL)
740*9da22751SDavid van Moolenbroek free(kd->cpu_data);
741*9da22751SDavid van Moolenbroek if (kd->kcore_hdr != NULL)
742*9da22751SDavid van Moolenbroek free(kd->kcore_hdr);
743*9da22751SDavid van Moolenbroek if (kd->procbase != 0)
744*9da22751SDavid van Moolenbroek free(kd->procbase);
745*9da22751SDavid van Moolenbroek if (kd->procbase2 != 0)
746*9da22751SDavid van Moolenbroek free(kd->procbase2);
747*9da22751SDavid van Moolenbroek if (kd->lwpbase != 0)
748*9da22751SDavid van Moolenbroek free(kd->lwpbase);
749*9da22751SDavid van Moolenbroek if (kd->swapspc != 0)
750*9da22751SDavid van Moolenbroek free(kd->swapspc);
751*9da22751SDavid van Moolenbroek if (kd->argspc != 0)
752*9da22751SDavid van Moolenbroek free(kd->argspc);
753*9da22751SDavid van Moolenbroek if (kd->argbuf != 0)
754*9da22751SDavid van Moolenbroek free(kd->argbuf);
755*9da22751SDavid van Moolenbroek if (kd->argv != 0)
756*9da22751SDavid van Moolenbroek free(kd->argv);
757*9da22751SDavid van Moolenbroek if (kd->iobuf != 0)
758*9da22751SDavid van Moolenbroek free(kd->iobuf);
759*9da22751SDavid van Moolenbroek free(kd);
760*9da22751SDavid van Moolenbroek
761*9da22751SDavid van Moolenbroek return (error);
762*9da22751SDavid van Moolenbroek }
763*9da22751SDavid van Moolenbroek
764*9da22751SDavid van Moolenbroek int
kvm_nlist(kvm_t * kd,struct nlist * nl)765*9da22751SDavid van Moolenbroek kvm_nlist(kvm_t *kd, struct nlist *nl)
766*9da22751SDavid van Moolenbroek {
767*9da22751SDavid van Moolenbroek int rv, nlfd;
768*9da22751SDavid van Moolenbroek
769*9da22751SDavid van Moolenbroek /*
770*9da22751SDavid van Moolenbroek * kd->nlfd might be negative when we get here, and in that
771*9da22751SDavid van Moolenbroek * case that means that we're using /dev/ksyms.
772*9da22751SDavid van Moolenbroek * So open it again, just for the time we retrieve the list.
773*9da22751SDavid van Moolenbroek */
774*9da22751SDavid van Moolenbroek if (kd->nlfd < 0) {
775*9da22751SDavid van Moolenbroek nlfd = open(_PATH_KSYMS, O_RDONLY | O_CLOEXEC, 0);
776*9da22751SDavid van Moolenbroek if (nlfd < 0) {
777*9da22751SDavid van Moolenbroek _kvm_err(kd, 0, "failed to open %s", _PATH_KSYMS);
778*9da22751SDavid van Moolenbroek return (nlfd);
779*9da22751SDavid van Moolenbroek }
780*9da22751SDavid van Moolenbroek } else
781*9da22751SDavid van Moolenbroek nlfd = kd->nlfd;
782*9da22751SDavid van Moolenbroek
783*9da22751SDavid van Moolenbroek /*
784*9da22751SDavid van Moolenbroek * Call the nlist(3) routines to retrieve the given namelist.
785*9da22751SDavid van Moolenbroek */
786*9da22751SDavid van Moolenbroek rv = __fdnlist(nlfd, nl);
787*9da22751SDavid van Moolenbroek
788*9da22751SDavid van Moolenbroek if (rv == -1)
789*9da22751SDavid van Moolenbroek _kvm_err(kd, 0, "bad namelist");
790*9da22751SDavid van Moolenbroek
791*9da22751SDavid van Moolenbroek if (kd->nlfd < 0)
792*9da22751SDavid van Moolenbroek close(nlfd);
793*9da22751SDavid van Moolenbroek
794*9da22751SDavid van Moolenbroek return (rv);
795*9da22751SDavid van Moolenbroek }
796*9da22751SDavid van Moolenbroek
797*9da22751SDavid van Moolenbroek int
kvm_dump_inval(kvm_t * kd)798*9da22751SDavid van Moolenbroek kvm_dump_inval(kvm_t *kd)
799*9da22751SDavid van Moolenbroek {
800*9da22751SDavid van Moolenbroek struct nlist nl[2];
801*9da22751SDavid van Moolenbroek paddr_t pa;
802*9da22751SDavid van Moolenbroek size_t dsize;
803*9da22751SDavid van Moolenbroek off_t doff;
804*9da22751SDavid van Moolenbroek void *newbuf;
805*9da22751SDavid van Moolenbroek
806*9da22751SDavid van Moolenbroek if (ISALIVE(kd)) {
807*9da22751SDavid van Moolenbroek _kvm_err(kd, kd->program, "clearing dump on live kernel");
808*9da22751SDavid van Moolenbroek return (-1);
809*9da22751SDavid van Moolenbroek }
810*9da22751SDavid van Moolenbroek nl[0].n_name = "_dumpmag";
811*9da22751SDavid van Moolenbroek nl[1].n_name = NULL;
812*9da22751SDavid van Moolenbroek
813*9da22751SDavid van Moolenbroek if (kvm_nlist(kd, nl) == -1) {
814*9da22751SDavid van Moolenbroek _kvm_err(kd, 0, "bad namelist");
815*9da22751SDavid van Moolenbroek return (-1);
816*9da22751SDavid van Moolenbroek }
817*9da22751SDavid van Moolenbroek if (_kvm_kvatop(kd, (vaddr_t)nl[0].n_value, &pa) == 0)
818*9da22751SDavid van Moolenbroek return (-1);
819*9da22751SDavid van Moolenbroek
820*9da22751SDavid van Moolenbroek errno = 0;
821*9da22751SDavid van Moolenbroek dsize = MAX(kd->fdalign, sizeof(u_long));
822*9da22751SDavid van Moolenbroek if (kd->iobufsz < dsize) {
823*9da22751SDavid van Moolenbroek newbuf = realloc(kd->iobuf, dsize);
824*9da22751SDavid van Moolenbroek if (newbuf == NULL) {
825*9da22751SDavid van Moolenbroek _kvm_syserr(kd, 0, "cannot allocate I/O buffer");
826*9da22751SDavid van Moolenbroek return (-1);
827*9da22751SDavid van Moolenbroek }
828*9da22751SDavid van Moolenbroek kd->iobuf = newbuf;
829*9da22751SDavid van Moolenbroek kd->iobufsz = dsize;
830*9da22751SDavid van Moolenbroek }
831*9da22751SDavid van Moolenbroek memset(kd->iobuf, 0, dsize);
832*9da22751SDavid van Moolenbroek doff = _kvm_pa2off(kd, pa);
833*9da22751SDavid van Moolenbroek doff -= doff % kd->fdalign;
834*9da22751SDavid van Moolenbroek if (pwrite(kd->pmfd, kd->iobuf, dsize, doff) == -1) {
835*9da22751SDavid van Moolenbroek _kvm_syserr(kd, 0, "cannot invalidate dump - pwrite");
836*9da22751SDavid van Moolenbroek return (-1);
837*9da22751SDavid van Moolenbroek }
838*9da22751SDavid van Moolenbroek return (0);
839*9da22751SDavid van Moolenbroek }
840*9da22751SDavid van Moolenbroek
841*9da22751SDavid van Moolenbroek ssize_t
kvm_read(kvm_t * kd,u_long kva,void * buf,size_t len)842*9da22751SDavid van Moolenbroek kvm_read(kvm_t *kd, u_long kva, void *buf, size_t len)
843*9da22751SDavid van Moolenbroek {
844*9da22751SDavid van Moolenbroek int cc;
845*9da22751SDavid van Moolenbroek void *cp;
846*9da22751SDavid van Moolenbroek
847*9da22751SDavid van Moolenbroek if (ISKMEM(kd)) {
848*9da22751SDavid van Moolenbroek /*
849*9da22751SDavid van Moolenbroek * We're using /dev/kmem. Just read straight from the
850*9da22751SDavid van Moolenbroek * device and let the active kernel do the address translation.
851*9da22751SDavid van Moolenbroek */
852*9da22751SDavid van Moolenbroek errno = 0;
853*9da22751SDavid van Moolenbroek cc = _kvm_pread(kd, kd->vmfd, buf, len, (off_t)kva);
854*9da22751SDavid van Moolenbroek if (cc < 0) {
855*9da22751SDavid van Moolenbroek _kvm_syserr(kd, 0, "kvm_read");
856*9da22751SDavid van Moolenbroek return (-1);
857*9da22751SDavid van Moolenbroek } else if (cc < len)
858*9da22751SDavid van Moolenbroek _kvm_err(kd, kd->program, "short read");
859*9da22751SDavid van Moolenbroek return (cc);
860*9da22751SDavid van Moolenbroek } else if (ISSYSCTL(kd)) {
861*9da22751SDavid van Moolenbroek _kvm_err(kd, kd->program, "kvm_open called with KVM_NO_FILES, "
862*9da22751SDavid van Moolenbroek "can't use kvm_read");
863*9da22751SDavid van Moolenbroek return (-1);
864*9da22751SDavid van Moolenbroek } else {
865*9da22751SDavid van Moolenbroek if ((kd->kcore_hdr == NULL) || (kd->cpu_data == NULL)) {
866*9da22751SDavid van Moolenbroek _kvm_err(kd, kd->program, "no valid dump header");
867*9da22751SDavid van Moolenbroek return (-1);
868*9da22751SDavid van Moolenbroek }
869*9da22751SDavid van Moolenbroek cp = buf;
870*9da22751SDavid van Moolenbroek while (len > 0) {
871*9da22751SDavid van Moolenbroek paddr_t pa;
872*9da22751SDavid van Moolenbroek off_t foff;
873*9da22751SDavid van Moolenbroek
874*9da22751SDavid van Moolenbroek cc = _kvm_kvatop(kd, (vaddr_t)kva, &pa);
875*9da22751SDavid van Moolenbroek if (cc == 0)
876*9da22751SDavid van Moolenbroek return (-1);
877*9da22751SDavid van Moolenbroek if (cc > len)
878*9da22751SDavid van Moolenbroek cc = len;
879*9da22751SDavid van Moolenbroek foff = _kvm_pa2off(kd, pa);
880*9da22751SDavid van Moolenbroek errno = 0;
881*9da22751SDavid van Moolenbroek cc = _kvm_pread(kd, kd->pmfd, cp, (size_t)cc, foff);
882*9da22751SDavid van Moolenbroek if (cc < 0) {
883*9da22751SDavid van Moolenbroek _kvm_syserr(kd, kd->program, "kvm_read");
884*9da22751SDavid van Moolenbroek break;
885*9da22751SDavid van Moolenbroek }
886*9da22751SDavid van Moolenbroek /*
887*9da22751SDavid van Moolenbroek * If kvm_kvatop returns a bogus value or our core
888*9da22751SDavid van Moolenbroek * file is truncated, we might wind up seeking beyond
889*9da22751SDavid van Moolenbroek * the end of the core file in which case the read will
890*9da22751SDavid van Moolenbroek * return 0 (EOF).
891*9da22751SDavid van Moolenbroek */
892*9da22751SDavid van Moolenbroek if (cc == 0)
893*9da22751SDavid van Moolenbroek break;
894*9da22751SDavid van Moolenbroek cp = (char *)cp + cc;
895*9da22751SDavid van Moolenbroek kva += cc;
896*9da22751SDavid van Moolenbroek len -= cc;
897*9da22751SDavid van Moolenbroek }
898*9da22751SDavid van Moolenbroek return ((char *)cp - (char *)buf);
899*9da22751SDavid van Moolenbroek }
900*9da22751SDavid van Moolenbroek /* NOTREACHED */
901*9da22751SDavid van Moolenbroek }
902*9da22751SDavid van Moolenbroek
903*9da22751SDavid van Moolenbroek ssize_t
kvm_write(kvm_t * kd,u_long kva,const void * buf,size_t len)904*9da22751SDavid van Moolenbroek kvm_write(kvm_t *kd, u_long kva, const void *buf, size_t len)
905*9da22751SDavid van Moolenbroek {
906*9da22751SDavid van Moolenbroek int cc;
907*9da22751SDavid van Moolenbroek
908*9da22751SDavid van Moolenbroek if (ISKMEM(kd)) {
909*9da22751SDavid van Moolenbroek /*
910*9da22751SDavid van Moolenbroek * Just like kvm_read, only we write.
911*9da22751SDavid van Moolenbroek */
912*9da22751SDavid van Moolenbroek errno = 0;
913*9da22751SDavid van Moolenbroek cc = pwrite(kd->vmfd, buf, len, (off_t)kva);
914*9da22751SDavid van Moolenbroek if (cc < 0) {
915*9da22751SDavid van Moolenbroek _kvm_syserr(kd, 0, "kvm_write");
916*9da22751SDavid van Moolenbroek return (-1);
917*9da22751SDavid van Moolenbroek } else if (cc < len)
918*9da22751SDavid van Moolenbroek _kvm_err(kd, kd->program, "short write");
919*9da22751SDavid van Moolenbroek return (cc);
920*9da22751SDavid van Moolenbroek } else if (ISSYSCTL(kd)) {
921*9da22751SDavid van Moolenbroek _kvm_err(kd, kd->program, "kvm_open called with KVM_NO_FILES, "
922*9da22751SDavid van Moolenbroek "can't use kvm_write");
923*9da22751SDavid van Moolenbroek return (-1);
924*9da22751SDavid van Moolenbroek } else {
925*9da22751SDavid van Moolenbroek _kvm_err(kd, kd->program,
926*9da22751SDavid van Moolenbroek "kvm_write not implemented for dead kernels");
927*9da22751SDavid van Moolenbroek return (-1);
928*9da22751SDavid van Moolenbroek }
929*9da22751SDavid van Moolenbroek /* NOTREACHED */
930*9da22751SDavid van Moolenbroek }
931