(no commit message)
[ikiwiki.git] / docs / developer / alexh_todo / index.mdwn
1 ## Note: this is my personal todo and ideas list (alexh@)
2 * dm pdev bounds checking
3 <pre>
4 19:38:08 dragon:~ 
5 # dmsetup deps
6 foocrypt: 1 dependencies        : (0, 0)
7 foocrypt2: 1 dependencies       : (0, 0)
8 foocrypt3: 1 dependencies       : (0, 0)
9 19:38:09 dragon:~ 
10 # dmsetup table
11 foocrypt: 0 1021944 crypt aes-cbc-essiv:sha256 0000000000000000000000000000000000000000000000000000000000000000 0 /dev/ad0s0a 2056
12 foocrypt2: 0 1021944 crypt aes-cbc-essiv:sha256 0000000000000000000000000000000000000000000000000000000000000000 0 /dev/ad0s0a 2056
13 foocrypt3: 0 1021944 crypt aes-cbc-essiv:sha256 0000000000000000000000000000000000000000000000000000000000000000 0 /dev/ad0s0a 2056
14 </pre>
15
16 * Commit hook reminding people of MFCs to stable
17   - also broadcast about http://gitweb.dragonflybsd.org/dragonfly.git/blob/HEAD:/tools/gittemplate
18
19 * add a non-persistent unionfs VFS
20   - while this does not fully replace unionfs, it would deal with a few of the situations where unionfs is useful
21   - additionally the complexity is much lower, since everything can be kept in memory
22
23 * bring the samba3 hammer shadow copy foo to maturity
24
25 * add a communication channel mechanism to dm
26   - essentially a way to send messages and receive responses to dm target instances
27
28 * dm_target_crypt
29   - Look at plain64 iv support, what it implies vs plain.
30   - Think about benbi iv support
31
32 * Add TrueCrypt support
33   - Simply add a userland tool that sets dm_target_crypt up with the right parameters, extracted from the TrueCrypt header
34   - https://github.com/bwalex/tc-play <- done!
35   - needs OpenSSL with XTS support; probably next major release
36
37 * Update cryptsetup
38
39 * Update opencrypto
40   - http://www.openbsd.org/cgi-bin/cvsweb/src/sys/crypto/
41   - think about support for other ciphers, such as Serpent and Twofish
42
43 * Port hwpmc & dig into (boot-up) performance
44
45 * linuxulator
46   - port to x86_64
47   - separate out common arch parts (linprocfs, for example)
48
49 * Fix the crash analysis script (or rather the programs it calls [some segfault])
50
51 * Take a look at updating lvm/dm/libdevicemapper
52
53 * Take a look at importing libdm from NetBSD
54   - would allow tc-play and similarly newly developed foo to avoid GPL license issues
55   
56 * rip out the disk partitioning from the disk subsystem and implement it in a more general fashion
57   - crazy idea: as dm targets with an auto-configuration option!
58     - would require to be able to create dm targets with an arbitrary name and not in /dev/mapper
59
60 * ATA (automatic) spindown (see FreeBSD current)
61   
62 * Update callout
63    http://svn.freebsd.org/viewvc/base?view=revision&revision=127969
64
65 * inv ctxsw rusage
66   - see irc logs
67   - some incorrect accounting going on, don't remember details :)
68
69 * unionfs update
70   - make it work without whiteout
71
72
73
74 ###Boring:
75
76 * sync up vr
77     - Added VT6105M specific register definitions. VT6105M has the following hardware capabilities.
78     - Tx/Rx IP/TCP/UDP checksum offload.
79     - VLAN hardware tag insertion/extraction. Due to lack of information
80        for getting extracted VLAN tag in Rx path, VLAN hardware support
81        was not implemented yet.
82     - CAM(Content Addressable Memory) based 32 entry perfect multicast/
83       VLAN filtering.
84     - 8 priority queues.
85  o Implemented CAM based 32 entry perfect multicast filtering for
86    VT6105M. If number of multicast entry is greater than 32, vr(4)
87    uses traditional hash based filtering.
88
89 * RedZone, a buffer corruption protection for the kernel malloc(9) facility has been implemented.
90   - This detects both buffer underflows and overflows at runtime on free(9) and realloc(9),
91     and prints backtraces from where memory was allocated and from where it was freed.
92   - see irc log below.
93     
94 * port uart driver (?)
95
96 * port wscons (?) or update syscons
97   - probably way too much effort (wscons)
98
99
100 * port usb4bsd
101   - wrapper is included for userland; should be easy to port
102   - http://svn.freebsd.org/viewvc/base?view=revision&revision=184610
103   - http://turbocat.net/~hselasky/usb4bsd/
104   - http://gitweb.dragonflybsd.org/~polachok/dragonfly.git/shortlog/refs/heads/usb2
105
106 * suspend/resume for SMP x86
107   - http://lists.freebsd.org/pipermail/freebsd-acpi/2008-May/004879.html
108   
109 * AMD64 suspend/resume
110   - http://svn.freebsd.org/viewvc/base?view=revision&revision=189903
111
112
113 * text dumps
114
115     
116     
117 [alexh@leaf:~/home] $ roundup-server -p 8080 bt=bugtracker
118
119 <pre>
120 -05:48- :        dillon@: no, double frees to the object cache are nasty.  It can't detect them.  the object 
121                           winds up in the magazine array twice
122 -05:48- :        dillon@: (and possibly different magazines, too)
123 -05:49- :         alexh@: can't I just write some magic to a free object on the first objcache_put and check 
124                           if it's there on objcache_put?
125 -05:49- :         alexh@: and clear it on objcache_get, anyways
126 -05:50- :        dillon@: no, because the object is still may have live-initialized fields
127 -05:50- :        dillon@: because it hasn't been dtor'ed yet (one of the features of the objcache, to avoid 
128                           having to reinitialize objects every time)
129 -05:50- :        dillon@: the mbuf code uses that feature I think, probably other bits too
130 -05:51- :        dillon@: theoretically we could allocate slightly larger objects and store a magic number at 
131                           offset [-1] or something like that, but it gets a little iffy doing that
132 -05:52- :        dillon@: the objcache with the objcache malloc default could probably do something like that 
133                           I guess.
134 -05:52- :        dillon@: I don't consider memory tracking to be a huge issue w/ dragonfly, though I like the 
135                           idea of being able to do it.  It is a much bigger problem in FreeBSD due to the 
136                           large number of committers 
137
138
139 -05:55- :        dillon@: For the slab allocator you may be able to do something using the Zone header.
140 -05:55- :        dillon@: the slab allocator in fact I think already has optional code to allocate a tracking 
141                           bitmap to detect double-frees
142 -05:56- :        dillon@: sorry, I just remembered the bit about the power-of-2 allocations
143 -05:56- :        dillon@: for example, power-of-2-sized allocations are guaranteed not only to be aligned on 
144                           that particular size boundary, but also to not cross a PAGE_BOUNDARY (unless the 
145                           size is > PAGE_SIZE)
146 -05:57- :        dillon@: various subsystems such as AHCI depend on that behavior to allocate system 
147                           structures for which the chipsets only allow one DMA descriptor.
148 -05:59- :         alexh@: http://svn.freebsd.org/viewvc/base/head/sys/vm/redzone.c?view=markup&pathrev=155086 
149                           < this is redzone. it basically calls redzone_addr_ntor() to increase the size in 
150                           malloc(), and then redzone_setup() just before returning the chunk
151 -06:02- :        dillon@: jeeze. that looks horrible.
152 -06:03- :         alexh@: I don't quite get that nsize + redzone_roundup(nsize)
153 -06:03- :        dillon@: I don't get it either.  It would completely break power-of-2-sized alignments in the 
154                           original request
155 -06:04- :        dillon@: hmmm.  well, no it won't break them, but the results are oging to be weird
156 -06:04- :        dillon@: ick.
157
158 -06:15- :        dillon@: if the original request is a power of 2 the redzone adjusted request must be a power 
159                           of 2
160 -06:15- :        dillon@: basically
161 -06:16- :        dillon@: so original request 64, redzone request must be 128, 256, 512, 1024, etc.
162 -06:16- :         alexh@: yah, k
163 -06:16- :        dillon@: original request 32, current redzone code would be 32+128 which is WRONG.
164 -06:16- :         alexh@: how big is PAGE_SIZE ?
165 -06:16- :        dillon@: 4096 on i386 and amd64
166 -06:17- :         alexh@: and one single malloc can't be bigger than that?
167 -06:17- :        dillon@: I'm fairly sure our kmalloc does not guarantee alignment past PAGE_SIZE (that is, 
168                           the alignment will be only PAGE_SIZE eve if you allocate PAGE_SIZE*2)
169 -06:17- :        dillon@: a single kmalloc can be larger then PAGE_SIZe
170 -06:18- :        dillon@: it will use the zone up to around 1/2 the zone size (~64KB I think), after which it 
171                           allocates pages directly with the kernel kvm allocator
172 -06:18- :        dillon@: if you look at the kmalloc code you will see the check for oversized allocations
173 -06:18- :         alexh@: yah, saw that
174 -06:18- :         alexh@: "handle large allocations directly"
175 -06:19- :         alexh@: not sure how to do this, really, as the size is obviously also changed in 
176                           kmem_slab_alloc
177 -06:20- :         alexh@: but kmem_slab_alloc isn't called always, is it?
178 -06:20- :         alexh@: only if the req doesn't fit into an existant zone
179 -06:20- :        dillon@: right
180 -06:20- :        dillon@: you don't want to redzone the zone allocation itself
181
182 </pre>