[svn-upgrade] new version iodine (0.6.0~rc1) upstream/0.6.0_rc1
authorgregor herrmann <gregoa@debian.org>
Sat, 3 Jul 2010 16:11:22 +0000 (16:11 -0000)
committergregor herrmann <gregoa@debian.org>
Sat, 3 Jul 2010 16:11:22 +0000 (16:11 -0000)
37 files changed:
CHANGELOG
README
README-win32.txt
doc/iodine.te [new file with mode: 0644]
doc/proto_00000502.txt [new file with mode: 0644]
man/iodine.8
src/Makefile
src/base128.c [new file with mode: 0644]
src/base128.h [new file with mode: 0644]
src/base32.c
src/base64.c
src/client.c [new file with mode: 0644]
src/client.h [new file with mode: 0644]
src/common.c
src/common.h
src/dns.c
src/dns.h
src/encoding.c
src/encoding.h
src/iodine.c
src/iodined.c
src/login.c
src/login.h
src/osflags
src/read.c
src/read.h
src/tun.c
src/tun.h
src/user.c
src/user.h
src/util.c [new file with mode: 0644]
src/util.h [new file with mode: 0644]
src/version.h
src/windows.h
tests/dns.c
tests/encoding.c
tests/user.c

index 8a647f8ab40633336588fc725b1f1e525f8b7122..888beacff9d9dfcee4596c4fecc776e4c63d9506 100644 (file)
--- a/CHANGELOG
+++ b/CHANGELOG
@@ -5,6 +5,32 @@ iodine - http://code.kryo.se/iodine
 
 CHANGES:
 
+2010-02-13: 0.6.0-rc1 "Hotspotify"
+       - Fixed tunnel not working on Windows.
+       - Any device name is now supported on Windows, fixes #47.
+       - Multiple installed TAP32 interfaces are now supported, fixes #46.
+       - Return nonzero if tunnel fails to open, fixes #62.
+       - Support for setting a SELinux context, based on patch by
+               Sebastien Raveau. Sample context file in doc/iodine.te
+       - Allow listen port and DNS forward port to be the same if listen IP
+               does not include localhost.
+       - The client will now exit if configuring IP or MTU fails.
+       - The starting cache miss value is randomized at startup, fixes #65.
+       - Raw UDP mode added. If the iodined server is reachable directly,
+               packets can be sent to it without DNS encoding. Fixes #36.
+       - Do not overwrite users CC/CFLAGS/LDFLAGS, only add to them.
+       - Added -F option to write pidfile, based on patch from
+               misc at mandriva.org. Fixes #70.
+       - Allow password to be set via environment variable, fixes #77.
+               Based on patch by logix.
+       - Client now prints server tunnel IP, fixes #78. Patch by logix.
+       - Fix build error on Mac OS X 10.6, patch by G. Rischard. #79.
+       - Added support for CNAME/TXT/A/MX query types, fixes #75.
+               Patch by Anne Bezemer, merge help by logix.
+       - Merged low-latency patch from Anne Bezemer, fixes #76.
+       - Resolve client nameserver argument if given as hostname, fixes #82.
+       - Open log before chroot, fixes #86: logging on FreeBSD.
+
 2009-06-01: 0.5.2 "WifiFree"
        - Fixed client segfault on OS X, #57
        - Added check that nameserver lookup was successful
diff --git a/README b/README
index cc201ada6a7fcf0dc609857dee11a6ead5954db2..d9e3c291db216e0f367e649f4c647c47a279ae5e 100644 (file)
--- a/README
+++ b/README
@@ -11,12 +11,12 @@ firewalled, but DNS queries are allowed.
 QUICKSTART:
 
 Try it out within your own LAN! Follow these simple steps:
-- On your server, run: ./iodined -f 10.0.0.1 test.asdf
+- On your server, run: ./iodined -f 10.0.0.1 test.com
   (If you already use the 10.0.0.0 network, use another internal net like 
   172.16.0.0)
 - Enter a password
-- On the client, run: ./iodine -f 192.168.0.1 test.asdf
-  (Replace 192.168.0.1 with the server's ip address)
+- On the client, run: ./iodine -f -r 192.168.0.1 test.com
+  (Replace 192.168.0.1 with your server's ip address)
 - Enter the same password
 - Now the client has the tunnel ip 10.0.0.2 and the server has 10.0.0.1
 - Try pinging each other through the tunnel
@@ -26,59 +26,196 @@ To actually use it through a relaying nameserver, see below.
 
 HOW TO USE:
 
+Note: server and client are required to speak the exact same protocol. In most
+cases, this means running the same iodine version. Unfortunately, implementing
+backward and forward protocol compatibility is usually not feasible.
+
 Server side:
-To use this tunnel, you need control over a real domain (like mytunnel.com),
-and a server with a public IP number. If the server already runs a DNS
-server, change the listening port and then use the -b option to let
-iodined forward the DNS requests. Then, delegate a subdomain 
-(say, tunnel1.mytunnel.com) to the server. If you use BIND for the domain, 
-add these lines to the zone file:
-
-tunnel1host    IN      A       10.15.213.99
-tunnel1                IN      NS      tunnel1host.mytunnel.com.
-
-Do not use CNAME instead of A above.
-If your server has a dynamic IP, use a dynamic dns provider:
-
-tunnel1         IN      NS      tunnel1host.mydyndnsprovider.com
-
-Now any DNS querys for domains ending with tunnel1.mytunnnel.com will be sent
-to your server. Start iodined on the server. The first argument is the tunnel
-IP address (like 192.168.99.1) and the second is the assigned domain (in this
-case tunnel1.mytunnel.com). The -f argument will keep iodined running in the
-foreground, which helps when testing. iodined will start a virtual interface,
-and also start listening for DNS queries on UDP port 53. Either enter a
-password on the commandline (-P pass) or after the server has started. Now 
-everything is ready for the client.
+To use this tunnel, you need control over a real domain (like mydomain.com),
+and a server with a public IP address to run iodined on. If this server
+already runs a DNS program, change its listening port and then use iodined's
+-b option to let iodined forward the DNS requests. (Note that this procedure
+is not advised in production environments, because iodined's DNS forwarding
+is not completely transparent.)
+
+Then, delegate a subdomain (say, t1.mydomain.com) to the iodined server.
+If you use BIND for your domain, add two lines like these to the zone file:
+
+t1             IN      NS      t1ns.mydomain.com.              ; note the dot!
+t1ns           IN      A       10.15.213.99
+
+The "NS" line is all that's needed to route queries for the "t1" subdomain
+to the "t1ns" server. We use a short name for the subdomain, to keep as much
+space as possible available for the data traffic. At the end of the "NS" line
+is the name of your iodined server. This can be any name, pointing anywhere,
+but in this case it's easily kept in the same zone file. It must be a name
+(not an IP address), and that name itself must have an A record (not a CNAME).
+
+If your iodined server has a dynamic IP, use a dynamic dns provider. Simply
+point the "NS" line to it, and leave the "A" line out:
+
+t1             IN      NS      myname.mydyndnsprovider.com.    ; note the dot!
+
+Then reload or restart your nameserver program. Now any DNS queries for
+domains ending in t1.mydomain.com will be sent to your iodined server.
+
+Finally start iodined on your server. The first argument is the IP address
+inside the tunnel, which can be from any range that you don't use yet (for
+example 192.168.99.1), and the second argument is the assigned domain (in this
+case t1.mydomain.com). Using the -f option will keep iodined running in the
+foreground, which helps when testing. iodined will open a virtual interface
+("tun device"), and will also start listening for DNS queries on UDP port 53.
+Either enter a password on the commandline (-P pass) or after the server has
+started. Now everything is ready for the client.
+
+If there is a chance you'll be using an iodine tunnel from unexpected
+environments, start iodined with a -c option.
+
+Resulting commandline in this example situation:
+./iodined -f -c -P secretpassword 192.168.99.1 t1.mydomain.com
 
 Client side: 
-All the setup is done, just start iodine. It takes up to two arguments, the
+All the setup is done, just start iodine. It takes one or two arguments, the
 first is the local relaying DNS server (optional) and the second is the domain
-used (tunnel1.mytunnnel.com). If DNS queries are allowed to any computer, you
-can use the tunnel endpoint (example: 10.15.213.99 or tunnel1host.mytunnel.com)
-as the first argument. The tunnel interface will get an IP close to the servers
-(in this case 192.168.99.2) and a suitable MTU.  Enter the same password as on
-the server either by argument or after the client has started. Now you should
-be able to ping the other end of the tunnel from either side.  
+you used (t1.mydomain.com). If you don't specify the first argument, the
+system's current DNS setting will be consulted.
+
+If DNS queries are allowed to any computer, you can directly give the iodined
+server's address as first argument (in the example: t1ns.mydomain.com or
+10.15.213.99). In that case, it may also happen that _any_ traffic is allowed
+to the DNS port (53 UDP) of any computer. Iodine will detect this, and switch
+to raw UDP tunneling if possible. To force DNS tunneling in any case, use the
+-r option (especially useful when testing within your own network).
+
+The client's tunnel interface will get an IP close to the server's (in this
+case 192.168.99.2 or .3 etc.) and a suitable MTU. Enter the same password as
+on the server either as commandline option or after the client has started.
+Using the -f option will keep the iodine client running in the foreground.
+
+Resulting commandline in this example situation:
+./iodine -f -P secretpassword t1.mydomain.com
+(add -r to force DNS tunneling even if raw UDP tunneling would be possible)
+
+From either side, you should now be able to ping the IP address on the other
+end of the tunnel. In this case, ping 192.168.99.1 from the iodine client, and
+192.168.99.2 or .3 etc. from the iodine server.
 
 
 MISC. INFO:
 
-Try experimenting with the MTU size (-m option) to get maximum bandwidth. It is
-set to 1024 by default, which seems to work with most DNS servers. If you have
-problems, try setting it to 220 as this ensures all packets to be < 512 bytes.
-Some DNS servers enforce a 512 byte packet limit, and this is probably the case
-if you can ping through the tunnel but not login via SSH.
+Routing:
+It is possible to route all traffic through the DNS tunnel. To do this, first
+add a host route to the nameserver used by iodine over the wired/wireless
+interface with the default gateway as gateway. Then replace the default
+gateway with the iodined server's IP address inside the DNS tunnel, and
+configure the server to do NAT.
+
+However, note that the tunneled data traffic is not encrypted at all, and can
+be read and changed by external parties relatively easily. For maximum
+security, run a VPN through the DNS tunnel (=double tunneling), or use secure
+shell (SSH) access, possibly with port forwarding. The latter can also be used
+for web browsing, when you run a web proxy (for example Privoxy) on your
+server.
+
+Testing:
+The iodined server replies to NS requests sent for subdomains of the tunnel
+domain. If your iodined subdomain is t1.mydomain.com, send a NS request for
+foo123.t1.mydomain.com to see if the delegation works. dig is a good tool
+for this:
+dig -t NS foo123.t1.mydomain.com
+
+Also, the iodined server will answer requests starting with 'z' for any of the
+supported request types, for example:
+dig -t TXT z456.t1.mydomain.com
+dig -t SRV z456.t1.mydomain.com
+dig -t CNAME z456.t1.mydomain.com
+The reply should look like garbled text in all these cases.
+
+Operational info:
+The DNS-response fragment size is normally autoprobed to get maximum bandwidth.
+To force a specific value (and speed things up), use the -m option.
+
+The DNS hostnames are normally used up to their maximum length, 255 characters.
+Some DNS relays have been found that answer full-length queries rather
+unreliably, giving widely varying (and mostly very bad) results of the
+fragment size autoprobe on repeated tries. In these cases, use the -M switch
+to reduce the DNS hostname length to for example 200 characters, which makes
+these DNS relays much more stable. This is also useful on some "de-optimizing"
+DNS relays that stuff the response with two full copies of the query, leaving
+very little space for downstream data (also not capable of EDNS0). The -M
+switch can trade some upstream bandwidth for downstream bandwidth. Note that
+the minimum -M value is about 100, since the protocol can split packets (1200
+bytes max) in only 16 fragments, requiring at least 75 real data bytes per
+fragment.
+
+The upstream data is sent gzipped encoded with Base32; or Base64 if the relay
+server supports mixed case and '+' in domain names; or Base64u if '_' is
+supported instead; or Base128 if high-byte-value characters are supported.
+This upstream encoding is autodetected. The DNS protocol allows one query per
+packet, and one query can be max 256 chars. Each domain name part can be max
+63 chars. So your domain name and subdomain should be as short as possible to
+allow maximum upstream throughput.
+
+Several DNS request types are supported, with the NULL type expected to provide
+the largest downstream bandwidth. Other available types are TXT, SRV, MX,
+CNAME and A (returning CNAME), in decreasing bandwidth order. Normally the
+"best" request type is autodetected and used. However, DNS relays may impose
+limits on for example NULL and TXT, making SRV or MX actually the best choice.
+This is not autodetected, but can be forced using the -T option. It is
+advisable to try various alternatives especially when the autodetected request
+type provides a downstream fragment size of less than 200 bytes.
+
+Note that SRV, MX and A (returning CNAME) queries may/will cause additional
+lookups by "smart" caching nameservers to get an actual IP address, which may
+either slow down or fail completely.
+
+DNS responses for non-NULL queries can be encoded with the same set of codecs
+as upstream data. This is normally also autodetected, but no fully exhaustive
+tests are done, so some problems may not be noticed when selecting more
+advanced codecs. In that case, you'll see failures/corruption in the fragment
+size autoprobe. In particular, several DNS relays have been found that change
+replies returning hostnames (SRV, MX, CNAME, A) to lowercase only when that
+hostname exceeds ca. 180 characters. In these and similar cases, use the -O
+option to try other downstream codecs; Base32 should always work.
+
+Normal operation now is for the server to _not_ answer a DNS request until
+the next DNS request has come in, a.k.a. being "lazy". This way, the server
+will always have a DNS request handy when new downstream data has to be sent.
+This greatly improves (interactive) performance and latency, and allows to
+slow down the quiescent ping requests to 4 second intervals by default, and
+possibly much slower. In fact, the main purpose of the pings now is to force
+a reply to the previous ping, and prevent DNS server timeouts (usually at
+least 5-10 seconds per RFC1035). Some DNS servers are more impatient and will
+give SERVFAIL errors (timeouts) in periods without tunneled data traffic. All
+data should still get through in these cases, but iodine will reduce the ping
+interval to 1 second anyway (-I1) to reduce the number of error messages. This
+may not help for very impatient DNS relays like dnsadvantage.com (ultradns),
+which time out in 1 second or even less. Yet data will still get trough, and
+you can ignore the SERVFAIL errors.
+
+If you are running on a local network without any DNS server in-between, try
+-I 50 (iodine and iodined close the connection after 60 seconds of silence).
+The only time you'll notice a slowdown, is when DNS reply packets go missing;
+the iodined server then has to wait for a new ping to re-send the data. You can
+speed this up by generating some upstream traffic (keypress, ping). If this
+happens often, check your network for bottlenecks and/or run with -I1.
+
+The delayed answering in lazy mode will cause some "carrier grade" commercial
+DNS relays to repeatedly re-send the same DNS query to the iodined server.
+If the DNS relay is actually implemented as a pool of parallel servers,
+duplicate requests may even arrive from multiple sources. This effect will
+only be visible in the network traffic at the iodined server, and will not
+affect the client's connection. Iodined will notice these duplicates, and send
+the same answer (when its time has come) to both the original query and the
+latest duplicate. After that, the full answer is cached for a short while.
+Delayed duplicates that arrive at the server even later, get a reply that the
+iodine client will ignore (if it ever arrives there).
 
 If you have problems, try inspecting the traffic with network monitoring tools
-and make sure that the relaying DNS server has not cached the response. A
-cached error message could mean that you started the client before the server.
-
-The upstream data is sent gzipped encoded with Base32, or Base64 if the relay
-server support '+' in domain names. DNS protocol allows one query per packet,
-and one query can be max 256 chars. Each domain name part can be max 63 chars.
-So your domain name and subdomain should be as short as possible to allow
-maximum upstream throughput.
+like tcpdump or ethereal/wireshark, and make sure that the relaying DNS server
+has not cached the response. A cached error message could mean that you
+started the client before the server. The -D (and -DD) option on the server
+can also show received and sent queries.
 
 
 TIPS & TRICKS:
@@ -89,6 +226,92 @@ use for instance iptables (on Linux) to forward the traffic:
 iptables -t nat -A PREROUTING -i eth0 -p udp --dport 53 -j DNAT --to :5353
 (Sent in by Tom Schouten)
 
+Iodined will reject data from clients that have not been active (data/pings)
+for more than 60 seconds. Similarly, iodine will exit when no downstream
+data has been received for 60 seconds. In case of a long network outage or
+similar, just restart iodine (re-login), possibly multiple times until you get
+your old IP address back. Once that's done, just wait a while, and you'll
+eventually see the tunneled TCP traffic continue to flow from where it left
+off before the outage.
+
+With the introduction of the downstream packet queue in the server, its memory
+usage has increased with several megabytes in the default configuration.
+For use in low-memory environments (e.g. running on your DSL router), you can
+decrease USERS and undefine OUTPACKETQ_LEN in user.h without any ill conse-
+quence, assuming at most one client will be connected at any time. A small
+DNSCACHE_LEN is still advised, preferably 2 or higher, however you can also
+undefine it to save a few more kilobytes.
+
+
+PERFORMANCE:
+
+This section tabulates some performance measurements. To view properly, use
+a fixed-width font like Courier.
+
+Measurements were done in protocol 00000502 in lazy mode; upstream encoding
+always Base128; iodine -M255; iodined -m1130. Network conditions were not
+extremely favorable; results are not benchmarks but a realistic indication of
+real-world performance that can be expected in similar situations.
+
+Upstream/downstream throughput was measured by scp'ing a file previously
+read from /dev/urandom (i.e. incompressible), and measuring size with
+"ls -l ; sleep 30 ; ls -l" on a separate non-tunneled connection. Given the
+large scp block size of 16 kB, this gives a resolution of 4.3 kbit/s, which
+explains why some values are exactly equal.
+Ping round-trip times measured with "ping -c100", presented are average rtt
+and mean deviation (indicating spread around the average), in milliseconds.
+
+
+Situation 1:
+Laptop  ->   Wifi AP   ->  Home server  ->  DSL provider  ->  Datacenter
+ iodine    DNS "relay"        bind9           DNS cache        iodined
+
+                        downstr.  upstream downstr.  ping-up       ping-down
+                        fragsize   kbit/s   kbit/s  avg +/-mdev   avg +/-mdev
+------------------------------------------------------------------------------
+
+iodine -> Wifi AP :53
+  -Tnull (= -Oraw)           982    43.6    131.0   28.0    4.6   26.8    3.4
+
+iodine -> Home server :53
+  -Tnull (= -Oraw)          1174    48.0    305.8   26.6    5.0   26.9    8.4
+
+iodine -> DSL provider :53  
+  -Tnull (= -Oraw)          1174    56.7    367.0   20.6    3.1   21.2    4.4
+  -Ttxt -Obase32             730    56.7    174.7*
+  -Ttxt -Obase64             874    56.7    174.7
+  -Ttxt -Obase128           1018    56.7    174.7
+  -Ttxt -Oraw               1162    56.7    358.2
+  -Tsrv -Obase128            910    56.7    174.7
+  -Tcname -Obase32           151    56.7     43.6
+  -Tcname -Obase128          212    56.7     52.4
+
+iodine -> DSL provider :53  
+  wired (no Wifi) -Tnull    1174    74.2    585.4   20.2    5.6   19.6    3.4
+
+ [174.7* : these all have 2frag/packet]
+
+
+Situation 2:
+Laptop  ->  Wifi+vpn / wired  ->  Home server
+ iodine                            iodined
+
+                        downstr.  upstream downstr.  ping-up       ping-down
+                        fragsize   kbit/s   kbit/s  avg +/-mdev   avg +/-mdev
+------------------------------------------------------------------------------
+
+wifi + openvpn  -Tnull      1186   166.0   1022.3    6.3    1.3    6.6    1.6
+
+wired  -Tnull               1186   677.2   2464.1    1.3    0.2    1.3    0.1
+
+
+Performance is strongly coupled to low ping times, as iodine requires
+confirmation for every data fragment before moving on to the next. Allowing
+multiple fragments in-flight like TCP could possibly increase performance,
+but it would likely cause serious overload for the intermediary DNS servers.
+The current protocol scales performance with DNS responsivity, since the
+DNS servers are on average handling at most one DNS request per client.
+
 
 PORTABILITY:
 
@@ -115,6 +338,7 @@ THANKS:
 AUTHORS & LICENSE:
 
 Copyright (c) 2006-2009 Bjorn Andersson <flex@kryo.se>, Erik Ekman <yarrick@kryo.se>
+Also major contributions by Anne Bezemer.
 
 Permission to use, copy, modify, and distribute this software for any purpose
 with or without fee is hereby granted, provided that the above copyright notice
index 1df7f6496835d5d33073be4ac07a14b60a500e9f..eec675e7eb2922937b563120722a88ba97ea992e 100644 (file)
@@ -9,19 +9,21 @@ Extra README file for Win32 related stuff
 \r
 == Running iodine on Windows:\r
 1. Install the TAP32 driver \r
- http://openvpn.net/index.php/downloads.html \r
choose OpenVPN 2.0.9 Windows Installer, when installing you can\r
- select to install only the TAP driver.\r
+   http://openvpn.net/index.php/open-source/downloads.html\r
  Choose OpenVPN 2.0.9 Windows Installer, when installing you can\r
  select to install only the TAP driver.\r
 \r
-2. Have one TAP32 interface installed\r
+2. Have at least one TAP32 interface installed. There are scripts for adding\r
+   and removing in the OpenVPN bin directory. If you have more than one\r
+   installed, use -d to specify which. Use double quotes if you have spaces,\r
+   example: iodine.exe -d "Local Area Connection 4" abc.ab\r
 \r
-3. Name the interface "dns"\r
+3. Make sure the interface you want to use does not have a default gateway set.\r
 \r
-4. Make sure the interface does not have a default gateway set\r
+4. Run iodine/iodined as normal (see the main README file).\r
+   You may have to run it as administrator depending on user privileges.\r
 \r
-5. Run iodine/iodined as normal.\r
-\r
-6. Enjoy!\r
+5. Enjoy!\r
 \r
 \r
 == Building on Windows:\r
@@ -48,8 +50,6 @@ cross-compile.
 \r
 == Results of crappy Win32 API:\r
 The following fixable limitations apply:\r
-- Exactly one TAP32 interface must be installed\r
-- The TAP32 interface must be named "dns" and be version 0801 or 0901\r
 - Server cannot read packet destination address\r
 \r
 The following (probably) un-fixable limitations apply:\r
diff --git a/doc/iodine.te b/doc/iodine.te
new file mode 100644 (file)
index 0000000..9749f03
--- /dev/null
@@ -0,0 +1,25 @@
+# Sample post-initialization SELinux policy for Iodine
+policy_module(iodine, 1.1)
+
+require {
+       type init_t;
+       type initrc_t;
+       type unconfined_t;
+       type unlabeled_t;
+       class udp_socket { read write };
+       class rawip_socket { write read };
+       class association recvfrom;
+       class unix_dgram_socket { create connect };
+}
+
+type iodine_t;
+domain_type(iodine_t)
+domain_dyntrans_type(initrc_t)
+allow initrc_t iodine_t:process dyntransition;
+
+allow iodine_t unconfined_t:udp_socket { read write };
+allow iodine_t unconfined_t:rawip_socket { write read };
+allow iodine_t unlabeled_t:association recvfrom;
+allow iodine_t self:unix_dgram_socket { create connect };
+corenet_raw_receive_generic_node(iodine_t)
+corenet_rw_tun_tap_dev(iodine_t)
diff --git a/doc/proto_00000502.txt b/doc/proto_00000502.txt
new file mode 100644 (file)
index 0000000..46cf2de
--- /dev/null
@@ -0,0 +1,287 @@
+Detailed specification of protocol in version 00000502
+======================================================
+
+Note: work in progress!!
+
+======================================================
+1. DNS protocol
+======================================================
+
+Quick alphabetical index / register:
+       0-9     Data packet
+       A-F     Data packet
+       I       IP address
+       L       Login
+       N       Downstream fragsize     (NS.topdomain A-type reply)
+       O       Options
+       P       Ping
+       R       Downstream fragsize probe
+       S       Switch upstream codec
+       V       Version
+       W                               (WWW.topdomain A-type reply)
+       Y       Downstream codec check
+       Z       Upstream codec check
+
+
+CMC = 2 byte Cache Miss Counter, increased every time it is used
+
+Version:
+Client sends:
+       First byte v or V
+       Rest encoded with base32:
+       4 bytes big endian protocol version
+       CMC
+Server replies:
+       4 chars:
+               VACK (version ok), followed by login challenge
+               VNAK (version differs), followed by server protocol version
+               VFUL (server has no free slots), followed by max users
+       4 byte value: means login challenge/server protocol version/max users
+       1 byte userid of the new user, or any byte if not VACK
+       
+Login:
+Client sends:
+       First byte l or L
+       Rest encoded with base32:
+       1 byte userid
+       16 bytes MD5 hash of: (first 32 bytes of password) xor (8 repetitions of login challenge)
+       CMC
+Server replies:
+       LNAK means not accepted
+       x.x.x.x-y.y.y.y-mtu-netmask means accepted (server ip, client ip, mtu, netmask bits)
+
+IP Request:
+Client sends:
+       First byte i or I
+       5 bits coded as Base32 char, meaning userid
+       CMC as 3 Base32 chars
+Server replies
+       BADIP if bad userid, or
+       I and then 4 bytes network order external IP address of iodined server
+
+Upstream codec check / bounce:
+Client sends: 
+       First byte z or Z
+       Lots of data that should not be decoded
+Server replies:
+       The requested domain copied raw, in the lowest-grade downstream codec
+       available for the request type.
+
+Downstream codec check:
+Client sends:
+       First byte y or Y
+       1 char, meaning downstream codec to use
+       5 bits coded as Base32 char, meaning check variant
+       CMC as 3 Base32 chars
+       Possibly extra data, depending on check variant
+Server sends:
+       Data encoded with requested downstream codec; data content depending
+       on check variant number.
+       BADCODEC if requested downstream codec not available.
+       BADLEN if check variant is not available, or problem with extra data.
+
+       Downstream codec chars are same as in 'O' Option request, below.
+
+       Check variants:
+       1: Send encoded DOWNCODECCHECK1 string as defined in encoding.h
+
+       (Other variants reserved; possibly variant that sends a decoded-encoded
+       copy of Base32-encoded extra data in the request)
+
+Switch codec:
+Client sends:
+       First byte s or S
+       5 bits coded as Base32 char, meaning userid
+       5 bits coded as Base32 char, representing number of raw bits per
+       encoded byte:
+               5: Base32   (a-z0-5)
+               6: Base64   (a-zA-Z0-9+-)
+               26: Base64u (a-zA-Z0-9_-)
+               7: Base128  (a-zA-Z0-9\274-\375)
+       CMC as 3 Base32 chars
+Server sends:
+       Name of codec if accepted. After this all upstream data packets must 
+       be encoded with the new codec.
+       BADCODEC if not accepted. Client must then revert to previous codec
+       BADLEN if length of query is too short
+
+Options:
+Client sends:
+       First byte o or O
+       5 bits coded as Base32 char, meaning userid
+       1 char, meaning option
+       CMC as 3 Base32 chars
+Server sends:
+       Full name of option if accepted. After this, option immediately takes
+       effect in server.
+       BADCODEC if not accepted. Previous situation remains.
+       All options affect only the requesting client.
+
+       Option chars:
+       t or T: Downstream encoding Base32, for TXT/CNAME/A/MX (default)
+       s or S: Downstream encoding Base64, for TXT/CNAME/A/MX
+       u or U: Downstream encoding Base64u, for TXT/CNAME/A/MX
+       v or V: Downstream encoding Base128, for TXT/CNAME/A/MX
+       r or R: Downstream encoding Raw, for TXT/NULL (default for NULL)
+       If codec unsupported for request type, server will use Base32; note
+       that server will answer any mix of request types that a client sends.
+       Server may disregard this option; client must always use the downstream
+       encoding type indicated in every downstream DNS packet.
+
+       l or L: Lazy mode, server will keep one request unanswered until the
+       next one comes in. Applies only to data transfer; handshake is always
+       answered immediately.
+       i or I: Immediate (non-lazy) mode, server will answer all requests
+       (nearly) immediately.
+
+Probe downstream fragment size:
+Client sends:
+       First byte r or R
+       15 bits coded as 3 Base32 chars: UUUUF FFFFF FFFFF
+               meaning 4 bits userid, 11 bits fragment size
+       Then follows a long random query which contents does not matter
+Server sends:
+       Requested number of bytes as a response. The first two bytes contain
+       the requested length. The third byte is 107 (0x6B). The fourth byte
+       is a random value, and each following byte is incremented with 107.
+       This is checked by the client to determine corruption.
+       BADFRAG if requested length not accepted.
+
+Set downstream fragment size:
+Client sends:
+       First byte n or N
+       Rest encoded with base32:
+       1 byte userid
+       2 bytes new downstream fragment size
+       CMC
+Server sends:
+       2 bytes new downstream fragment size. After this all downstream
+       payloads will be max (fragsize + 2) bytes long.
+       BADFRAG if not accepted.
+
+Data:
+Upstream data header:
+        3210 432 10 43 210 4321 0 43210
+       +----+---+--+--+---+----+-+-----+
+       |UUUU|SSS|FF|FF|DDD|GGGG|L|UDCMC|
+       +----+---+--+--+---+----+-+-----+
+
+Downstream data header:
+        7 654 3210 765 4321 0
+       +-+---+----+---+----+-+
+       |C|SSS|FFFF|DDD|GGGG|L|
+       +-+---+----+---+----+-+
+
+UUUU = Userid
+L = Last fragment in packet flag
+SS = Upstream packet sequence number
+FFFF = Upstream fragment number
+DDD = Downstream packet sequence number
+GGGG = Downstream fragment number
+C = Compression enabled for downstream packet
+UDCMC = Upstream Data CMC, 36 steps a-z0-9, case-insensitive
+
+Upstream data packet starts with 1 byte ASCII hex coded user byte; then 3 bytes 
+Base32 encoded header; then 1 char data-CMC; then comes the payload data,
+encoded with the chosen upstream codec.
+
+Downstream data starts with 2 byte header. Then payload data, which may be
+compressed.
+
+In NULL responses, downstream data is always raw. In all other response types,
+downstream data is encoded (see Options above).
+Encoding type is indicated by 1 prefix char:
+TXT:
+       End result is always DNS-chopped (series of len-prefixed strings
+       <=255 bytes)
+       t or T: Base32   encoded before chop, decoded after un-chop
+       s or S: Base64   encoded before chop, decoded after un-chop
+       u or U: Base64u  encoded before chop, decoded after un-chop
+       v or V: Base128  encoded before chop, decoded after un-chop
+       r or R: Raw      no encoding, only DNS-chop
+SRV/MX/CNAME/A:
+       h or H: Hostname encoded with Base32
+       i or I: Hostname encoded with Base64
+       j or J: Hostname encoded with Base64u
+       k or K: Hostname encoded with Base128
+SRV and MX may reply with multiple hostnames, each encoded separately. Each
+has a 10-multiple priority, and encoding/decoding is done in strictly
+increasing priority sequence 10, 20, 30, etc. without gaps. Note that some DNS
+relays will shuffle the answer records in the response.
+
+Ping:
+Client sends:
+       First byte p or P
+       Rest encoded with Base32:
+       1 byte with 4 bits userid
+       1 byte with:
+               3 bits downstream seqno
+               4 bits downstream fragment
+       CMC
+
+The server response to Ping and Data packets is a DNS NULL/TXT/.. type response,
+always starting with the 2 bytes downstream data header as shown above.
+If server has nothing to send, no data is added after the header.
+If server has something to send, it will add the downstream data packet
+(or some fragment of it) after the header.
+"Lazy-mode" operation
+=====================
+
+Client-server DNS traffic sequence has been reordered to provide increased
+(interactive) performance and greatly reduced latency.
+
+Idea taken from Lucas Nussbaum's slides (24th IFIP International Security
+Conference, 2009) at http://www.loria.fr/~lnussbau/tuns.html. Current
+implementation is original to iodine, no code or documentation from any other
+project was consulted during development.
+
+Server:
+Upstream data is acked immediately*, to keep the slow upstream data flowing
+as fast as possible (client waits for ack to send next frag).
+
+Upstream pings are answered _only_ when 1) downstream data arrives from tun,
+OR 2) new upstream ping/data arrives from client.
+In most cases, this means we answer the previous DNS query instead of the
+current one. The current query is kept in queue and used as soon as
+downstream data has to be sent.
+
+*: upstream data ack is usually done as reply on the previous ping packet,
+and the upstream-data packet itself is kept in queue.
+Client:
+Downstream data is acked immediately, to keep it flowing fast (includes a
+ping after last downstream frag).
+
+Also, after all available upstream data is sent & acked by the server (which
+in some cases uses up the last query), send an additional ping to prime the
+server for the next downstream data.
+
+
+======================================================
+2. Raw UDP protocol
+======================================================
+
+All Raw UDP protcol messages start with a 3 byte header: 0x10d19e
+This is not the start of a valid DNS message so it is easy to identify.
+The fourth byte contains the command and the user id.
+
+        7654 3210
+       +----+----+
+       |CCCC|UUUU|
+       +----+----+
+
+Login message (command = 1):
+The header is followed by a MD5 hash with the same password as in the DNS
+login. The client starts the raw mode by sending this message, and uses
+the login challenge +1, and the server responds using the login challenge -1.
+After the login message has been exchanged, both the server and the client
+switch to raw udp mode for the rest of the connection.
+
+Data message (command = 2):
+After the header comes the payload data, which may be compressed.
+
+Ping message (command = 3):
+Sent from client to server and back to keep session open. Has no payload.
+
index 1eeac2bbf9b4df7406736cc4987a2a987248b044..6eee603127d5c53d554e4aef84120ff05ce5d9c5 100644 (file)
@@ -1,5 +1,5 @@
 .\" groff -man -Tascii iodine.8
-.TH IODINE 8 "JUL 2008" "User Manuals"
+.TH IODINE 8 "DEC 2009" "User Manuals"
 .SH NAME
 iodine, iodined \- tunnel IPv4 over DNS
 .SH SYNOPSIS
@@ -7,7 +7,7 @@ iodine, iodined \- tunnel IPv4 over DNS
 
 .B iodine [-h]
 
-.B iodine [-f] [-u
+.B iodine [-f] [-r] [-u
 .I user
 .B ] [-P
 .I password
@@ -19,6 +19,20 @@ iodine, iodined \- tunnel IPv4 over DNS
 .I device
 .B ] [-m
 .I fragsize
+.B ] [-M
+.I namelen
+.B ] [-z
+.I context
+.B ] [-F
+.I pidfile
+.B ] [-T
+.I dnstype
+.B ] [-O
+.I downenc
+.B ] [-L
+.I 0|1
+.B ] [-I
+.I interval
 .B ]
 .B [
 .I nameserver
@@ -42,12 +56,16 @@ iodine, iodined \- tunnel IPv4 over DNS
 .B ] [-p
 .I port
 .B ] [-n
-.I external ip
+.I external_ip
 .B ] [-b
 .I dnsport
 .B ] [-P
 .I password
-.B ] 
+.B ] [-z
+.I context
+.B ] [-F
+.I pidfile
+.B ]
 .I tunnel_ip
 .B [
 .I /netmask
@@ -58,11 +76,20 @@ iodine, iodined \- tunnel IPv4 over DNS
 lets you tunnel IPv4 data through a DNS 
 server. This can be useful in situations where Internet access is firewalled,
 but DNS queries are allowed. It needs a TUN/TAP device to operate. The 
-bandwidth is asymmetrical with limited upstream and up to 1 Mbit/s downstream.
+bandwidth is asymmetrical,
+with a measured maximum of 680 kbit/s upstream and 2.3 Mbit/s
+downstream in a wired LAN test network.
+Realistic sustained throughput on a Wifi network using a carrier-grade
+DNS cache has been measured at some 50 kbit/s upstream and over 200 kbit/s
+downstream.
 .B iodine
 is the client application,
 .B iodined
 is the server.
+
+Note: server and client are required to speak the exact same protocol. In most
+cases, this means running the same iodine version. Unfortunately, implementing
+backward and forward protocol compatibility is usually not feasible.
 .SH OPTIONS
 .SS Common Options:
 .TP
@@ -89,55 +116,165 @@ and otherwise tunX.
 Use 'password' to authenticate. If not used, 
 .B stdin
 will be used as input. Only the first 32 characters will be used.
+.TP
+.B -z context
+Apply SELinux 'context' after initialization.
+.TP
+.B -F pidfile
+Create 'pidfile' and write process id in it.
 .SS Client Options:
 .TP
+.B -r
+Skip raw UDP mode. If not used, iodine will try getting the public IP address
+of the iodined host and test if it is reachable directly. If it is, traffic
+will be sent to the server instead of the DNS relay.
+.TP
 .B -m fragsize
-Maximum downstream fragsize. Not setting this will cause the client to probe
-the maximum accepted downstream packet size.
+Force maximum downstream fragment size. Not setting this will cause the
+client to automatically probe the maximum accepted downstream fragment size.
+.TP
+.B -M namelen
+Maximum length of upstream hostnames, default 255.
+Usable range ca. 100 to 255.
+Use this option to scale back upstream bandwidth in favor of downstream
+bandwidth.
+Also useful for DNS servers that perform unreliably when using full-length
+hostnames, noticable when fragment size autoprobe returns very
+different results each time.
+.TP
+.B -T dnstype
+DNS request type override.
+By default, autodetection will probe for working DNS request types, and
+will select the request type that is expected to provide the most bandwidth.
+However, it may turn out that a DNS relay imposes limits that skew the
+picture, which may lead to an "unexpected" DNS request type providing
+more bandwidth.
+In that case, use this option to override the autodetection.
+In (expected) decreasing bandwidth order, the supported DNS request types are:
+.IR NULL ,
+.IR TXT ,
+.IR SRV ,
+.IR MX ,
+.I CNAME
+and
+.I A
+(returning CNAME).
+Note that
+.IR SRV ,
+.I MX
+and
+.I A
+may/will cause additional lookups by "smart" caching
+nameservers to get an actual IP address, which may either slow down or fail
+completely.
+.TP
+.B -O downenc
+Force downstream encoding type for all query type responses except NULL.
+Default is autodetected, but may not spot all problems for the more advanced
+codecs.
+Use this option to override the autodetection.
+.I Base32
+is the lowest-grade codec and should always work; this is used when
+autodetection fails.
+.I Base64
+provides more bandwidth, but may not work on all nameservers.
+.I Base64u
+is equal to Base64 except in using underscore ('_')
+instead of plus sign ('+'), possibly working where
+.I Base64
+does not.
+.I Base128
+uses high byte values (mostly accented letters in iso8859-1),
+which might work with some nameservers.
+For TXT queries,
+.I Raw
+will provide maximum performance, but this will only work if the nameserver
+path is fully 8-bit-clean for responses that are assumed to be "legible text".
+.TP
+.B -L 0|1
+Lazy-mode switch.
+\-L1 (default): Use lazy mode for improved performance and decreased latency.
+A very small minority of DNS relays appears to be unable to handle the
+lazy mode traffic pattern, resulting in no or very little data coming through.
+The iodine client will detect this and try to switch back to legacy mode,
+but this may not always work.
+In these situations use \-L0 to force running in legacy mode
+(implies \-I1).
+.TP
+.B -I interval
+Maximum interval between requests (pings) so that intermediate DNS
+servers will not time out. Default is 4 in lazy mode, which will work
+fine in most cases. When too many SERVFAIL errors occur, iodine
+will automatically reduce this to 1.
+To get absolute minimum DNS traffic,
+increase well above 4, but not so high that SERVFAIL errors start to occur.
+There are some DNS relays with very small timeouts,
+notably dnsadvantage.com (ultradns), that will give
+SERVFAIL errors even with \-I1; data will still get trough,
+and these errors can be ignored.
+Maximum useful value is 59, since iodined will close a client's
+connection after 60 seconds of inactivity.
 .SS Server Options:
 .TP
 .B -c
-Disable checks on client IP on all incoming requests.
+Disable checking the client IP address on all incoming requests.
+By default, requests originating from non-matching IP adresses will be
+rejected, however this will cause problems when requests are routed
+via a cluster of DNS servers.
 .TP
 .B -s
-Don't try to configure IP address or MTU. This should only be used if
-you have already configured the device that will be used.
+Don't try to configure IP address or MTU. 
+This should only be used if you have already configured the device that will be
+used.
 .TP
 .B -D
 Increase debug level. Level 1 prints info about each RX/TX packet.
+Implies the
+.B -f
+option.
+On level 2 (-DD) or higher, DNS queries will be printed literally.
+When using Base128 upstream encoding, this is best viewed as
+ISO Latin-1 text instead of (illegal) UTF-8.
+This is easily done with : "LC_ALL=C luit iodined -DD ..."
+(see luit(1)).
 .TP
 .B -m mtu
-Set 'mtu' as mtu size for the tunnel device. This will be sent to the client
-on connect, and the client will use the same mtu.
+Set 'mtu' as mtu size for the tun device. 
+This will be sent to the client on login, and the client will use the same mtu
+for its tun device.  Default 1130.  Note that the DNS traffic will be
+automatically fragmented when needed.
 .TP
 .B -l listen_ip
-Make the server listen only on 'listen_ip' instead of on 0.0.0.0 for incoming
-connections.
+Make the server listen only on 'listen_ip' for incoming requests.
+By default, incoming requests are accepted from all interfaces.
 .TP
 .B -p port
 Make the server listen on 'port' instead of 53 for traffic. 
 .B Note:
 You must make sure the dns requests are forwarded to this port yourself.
 .TP
-.B -n external ip
+.B -n external_ip
 The IP address to return in NS responses. Default is to return the address used
 as destination in the query.
 .TP
 .B -b dnsport
 If this port is specified, all incoming requests not inside the tunnel domain
 will be forwarded to this port on localhost, to be handled by a real dns.
+.B Note:
+The forwarding is not fully transparent, and not advised for use
+in production environments.
 .SS Client Arguments:
 .TP
 .B nameserver
 The nameserver to use to relay the dns traffic. This can be any relaying
-nameserver  or the ip number of the server running iodined if reachable.
-This argument is optional, and if not specified a nameserver will be read
-from the
+nameserver or the server running iodined if reachable. This field can be
+given as an IP address, or as a hostname. This argument is optional, and 
+if not specified a nameserver will be read from the
 .I /etc/resolv.conf
 file.
 .TP
 .B topdomain
-The dns traffic will be sent as querys of type NULL for subdomains under
+The dns traffic will be sent as queries for subdomains under
 \'topdomain'. This is normally a subdomain to a domain you own. Use a short
 domain name to get better throughput. If 
 .B nameserver
@@ -146,86 +283,56 @@ must be the same on both the client and the server.
 .SS Server Arguments:
 .TP
 .B tunnel_ip[/netmask]
-This is the servers ip address on the tunnel interface. The client will be
+This is the server's ip address on the tun interface. The client will be
 given the next ip number in the range. It is recommended to use the 
 10.0.0.0 or 172.16.0.0 ranges. The default netmask is /27, can be overriden
 by specifying it here. Using a smaller network will limit the number of
 concurrent users.
 .TP
 .B topdomain
-The dns traffic will is expected to be sent as querys of type NULL for 
+The dns traffic is expected to arrive as queries for
 subdomains under 'topdomain'. This is normally a subdomain to a domain you 
 own. Use a short domain name to get better throughput. This argument must be 
-the same on both the client and the server.
+the same on both the client and the server. Queries for domains other
+than 'topdomain' will be forwarded when the \-b option is given, otherwise
+they will be dropped.
 .SH EXAMPLES
-.SS Quickstart:
-.TP
-Try it out within your own LAN! Follow these simple steps:
-.TP
-- On your server, run: ./iodined \-f 10.0.0.1 test.asdf
-(If you already use the 10.0.0.0 network, use another internal net like 
-172.16.0.0)
-.TP
-- Enter a password
-.TP
-- On the client, run: ./iodine \-f 192.168.0.1 test.asdf
-(Replace 192.168.0.1 with the server's ip address)
-.TP
-- Enter the same password
-.TP
-- Now the client has the tunnel ip 10.0.0.2 and the server has 10.0.0.1
-.TP
-- Try pinging each other through the tunnel
-.TP
-- Done! :)
-.TP
-To actually use it through a relaying nameserver, see below.
-.SS Full setup:
-
-.TP
-.B Server side:
-To use this tunnel, you need control over a real domain (like mytunnel.com),
-and a server with a public IP number. If the server already runs a DNS
-server, change the listening port and then use the \-b option to let
-iodined forward the DNS requests. Then, delegate a subdomain 
-(say, tunnel1.mytunnel.com) to the server. If you use BIND for the domain, 
-add these lines to the zone file (replace 10.15.213.99 with your server ip):
-
-.nf
-tunnel1host    IN      A       10.15.213.99
-tunnel1                IN      NS      tunnel1host.mytunnel.com.
-.fi
-
-Now any DNS querys for domains ending with tunnel1.mytunnnel.com will be sent
-to your server. Start iodined on the server. The first argument is the tunnel
-IP address (like 192.168.99.1) and the second is the assigned domain (in this
-case tunnel1.mytunnel.com). The \-f argument will keep iodined running in the
-foreground, which helps when testing. iodined will start a virtual interface,
-and also start listening for DNS queries on UDP port 53. Either enter a
-password on the commandline (\-P pass) or after the server has started. Now 
-everything is ready for the client.
-.TP
-.B Client side: 
-All the setup is done, just start iodine. It also takes two
-arguments, the first is the local relaying DNS server and the second is the
-domain used (tunnel1.mytunnnel.com). If DNS queries are allowed to any
-computer, you can use the tunnel endpoint (example: 10.15.213.99 or
-tunnel1host.mytunnel.com) as the first argument. The tunnel interface will get
-an IP close to the servers (in this case 192.168.99.2) and a suitable MTU. 
-Enter the same password as on the server either by argument or after the client
-has started. Now you should be able to ping the other end of the tunnel from 
-either side.  
-.TP
-.B Routing:
-The normal case is to route all traffic through the DNS tunnel. To do this, first
-add a route to the nameserver you use with the default gateway as gateway. Then
-replace the default gateway with the servers IP address within the DNS tunnel,
-and configure the server to do NAT.
-.TP
-.B MTU issues:
-These issues should be solved now, with automatic fragmentation of downstream 
-packets. There should be no need to set the MTU explicitly on the server.
+See the README file for both a quick test scenario, and a detailed description
+of real-world deployment.
+.SH SECURITY
+Login is a relatively secure challenge-response MD5 hash, with the
+password never passing the wire.
+However, all other data is
+.B NOT
+encrypted in any way. The DNS traffic is also vulnerable to replay,
+injection and man-in-the-middle attacks, especially when iodined is used
+with the \-c option. Use of ssh or vpn tunneling is strongly recommended.
+On both server and client, use
+.IR iptables ,
+.I pf
+or other firewalls to block all traffic coming in from the tun interfaces,
+except to the used ssh or vpn ports.
+.SH ENVIRONMENT
+.SS IODINE_PASS
+If the environment variable
+.B IODINE_PASS
+is set, iodine will use the value it is set to as password instead of asking
+for one. The 
+.B -P
+option still has precedence.
+.SS IODINED_PASS
+If the environment variable
+.B IODINED_PASS
+is set, iodined will use the value it is set to as password instead of asking
+for one. The
+.B -P
+option still has precedence.
+.El
+.SH SEE ALSO
+The README file in the source distribution contains some more elaborate
+information.
 .SH BUGS
 File bugs at http://dev.kryo.se/iodine/
 .SH AUTHORS
-Erik Ekman <yarrick@kryo.se> and Bjorn Andersson <flex@kryo.se>
+Erik Ekman <yarrick@kryo.se> and Bjorn Andersson <flex@kryo.se>. Major
+contributions by Anne Bezemer.
index fe15d934aa95a026feffa2d005d34e42f0c6dd1d..a5b9838290cfeeb57284ec4fdd1281c485091476 100644 (file)
@@ -1,6 +1,5 @@
-CC = gcc
-COMMONOBJS = tun.o dns.o read.o encoding.o login.o base32.o base64.o md5.o common.o
-CLIENTOBJS = iodine.o
+COMMONOBJS = tun.o dns.o read.o encoding.o login.o base32.o base64.o base64u.o base128.o md5.o common.o
+CLIENTOBJS = iodine.o client.o util.o
 CLIENT = ../bin/iodine
 SERVEROBJS = iodined.o user.o fw_query.o
 SERVER = ../bin/iodined
@@ -9,8 +8,8 @@ OS = `echo $(TARGETOS) | tr "a-z" "A-Z"`
 ARCH = `uname -m`
 
 LIBPATH = -L.
-LDFLAGS =  -lz `sh osflags $(TARGETOS) link` $(LIBPATH)
-CFLAGS = -c -g -Wall -D$(OS) -pedantic `sh osflags $(TARGETOS) cflags`
+LDFLAGS +=  -lz `sh osflags $(TARGETOS) link` $(LIBPATH)
+CFLAGS += -c -g -Wall -D$(OS) -pedantic `sh osflags $(TARGETOS) cflags`
 
 all: stateos $(CLIENT) $(SERVER)
 
@@ -31,7 +30,17 @@ $(SERVER): $(COMMONOBJS) $(SERVEROBJS)
        @echo CC $<
        @$(CC) $(CFLAGS) $< -o $@
 
+base64u.o client.o iodined.o: base64u.h
+base64u.c: base64.c
+       @echo Making $@
+       @echo '/* No use in editing, produced by Makefile! */' > $@
+       @sed -e 's/\([Bb][Aa][Ss][Ee]64\)/\1u/g ; s/0123456789+/0123456789_/' < base64.c >> $@
+base64u.h: base64.h
+       @echo Making $@
+       @echo '/* No use in editing, produced by Makefile! */' > $@
+       @sed -e 's/\([Bb][Aa][Ss][Ee]64\)/\1u/g ; s/0123456789+/0123456789_/' < base64.h >> $@
+
 clean:
        @echo "Cleaning src/"
-       @rm -f $(CLIENT){,.exe} $(SERVER){,.exe} *~ *.o *.core
+       @rm -f $(CLIENT){,.exe} $(SERVER){,.exe} *~ *.o *.core base64u.*
 
diff --git a/src/base128.c b/src/base128.c
new file mode 100644 (file)
index 0000000..32a29f8
--- /dev/null
@@ -0,0 +1,291 @@
+/*
+ * Copyright (C) 2009 J.A.Bezemer@opensourcepartners.nl
+ *
+ * Permission to use, copy, modify, and distribute this software for any
+ * purpose with or without fee is hereby granted, provided that the above
+ * copyright notice and this permission notice appear in all copies.
+ *
+ * THE SOFTWARE IS PROVIDED "AS IS" AND THE AUTHOR DISCLAIMS ALL WARRANTIES
+ * WITH REGARD TO THIS SOFTWARE INCLUDING ALL IMPLIED WARRANTIES OF
+ * MERCHANTABILITY AND FITNESS. IN NO EVENT SHALL THE AUTHOR BE LIABLE FOR
+ * ANY SPECIAL, DIRECT, INDIRECT, OR CONSEQUENTIAL DAMAGES OR ANY DAMAGES
+ * WHATSOEVER RESULTING FROM LOSS OF USE, DATA OR PROFITS, WHETHER IN AN
+ * ACTION OF CONTRACT, NEGLIGENCE OR OTHER TORTIOUS ACTION, ARISING OUT OF
+ * OR IN CONNECTION WITH THE USE OR PERFORMANCE OF THIS SOFTWARE.
+ */
+
+/*
+ * raw 76543210 76543210 76543210 76543210 76543210 76543210 76543210
+ * enc 65432106 54321065 43210654 32106543 21065432 10654321 06543210
+ *     ^      ^       ^       ^       ^       ^       ^       ^
+ *
+ *     0001 1  0001 1
+ *     0011 3  0011 3
+ *     0111 7  0111 7
+ *     1111 f  0110 6
+ *     1110 e  0100 4
+ *     1100 c
+ *     1000 8
+ */
+
+#include <stdio.h>
+#include <stdlib.h>
+#include <string.h>
+
+#include "encoding.h"
+#include "base128.h"
+
+#define BLKSIZE_RAW 7
+#define BLKSIZE_ENC 8
+
+/* Don't use '-' (restricted to middle of labels), prefer iso_8859-1
+ * accent chars since they might readily be entered in normal use,
+ * don't use 254-255 because of possible function overloading in DNS systems.
+ */
+static const unsigned char cb128[] = 
+       "abcdefghijklmnopqrstuvwxyzABCDEFGHIJKLMNOPQRSTUVWXYZ0123456789"
+       "\274\275\276\277"
+       "\300\301\302\303\304\305\306\307\310\311\312\313\314\315\316\317"
+       "\320\321\322\323\324\325\326\327\330\331\332\333\334\335\336\337"
+       "\340\341\342\343\344\345\346\347\350\351\352\353\354\355\356\357"
+       "\360\361\362\363\364\365\366\367\370\371\372\373\374\375";
+static unsigned char rev128[256];
+static int reverse_init = 0;
+
+static int base128_encode(char *, size_t *, const void *, size_t);
+static int base128_decode(void *, size_t *, const char *, size_t);
+static int base128_handles_dots();
+static int base128_blksize_raw();
+static int base128_blksize_enc();
+
+static struct encoder base128_encoder =
+{
+       "Base128",
+       base128_encode,
+       base128_decode,
+       base128_handles_dots,
+       base128_handles_dots,
+       base128_blksize_raw,
+       base128_blksize_enc
+};
+
+struct encoder
+*get_base128_encoder()
+{
+       return &base128_encoder;
+}
+
+static int 
+base128_handles_dots()
+{
+       return 0;
+}
+
+static int 
+base128_blksize_raw()
+{
+       return BLKSIZE_RAW;
+}
+
+static int 
+base128_blksize_enc()
+{
+       return BLKSIZE_ENC;
+}
+
+inline static void
+base128_reverse_init()
+{
+       int i;
+       unsigned char c;
+
+       if (!reverse_init) {
+               memset (rev128, 0, 256);
+               for (i = 0; i < 128; i++) {
+                       c = cb128[i];
+                       rev128[(int) c] = i;
+               }
+               reverse_init = 1;
+       }
+}
+
+static int 
+base128_encode(char *buf, size_t *buflen, const void *data, size_t size)
+/*
+ * Fills *buf with max. *buflen characters, encoding size bytes of *data.
+ *
+ * NOTE: *buf space should be at least 1 byte _more_ than *buflen
+ * to hold the trailing '\0'.
+ *
+ * return value    : #bytes filled in buf   (excluding \0)
+ * sets *buflen to : #bytes encoded from data
+ */
+{
+       unsigned char *ubuf = (unsigned char *) buf;
+       unsigned char *udata = (unsigned char *) data;
+       int iout = 0;   /* to-be-filled output char */
+       int iin = 0;    /* one more than last input byte that can be
+                          successfully decoded */
+
+       /* Note: Don't bother to optimize manually. GCC optimizes
+          better(!) when using simplistic array indexing. */
+
+       while (1) {
+               if (iout >= *buflen || iin >= size)
+                       break;
+               ubuf[iout] = cb128[((udata[iin] & 0xfe) >> 1)];
+               iout++;
+
+               if (iout >= *buflen || iin >= size) {
+                       iout--;         /* previous char is useless */
+                       break;
+               }
+               ubuf[iout] = cb128[((udata[iin] & 0x01) << 6) |
+                                  ((iin + 1 < size) ?
+                                   ((udata[iin + 1] & 0xfc) >> 2) : 0)];
+               iin++;                  /* 0 complete, iin=1 */
+               iout++;
+
+               if (iout >= *buflen || iin >= size)
+                       break;
+               ubuf[iout] = cb128[((udata[iin] & 0x03) << 5) |
+                                  ((iin + 1 < size) ?
+                                   ((udata[iin + 1] & 0xf8) >> 3) : 0)];
+               iin++;                  /* 1 complete, iin=2 */
+               iout++;
+
+               if (iout >= *buflen || iin >= size)
+                       break;
+               ubuf[iout] = cb128[((udata[iin] & 0x07) << 4) |
+                                  ((iin + 1 < size) ?
+                                   ((udata[iin + 1] & 0xf0) >> 4) : 0)];
+               iin++;                  /* 2 complete, iin=3 */
+               iout++;
+
+               if (iout >= *buflen || iin >= size)
+                       break;
+               ubuf[iout] = cb128[((udata[iin] & 0x0f) << 3) |
+                                  ((iin + 1 < size) ?
+                                   ((udata[iin + 1] & 0xe0) >> 5) : 0)];
+               iin++;                  /* 3 complete, iin=4 */
+               iout++;
+
+               if (iout >= *buflen || iin >= size)
+                       break;
+               ubuf[iout] = cb128[((udata[iin] & 0x1f) << 2) |
+                                  ((iin + 1 < size) ?
+                                   ((udata[iin + 1] & 0xc0) >> 6) : 0)];
+               iin++;                  /* 4 complete, iin=5 */
+               iout++;
+
+               if (iout >= *buflen || iin >= size)
+                       break;
+               ubuf[iout] = cb128[((udata[iin] & 0x3f) << 1) |
+                                  ((iin + 1 < size) ?
+                                   ((udata[iin + 1] & 0x80) >> 7) : 0)];
+               iin++;                  /* 5 complete, iin=6 */
+               iout++;
+
+               if (iout >= *buflen || iin >= size)
+                       break;
+               ubuf[iout] = cb128[(udata[iin] & 0x7f)];
+               iin++;                  /* 6 complete, iin=7 */
+               iout++;
+       }
+
+       ubuf[iout] = '\0';
+
+       /* store number of bytes from data that was used */
+       *buflen = iin;
+
+       return iout;
+}
+
+#define REV128(x) rev128[(int) (x)]
+
+static int
+base128_decode(void *buf, size_t *buflen, const char *str, size_t slen)
+/*
+ * Fills *buf with max. *buflen bytes, decoded from slen chars in *str.
+ * Decoding stops early when *str contains \0.
+ * Illegal encoded chars are assumed to decode to zero.
+ *
+ * NOTE: *buf space should be at least 1 byte _more_ than *buflen
+ * to hold a trailing '\0' that is added (though *buf will usually
+ * contain full-binary data).
+ *
+ * return value    : #bytes filled in buf   (excluding \0)
+ */
+{
+       unsigned char *ustr = (unsigned char *) str;
+       unsigned char *ubuf = (unsigned char *) buf;
+       int iout = 0;   /* to-be-filled output byte */
+       int iin = 0;    /* next input char to use in decoding */
+
+       base128_reverse_init ();
+
+       /* Note: Don't bother to optimize manually. GCC optimizes
+          better(!) when using simplistic array indexing. */
+
+       while (1) {
+               if (iout >= *buflen || iin + 1 >= slen ||
+                   str[iin] == '\0' || str[iin + 1] == '\0')
+                       break;
+               ubuf[iout] = ((REV128(ustr[iin]) & 0x7f) << 1) | 
+                            ((REV128(ustr[iin + 1]) & 0x40) >> 6);
+               iin++;                  /* 0 used up, iin=1 */
+               iout++;
+
+               if (iout >= *buflen || iin + 1 >= slen ||
+                   str[iin] == '\0' || str[iin + 1] == '\0')
+                       break;
+               ubuf[iout] = ((REV128(ustr[iin]) & 0x3f) << 2) |
+                            ((REV128(ustr[iin + 1]) & 0x60) >> 5);
+               iin++;                  /* 1 used up, iin=2 */
+               iout++;
+
+               if (iout >= *buflen || iin + 1 >= slen ||
+                   str[iin] == '\0' || str[iin + 1] == '\0')
+                       break;
+               ubuf[iout] = ((REV128(ustr[iin]) & 0x1f) << 3) |
+                            ((REV128(ustr[iin + 1]) & 0x70) >> 4);
+               iin++;                  /* 2 used up, iin=3 */
+               iout++;
+
+               if (iout >= *buflen || iin + 1 >= slen ||
+                   str[iin] == '\0' || str[iin + 1] == '\0')
+                       break;
+               ubuf[iout] = ((REV128(ustr[iin]) & 0x0f) << 4) |
+                            ((REV128(ustr[iin + 1]) & 0x78) >> 3);
+               iin++;                  /* 3 used up, iin=4 */
+               iout++;
+
+               if (iout >= *buflen || iin + 1 >= slen ||
+                   str[iin] == '\0' || str[iin + 1] == '\0')
+                       break;
+               ubuf[iout] = ((REV128(ustr[iin]) & 0x07) << 5) |
+                            ((REV128(ustr[iin + 1]) & 0x7c) >> 2);
+               iin++;                  /* 4 used up, iin=5 */
+               iout++;
+
+               if (iout >= *buflen || iin + 1 >= slen ||
+                   str[iin] == '\0' || str[iin + 1] == '\0')
+                       break;
+               ubuf[iout] = ((REV128(ustr[iin]) & 0x03) << 6) |
+                            ((REV128(ustr[iin + 1]) & 0x7e) >> 1);
+               iin++;                  /* 5 used up, iin=6 */
+               iout++;
+
+               if (iout >= *buflen || iin + 1 >= slen ||
+                   str[iin] == '\0' || str[iin + 1] == '\0')
+                       break;
+               ubuf[iout] = ((REV128(ustr[iin]) & 0x01) << 7) |
+                            ((REV128(ustr[iin + 1]) & 0x7f));
+               iin += 2;               /* 6,7 used up, iin=8 */
+               iout++;
+       }
+
+       ubuf[iout] = '\0';
+
+       return iout;
+}
diff --git a/src/base128.h b/src/base128.h
new file mode 100644 (file)
index 0000000..235b2f9
--- /dev/null
@@ -0,0 +1,22 @@
+/*
+ * Copyright (C) 2009 J.A.Bezemer@opensourcepartners.nl
+ *
+ * Permission to use, copy, modify, and distribute this software for any
+ * purpose with or without fee is hereby granted, provided that the above
+ * copyright notice and this permission notice appear in all copies.
+ *
+ * THE SOFTWARE IS PROVIDED "AS IS" AND THE AUTHOR DISCLAIMS ALL WARRANTIES
+ * WITH REGARD TO THIS SOFTWARE INCLUDING ALL IMPLIED WARRANTIES OF
+ * MERCHANTABILITY AND FITNESS. IN NO EVENT SHALL THE AUTHOR BE LIABLE FOR
+ * ANY SPECIAL, DIRECT, INDIRECT, OR CONSEQUENTIAL DAMAGES OR ANY DAMAGES
+ * WHATSOEVER RESULTING FROM LOSS OF USE, DATA OR PROFITS, WHETHER IN AN
+ * ACTION OF CONTRACT, NEGLIGENCE OR OTHER TORTIOUS ACTION, ARISING OUT OF
+ * OR IN CONNECTION WITH THE USE OR PERFORMANCE OF THIS SOFTWARE.
+ */
+
+#ifndef __BASE128_H__
+#define __BASE128_H__
+
+struct encoder *get_base128_encoder(void);
+
+#endif
index 5ee066468694bb5009c7b43ffbdd09a1264e1416..8731a9252416804a61b9c55a664e00081020f6d5 100644 (file)
@@ -1,5 +1,6 @@
 /*
  * Copyright (c) 2006-2009 Bjorn Andersson <flex@kryo.se>, Erik Ekman <yarrick@kryo.se>
+ * Mostly rewritten 2009 J.A.Bezemer@opensourcepartners.nl
  *
  * Permission to use, copy, modify, and distribute this software for any
  * purpose with or without fee is hereby granted, provided that the above
 
 static const char cb32[] = 
        "abcdefghijklmnopqrstuvwxyz012345";
-static unsigned char rev32[128];
+static const char cb32_ucase[] = 
+       "ABCDEFGHIJKLMNOPQRSTUVWXYZ012345";
+static unsigned char rev32[256];
+static int reverse_init = 0;
 
-static int base32_decode(void *, size_t *, const char *, size_t);
 static int base32_encode(char *, size_t *, const void *, size_t);
+static int base32_decode(void *, size_t *, const char *, size_t);
 static int base32_handles_dots();
 static int base32_blksize_raw();
 static int base32_blksize_enc();
@@ -69,17 +73,19 @@ base32_blksize_enc()
        return BLKSIZE_ENC;
 }
 
-static void
+inline static void
 base32_reverse_init()
 {
        int i;
        unsigned char c;
-       static int reverse_init = 0;
 
        if (!reverse_init) {
+               memset (rev32, 0, 256);
                for (i = 0; i < 32; i++) {
                        c = cb32[i];
                        rev32[(int) c] = i;
+                       c = cb32_ucase[i];
+                       rev32[(int) c] = i;
                }
                reverse_init = 1;
        }
@@ -100,123 +106,165 @@ b32_8to5(int in)
 
 static int 
 base32_encode(char *buf, size_t *buflen, const void *data, size_t size)
+/*
+ * Fills *buf with max. *buflen characters, encoding size bytes of *data.
+ *
+ * NOTE: *buf space should be at least 1 byte _more_ than *buflen
+ * to hold the trailing '\0'.
+ *
+ * return value    : #bytes filled in buf   (excluding \0)
+ * sets *buflen to : #bytes encoded from data
+ */
 {
-       size_t newsize;
-       size_t maxsize;
-       unsigned char *p;
-       unsigned char *q;
-       int i;
-
-       memset(buf, 0, *buflen);
-
-       /* how many chars can we encode within the buf */
-       maxsize = BLKSIZE_RAW * (*buflen / BLKSIZE_ENC);
-       /* how big will the encoded data be */
-       newsize = BLKSIZE_ENC * (size / BLKSIZE_RAW);
-       if (size % BLKSIZE_RAW) {
-               newsize += BLKSIZE_ENC;
-       }
-       /* if the buffer is too small, eat some of the data */
-       if (*buflen < newsize) {
-               size = maxsize;
-       }
+       unsigned char *udata = (unsigned char *) data;
+       int iout = 0;   /* to-be-filled output char */
+       int iin = 0;    /* one more than last input byte that can be
+                          successfully decoded */
 
-       p = (unsigned char *) buf;
-       q = (unsigned char *)data;
-
-       for(i=0;i<size;i+=BLKSIZE_RAW) {
-               p[0] = cb32[((q[0] & 0xf8) >> 3)];
-               p[1] = cb32[(((q[0] & 0x07) << 2) | ((q[1] & 0xc0) >> 6))];
-               p[2] = (i+1 < size) ? cb32[((q[1] & 0x3e) >> 1)] : '\0';
-               p[3] = (i+1 < size) ? cb32[((q[1] & 0x01) << 4) | ((q[2] & 0xf0) >> 4)] : '\0';
-               p[4] = (i+2 < size) ? cb32[((q[2] & 0x0f) << 1) | ((q[3] & 0x80) >> 7)] : '\0';
-               p[5] = (i+3 < size) ? cb32[((q[3] & 0x7c) >> 2)] : '\0';
-               p[6] = (i+3 < size) ? cb32[((q[3] & 0x03) << 3) | ((q[4] & 0xe0) >> 5)] : '\0';
-               p[7] = (i+4 < size) ? cb32[((q[4] & 0x1f))] : '\0';
-               
-               q += BLKSIZE_RAW;
-               p += BLKSIZE_ENC;
-       }       
-       *p = 0;
+       /* Note: Don't bother to optimize manually. GCC optimizes
+          better(!) when using simplistic array indexing. */
 
-       /* store number of bytes from data that was used */
-       *buflen = size;
-
-       return strlen(buf);
-}
-
-#define DECODE_ERROR 0xffffffff
-#define REV32(x) rev32[(int) (x)]
+       while (1) {
+               if (iout >= *buflen || iin >= size)
+                       break;
+               buf[iout] = cb32[((udata[iin] & 0xf8) >> 3)];
+               iout++;
 
-static int
-decode_token(const unsigned char *t, unsigned char *data, size_t len) 
-{
-       if (len < 2)
-               return 0;
+               if (iout >= *buflen || iin >= size) {
+                       iout--;         /* previous char is useless */
+                       break;
+               }
+               buf[iout] = cb32[((udata[iin] & 0x07) << 2) |
+                                 ((iin + 1 < size) ?
+                                  ((udata[iin + 1] & 0xc0) >> 6) : 0)];
+               iin++;                  /* 0 complete, iin=1 */
+               iout++;
 
-       data[0] = ((REV32(t[0]) & 0x1f) << 3) | 
-                         ((REV32(t[1]) & 0x1c) >> 2);
-       
-       if (len < 4)
-               return 1;
+               if (iout >= *buflen || iin >= size)
+                       break;
+               buf[iout] = cb32[((udata[iin] & 0x3e) >> 1)];
+               iout++;
 
-       data[1] = ((REV32(t[1]) & 0x03) << 6) | 
-                         ((REV32(t[2]) & 0x1f) << 1) | 
-                         ((REV32(t[3]) & 0x10) >> 4);
+               if (iout >= *buflen || iin >= size) {
+                       iout--;         /* previous char is useless */
+                       break;
+               }
+               buf[iout] = cb32[((udata[iin] & 0x01) << 4) |
+                                 ((iin + 1 < size) ?
+                                  ((udata[iin + 1] & 0xf0) >> 4) : 0)];
+               iin++;                  /* 1 complete, iin=2 */
+               iout++;
 
-       if (len < 5)
-               return 2;
+               if (iout >= *buflen || iin >= size)
+                       break;
+               buf[iout] = cb32[((udata[iin] & 0x0f) << 1) |
+                                 ((iin + 1 < size) ?
+                                  ((udata[iin + 1] & 0x80) >> 7) : 0)];
+               iin++;                  /* 2 complete, iin=3 */
+               iout++;
 
-       data[2] = ((REV32(t[3]) & 0x0f) << 4) |
-                         ((REV32(t[4]) & 0x1e) >> 1);
+               if (iout >= *buflen || iin >= size)
+                       break;
+               buf[iout] = cb32[((udata[iin] & 0x7c) >> 2)];
+               iout++;
 
-       if (len < 7)
-               return 3;
+               if (iout >= *buflen || iin >= size) {
+                       iout--;         /* previous char is useless */
+                       break;
+               }
+               buf[iout] = cb32[((udata[iin] & 0x03) << 3) |
+                                 ((iin + 1 < size) ?
+                                  ((udata[iin + 1] & 0xe0) >> 5) : 0)];
+               iin++;                  /* 3 complete, iin=4 */
+               iout++;
 
-       data[3] = ((REV32(t[4]) & 0x01) << 7) |
-                         ((REV32(t[5]) & 0x1f) << 2) |
-                         ((REV32(t[6]) & 0x18) >> 3);
+               if (iout >= *buflen || iin >= size)
+                       break;
+               buf[iout] = cb32[((udata[iin] & 0x1f))];
+               iin++;                  /* 4 complete, iin=5 */
+               iout++;
+       }
 
-       if (len < 8)
-               return 4;
+       buf[iout] = '\0';
 
-       data[4] = ((REV32(t[6]) & 0x07) << 5) |
-                         ((REV32(t[7]) & 0x1f));
+       /* store number of bytes from data that was used */
+       *buflen = iin;
 
-       return 5;
+       return iout;
 }
 
+#define REV32(x) rev32[(int) (x)]
+
 static int
 base32_decode(void *buf, size_t *buflen, const char *str, size_t slen)
+/*
+ * Fills *buf with max. *buflen bytes, decoded from slen chars in *str.
+ * Decoding stops early when *str contains \0.
+ * Illegal encoded chars are assumed to decode to zero.
+ *
+ * NOTE: *buf space should be at least 1 byte _more_ than *buflen
+ * to hold a trailing '\0' that is added (though *buf will usually
+ * contain full-binary data).
+ *
+ * return value    : #bytes filled in buf   (excluding \0)
+ */
 {
-       unsigned char *q;
-       size_t newsize;
-       size_t maxsize;
-       const char *p;
-       int len;
+       unsigned char *ubuf = (unsigned char *) buf;
+       int iout = 0;   /* to-be-filled output byte */
+       int iin = 0;    /* next input char to use in decoding */
 
-       base32_reverse_init();
-       
-       /* chars needed to decode slen */
-       newsize = BLKSIZE_RAW * (slen / BLKSIZE_ENC + 1) + 1;
-       /* encoded chars that fit in buf */
-       maxsize = BLKSIZE_ENC * (*buflen / BLKSIZE_RAW + 1) + 1;
-       /* if the buffer is too small, eat some of the data */
-       if (*buflen < newsize) {
-               slen = maxsize;
-       }
+       base32_reverse_init ();
+
+       /* Note: Don't bother to optimize manually. GCC optimizes
+          better(!) when using simplistic array indexing. */
 
-       q = buf;
-       for (p = str; *p && strchr(cb32, *p); p += BLKSIZE_ENC) {
-               len = decode_token((unsigned char *) p, (unsigned char *) q, slen);     
-               q += len;
-               slen -= BLKSIZE_ENC;
-               
-               if (len < BLKSIZE_RAW)
+       while (1) {
+               if (iout >= *buflen || iin + 1 >= slen ||
+                   str[iin] == '\0' || str[iin + 1] == '\0')
+                       break;
+               ubuf[iout] = ((REV32(str[iin]) & 0x1f) << 3) | 
+                            ((REV32(str[iin + 1]) & 0x1c) >> 2);
+               iin++;                  /* 0 used up, iin=1 */
+               iout++;
+
+               if (iout >= *buflen || iin + 2 >= slen ||
+                   str[iin] == '\0' || str[iin + 1] == '\0' ||
+                   str[iin + 2] == '\0')
                        break;
+               ubuf[iout] = ((REV32(str[iin]) & 0x03) << 6) | 
+                            ((REV32(str[iin + 1]) & 0x1f) << 1) | 
+                            ((REV32(str[iin + 2]) & 0x10) >> 4);
+               iin += 2;               /* 1,2 used up, iin=3 */
+               iout++;
+
+               if (iout >= *buflen || iin + 1 >= slen ||
+                   str[iin] == '\0' || str[iin + 1] == '\0')
+                       break;
+               ubuf[iout] = ((REV32(str[iin]) & 0x0f) << 4) |
+                            ((REV32(str[iin + 1]) & 0x1e) >> 1);
+               iin++;                  /* 3 used up, iin=4 */
+               iout++;
+
+               if (iout >= *buflen || iin + 2 >= slen ||
+                   str[iin] == '\0' || str[iin + 1] == '\0' ||
+                   str[iin + 2] == '\0')
+                       break;
+               ubuf[iout] = ((REV32(str[iin]) & 0x01) << 7) |
+                            ((REV32(str[iin + 1]) & 0x1f) << 2) |
+                            ((REV32(str[iin + 2]) & 0x18) >> 3);
+               iin += 2;               /* 4,5 used up, iin=6 */
+               iout++;
+
+               if (iout >= *buflen || iin + 1 >= slen ||
+                   str[iin] == '\0' || str[iin + 1] == '\0')
+                       break;
+               ubuf[iout] = ((REV32(str[iin]) & 0x07) << 5) |
+                            ((REV32(str[iin + 1]) & 0x1f));
+               iin += 2;               /* 6,7 used up, iin=8 */
+               iout++;
        }
-       *q = '\0';
-       
-       return q - (unsigned char *) buf;
-}
 
+       ubuf[iout] = '\0';
+
+       return iout;
+}
index 7da2d2a6e8413984e40fcb5f28ecb360b8b669ca..5218c091414286228e3dcf527cf48a0a32a1e6a6 100644 (file)
@@ -1,5 +1,6 @@
 /*
  * Copyright (c) 2006-2009 Bjorn Andersson <flex@kryo.se>, Erik Ekman <yarrick@kryo.se>
+ * Mostly rewritten 2009 J.A.Bezemer@opensourcepartners.nl
  *
  * Permission to use, copy, modify, and distribute this software for any
  * purpose with or without fee is hereby granted, provided that the above
 #include <string.h>
 
 #include "encoding.h"
-#include "common.h"
 #include "base64.h"
 
 #define BLKSIZE_RAW 3
 #define BLKSIZE_ENC 4
 
+/* Note: the "unofficial" char is last here, which means that the \377 pattern
+   in DOWNCODECCHECK1 ('Y' request) will properly test it. */
 static const char cb64[] = 
        "abcdefghijklmnopqrstuvwxyzABCDEFGHIJKLMNOPQRSTUVWXYZ-0123456789+";
-static unsigned char rev64[128];
+static unsigned char rev64[256];
 static int reverse_init = 0;
 
 static int base64_encode(char *, size_t *, const void *, size_t);
@@ -36,8 +38,6 @@ static int base64_handles_dots();
 static int base64_blksize_raw();
 static int base64_blksize_enc();
 
-#define REV64(x) rev64[(int) (x)]
-
 static struct encoder base64_encoder =
 {
        "Base64",
@@ -73,122 +73,133 @@ base64_blksize_enc()
        return BLKSIZE_ENC;
 }
 
-static int 
-base64_encode(char *buf, size_t *buflen, const void *data, size_t size)
+inline static void
+base64_reverse_init()
 {
-       size_t newsize;
-       size_t maxsize;
-       unsigned char *s;
-       unsigned char *p;
-       unsigned char *q;
        int i;
+       unsigned char c;
 
-       memset(buf, 0, *buflen);
-       
-       /* how many chars can we encode within the buf */
-       maxsize = BLKSIZE_RAW * (*buflen / BLKSIZE_ENC);
-       /* how big will the encoded data be */
-       newsize = BLKSIZE_ENC * (size / BLKSIZE_RAW);
-       if (size % BLKSIZE_RAW) {
-               newsize += BLKSIZE_ENC;
-       }
-
-       /* if the buffer is too small, eat some of the data */
-       if (*buflen < newsize) {
-               size = maxsize;
+       if (!reverse_init) {
+               memset (rev64, 0, 256);
+               for (i = 0; i < 64; i++) {
+                       c = cb64[i];
+                       rev64[(int) c] = i;
+               }
+               reverse_init = 1;
        }
-
-       p = s = (unsigned char *) buf;
-       q = (unsigned char *)data;
-
-       for(i=0;i<size;i+=BLKSIZE_RAW) {
-               p[0] = cb64[((q[0] & 0xfc) >> 2)];
-               p[1] = cb64[(((q[0] & 0x03) << 4) | ((q[1] & 0xf0) >> 4))];
-               p[2] = (i+1 < size) ? cb64[((q[1] & 0x0f) << 2 ) | ((q[2] & 0xc0) >> 6)] : '\0';
-               p[3] = (i+2 < size) ? cb64[(q[2] & 0x3f)] : '\0';
-               
-               q += BLKSIZE_RAW;
-               p += BLKSIZE_ENC;
-       }       
-       *p = 0;
-
-       /* store number of bytes from data that was used */
-       *buflen = size;
-
-       return strlen(buf);
 }
 
-#define DECODE_ERROR 0xffffffff
-
-static int
-decode_token(const unsigned char *t, unsigned char *data, size_t len) 
+static int 
+base64_encode(char *buf, size_t *buflen, const void *data, size_t size)
+/*
+ * Fills *buf with max. *buflen characters, encoding size bytes of *data.
+ *
+ * NOTE: *buf space should be at least 1 byte _more_ than *buflen
+ * to hold the trailing '\0'.
+ *
+ * return value    : #bytes filled in buf   (excluding \0)
+ * sets *buflen to : #bytes encoded from data
+ */
 {
-       if (len < 2)
-               return 0;
+       unsigned char *udata = (unsigned char *) data;
+       int iout = 0;   /* to-be-filled output char */
+       int iin = 0;    /* one more than last input byte that can be
+                          successfully decoded */
+
+       /* Note: Don't bother to optimize manually. GCC optimizes
+          better(!) when using simplistic array indexing. */
 
-       data[0] = ((REV64(t[0]) & 0x3f) << 2) | 
-                         ((REV64(t[1]) & 0x30) >> 4);
+       while (1) {
+               if (iout >= *buflen || iin >= size)
+                       break;
+               buf[iout] = cb64[((udata[iin] & 0xfc) >> 2)];
+               iout++;
+
+               if (iout >= *buflen || iin >= size) {
+                       iout--;         /* previous char is useless */
+                       break;
+               }
+               buf[iout] = cb64[((udata[iin] & 0x03) << 4) |
+                                 ((iin + 1 < size) ?
+                                  ((udata[iin + 1] & 0xf0) >> 4) : 0)];
+               iin++;                  /* 0 complete, iin=1 */
+               iout++;
 
-       if (len < 3)
-               return 1;
+               if (iout >= *buflen || iin >= size)
+                       break;
+               buf[iout] = cb64[((udata[iin] & 0x0f) << 2 ) |
+                                 ((iin + 1 < size) ?
+                                  ((udata[iin + 1] & 0xc0) >> 6) : 0)];
+               iin++;                  /* 1 complete, iin=2 */
+               iout++;
 
-       data[1] = ((REV64(t[1]) & 0x0f) << 4) | 
-                         ((REV64(t[2]) & 0x3c) >> 2);
+               if (iout >= *buflen || iin >= size)
+                       break;
+               buf[iout] = cb64[(udata[iin] & 0x3f)];
+               iin++;                  /* 2 complete, iin=3 */
+               iout++;
+       }
 
-       if (len < 4)
-               return 2;
+       buf[iout] = '\0';
 
-       data[2] = ((REV64(t[2]) & 0x03) << 6) |
-                         (REV64(t[3]) & 0x3f);
+       /* store number of bytes from data that was used */
+       *buflen = iin;
 
-       return 3;
+       return iout;
 }
 
+#define REV64(x) rev64[(int) (x)]
+
 static int
 base64_decode(void *buf, size_t *buflen, const char *str, size_t slen)
+/*
+ * Fills *buf with max. *buflen bytes, decoded from slen chars in *str.
+ * Decoding stops early when *str contains \0.
+ * Illegal encoded chars are assumed to decode to zero.
+ *
+ * NOTE: *buf space should be at least 1 byte _more_ than *buflen
+ * to hold a trailing '\0' that is added (though *buf will usually
+ * contain full-binary data).
+ *
+ * return value    : #bytes filled in buf   (excluding \0)
+ */
 {
-       unsigned char *q;
-       size_t newsize;
-       size_t maxsize;
-       const char *p;
-       unsigned char c;
-       unsigned char block[BLKSIZE_ENC];
-       int len;
-       int i;
+       unsigned char *ubuf = (unsigned char *) buf;
+       int iout = 0;   /* to-be-filled output byte */
+       int iin = 0;    /* next input char to use in decoding */
 
-       if (!reverse_init) {
-               for (i = 0; i < 64; i++) {
-                       c = cb64[i];
-                       rev64[(int) c] = i;
-               }
-               reverse_init = 1;
-       }
-       
-       /* chars needed to decode slen */
-       newsize = BLKSIZE_RAW * (slen / BLKSIZE_ENC + 1) + 1;
-       /* encoded chars that fit in buf */
-       maxsize = BLKSIZE_ENC * (*buflen / BLKSIZE_RAW + 1) + 1;
-       /* if the buffer is too small, eat some of the data */
-       if (*buflen < newsize) {
-               slen = maxsize;
-       }
-       
+       base64_reverse_init ();
 
-       q = buf;
-       for (p = str; *p; p += BLKSIZE_ENC) {
-               /* since the str is const, we unescape in another buf */
-               for (i = 0; i < BLKSIZE_ENC; i++) {
-                       block[i] = p[i];
-               }
-               len = decode_token(block, (unsigned char *) q, slen);   
-               q += len;
-               slen -= BLKSIZE_ENC;
-               
-               if (len < BLKSIZE_RAW)
+       /* Note: Don't bother to optimize manually. GCC optimizes
+          better(!) when using simplistic array indexing. */
+
+       while (1) {
+               if (iout >= *buflen || iin + 1 >= slen ||
+                   str[iin] == '\0' || str[iin + 1] == '\0')
                        break;
+               ubuf[iout] = ((REV64(str[iin]) & 0x3f) << 2) | 
+                            ((REV64(str[iin + 1]) & 0x30) >> 4);
+               iin++;                  /* 0 used up, iin=1 */
+               iout++;
+
+               if (iout >= *buflen || iin + 1 >= slen ||
+                   str[iin] == '\0' || str[iin + 1] == '\0')
+                       break;
+               ubuf[iout] = ((REV64(str[iin]) & 0x0f) << 4) | 
+                            ((REV64(str[iin + 1]) & 0x3c) >> 2);
+               iin++;                  /* 1 used up, iin=2 */
+               iout++;
+
+               if (iout >= *buflen || iin + 1 >= slen ||
+                   str[iin] == '\0' || str[iin + 1] == '\0')
+                       break;
+               ubuf[iout] = ((REV64(str[iin]) & 0x03) << 6) |
+                            (REV64(str[iin + 1]) & 0x3f);
+               iin += 2;               /* 2,3 used up, iin=4 */
+               iout++;
        }
-       *q = '\0';
-       
-       return q - (unsigned char *) buf;
-}
 
+       ubuf[iout] = '\0';
+
+       return iout;
+}
diff --git a/src/client.c b/src/client.c
new file mode 100644 (file)
index 0000000..0036b0e
--- /dev/null
@@ -0,0 +1,2514 @@
+/*
+ * Copyright (c) 2006-2009 Bjorn Andersson <flex@kryo.se>, Erik Ekman <yarrick@kryo.se>
+ *
+ * Permission to use, copy, modify, and distribute this software for any
+ * purpose with or without fee is hereby granted, provided that the above
+ * copyright notice and this permission notice appear in all copies.
+ *
+ * THE SOFTWARE IS PROVIDED "AS IS" AND THE AUTHOR DISCLAIMS ALL WARRANTIES
+ * WITH REGARD TO THIS SOFTWARE INCLUDING ALL IMPLIED WARRANTIES OF
+ * MERCHANTABILITY AND FITNESS. IN NO EVENT SHALL THE AUTHOR BE LIABLE FOR
+ * ANY SPECIAL, DIRECT, INDIRECT, OR CONSEQUENTIAL DAMAGES OR ANY DAMAGES
+ * WHATSOEVER RESULTING FROM LOSS OF USE, DATA OR PROFITS, WHETHER IN AN
+ * ACTION OF CONTRACT, NEGLIGENCE OR OTHER TORTIOUS ACTION, ARISING OUT OF
+ * OR IN CONNECTION WITH THE USE OR PERFORMANCE OF THIS SOFTWARE.
+ */
+
+#include <ctype.h>
+#include <stdio.h>
+#include <stdint.h>
+#include <stdlib.h>
+#include <string.h>
+#include <signal.h>
+#include <unistd.h>
+#include <sys/param.h>
+#include <sys/time.h>
+#include <fcntl.h>
+#include <zlib.h>
+#include <time.h>
+
+#ifdef WINDOWS32
+#include "windows.h"
+#include <winsock2.h>
+#else
+#include <arpa/nameser.h>
+#ifdef DARWIN
+#define BIND_8_COMPAT
+#include <arpa/nameser_compat.h>
+#endif
+#include <grp.h>
+#include <pwd.h>
+#include <netdb.h>
+#endif
+
+#include "common.h"
+#include "encoding.h"
+#include "base32.h"
+#include "base64.h"
+#include "base64u.h"
+#include "base128.h"
+#include "dns.h"
+#include "login.h"
+#include "tun.h"
+#include "version.h"
+#include "client.h"
+
+static void handshake_lazyoff(int dns_fd);
+
+static int running;
+static const char *password;
+
+static struct sockaddr_in nameserv;
+static struct sockaddr_in raw_serv;
+static const char *topdomain;
+
+static uint16_t rand_seed;
+
+/* Current up/downstream IP packet */
+static struct packet outpkt;
+static struct packet inpkt;
+int outchunkresent = 0;
+
+/* My userid at the server */
+static char userid;
+static char userid_char;               /* used when sending (lowercase) */
+static char userid_char2;              /* also accepted when receiving (uppercase) */
+
+/* DNS id for next packet */
+static uint16_t chunkid;
+static uint16_t chunkid_prev;
+static uint16_t chunkid_prev2;
+
+/* Base32 encoder used for non-data packets and replies */
+static struct encoder *b32;
+/* Base64 etc encoders for replies */
+static struct encoder *b64;
+static struct encoder *b64u;
+static struct encoder *b128;
+
+/* The encoder used for data packets
+ * Defaults to Base32, can be changed after handshake */
+static struct encoder *dataenc;
+  
+/* The encoder to use for downstream data */
+static char downenc = ' ';
+/* set query type to send */
+static unsigned short do_qtype = T_UNSET;
+
+/* My connection mode */
+static enum connection conn;
+
+static int selecttimeout;              /* RFC says timeout minimum 5sec */
+static int lazymode;
+static long send_ping_soon;
+static time_t lastdownstreamtime;
+static long send_query_sendcnt = -1;
+static long send_query_recvcnt = 0;
+static int hostname_maxlen = 0xFF;
+
+void
+client_init()
+{
+       running = 1;
+       b32 = get_base32_encoder();
+       b64 = get_base64_encoder();
+       b64u = get_base64u_encoder();
+       b128 = get_base128_encoder();
+       dataenc = get_base32_encoder();
+       rand_seed = ((unsigned int) rand()) & 0xFFFF;
+       send_ping_soon = 1;     /* send ping immediately after startup */
+       conn = CONN_DNS_NULL;
+
+       chunkid = ((unsigned int) rand()) & 0xFFFF;
+       chunkid_prev = 0;
+       chunkid_prev2 = 0;
+
+       outpkt.len = 0;
+       outpkt.seqno = 0;
+       outpkt.fragment = 0;
+       outchunkresent = 0;
+       inpkt.len = 0;
+       inpkt.seqno = 0;
+       inpkt.fragment = 0;
+}
+
+void
+client_stop()
+{
+       running = 0;
+}
+
+enum connection
+client_get_conn()
+{
+       return conn;
+}
+
+void
+client_set_nameserver(const char *cp, int port) 
+{
+       struct in_addr addr;
+
+       if (inet_aton(cp, &addr) != 1) {
+               /* try resolving if a domain is given */
+               struct hostent *host;
+               const char *err;
+               host = gethostbyname(cp);
+               if (host != NULL && h_errno > 0) {
+                       int i = 0;
+                       while (host->h_addr_list[i] != 0) {
+                               addr = *(struct in_addr *) host->h_addr_list[i++];
+                               fprintf(stderr, "Resolved %s to %s\n", cp, inet_ntoa(addr));
+                               goto setaddr;
+                       }
+               }
+#ifndef WINDOWS32
+               err = hstrerror(h_errno);
+#else
+               {
+                       DWORD wserr = WSAGetLastError();
+                       switch (wserr) {
+                       case WSAHOST_NOT_FOUND:
+                               err = "Host not found";
+                               break;
+                       case WSANO_DATA:
+                               err = "No data record found";
+                               break;
+                       default:
+                               err = "Unknown error";
+                               break;
+                       }
+               }
+#endif /* !WINDOWS32 */
+               errx(1, "error resolving nameserver '%s': %s", cp, err);
+       }
+
+setaddr:
+       memset(&nameserv, 0, sizeof(nameserv));
+       nameserv.sin_family = AF_INET;
+       nameserv.sin_port = htons(port);
+       nameserv.sin_addr = addr;
+}
+
+void
+client_set_topdomain(const char *cp)
+{
+       topdomain = cp;
+}
+
+void
+client_set_password(const char *cp)
+{
+       password = cp;
+}
+
+void
+set_qtype(char *qtype)
+{
+       if (!strcasecmp(qtype, "NULL"))
+               do_qtype = T_NULL;
+       else if (!strcasecmp(qtype, "CNAME"))
+               do_qtype = T_CNAME;
+       else if (!strcasecmp(qtype, "A"))
+               do_qtype = T_A;
+       else if (!strcasecmp(qtype, "MX"))
+               do_qtype = T_MX;
+       else if (!strcasecmp(qtype, "SRV"))
+               do_qtype = T_SRV;
+       else if (!strcasecmp(qtype, "TXT"))
+               do_qtype = T_TXT;
+}
+
+char *
+get_qtype()
+{
+       char *c = "UNDEFINED";
+
+       if (do_qtype == T_NULL)         c = "NULL";
+       else if (do_qtype == T_CNAME)   c = "CNAME";
+       else if (do_qtype == T_A)       c = "A";
+       else if (do_qtype == T_MX)      c = "MX";
+       else if (do_qtype == T_SRV)     c = "SRV";
+       else if (do_qtype == T_TXT)     c = "TXT";
+
+       return c;
+}
+
+void
+set_downenc(char *encoding)
+{
+       if (!strcasecmp(encoding, "base32"))
+               downenc = 'T';
+       else if (!strcasecmp(encoding, "base64"))
+               downenc = 'S';
+       else if (!strcasecmp(encoding, "base64u"))
+               downenc = 'U';
+       else if (!strcasecmp(encoding, "base128"))
+               downenc = 'V';
+       else if (!strcasecmp(encoding, "raw"))
+               downenc = 'R';
+}
+
+void 
+client_set_selecttimeout(int select_timeout)
+{
+       selecttimeout = select_timeout;
+}
+
+void
+client_set_lazymode(int lazy_mode)
+{
+       lazymode = lazy_mode;
+}
+
+void
+client_set_hostname_maxlen(int i)
+{
+       if (i <= 0xFF)
+               hostname_maxlen = i;
+}
+
+const char *
+client_get_raw_addr()
+{
+       return inet_ntoa(raw_serv.sin_addr);
+}
+
+static void
+send_query(int fd, char *hostname)
+{
+       char packet[4096];
+       struct query q;
+       size_t len;
+
+       chunkid_prev2 = chunkid_prev;
+       chunkid_prev = chunkid;
+       chunkid += 7727;
+       if (chunkid == 0)
+               /* 0 is used as "no-query" in iodined.c */
+               chunkid = 7727;
+
+       q.id = chunkid;
+       q.type = do_qtype;
+
+       len = dns_encode(packet, sizeof(packet), &q, QR_QUERY, hostname, strlen(hostname));
+       if (len < 1) {
+               warnx("dns_encode doesn't fit");
+               return;
+       }
+
+#if 0
+       fprintf(stderr, "  Sendquery: id %5d name[0] '%c'\n", q.id, hostname[0]);
+#endif
+
+       sendto(fd, packet, len, 0, (struct sockaddr*)&nameserv, sizeof(nameserv));
+
+       /* There are DNS relays that time out quickly but don't send anything
+          back on timeout.
+          And there are relays where, in lazy mode, our new query apparently
+          _replaces_ our previous query, and we get no answers at all in
+          lazy mode while legacy immediate-ping-pong works just fine.
+          Here we detect and fix these situations.
+          (Can't very well do this anywhere else; this is the only place
+          we'll reliably get to in such situations.)
+        */
+
+       if (send_query_sendcnt >= 0 && send_query_sendcnt < 100 && lazymode) {
+               send_query_sendcnt++;
+
+               if ((send_query_sendcnt > 6 && send_query_recvcnt <= 0) ||
+                   (send_query_sendcnt > 10 &&
+                    4 * send_query_recvcnt < send_query_sendcnt)) {
+                       if (selecttimeout > 1) {
+                               warnx("Receiving too few answers. Setting interval to 1 (-I1)");
+                               selecttimeout = 1;
+                               /* restart counting */
+                               send_query_sendcnt = 0;
+                               send_query_recvcnt = 0;
+                       } else if (lazymode) {
+                               warnx("Receiving too few answers. Will try to switch lazy mode off, but that may not always work any more. Start with -L0 next time on this network.");
+                               lazymode = 0;
+                               selecttimeout = 1;
+                               handshake_lazyoff(fd);
+                       }
+               }
+       }
+}
+
+static void
+send_raw(int fd, char *buf, int buflen, int user, int cmd)
+{
+       char packet[4096];
+       int len;
+
+       len = MIN(sizeof(packet) - RAW_HDR_LEN, buflen);
+
+       memcpy(packet, raw_header, RAW_HDR_LEN);
+       if (len) {
+               memcpy(&packet[RAW_HDR_LEN], buf, len);
+       }
+
+       len += RAW_HDR_LEN;
+       packet[RAW_HDR_CMD] = cmd | (user & 0x0F);
+
+       sendto(fd, packet, len, 0, (struct sockaddr*)&raw_serv, sizeof(raw_serv));
+}
+
+static void
+send_raw_data(int dns_fd)
+{
+       send_raw(dns_fd, outpkt.data, outpkt.len, userid, RAW_HDR_CMD_DATA);
+       outpkt.len = 0;
+}
+
+
+static void
+send_packet(int fd, char cmd, const char *data, const size_t datalen)
+{
+       char buf[4096];
+
+       buf[0] = cmd;
+       
+       build_hostname(buf + 1, sizeof(buf) - 1, data, datalen, topdomain,
+                      b32, hostname_maxlen);
+       send_query(fd, buf);
+}
+
+static inline int
+is_sending()
+{
+       return (outpkt.len != 0);
+}
+
+static void
+send_chunk(int fd)
+{
+       char buf[4096];
+       int avail;
+       int code;
+       char *p;
+       static int datacmc = 0;
+       char *datacmcchars = "abcdefghijklmnopqrstuvwxyz0123456789";
+
+       p = outpkt.data;
+       p += outpkt.offset;
+       avail = outpkt.len - outpkt.offset;
+
+       /* Note: must be same, or smaller than send_fragsize_probe() */
+       outpkt.sentlen = build_hostname(buf + 5, sizeof(buf) - 5, p, avail,
+                                       topdomain, dataenc, hostname_maxlen);
+
+       /* Build upstream data header (see doc/proto_xxxxxxxx.txt) */
+
+       buf[0] = userid_char;           /* First byte is hex userid */
+  
+       code = ((outpkt.seqno & 7) << 2) | ((outpkt.fragment & 15) >> 2);
+       buf[1] = b32_5to8(code); /* Second byte is 3 bits seqno, 2 upper bits fragment count */
+
+       code = ((outpkt.fragment & 3) << 3) | (inpkt.seqno & 7);
+       buf[2] = b32_5to8(code); /* Third byte is 2 bits lower fragment count, 3 bits downstream packet seqno */
+
+       code = ((inpkt.fragment & 15) << 1) | (outpkt.sentlen == avail);
+       buf[3] = b32_5to8(code); /* Fourth byte is 4 bits downstream fragment count, 1 bit last frag flag */
+
+       buf[4] = datacmcchars[datacmc]; /* Fifth byte is data-CMC */
+       datacmc++;
+       if (datacmc >= 36)
+               datacmc = 0;
+  
+#if 0
+       fprintf(stderr, "  Send: down %d/%d up %d/%d, %d bytes\n",
+               inpkt.seqno, inpkt.fragment, outpkt.seqno, outpkt.fragment,
+               outpkt.sentlen);
+#endif
+
+       send_query(fd, buf);
+}
+
+static void
+send_ping(int fd)
+{
+       if (conn == CONN_DNS_NULL) {
+               char data[4];
+               
+               data[0] = userid;
+               data[1] = ((inpkt.seqno & 7) << 4) | (inpkt.fragment & 15);
+               data[2] = (rand_seed >> 8) & 0xff;
+               data[3] = (rand_seed >> 0) & 0xff;
+               
+               rand_seed++;
+
+#if 0
+               fprintf(stderr, "  Send: down %d/%d         (ping)\n",
+                       inpkt.seqno, inpkt.fragment);
+#endif
+
+               send_packet(fd, 'p', data, sizeof(data));
+       } else {
+               send_raw(fd, NULL, 0, userid, RAW_HDR_CMD_PING);
+       }
+}
+
+static void
+write_dns_error(struct query *q, int ignore_some_errors)
+/* This is called from:
+   1. handshake_waitdns() when already checked that reply fits to our
+      latest query.
+   2. tunnel_dns() when already checked that reply is for our ping or data
+      packet, but not necessarily the most recent (SERVFAIL mostly comes
+      after long delay).
+   So ignorable errors are never printed.
+*/
+{
+       if (!q) return;
+
+       switch (q->rcode) {
+       case NOERROR:   /* 0 */
+               if (!ignore_some_errors)
+                       warnx("Got reply without error, but also without question and/or answer");
+               break;
+       case FORMERR:   /* 1 */
+               warnx("Got FORMERR as reply: server does not understand our request");
+               break;
+       case SERVFAIL:  /* 2 */
+               if (!ignore_some_errors)
+                       warnx("Got SERVFAIL as reply: server failed or recursion timeout");
+               break;
+       case NXDOMAIN:  /* 3 */
+               warnx("Got NXDOMAIN as reply: domain does not exist");
+               break;
+       case NOTIMP:    /* 4 */
+               warnx("Got NOTIMP as reply: server does not support our request");
+               break;
+       case REFUSED:   /* 5 */
+               warnx("Got REFUSED as reply");
+               break;
+       default:
+               warnx("Got RCODE %u as reply", q->rcode);
+               break;
+       }
+}
+
+static int
+dns_namedec(char *outdata, int outdatalen, char *buf, int buflen)
+/* Decodes *buf to *outdata.
+ * *buf WILL be changed by undotify.
+ * Note: buflen must be _exactly_ strlen(buf) before undotifying.
+ * (undotify of reduced-len won't copy \0, base-X decode will decode too much.)
+ * Returns #bytes usefully filled in outdata.
+ */
+{
+       size_t outdatalenu = outdatalen;
+
+       switch (buf[0]) {
+       case 'h': /* Hostname with base32 */
+       case 'H':
+               /* Need 1 byte H, 3 bytes ".xy", >=1 byte data */
+               if (buflen < 5)
+                       return 0;
+
+               /* this also does undotify */
+               return unpack_data(outdata, outdatalen, buf + 1, buflen - 4,
+                                  b32);
+
+       case 'i': /* Hostname++ with base64 */
+       case 'I':
+               /* Need 1 byte I, 3 bytes ".xy", >=1 byte data */
+               if (buflen < 5)
+                       return 0;
+
+               /* this also does undotify */
+               return unpack_data(outdata, outdatalen, buf + 1, buflen - 4,
+                                  b64);
+
+       case 'j': /* Hostname++ with base64u */
+       case 'J':
+               /* Need 1 byte J, 3 bytes ".xy", >=1 byte data */
+               if (buflen < 5)
+                       return 0;
+
+               /* this also does undotify */
+               return unpack_data(outdata, outdatalen, buf + 1, buflen - 4,
+                                  b64u);
+
+       case 'k': /* Hostname++ with base128 */
+       case 'K':
+               /* Need 1 byte J, 3 bytes ".xy", >=1 byte data */
+               if (buflen < 5)
+                       return 0;
+
+               /* this also does undotify */
+               return unpack_data(outdata, outdatalen, buf + 1, buflen - 4,
+                                  b128);
+
+       case 't': /* plain base32(Thirty-two) from TXT */
+       case 'T':
+               if (buflen < 2)
+                       return 0;
+
+               return b32->decode(outdata, &outdatalenu, buf + 1, buflen - 1);
+
+       case 's': /* plain base64(Sixty-four) from TXT */
+       case 'S':
+               if (buflen < 2)
+                       return 0;
+
+               return b64->decode(outdata, &outdatalenu, buf + 1, buflen - 1);
+
+       case 'u': /* plain base64u (Underscore) from TXT */
+       case 'U':
+               if (buflen < 2)
+                       return 0;
+
+               return b64u->decode(outdata, &outdatalenu, buf + 1, buflen - 1);
+
+       case 'v': /* plain base128 from TXT */
+       case 'V':
+               if (buflen < 2)
+                       return 0;
+
+               return b128->decode(outdata, &outdatalenu, buf + 1, buflen - 1);
+
+       case 'r': /* Raw binary from TXT */
+       case 'R':
+               /* buflen>=1 already checked */
+               buflen--;
+               buflen = MIN(buflen, outdatalen);
+               memcpy(outdata, buf + 1, buflen);
+               return buflen;
+
+       default:
+               warnx("Received unsupported encoding");
+               return 0;
+       }
+
+       /* notreached */
+       return 0;
+}
+
+static int
+read_dns_withq(int dns_fd, int tun_fd, char *buf, int buflen, struct query *q)
+/* FIXME: tun_fd needed for raw handling */
+/* Returns -1 on receive error or decode error, including DNS error replies.
+   Returns 0 on replies that could be correct but are useless, and are not
+   DNS error replies.
+   Returns >0 on correct replies; value is #valid bytes in *buf.
+*/
+{
+       struct sockaddr_in from;
+       char data[64*1024];
+       socklen_t addrlen;
+       int r;
+
+       addrlen = sizeof(struct sockaddr);
+       if ((r = recvfrom(dns_fd, data, sizeof(data), 0, 
+                         (struct sockaddr*)&from, &addrlen)) < 0) {
+               warn("recvfrom");
+               return -1;
+       }
+
+       if (conn == CONN_DNS_NULL) {
+               int rv;
+               if (r <= 0)
+                       /* useless packet */
+                       return 0;
+
+               rv = dns_decode(buf, buflen, q, QR_ANSWER, data, r);
+               if (rv <= 0)
+                       return rv;
+
+               if (q->type == T_CNAME || q->type == T_TXT)
+               /* CNAME can also be returned from an A question */
+               {
+                       /*
+                        * buf is a hostname or txt stream that we still need to
+                        * decode to binary
+                        * 
+                        * also update rv with the number of valid bytes
+                        * 
+                        * data is unused here, and will certainly hold the smaller binary
+                        */
+
+                       rv = dns_namedec(data, sizeof(data), buf, rv);
+
+                       rv = MIN(rv, buflen);
+                       if (rv > 0)
+                               memcpy(buf, data, rv);
+
+               } else if (q->type == T_MX || q->type == T_SRV) {
+                       /* buf is like "Hname.com\0Hanother.com\0\0" */
+                       int buftotal = rv;      /* idx of last \0 */
+                       int bufoffset = 0;
+                       int dataoffset = 0;
+                       int thispartlen, dataspace, datanew;
+
+                       while (1) {
+                               thispartlen = strlen(buf);
+                               thispartlen = MIN(thispartlen, buftotal-bufoffset);
+                               dataspace = sizeof(data) - dataoffset;
+                               if (thispartlen <= 0 || dataspace <= 0)
+                                       break;
+
+                               datanew = dns_namedec(data + dataoffset, dataspace,
+                                                     buf + bufoffset, thispartlen);
+                               if (datanew <= 0)
+                                       break;
+
+                               bufoffset += thispartlen + 1;
+                               dataoffset += datanew;
+                       }
+                       rv = dataoffset;
+                       rv = MIN(rv, buflen);
+                       if (rv > 0)
+                               memcpy(buf, data, rv);
+               }
+
+               return rv;
+       } else { /* CONN_RAW_UDP */
+               unsigned long datalen;
+               char buf[64*1024];
+
+               /* minimum length */
+               if (r < RAW_HDR_LEN) return 0;
+               /* should start with header */
+               if (memcmp(data, raw_header, RAW_HDR_IDENT_LEN)) return 0;
+               /* should be my user id */
+               if (RAW_HDR_GET_USR(data) != userid) return 0;
+
+               if (RAW_HDR_GET_CMD(data) == RAW_HDR_CMD_DATA ||
+                   RAW_HDR_GET_CMD(data) == RAW_HDR_CMD_PING)
+                       lastdownstreamtime = time(NULL);
+
+               /* should be data packet */
+               if (RAW_HDR_GET_CMD(data) != RAW_HDR_CMD_DATA) return 0;
+
+               r -= RAW_HDR_LEN;
+               datalen = sizeof(buf);
+               if (uncompress((uint8_t*)buf, &datalen, (uint8_t*) &data[RAW_HDR_LEN], r) == Z_OK) {
+                       write_tun(tun_fd, buf, datalen);
+               }
+
+               /* don't process any further */
+               return 0;
+       }
+}
+
+static int
+handshake_waitdns(int dns_fd, char *buf, int buflen, char c1, char c2, int timeout)
+/* Wait for DNS reply fitting to our latest query and returns it.
+   Returns length of reply = #bytes used in buf.
+   Returns 0 if fitting reply happens to be useless.
+   Returns -2 on (at least) DNS error that fits to our latest query,
+   error message already printed.
+   Returns -3 on timeout (given in seconds).
+   Returns -1 on other errors.
+
+   Timeout is restarted when "wrong" (previous/delayed) replies are received,
+   so effective timeout may be longer than specified.
+*/
+{
+       struct query q;
+       int r, rv;
+       fd_set fds;
+       struct timeval tv;
+
+       while (1) {
+               tv.tv_sec = timeout;
+               tv.tv_usec = 0;
+               FD_ZERO(&fds);
+               FD_SET(dns_fd, &fds);
+               r = select(dns_fd + 1, &fds, NULL, NULL, &tv);
+
+               if (r < 0)
+                       return -1;      /* select error */
+               if (r == 0)
+                       return -3;      /* select timeout */
+
+               q.id = 0;
+               q.name[0] = '\0';
+               rv = read_dns_withq(dns_fd, 0, buf, buflen, &q);
+
+               if (q.id != chunkid || (q.name[0] != c1 && q.name[0] != c2)) {
+#if 0
+                       fprintf(stderr, "Ignoring unfitting reply id %d starting with '%c'\n", q.id, q.name[0]);
+#endif
+                       continue;
+               }
+
+               /* if still here: reply matches our latest query */
+
+               /* Non-recursive DNS servers (such as [a-m].root-servers.net)
+                  return no answer, but only additional and authority records.
+                  Can't explicitly test for that here, just assume that
+                  NOERROR is such situation. Only trigger on the very first
+                  requests (Y or V, depending if -T given).
+                */
+               if (rv < 0 && q.rcode == NOERROR &&
+                   (q.name[0] == 'Y' || q.name[0] == 'y' ||
+                    q.name[0] == 'V' || q.name[0] == 'v')) {
+                       fprintf(stderr, "Got empty reply. This nameserver may not be resolving recursively, use another.\n");
+                       fprintf(stderr, "Try \"iodine [options] ns.%s %s\" first, it might just work.\n",
+                               topdomain, topdomain);
+                       return -2;
+               }
+
+               /* If we get an immediate SERVFAIL on the handshake query
+                  we're waiting for, wait a while before sending the next.
+                  SERVFAIL reliably happens during fragsize autoprobe, but
+                  mostly long after we've moved along to some other queries.
+                  However, some DNS relays, once they throw a SERVFAIL, will
+                  for several seconds apply it immediately to _any_ new query
+                  for the same topdomain. When this happens, waiting a while
+                  is the only option that works.
+                */
+               if (rv < 0 && q.rcode == SERVFAIL)
+                       sleep(1);
+
+               if (rv < 0) {
+                       write_dns_error(&q, 1);
+                       return -2;
+               }
+               /* rv either 0 or >0, return it as is. */
+               return rv;
+       }
+
+       /* not reached */
+       return -1;
+}
+
+static int
+tunnel_tun(int tun_fd, int dns_fd)
+{
+       unsigned long outlen;
+       unsigned long inlen;
+       char out[64*1024];
+       char in[64*1024];
+       ssize_t read;
+
+       if ((read = read_tun(tun_fd, in, sizeof(in))) <= 0)
+               return -1;
+
+       /* We may be here only to empty the tun device; then return -1
+          to force continue in select loop. */
+       if (is_sending())
+               return -1;
+
+       outlen = sizeof(out);
+       inlen = read;
+       compress2((uint8_t*)out, &outlen, (uint8_t*)in, inlen, 9);
+
+       memcpy(outpkt.data, out, MIN(outlen, sizeof(outpkt.data)));
+       outpkt.sentlen = 0;
+       outpkt.offset = 0;
+       outpkt.seqno = (outpkt.seqno + 1) & 7;
+       outpkt.len = outlen;
+       outpkt.fragment = 0;
+       outchunkresent = 0;
+
+       if (conn == CONN_DNS_NULL) {
+               send_chunk(dns_fd);
+
+               send_ping_soon = 0;
+       } else {
+               send_raw_data(dns_fd);
+       }
+
+       return read;
+}
+
+static int
+tunnel_dns(int tun_fd, int dns_fd)
+{
+       static long packrecv = 0;
+       static long packrecv_oos = 0;
+       static long packrecv_servfail = 0;
+       int up_ack_seqno;
+       int up_ack_fragment;
+       int new_down_seqno;
+       int new_down_fragment;
+       struct query q;
+       unsigned long datalen;
+       char buf[64*1024];
+       int read;
+       int send_something_now = 0;
+
+       memset(q.name, 0, sizeof(q.name));
+       read = read_dns_withq(dns_fd, tun_fd, buf, sizeof(buf), &q);
+
+       if (conn != CONN_DNS_NULL)
+               return 1;  /* everything already done */
+
+#if 0
+       fprintf(stderr, "                               Recv: id %5d name[0]='%c'\n",
+               q.id, q.name[0]);
+#endif
+
+       /* Don't process anything that isn't data for us; usually error
+          replies from fragsize probes etc. However a sequence of those,
+          mostly 1 sec apart, will continuously break the >=2-second select
+          timeout, which means we won't send a proper ping for a while.
+          So make select a bit faster, <1sec. */
+       if (q.name[0] != 'P' && q.name[0] != 'p' &&
+           q.name[0] != userid_char && q.name[0] != userid_char2) {
+               send_ping_soon = 700;
+               return -1;      /* nothing done */
+       }
+
+       if (read < 2) {
+               /* Maybe SERVFAIL etc. Send ping to get things back in order,
+                  but wait a bit to prevent fast ping-pong loops. */
+
+               if (read < 0)
+                       write_dns_error(&q, 0);
+
+               if (read < 0 && q.rcode == SERVFAIL && lazymode &&
+                   selecttimeout > 1) {
+                       if (packrecv < 500 && packrecv_servfail < 4) {
+                               packrecv_servfail++;
+                               warnx("Hmm, that's %ld. Your data should still go through...", packrecv_servfail);
+                       } else if (packrecv < 500 && packrecv_servfail == 4) {
+                               packrecv_servfail++;
+                               warnx("I think %ld is too many. Setting interval to 1 to hopefully reduce SERVFAILs. But just ignore them if data still comes through. (Use -I1 next time on this network.)", packrecv_servfail);
+                               selecttimeout = 1;
+                               send_query_sendcnt = 0;
+                               send_query_recvcnt = 0;
+                       } else if (packrecv >= 500 && packrecv_servfail > 0) {
+                               warnx("(Sorry, stopped counting; try -I1 if you experience hiccups.)");
+                               packrecv_servfail = 0;
+                       }
+               }
+
+               /* read==1 happens with "QMEM" illegal replies, caused by
+                  heavy reordering, or after short disconnections when
+                  data-CMC has looped around into the "duplicate" values.
+                  All these cases are helped by faster pinging. */
+#if 0
+               if (read == 1)
+                       fprintf(stderr, "   q=%c id %5d 1-byte illegal \"QMEM\" reply\n", q.name[0], q.id);
+#endif
+
+               send_ping_soon = 900;
+               return -1;      /* nothing done */
+       }
+
+       if (read == 5 && !strncmp("BADIP", buf, 5)) {
+               warnx("BADIP: Server rejected sender IP address (maybe iodined -c will help), or server kicked us due to timeout. Will exit if no downstream data is received in 60 seconds.");
+               return -1;      /* nothing done */
+       }
+
+       if (send_ping_soon) {
+               send_something_now = 1;
+               send_ping_soon = 0;
+       }
+
+       /* Decode the data header, update seqno and frag;
+          already checked read>=2
+          Note that buf[] gets overwritten when down-pkt complete */
+       new_down_seqno = (buf[1] >> 5) & 7;
+       new_down_fragment = (buf[1] >> 1) & 15;
+       up_ack_seqno = (buf[0] >> 4) & 7;
+       up_ack_fragment = buf[0] & 15;
+
+#if 0
+       fprintf(stderr, "                               Recv: id %5d down %d/%d up %d/%d, %d bytes\n",
+               q.id, new_down_seqno, new_down_fragment, up_ack_seqno,
+               up_ack_fragment, read);
+#endif
+
+       /* Downstream data traffic */
+
+       if (read > 2 && new_down_seqno != inpkt.seqno &&
+           recent_seqno(inpkt.seqno, new_down_seqno)) {
+               /* This is the previous seqno, or a bit earlier.
+                  Probably out-of-sequence dupe due to unreliable
+                  intermediary DNS. Don't get distracted, but send
+                  ping quickly to get things back in order.
+                  Ping will send our current seqno idea.
+                  If it's really a new packet that skipped multiple seqnos
+                  (why??), server will re-send and drop a few times and
+                  eventually everything will work again. */
+               read = 2;
+               send_ping_soon = 500;
+               /* Still process upstream ack, if any */
+       }
+
+       if (!(packrecv & 0x1000000))
+               packrecv++;
+       send_query_recvcnt++;  /* overflow doesn't matter */
+
+       /* Don't process any non-recent stuff any further.
+          No need to remember more than 3 ids: in practice any older replies
+          arrive after new/current replies, and whatever data the old replies
+          have, it has become useless in the mean time.
+          Actually, ever since iodined is replying to both the original query
+          and the last dupe, this hardly triggers any more.
+        */
+       if (q.id != chunkid && q.id != chunkid_prev && q.id != chunkid_prev2) {
+               packrecv_oos++;
+#if 0
+               fprintf(stderr, "   q=%c Packs received = %8ld  Out-of-sequence = %8ld\n", q.name[0], packrecv, packrecv_oos);
+#endif
+               if (lazymode && packrecv < 1000 && packrecv_oos == 5) {
+                       if (selecttimeout > 1)
+                               warnx("Hmm, getting some out-of-sequence DNS replies. Setting interval to 1 (use -I1 next time on this network). If data traffic still has large hiccups, try if -L0 works better.");
+                       else
+                               warnx("Hmm, getting some out-of-sequence DNS replies. If data traffic often has large hiccups, try running with -L0 .");
+                       selecttimeout = 1;
+                       send_query_sendcnt = 0;
+                       send_query_recvcnt = 0;
+               }
+
+               if (send_something_now) {
+                       send_ping(dns_fd);
+                       send_ping_soon = 0;
+               }
+               return -1;      /* nothing done */
+       }
+#if 0
+       fprintf(stderr, "   q=%c Packs received = %8ld  Out-of-sequence = %8ld\n", q.name[0], packrecv, packrecv_oos);
+#endif
+
+       /* Okay, we have a recent downstream packet */
+       lastdownstreamtime = time(NULL);
+
+       /* In lazy mode, we shouldn't get much replies to our most-recent
+          query, only during heavy data transfer. Since this means the server
+          doesn't have any packets left, send one relatively fast (but not
+          too fast, to avoid runaway ping-pong loops..) */
+       if (q.id == chunkid && lazymode) {
+               if (!send_ping_soon || send_ping_soon > 900)
+                       send_ping_soon = 900;
+       }
+
+       if (read == 2 && new_down_seqno != inpkt.seqno &&
+           !recent_seqno(inpkt.seqno, new_down_seqno)) {
+               /* This is a seqno that we didn't see yet, but it has
+                  no data any more. Possible since iodined will send
+                  fitting packs just once and not wait for ack.
+                  Real data got lost, or will arrive shortly.
+                  Update our idea of the seqno, and drop any waiting
+                  old pack. Send ping to get things back on track. */
+               inpkt.seqno = new_down_seqno;
+               inpkt.fragment = new_down_fragment;
+               inpkt.len = 0;
+               send_ping_soon = 500;
+       }
+
+       while (read > 2) {
+       /* "if" with easy exit */
+
+               if (new_down_seqno != inpkt.seqno) {
+                       /* New packet (and not dupe of recent; checked above) */
+                       /* Forget any old packet, even if incomplete */
+                       inpkt.seqno = new_down_seqno;
+                       inpkt.fragment = new_down_fragment;   /* hopefully 0 */
+                       inpkt.len = 0;
+               } else if (inpkt.fragment == 0 && new_down_fragment == 0 &&
+                          inpkt.len == 0) {
+                       /* Weird situation: we probably got a no-data reply
+                          for this seqno (see above), and the actual data
+                          is following now. */
+                       /* okay, nothing to do here, just so that next else-if
+                          doesn't trigger */
+               } else if (new_down_fragment <= inpkt.fragment) {
+                       /* Same packet but duplicate fragment, ignore.
+                          If the server didn't get our ack for it, the next
+                          ping or chunk will do that. */
+                       send_ping_soon = 500;
+                       break;
+               } else if (new_down_fragment > inpkt.fragment + 1) {
+                       /* Quite impossible. We missed a fragment, but the
+                          server got our ack for it and is sending the next
+                          fragment already. Don't handle it but let server
+                          re-send and drop. */
+                       send_ping_soon = 500;
+                       break;
+               }
+               inpkt.fragment = new_down_fragment;
+
+               datalen = MIN(read - 2, sizeof(inpkt.data) - inpkt.len);
+
+               /* we are here only when read > 2, so datalen "always" >=1 */
+
+               /* Skip 2 byte data header and append to packet */
+               memcpy(&inpkt.data[inpkt.len], &buf[2], datalen);
+               inpkt.len += datalen;
+
+               if (buf[1] & 1) { /* If last fragment flag is set */
+                       /* Uncompress packet and send to tun */
+                       /* RE-USES buf[] */
+                       datalen = sizeof(buf);
+                       if (uncompress((uint8_t*)buf, &datalen, (uint8_t*) inpkt.data, inpkt.len) == Z_OK) {
+                               write_tun(tun_fd, buf, datalen);
+                       }
+                       inpkt.len = 0;
+                       /* Keep .seqno and .fragment as is, so that we won't
+                          reassemble from duplicate fragments */
+               }
+
+               /* Send anything to ack the received seqno/frag, and get more */
+               if (inpkt.len == 0) {
+                       /* was last frag; wait just a trifle because our
+                          tun will probably return TCP-ack immediately.
+                          5msec = 200 DNSreq/sec */
+                       send_ping_soon = 5;
+               } else {
+                       /* server certainly has more data */
+                       send_something_now = 1;
+               }
+
+               break;
+       }
+
+       /* NOTE: buf[] was overwritten when down-packet complete */
+
+
+       /* Upstream data traffic */
+
+       if (is_sending()) {
+               /* already checked read>=2 */
+#if 0
+               fprintf(stderr, "Got ack for %d,%d - expecting %d,%d - id=%d cur=%d prev=%d prev2=%d\n",
+                       up_ack_seqno, up_ack_fragment, outpkt.seqno, outpkt.fragment,
+                       q.id, chunkid, chunkid_prev, chunkid_prev2);
+#endif
+
+               if (up_ack_seqno == outpkt.seqno &&
+                   up_ack_fragment == outpkt.fragment) {
+                       /* Okay, previously sent fragment has arrived */
+
+                       outpkt.offset += outpkt.sentlen;
+                       if (outpkt.offset >= outpkt.len) {
+                               /* Packet completed */
+                               outpkt.offset = 0;
+                               outpkt.len = 0;
+                               outpkt.sentlen = 0;
+                               outchunkresent = 0;
+
+                               /* Normally, server still has a query in queue,
+                                  but sometimes not. So send a ping.
+                                  (Comment this out and you'll see occasional
+                                  hiccups.)
+                                  But since the server often still has a
+                                  query and we can expect a TCP-ack returned
+                                  from our tun device quickly in many cases,
+                                  don't be too fast.
+                                  20msec still is 50 DNSreq/second... */
+                               if (!send_ping_soon || send_ping_soon > 20)
+                                       send_ping_soon = 20;
+                       } else {
+                               /* More to send */
+                               outpkt.fragment++;
+                               outchunkresent = 0;
+                               send_chunk(dns_fd);
+                               send_ping_soon = 0;
+                               send_something_now = 0;
+                       }
+               }
+               /* else: Some wrong fragment has arrived, or old fragment is
+                  acked again, mostly by ping responses.
+                  Don't resend chunk, usually not needed; select loop will
+                  re-send on timeout (1sec if is_sending()). */
+       }
+
+
+       /* Send ping if we didn't send anything yet */
+       if (send_something_now) {
+               send_ping(dns_fd);
+               send_ping_soon = 0;
+       }
+
+       return read;
+}
+
+int
+client_tunnel(int tun_fd, int dns_fd)
+{
+       struct timeval tv;
+       fd_set fds;
+       int rv;
+       int i;
+
+       rv = 0;
+       lastdownstreamtime = time(NULL);
+       send_query_sendcnt = 0;  /* start counting now */
+
+       while (running) {
+               tv.tv_sec = selecttimeout;
+               tv.tv_usec = 0;
+
+               if (is_sending()) {
+                       /* fast timeout for retransmits */
+                       tv.tv_sec = 1;
+                       tv.tv_usec = 0;
+               }
+
+               if (send_ping_soon) {
+                       tv.tv_sec = 0;
+                       tv.tv_usec = send_ping_soon * 1000;
+               }
+
+               FD_ZERO(&fds);
+               if (!is_sending() || outchunkresent >= 2) {
+                       /* If re-sending upstream data, chances are that
+                          we're several seconds behind already and TCP
+                          will start filling tun buffer with (useless)
+                          retransmits.
+                          Get up-to-date fast by simply dropping stuff,
+                          that's what TCP is designed to handle. */
+                       FD_SET(tun_fd, &fds);
+               }
+               FD_SET(dns_fd, &fds);
+
+               i = select(MAX(tun_fd, dns_fd) + 1, &fds, NULL, NULL, &tv);
+
+               if (lastdownstreamtime + 60 < time(NULL)) {
+                       warnx("No downstream data received in 60 seconds, shutting down.");
+                       running = 0;
+               }
+               
+               if (running == 0)
+                       break;
+
+               if (i < 0) 
+                       err(1, "select");
+
+               if (i == 0) {
+                       /* timeout */
+                       if (is_sending()) {
+                               /* Re-send current fragment; either frag
+                                  or ack probably dropped somewhere.
+                                  But problem: no cache-miss-counter,
+                                  so hostname will be identical.
+                                  Just drop whole packet after 3 retries,
+                                  and TCP retransmit will solve it.
+                                  NOTE: tun dropping above should be
+                                  >=(value_here - 1) */
+                               if (outchunkresent < 3) {
+                                       outchunkresent++;
+                                       send_chunk(dns_fd);
+                               } else {
+                                       outpkt.offset = 0;
+                                       outpkt.len = 0;
+                                       outpkt.sentlen = 0;
+                                       outchunkresent = 0;
+
+                                       send_ping(dns_fd);
+                               }
+                       } else {
+                               send_ping(dns_fd);
+                       }
+                       send_ping_soon = 0;
+
+               } else {
+
+                       if (FD_ISSET(tun_fd, &fds)) {
+                               if (tunnel_tun(tun_fd, dns_fd) <= 0)
+                                       continue;
+                               /* Returns -1 on error OR when quickly
+                                  dropping data in case of DNS congestion;
+                                  we need to _not_ do tunnel_dns() then.
+                                  If chunk sent, sets send_ping_soon=0. */
+                       }
+                       if (FD_ISSET(dns_fd, &fds)) {
+                               if (tunnel_dns(tun_fd, dns_fd) <= 0)
+                                       continue;
+                       } 
+               }
+       }
+
+       return rv;
+}
+
+static void
+send_login(int fd, char *login, int len)
+{
+       char data[19];
+
+       memset(data, 0, sizeof(data));
+       data[0] = userid;
+       memcpy(&data[1], login, MIN(len, 16));
+
+       data[17] = (rand_seed >> 8) & 0xff;
+       data[18] = (rand_seed >> 0) & 0xff;
+       
+       rand_seed++;
+
+       send_packet(fd, 'l', data, sizeof(data));
+}
+
+static void
+send_fragsize_probe(int fd, int fragsize)
+{
+       char probedata[256];
+       char buf[4096];
+
+       /*
+        * build a large query domain which is random and maximum size,
+        * will also take up maximal space in the return packet
+        */
+       memset(probedata, MAX(1, rand_seed & 0xff), sizeof(probedata));
+       probedata[1] = MAX(1, (rand_seed >> 8) & 0xff);
+       rand_seed++;
+
+       /* Note: must either be same, or larger, than send_chunk() */
+       build_hostname(buf + 5, sizeof(buf) - 5, probedata, sizeof(probedata),
+                      topdomain, dataenc, hostname_maxlen);
+
+       fragsize &= 2047;
+
+       buf[0] = 'r'; /* Probe downstream fragsize packet */
+       buf[1] = b32_5to8((userid << 1) | ((fragsize >> 10) & 1));
+       buf[2] = b32_5to8((fragsize >> 5) & 31);
+       buf[3] = b32_5to8(fragsize & 31);
+       buf[4] = 'd'; /* dummy to match send_chunk() */
+
+       send_query(fd, buf);
+}
+
+static void
+send_set_downstream_fragsize(int fd, int fragsize)
+{
+       char data[5];
+       
+       data[0] = userid;
+       data[1] = (fragsize & 0xff00) >> 8;
+       data[2] = (fragsize & 0x00ff);
+       data[3] = (rand_seed >> 8) & 0xff;
+       data[4] = (rand_seed >> 0) & 0xff;
+       
+       rand_seed++;
+
+       send_packet(fd, 'n', data, sizeof(data));
+}
+
+static void 
+send_version(int fd, uint32_t version)
+{
+       char data[6];
+       data[0] = (version >> 24) & 0xff;
+       data[1] = (version >> 16) & 0xff;
+       data[2] = (version >> 8) & 0xff;
+       data[3] = (version >> 0) & 0xff;
+
+       data[4] = (rand_seed >> 8) & 0xff;
+       data[5] = (rand_seed >> 0) & 0xff;
+       
+       rand_seed++;
+
+       send_packet(fd, 'v', data, sizeof(data));
+}
+
+static void
+send_ip_request(int fd, int userid)
+{
+       char buf[512] = "i____.";
+       buf[1] = b32_5to8(userid);
+       
+       buf[2] = b32_5to8((rand_seed >> 10) & 0x1f);
+       buf[3] = b32_5to8((rand_seed >> 5) & 0x1f);
+       buf[4] = b32_5to8((rand_seed ) & 0x1f);
+       rand_seed++;
+
+       strncat(buf, topdomain, 512 - strlen(buf));
+       send_query(fd, buf);
+}
+
+static void
+send_raw_udp_login(int dns_fd, int userid, int seed)
+{
+       char buf[16];
+       login_calculate(buf, 16, password, seed + 1);
+
+       send_raw(dns_fd, buf, sizeof(buf), userid, RAW_HDR_CMD_LOGIN);
+}
+
+static void
+send_upenctest(int fd, char *s)
+/* NOTE: String may be at most 63-4=59 chars to fit in 1 dns chunk. */
+{
+       char buf[512] = "z___";
+       
+       buf[1] = b32_5to8((rand_seed >> 10) & 0x1f);
+       buf[2] = b32_5to8((rand_seed >> 5) & 0x1f);
+       buf[3] = b32_5to8((rand_seed ) & 0x1f);
+       rand_seed++;
+
+       strncat(buf, s, 512);
+       strncat(buf, ".", 512);
+       strncat(buf, topdomain, 512 - strlen(buf));
+       send_query(fd, buf);
+}
+
+static void
+send_downenctest(int fd, char downenc, int variant, char *s, int slen)
+/* Note: content/handling of s is not defined yet. */
+{
+       char buf[512] = "y_____.";
+
+       buf[1] = tolower(downenc);
+       buf[2] = b32_5to8(variant);
+
+       buf[3] = b32_5to8((rand_seed >> 10) & 0x1f);
+       buf[4] = b32_5to8((rand_seed >> 5) & 0x1f);
+       buf[5] = b32_5to8((rand_seed ) & 0x1f);
+       rand_seed++;
+
+       strncat(buf, topdomain, 512 - strlen(buf));
+       send_query(fd, buf);
+}
+
+static void
+send_codec_switch(int fd, int userid, int bits)
+{
+       char buf[512] = "s_____.";
+       buf[1] = b32_5to8(userid);
+       buf[2] = b32_5to8(bits);
+       
+       buf[3] = b32_5to8((rand_seed >> 10) & 0x1f);
+       buf[4] = b32_5to8((rand_seed >> 5) & 0x1f);
+       buf[5] = b32_5to8((rand_seed ) & 0x1f);
+       rand_seed++;
+
+       strncat(buf, topdomain, 512 - strlen(buf));
+       send_query(fd, buf);
+}
+
+
+static void
+send_downenc_switch(int fd, int userid)
+{
+       char buf[512] = "o_____.";
+       buf[1] = b32_5to8(userid);
+       buf[2] = tolower(downenc);
+
+       buf[3] = b32_5to8((rand_seed >> 10) & 0x1f);
+       buf[4] = b32_5to8((rand_seed >> 5) & 0x1f);
+       buf[5] = b32_5to8((rand_seed ) & 0x1f);
+       rand_seed++;
+
+       strncat(buf, topdomain, 512 - strlen(buf));
+       send_query(fd, buf);
+}
+
+static void
+send_lazy_switch(int fd, int userid)
+{
+       char buf[512] = "o_____.";
+       buf[1] = b32_5to8(userid);
+
+       if (lazymode)
+               buf[2] = 'l';
+       else
+               buf[2] = 'i';
+
+       buf[3] = b32_5to8((rand_seed >> 10) & 0x1f);
+       buf[4] = b32_5to8((rand_seed >> 5) & 0x1f);
+       buf[5] = b32_5to8((rand_seed ) & 0x1f);
+       rand_seed++;
+
+       strncat(buf, topdomain, 512 - strlen(buf));
+       send_query(fd, buf);
+}
+
+static int
+handshake_version(int dns_fd, int *seed)
+{
+       char hex[] = "0123456789abcdef";
+       char hex2[] = "0123456789ABCDEF";
+       char in[4096];
+       uint32_t payload;
+       int i;
+       int read;
+
+       for (i = 0; running && i < 5; i++) {
+
+               send_version(dns_fd, VERSION);
+
+               read = handshake_waitdns(dns_fd, in, sizeof(in), 'v', 'V', i+1);
+
+               /*XXX START adjust indent 1 tab back*/
+                       if (read >= 9) {
+                               payload =  (((in[4] & 0xff) << 24) |
+                                               ((in[5] & 0xff) << 16) |
+                                               ((in[6] & 0xff) << 8) |
+                                               ((in[7] & 0xff)));
+
+                               if (strncmp("VACK", in, 4) == 0) {
+                                       *seed = payload;
+                                       userid = in[8];
+                                       userid_char = hex[userid & 15];
+                                       userid_char2 = hex2[userid & 15];
+
+                                       fprintf(stderr, "Version ok, both using protocol v 0x%08x. You are user #%d\n", VERSION, userid);
+                                       return 0;
+                               } else if (strncmp("VNAK", in, 4) == 0) {
+                                       warnx("You use protocol v 0x%08x, server uses v 0x%08x. Giving up", 
+                                                       VERSION, payload);
+                                       return 1;
+                               } else if (strncmp("VFUL", in, 4) == 0) {
+                                       warnx("Server full, all %d slots are taken. Try again later", payload);
+                                       return 1;
+                               }
+                       } else if (read > 0)
+                               warnx("did not receive proper login challenge");
+               /*XXX END adjust indent 1 tab back*/
+               
+               fprintf(stderr, "Retrying version check...\n");
+       }
+       warnx("couldn't connect to server (maybe other -T options will work)");
+       return 1;
+}
+
+static int
+handshake_login(int dns_fd, int seed)
+{
+       char in[4096];
+       char login[16];
+       char server[65];
+       char client[65];
+       int mtu;
+       int i;
+       int read;
+
+       login_calculate(login, 16, password, seed);
+       
+       for (i=0; running && i<5 ;i++) {
+
+               send_login(dns_fd, login, 16);
+
+               read = handshake_waitdns(dns_fd, in, sizeof(in), 'l', 'L', i+1);
+
+               /*XXX START adjust indent 1 tab back*/
+                       if (read > 0) {
+                               int netmask;
+                               if (strncmp("LNAK", in, 4) == 0) {
+                                       fprintf(stderr, "Bad password\n");
+                                       return 1;
+                               } else if (sscanf(in, "%64[^-]-%64[^-]-%d-%d", 
+                                       server, client, &mtu, &netmask) == 4) {
+                                       
+                                       server[64] = 0;
+                                       client[64] = 0;
+                                       if (tun_setip(client, server, netmask) == 0 && 
+                                               tun_setmtu(mtu) == 0) {
+
+                                               fprintf(stderr, "Server tunnel IP is %s\n", server);
+                                               return 0;
+                                       } else {
+                                               errx(4, "Failed to set IP and MTU");
+                                       }
+                               } else {
+                                       fprintf(stderr, "Received bad handshake\n");
+                               }
+                       }
+               /*XXX END adjust indent 1 tab back*/
+
+               fprintf(stderr, "Retrying login...\n");
+       }
+       warnx("couldn't login to server");
+       return 1;
+}
+
+static int
+handshake_raw_udp(int dns_fd, int seed)
+{
+       struct timeval tv;
+       char in[4096];
+       fd_set fds;
+       int i;
+       int r;
+       int len;
+       unsigned remoteaddr = 0;
+       struct in_addr server;
+
+       fprintf(stderr, "Testing raw UDP data to the server (skip with -r)");
+       for (i=0; running && i<3 ;i++) {
+
+               send_ip_request(dns_fd, userid);
+
+               len = handshake_waitdns(dns_fd, in, sizeof(in), 'i', 'I', i+1);
+
+               /*XXX START adjust indent 1 tab back*/
+                       if (len == 5 && in[0] == 'I') {
+                               /* Received IP address */
+                               remoteaddr = (in[1] & 0xff);
+                               remoteaddr <<= 8;
+                               remoteaddr |= (in[2] & 0xff);
+                               remoteaddr <<= 8;
+                               remoteaddr |= (in[3] & 0xff);
+                               remoteaddr <<= 8;
+                               remoteaddr |= (in[4] & 0xff);
+                               server.s_addr = ntohl(remoteaddr);
+                               break;
+                       }
+               /*XXX END adjust indent 1 tab back*/
+
+               fprintf(stderr, ".");
+               fflush(stderr);
+       }
+       fprintf(stderr, "\n");
+       if (!running)
+               return 0;
+       
+       if (!remoteaddr) {
+               fprintf(stderr, "Failed to get raw server IP, will use DNS mode.\n");
+               return 0;
+       }
+       fprintf(stderr, "Server is at %s, trying raw login: ", inet_ntoa(server));
+       fflush(stderr);
+
+       /* Store address to iodined server */
+       memset(&raw_serv, 0, sizeof(raw_serv));
+       raw_serv.sin_family = AF_INET;
+       raw_serv.sin_port = htons(53);
+       raw_serv.sin_addr = server;
+
+       /* do login against port 53 on remote server 
+        * based on the old seed. If reply received,
+        * switch to raw udp mode */
+       for (i=0; running && i<4 ;i++) {
+               tv.tv_sec = i + 1;
+               tv.tv_usec = 0;
+
+               send_raw_udp_login(dns_fd, userid, seed);
+               
+               FD_ZERO(&fds);
+               FD_SET(dns_fd, &fds);
+
+               r = select(dns_fd + 1, &fds, NULL, NULL, &tv);
+
+               if(r > 0) {
+                       /* recv() needed for windows, dont change to read() */
+                       len = recv(dns_fd, in, sizeof(in), 0);
+                       if (len >= (16 + RAW_HDR_LEN)) {
+                               char hash[16];
+                               login_calculate(hash, 16, password, seed - 1);
+                               if (memcmp(in, raw_header, RAW_HDR_IDENT_LEN) == 0
+                                       && RAW_HDR_GET_CMD(in) == RAW_HDR_CMD_LOGIN 
+                                       && memcmp(&in[RAW_HDR_LEN], hash, sizeof(hash)) == 0) {
+
+                                       fprintf(stderr, "OK\n");
+                                       return 1;
+                               }
+                       }
+               }
+               fprintf(stderr, ".");
+               fflush(stderr);
+       }
+       
+       fprintf(stderr, "failed\n");
+       return 0;
+}
+
+static int
+handshake_upenctest(int dns_fd, char *s)
+/* NOTE: *s may be max 59 chars; must start with "aA" for case-swap check
+   Returns:
+   -1: case swap, no need for any further test: error printed; or Ctrl-C
+   0: not identical or error or timeout
+   1: identical string returned
+*/
+{
+       char in[4096];
+       unsigned char *uin = (unsigned char *) in;
+       unsigned char *us = (unsigned char *) s;
+       int i;
+       int read;
+        int slen;
+
+       slen = strlen(s);
+       for (i=0; running && i<3 ;i++) {
+
+               send_upenctest(dns_fd, s);
+
+               read = handshake_waitdns(dns_fd, in, sizeof(in), 'z', 'Z', i+1);
+
+               if (read == -2)
+                       return 0;       /* hard error */
+
+               if (read > 0 && read < slen + 4)
+                       return 0;       /* reply too short (chars dropped) */
+
+               if (read > 0) {
+                       int k;
+#if 0
+                       /* in[56] = '@'; */
+                       /* in[56] = '_'; */
+                       /* if (in[29] == '\344') in[29] = 'a'; */
+                       in[read] = '\0';
+                       fprintf(stderr, "BounceReply: >%s<\n", in);
+#endif
+                       /* quick check if case swapped, to give informative error msg */
+                       if (in[4] == 'A') {
+                               fprintf(stderr, "DNS queries get changed to uppercase, keeping upstream codec Base32\n");
+                               return -1;
+                       }
+                       if (in[5] == 'a') {
+                               fprintf(stderr, "DNS queries get changed to lowercase, keeping upstream codec Base32\n");
+                               return -1;
+                       }
+
+                       for (k = 0; k < slen; k++) {
+                               if (in[k+4] != s[k]) {
+                                       /* Definitely not reliable */
+                                       if (in[k+4] >= ' ' && in[k+4] <= '~' &&
+                                           s[k] >= ' ' && s[k] <= '~') {
+                                               fprintf(stderr, "DNS query char '%c' gets changed into '%c'\n",
+                                                       s[k], in[k+4]);
+                                       } else {
+                                               fprintf(stderr, "DNS query char 0x%02X gets changed into 0x%02X\n",
+                                                       (unsigned int) us[k],
+                                                       (unsigned int) uin[k+4]);
+                                       }
+                                       return 0;
+                               }
+                       }
+                       /* if still here, then all okay */
+                       return 1;
+               }
+
+               fprintf(stderr, "Retrying upstream codec test...\n");
+       }
+
+       if (!running)
+               return -1;
+
+       /* timeout */
+       return 0;
+}
+
+static int
+handshake_upenc_autodetect(int dns_fd)
+/* Returns:
+   0: keep Base32
+   1: Base64 is okay
+   2: Base64u is okay
+   3: Base128 is okay
+*/
+{
+       /* Note: max 59 chars, must start with "aA".
+          pat64: If 0129 work, assume 3-8 are okay too.
+
+          RFC1035 par 2.3.1 states that [A-Z0-9-] allowed, but only
+          [A-Z] as first, and [A-Z0-9] as last char _per label_.
+          Test by having '-' as last char.
+        */
+        char *pat64="aAbBcCdDeEfFgGhHiIjJkKlLmMnNoOpPqQrRsStTuUvVwWxXyYzZ+0129-";
+        char *pat64u="aAbBcCdDeEfFgGhHiIjJkKlLmMnNoOpPqQrRsStTuUvVwWxXyYzZ_0129-";
+        char *pat128a="aA-Aaahhh-Drink-mal-ein-J\344germeister-";
+        char *pat128b="aA-La-fl\373te-na\357ve-fran\347aise-est-retir\351-\340-Cr\350te";
+        char *pat128c="aAbBcCdDeEfFgGhHiIjJkKlLmMnNoOpPqQrRsStTuUvVwWxXyYzZ";
+        char *pat128d="aA0123456789\274\275\276\277"
+                     "\300\301\302\303\304\305\306\307\310\311\312\313\314\315\316\317";
+        char *pat128e="aA"
+                     "\320\321\322\323\324\325\326\327\330\331\332\333\334\335\336\337"
+                     "\340\341\342\343\344\345\346\347\350\351\352\353\354\355\356\357"
+                     "\360\361\362\363\364\365\366\367\370\371\372\373\374\375";
+       int res;
+
+       /* Try Base128, starting very gently to not draw attention */
+       while (1) {
+               res = handshake_upenctest(dns_fd, pat128a);
+               if (res < 0) {
+                       /* DNS swaps case, msg already printed; or Ctrl-C */
+                       return 0;
+               } else if (res == 0) {
+                       /* Probably not okay, skip Base128 entirely */
+                       break;
+               }
+
+               res = handshake_upenctest(dns_fd, pat128b);
+               if (res < 0)
+                       return 0;
+               else if (res == 0)
+                       break;
+
+               /* if this works, we can test the real stuff */
+
+               res = handshake_upenctest(dns_fd, pat128c);
+               if (res < 0)
+                       return 0;
+               else if (res == 0)
+                       break;
+
+               res = handshake_upenctest(dns_fd, pat128d);
+               if (res < 0)
+                       return 0;
+               else if (res == 0)
+                       break;
+
+               res = handshake_upenctest(dns_fd, pat128e);
+               if (res < 0)
+                       return 0;
+               else if (res == 0)
+                       break;
+
+               /* if still here, then base128 works completely */
+               return 3;
+       }
+
+       /* Try Base64 (with plus sign) */
+       res = handshake_upenctest(dns_fd, pat64);
+       if (res < 0) {
+               /* DNS swaps case, msg already printed; or Ctrl-C */
+               return 0;
+       } else if (res > 0) {
+               /* All okay, Base64 msg will be printed later */
+               return 1;
+       }
+
+       /* Try Base64u (with _u_nderscore) */
+       res = handshake_upenctest(dns_fd, pat64u);
+       if (res < 0) {
+               /* DNS swaps case, msg already printed; or Ctrl-C */
+               return 0;
+       } else if (res > 0) {
+               /* All okay, Base64u msg will be printed later */
+               return 2;
+       }
+
+       /* if here, then nonthing worked */
+       fprintf(stderr, "Keeping upstream codec Base32\n");
+       return 0;
+}
+
+static int
+handshake_downenctest(int dns_fd, char trycodec)
+/* Returns:
+   0: not identical or error or timeout
+   1: identical string returned
+*/
+{
+       char in[4096];
+       int i;
+       int read;
+       char *s = DOWNCODECCHECK1;
+        int slen = DOWNCODECCHECK1_LEN;
+
+       for (i=0; running && i<3 ;i++) {
+
+               send_downenctest(dns_fd, trycodec, 1, NULL, 0);
+
+               read = handshake_waitdns(dns_fd, in, sizeof(in), 'y', 'Y', i+1);
+
+               if (read == -2)
+                       return 0;       /* hard error */
+
+               if (read > 0 && read != slen)
+                       return 0;       /* reply incorrect = unreliable */
+
+               if (read > 0) {
+                       int k;
+                       for (k = 0; k < slen; k++) {
+                               if (in[k] != s[k]) {
+                                       /* Definitely not reliable */
+                                       return 0;
+                               }
+                       }
+                       /* if still here, then all okay */
+                       return 1;
+               }
+
+               fprintf(stderr, "Retrying downstream codec test...\n");
+       }
+
+       /* timeout */
+       return 0;
+}
+
+static char
+handshake_downenc_autodetect(int dns_fd)
+/* Returns codec char (or ' ' if no advanced codec works) */
+{
+       int base64ok = 0;
+       int base64uok = 0;
+       int base128ok = 0;
+
+       if (do_qtype == T_NULL) {
+               /* no other choice than raw */
+               fprintf(stderr, "No alternative downstream codec available, using default (Raw)\n");
+               return ' ';
+       }
+
+       fprintf(stderr, "Autodetecting downstream codec (use -O to override)\n");
+
+       /* Try Base64 */
+       if (handshake_downenctest(dns_fd, 'S'))
+               base64ok = 1;
+       else if (running && handshake_downenctest(dns_fd, 'U'))
+               base64uok = 1;
+
+       /* Try Base128 only if 64 gives us some perspective */
+       if (running && (base64ok || base64uok)) {
+               if (handshake_downenctest(dns_fd, 'V'))
+                       base128ok = 1;
+       }
+
+       /* If 128 works, then TXT may give us Raw as well */
+       if (running && (base128ok && do_qtype == T_TXT)) {
+               if (handshake_downenctest(dns_fd, 'R'))
+                       return 'R';
+       }
+
+       if (!running)
+               return ' ';
+
+       if (base128ok)
+               return 'V';
+       if (base64ok)
+               return 'S';
+       if (base64uok)
+               return 'U';
+
+       fprintf(stderr, "No advanced downstream codecs seem to work, using default (Base32)\n");
+       return ' ';
+}
+
+static int
+handshake_qtypetest(int dns_fd, int timeout)
+/* Returns:
+   0: doesn't work with this timeout
+   1: works properly
+*/
+{
+       char in[4096];
+       int read;
+       char *s = DOWNCODECCHECK1;
+        int slen = DOWNCODECCHECK1_LEN;
+       int trycodec;
+       int k;
+
+       if (do_qtype == T_NULL)
+               trycodec = 'R';
+       else
+               trycodec = 'T';
+
+       /* We could use 'Z' bouncing here, but 'Y' also tests that 0-255
+          byte values can be returned, which is needed for NULL to work. */
+
+       send_downenctest(dns_fd, trycodec, 1, NULL, 0);
+
+       read = handshake_waitdns(dns_fd, in, sizeof(in), 'y', 'Y', timeout);
+
+       if (read != slen)
+               return 0;       /* incorrect */
+
+       for (k = 0; k < slen; k++) {
+               if (in[k] != s[k]) {
+                       /* corrupted */
+                       return 0;
+               }
+       }
+
+       /* if still here, then all okay */
+       return 1;
+}
+
+static int
+handshake_qtype_numcvt(int num)
+{
+       switch (num) {
+       case 0: return T_NULL;
+       case 1: return T_TXT;
+       case 2: return T_SRV;
+       case 3: return T_MX;
+       case 4: return T_CNAME;
+       case 5: return T_A;
+       }
+       return T_UNSET;
+}
+
+static int
+handshake_qtype_autodetect(int dns_fd)
+/* Returns:
+   0: okay, do_qtype set
+   1: problem, program exit
+*/
+{
+       int highestworking = 100;
+       int timeout;
+       int qtypenum;
+
+       fprintf(stderr, "Autodetecting DNS query type (use -T to override)");
+       fflush(stderr);
+
+       /* Method: try all "interesting" qtypes with a 1-sec timeout, then try
+          all "still-interesting" qtypes with a 2-sec timeout, etc.
+          "Interesting" means: qtypes that (are expected to) have higher
+          bandwidth than what we know is working already (highestworking).
+
+          Note that DNS relays may not immediately resolve the first (NULL)
+          query in 1 sec, due to long recursive lookups, so we keep trying
+          to see if things will start working after a while.
+        */
+
+       for (timeout = 1; running && timeout <= 3; timeout++) {
+               for (qtypenum = 0; running && qtypenum < highestworking; qtypenum++) {
+                       do_qtype = handshake_qtype_numcvt(qtypenum);
+                       if (do_qtype == T_UNSET)
+                               break;  /* this round finished */
+
+                       fprintf(stderr, ".");
+                       fflush(stderr);
+
+                       if (handshake_qtypetest(dns_fd, timeout)) {
+                               /* okay */
+                               highestworking = qtypenum;
+#if 0
+                               fprintf(stderr, " Type %s timeout %d works\n",
+                                       get_qtype(), timeout);
+#endif
+                               break;
+                               /* try others with longer timeout */
+                       }
+                       /* else: try next qtype with same timeout */
+               }
+               if (highestworking == 0)
+                       /* good, we have NULL; abort immediately */
+                       break;
+       }
+
+       fprintf(stderr, "\n");
+
+       if (!running) {
+               warnx("Stopped while autodetecting DNS query type (try setting manually with -T)");
+               return 1;  /* problem */
+       }
+
+       /* finished */
+       do_qtype = handshake_qtype_numcvt(highestworking);
+
+       if (do_qtype == T_UNSET) {
+               /* also catches highestworking still 100 */
+               warnx("No suitable DNS query type found. Are you connected to a network?");
+               warnx("If you expect very long roundtrip delays, use -T explicitly.");
+               warnx("(Also, connecting to an \"ancient\" version of iodined won't work.)");
+               return 1;  /* problem */
+       }
+
+       /* "using qtype" message printed in handshake function */
+       return 0;  /* okay */
+}
+
+static int
+handshake_edns0_check(int dns_fd)
+/* Returns:
+   0: EDNS0 not supported; or Ctrl-C
+   1: EDNS0 works
+*/
+{
+       char in[4096];
+       int i;
+       int read;
+       char *s = DOWNCODECCHECK1;
+        int slen = DOWNCODECCHECK1_LEN;
+       char trycodec;
+
+       if (do_qtype == T_NULL)
+               trycodec = 'R';
+       else
+               trycodec = 'T';
+
+       for (i=0; running && i<3 ;i++) {
+
+               send_downenctest(dns_fd, trycodec, 1, NULL, 0);
+
+               read = handshake_waitdns(dns_fd, in, sizeof(in), 'y', 'Y', i+1);
+
+               if (read == -2)
+                       return 0;       /* hard error */
+
+               if (read > 0 && read != slen)
+                       return 0;       /* reply incorrect = unreliable */
+
+               if (read > 0) {
+                       int k;
+                       for (k = 0; k < slen; k++) {
+                               if (in[k] != s[k]) {
+                                       /* Definitely not reliable */
+                                       return 0;
+                               }
+                       }
+                       /* if still here, then all okay */
+                       return 1;
+               }
+
+               fprintf(stderr, "Retrying EDNS0 support test...\n");
+       }
+
+       /* timeout or Ctrl-C */
+       return 0;
+}
+
+static void
+handshake_switch_codec(int dns_fd, int bits)
+{
+       char in[4096];
+       int i;
+       int read;
+       struct encoder *tempenc;
+
+       if (bits == 5)
+               tempenc = get_base32_encoder();
+       else if (bits == 6)
+               tempenc = get_base64_encoder();
+       else if (bits == 26)    /* "2nd" 6 bits per byte, with underscore */
+               tempenc = get_base64u_encoder();
+       else if (bits == 7)
+               tempenc = get_base128_encoder();
+       else return;
+
+       fprintf(stderr, "Switching upstream to codec %s\n", tempenc->name);
+
+       for (i=0; running && i<5 ;i++) {
+
+               send_codec_switch(dns_fd, userid, bits);
+               
+               read = handshake_waitdns(dns_fd, in, sizeof(in), 's', 'S', i+1);
+
+               /*XXX START adjust indent 1 tab back*/                  
+                       if (read > 0) {
+                               if (strncmp("BADLEN", in, 6) == 0) {
+                                       fprintf(stderr, "Server got bad message length. ");
+                                       goto codec_revert;
+                               } else if (strncmp("BADIP", in, 5) == 0) {
+                                       fprintf(stderr, "Server rejected sender IP address. ");
+                                       goto codec_revert;
+                               } else if (strncmp("BADCODEC", in, 8) == 0) {
+                                       fprintf(stderr, "Server rejected the selected codec. ");
+                                       goto codec_revert;
+                               }
+                               in[read] = 0; /* zero terminate */
+                               fprintf(stderr, "Server switched upstream to codec %s\n", in);
+                               dataenc = tempenc;
+                               return;
+                       }
+               /*XXX END adjust indent 1 tab back*/
+
+               fprintf(stderr, "Retrying codec switch...\n");
+       }
+       if (!running)
+               return;
+
+       fprintf(stderr, "No reply from server on codec switch. ");
+
+codec_revert: 
+       fprintf(stderr, "Falling back to upstream codec %s\n", dataenc->name);
+}
+
+static void
+handshake_switch_downenc(int dns_fd)
+{
+       char in[4096];
+       int i;
+       int read;
+       char *dname;
+
+       dname = "Base32";
+       if (downenc == 'S')
+               dname = "Base64";
+       else if (downenc == 'U')
+               dname = "Base64u";
+       else if (downenc == 'V')
+               dname = "Base128";
+       else if (downenc == 'R')
+               dname = "Raw";
+
+       fprintf(stderr, "Switching downstream to codec %s\n", dname);
+       for (i=0; running && i<5 ;i++) {
+
+               send_downenc_switch(dns_fd, userid);
+
+               read = handshake_waitdns(dns_fd, in, sizeof(in), 'o', 'O', i+1);
+
+               /*XXX START adjust indent 1 tab back*/
+                       if (read > 0) {
+                               if (strncmp("BADLEN", in, 6) == 0) {
+                                       fprintf(stderr, "Server got bad message length. ");
+                                       goto codec_revert;
+                               } else if (strncmp("BADIP", in, 5) == 0) {
+                                       fprintf(stderr, "Server rejected sender IP address. ");
+                                       goto codec_revert;
+                               } else if (strncmp("BADCODEC", in, 8) == 0) {
+                                       fprintf(stderr, "Server rejected the selected codec. ");
+                                       goto codec_revert;
+                               }
+                               in[read] = 0; /* zero terminate */
+                               fprintf(stderr, "Server switched downstream to codec %s\n", in);
+                               return;
+                       }
+               /*XXX END adjust indent 1 tab back*/
+
+               fprintf(stderr, "Retrying codec switch...\n");
+       }
+       if (!running)
+               return;
+
+       fprintf(stderr, "No reply from server on codec switch. ");
+
+codec_revert: 
+       fprintf(stderr, "Falling back to downstream codec Base32\n");
+}
+
+static void
+handshake_try_lazy(int dns_fd)
+{
+       char in[4096];
+       int i;
+       int read;
+
+       fprintf(stderr, "Switching to lazy mode for low-latency\n");
+       for (i=0; running && i<5; i++) {
+
+               send_lazy_switch(dns_fd, userid);
+
+               read = handshake_waitdns(dns_fd, in, sizeof(in), 'o', 'O', i+1);
+
+               /*XXX START adjust indent 1 tab back*/
+                       if (read > 0) {
+                               if (strncmp("BADLEN", in, 6) == 0) {
+                                       fprintf(stderr, "Server got bad message length. ");
+                                       goto codec_revert;
+                               } else if (strncmp("BADIP", in, 5) == 0) {
+                                       fprintf(stderr, "Server rejected sender IP address. ");
+                                       goto codec_revert;
+                               } else if (strncmp("BADCODEC", in, 8) == 0) {
+                                       fprintf(stderr, "Server rejected lazy mode. ");
+                                       goto codec_revert;
+                               } else if (strncmp("Lazy", in, 4) == 0) {
+                                       fprintf(stderr, "Server switched to lazy mode\n");
+                                       lazymode = 1;
+                                       return;
+                               }
+                       }
+               /*XXX END adjust indent 1 tab back*/
+
+               fprintf(stderr, "Retrying lazy mode switch...\n");
+       }
+       if (!running)
+               return;
+
+       fprintf(stderr, "No reply from server on lazy switch. ");
+
+codec_revert: 
+       fprintf(stderr, "Falling back to legacy mode\n");
+       lazymode = 0;
+       selecttimeout = 1;
+}
+
+static void
+handshake_lazyoff(int dns_fd)
+/* Used in the middle of data transfer, timing is different and no error msgs */
+{
+       char in[4096];
+       int i;
+       int read;
+
+       for (i=0; running && i<5; i++) {
+
+               send_lazy_switch(dns_fd, userid);
+
+               read = handshake_waitdns(dns_fd, in, sizeof(in), 'o', 'O', 1);
+
+               /*XXX START adjust indent 2 tabs back*/
+                               if (read == 9 && strncmp("Immediate", in, 9) == 0) {
+                                       warnx("Server switched back to legacy mode.\n");
+                                       lazymode = 0;
+                                       selecttimeout = 1;
+                                       return;
+                               }
+               /*XXX END adjust indent 2 tabs back*/
+       }
+       if (!running)
+               return;
+
+       warnx("No reply from server on legacy mode switch.\n");
+}
+
+static int
+fragsize_check(char *in, int read, int proposed_fragsize, int *max_fragsize)
+/* Returns: 0: keep checking, 1: break loop (either okay or definitely wrong) */
+{
+       int acked_fragsize = ((in[0] & 0xff) << 8) | (in[1] & 0xff);
+       int okay;
+       int i;
+       unsigned int v;
+
+       if (read >= 5 && strncmp("BADIP", in, 5) == 0) {
+               fprintf(stderr, "got BADIP (Try iodined -c)..\n");
+               fflush(stderr);
+               return 0;               /* maybe temporary error */
+       }
+
+       if (acked_fragsize != proposed_fragsize) {
+               /*
+                * got ack for wrong fragsize, maybe late response for
+                * earlier query, or ack corrupted
+                */
+               return 0;
+       }
+
+       if (read != proposed_fragsize) {
+               /*
+                * correctly acked fragsize but read too little (or too
+                * much): this fragsize is definitely not reliable
+                */
+               return 1;
+       }
+
+       /* here: read == proposed_fragsize == acked_fragsize */
+
+       /* test: */
+       /* in[123] = 123; */
+
+       if ((in[2] & 0xff) != 107) {
+               fprintf(stderr, "\n");
+               warnx("corruption at byte 2, this won't work. Try -O Base32, or other -T options.");
+               *max_fragsize = -1;
+               return 1;
+       }
+
+       /* Check for corruption */
+       okay = 1;
+       v = in[3] & 0xff;
+
+       /*XXX START adjust indent 1 tab back*/
+               for (i = 3; i < read; i++, v = (v + 107) & 0xff)
+                       if ((in[i] & 0xff) != v) {
+                               okay = 0;
+                               break;
+                       }
+
+               if (okay) {
+                       fprintf(stderr, "%d ok.. ", acked_fragsize);
+                       fflush(stderr);
+                       *max_fragsize = acked_fragsize;
+                       return 1;
+               } else {
+                       if (downenc != ' ' && downenc != 'T') {
+                               fprintf(stderr, "%d corrupted at %d.. (Try -O Base32)\n", acked_fragsize, i);
+                       } else {
+                               fprintf(stderr, "%d corrupted at %d.. ", acked_fragsize, i);
+                       }
+                       fflush(stderr);
+                       return 1;
+               }
+       /*XXX END adjust indent 1 tab back*/
+
+       /* notreached */
+       return 1;
+}
+
+
+static int
+handshake_autoprobe_fragsize(int dns_fd)
+{
+       char in[4096];
+       int i;
+       int read;
+       int proposed_fragsize = 768;
+       int range = 768;
+       int max_fragsize;
+
+       max_fragsize = 0;
+       fprintf(stderr, "Autoprobing max downstream fragment size... (skip with -m fragsize)\n"); 
+       while (running && range > 0 && (range >= 8 || max_fragsize < 300)) {
+               /* stop the slow probing early when we have enough bytes anyway */
+               for (i=0; running && i<3 ;i++) {
+
+                       send_fragsize_probe(dns_fd, proposed_fragsize);
+
+                       read = handshake_waitdns(dns_fd, in, sizeof(in), 'r', 'R', 1);
+                               
+                       /*XXX START adjust indent 1 tab back*/
+                               if (read > 0) {
+                                       /* We got a reply */
+                                       if (fragsize_check(in, read, proposed_fragsize, &max_fragsize) == 1)
+                                               break;
+                               }
+                       /*XXX END adjust indent 1 tab back*/
+
+                       fprintf(stderr, ".");
+                       fflush(stderr);
+               }
+               if (max_fragsize < 0)
+                       break;
+
+               range >>= 1;
+               if (max_fragsize == proposed_fragsize) {
+                       /* Try bigger */
+                       proposed_fragsize += range;
+               } else {
+                       /* Try smaller */
+                       fprintf(stderr, "%d not ok.. ", proposed_fragsize);
+                       fflush(stderr);
+                       proposed_fragsize -= range;
+               }
+       }
+       if (!running) {
+               fprintf(stderr, "\n");
+               warnx("stopped while autodetecting fragment size (Try setting manually with -m)");
+               return 0;
+       }
+       if (max_fragsize <= 2) {
+               /* Tried all the way down to 2 and found no good size.
+                  But we _did_ do all handshake before this, so there must
+                  be some workable connection. */
+               fprintf(stderr, "\n");
+               warnx("found no accepted fragment size.");
+               warnx("try setting -M to 200 or lower, or try other -T or -O options.");
+               return 0;
+       }
+       /* data header adds 2 bytes */
+       fprintf(stderr, "will use %d-2=%d\n", max_fragsize, max_fragsize - 2);
+
+       /* need 1200 / 16frags = 75 bytes fragsize */
+       if (max_fragsize < 82) {
+               fprintf(stderr, "Note: this probably won't work well.\n");
+               fprintf(stderr, "Try setting -M to 200 or lower, or try other DNS types (-T option).\n");
+       } else if (max_fragsize < 202 &&
+           (do_qtype == T_NULL || do_qtype == T_TXT ||
+            do_qtype == T_SRV || do_qtype == T_MX)) {
+               fprintf(stderr, "Note: this isn't very much.\n");
+               fprintf(stderr, "Try setting -M to 200 or lower, or try other DNS types (-T option).\n");
+       }
+
+       return max_fragsize - 2;
+}
+
+static void
+handshake_set_fragsize(int dns_fd, int fragsize)
+{
+       char in[4096];
+       int i;
+       int read;
+
+       fprintf(stderr, "Setting downstream fragment size to max %d...\n", fragsize);
+       for (i=0; running && i<5 ;i++) {
+
+               send_set_downstream_fragsize(dns_fd, fragsize);
+
+               read = handshake_waitdns(dns_fd, in, sizeof(in), 'n', 'N', i+1);
+
+               /*XXX START adjust indent 1 tab back*/                  
+                       if (read > 0) {
+                               int accepted_fragsize;
+
+                               if (strncmp("BADFRAG", in, 7) == 0) {
+                                       fprintf(stderr, "Server rejected fragsize. Keeping default.");
+                                       return;
+                               } else if (strncmp("BADIP", in, 5) == 0) {
+                                       fprintf(stderr, "Server rejected sender IP address.\n");
+                                       return;
+                               }
+
+                               accepted_fragsize = ((in[0] & 0xff) << 8) | (in[1] & 0xff);
+                               return;
+                       }
+               /*XXX END adjust indent 1 tab back*/
+
+               fprintf(stderr, "Retrying set fragsize...\n");
+       }
+       if (!running)
+               return;
+
+       fprintf(stderr, "No reply from server when setting fragsize. Keeping default.\n");
+}
+
+int
+client_handshake(int dns_fd, int raw_mode, int autodetect_frag_size, int fragsize)
+{
+       int seed;
+       int upcodec;
+       int r;
+
+       dnsc_use_edns0 = 0;
+
+       /* qtype message printed in handshake function */
+       if (do_qtype == T_UNSET) {
+               r = handshake_qtype_autodetect(dns_fd);
+               if (r) {
+                       return r;
+               }
+       }
+
+       fprintf(stderr, "Using DNS type %s queries\n", get_qtype());
+
+       r = handshake_version(dns_fd, &seed);
+       if (r) {
+               return r;
+       }
+
+       r = handshake_login(dns_fd, seed);
+       if (r) {
+               return r;
+       }
+
+       if (raw_mode && handshake_raw_udp(dns_fd, seed)) {
+               conn = CONN_RAW_UDP;
+               selecttimeout = 20;
+       } else {
+               if (raw_mode == 0) {
+                       fprintf(stderr, "Skipping raw mode\n");
+               }
+
+               dnsc_use_edns0 = 1;
+               if (handshake_edns0_check(dns_fd) && running) {
+                       fprintf(stderr, "Using EDNS0 extension\n");
+               } else if (!running) {
+                       return -1;
+               } else {
+                       fprintf(stderr, "DNS relay does not support EDNS0 extension\n");
+                       dnsc_use_edns0 = 0;
+               }
+
+               upcodec = handshake_upenc_autodetect(dns_fd);
+               if (!running)
+                       return -1;
+
+               if (upcodec == 1) {
+                       handshake_switch_codec(dns_fd, 6);
+               } else if (upcodec == 2) {
+                       handshake_switch_codec(dns_fd, 26);
+               } else if (upcodec == 3) {
+                       handshake_switch_codec(dns_fd, 7);
+               }
+               if (!running)
+                       return -1;
+
+               if (downenc == ' ') {
+                       downenc = handshake_downenc_autodetect(dns_fd);
+               }
+               if (!running)
+                       return -1;
+
+               if (downenc != ' ') {
+                       handshake_switch_downenc(dns_fd);
+               }
+               if (!running)
+                       return -1;
+
+               if (lazymode) {
+                       handshake_try_lazy(dns_fd);
+               }
+               if (!running)
+                       return -1;
+
+               if (autodetect_frag_size) {
+                       fragsize = handshake_autoprobe_fragsize(dns_fd);
+                       if (!fragsize) {
+                               return 1;
+                       }
+               }
+
+               handshake_set_fragsize(dns_fd, fragsize);
+               if (!running)
+                       return -1;
+       }
+
+       return 0;
+}
+
diff --git a/src/client.h b/src/client.h
new file mode 100644 (file)
index 0000000..16ab0e4
--- /dev/null
@@ -0,0 +1,39 @@
+/*
+ * Copyright (c) 2006-2009 Bjorn Andersson <flex@kryo.se>, Erik Ekman <yarrick@kryo.se>
+ *
+ * Permission to use, copy, modify, and distribute this software for any
+ * purpose with or without fee is hereby granted, provided that the above
+ * copyright notice and this permission notice appear in all copies.
+ *
+ * THE SOFTWARE IS PROVIDED "AS IS" AND THE AUTHOR DISCLAIMS ALL WARRANTIES
+ * WITH REGARD TO THIS SOFTWARE INCLUDING ALL IMPLIED WARRANTIES OF
+ * MERCHANTABILITY AND FITNESS. IN NO EVENT SHALL THE AUTHOR BE LIABLE FOR
+ * ANY SPECIAL, DIRECT, INDIRECT, OR CONSEQUENTIAL DAMAGES OR ANY DAMAGES
+ * WHATSOEVER RESULTING FROM LOSS OF USE, DATA OR PROFITS, WHETHER IN AN
+ * ACTION OF CONTRACT, NEGLIGENCE OR OTHER TORTIOUS ACTION, ARISING OUT OF
+ * OR IN CONNECTION WITH THE USE OR PERFORMANCE OF THIS SOFTWARE.
+ */
+
+#ifndef __CLIENT_H__
+#define __CLIENT_H__
+
+void client_init();
+void client_stop();
+
+enum connection client_get_conn();
+const char *client_get_raw_addr();
+
+void client_set_nameserver(const char *cp, int port);
+void client_set_topdomain(const char *cp);
+void client_set_password(const char *cp);
+void set_qtype(char *qtype);
+char *get_qtype();
+void set_downenc(char *encoding);
+void client_set_selecttimeout(int select_timeout);
+void client_set_lazymode(int lazy_mode);
+void client_set_hostname_maxlen(int i);
+
+int client_handshake(int dns_fd, int raw_mode, int autodetect_frag_size, int fragsize);
+int client_tunnel(int tun_fd, int dns_fd);
+
+#endif
index 8511498f2ee1ab80fd34c80aa701333190091bac..dd2bf2d3bbc777bba6b792ca926cbd7c843d01d5 100644 (file)
@@ -26,6 +26,7 @@
 #include <string.h>
 #include <ctype.h>
 #include <fcntl.h>
+#include <errno.h>
 
 #ifdef WINDOWS32
 #include <winsock2.h>
 #else
 #include <arpa/nameser.h>
 #ifdef DARWIN
-#include <arpa/nameser8_compat.h>
+#define BIND_8_COMPAT
+#include <arpa/nameser_compat.h>
 #endif
 #include <termios.h>
 #include <err.h>
 #include <arpa/inet.h>
 #include <netinet/in.h>
+#include <syslog.h>
+#endif
+
+#ifdef HAVE_SETCON
+# include <selinux/selinux.h>
 #endif
 
 #include "common.h"
 
+/* The raw header used when not using DNS protocol */
+const unsigned char raw_header[RAW_HDR_LEN] = { 0x10, 0xd1, 0x9e, 0x00 };
+
 /* daemon(3) exists only in 4.4BSD or later, and in GNU libc */
 #if !defined(WINDOWS32) && !(defined(BSD) && (BSD >= 199306)) && !defined(__GLIBC__)
 static int daemon(int nochdir, int noclose)
@@ -164,6 +174,35 @@ do_chroot(char *newroot)
 #endif
 }
 
+void
+do_setcon(char *context)
+{
+#ifdef HAVE_SETCON
+       if (-1 == setcon(context))
+               err(1, "%s", context);
+#else
+       warnx("No SELinux support built in");
+#endif
+}
+
+void
+do_pidfile(char *pidfile)
+{
+#ifndef WINDOWS32
+       FILE *file;
+
+       if ((file = fopen(pidfile, "w")) == NULL) {
+               syslog(LOG_ERR, "Cannot write pidfile to %s, exiting", pidfile);
+               err(1, "do_pidfile: Can not write pidfile to %s", pidfile);
+       } else {
+               fprintf(file, "%d\n", (int)getpid());
+               fclose(file);
+       }
+#else
+       fprintf(stderr, "Windows version does not support pid file\n");
+#endif
+}
+
 void
 do_detach()
 {
@@ -294,3 +333,18 @@ errx(int eval, const char *fmt, ...)
 }
 #endif
 
+
+int recent_seqno(int ourseqno, int gotseqno)
+/* Return 1 if we've seen gotseqno recently (current or up to 3 back).
+   Return 0 if gotseqno is new (or very old).
+*/
+{
+       int i;
+       for (i = 0; i < 4; i++, ourseqno--) {
+               if (ourseqno < 0)
+                       ourseqno = 7;
+               if (gotseqno == ourseqno)
+                       return 1;
+       }
+       return 0;
+}
index f39461ac18e7a279b3d8dbd1d1abe28346382f59..8dbbfbd42bc08a55539f5f657cd4a1183aa0dab6 100644 (file)
 #ifndef __COMMON_H__
 #define __COMMON_H__
 
+/* Last byte of raw header is the command */
+#define RAW_HDR_LEN 4
+#define RAW_HDR_IDENT_LEN 3
+#define RAW_HDR_CMD 3
+#define RAW_HDR_CMD_LOGIN 0x10
+#define RAW_HDR_CMD_DATA  0x20
+#define RAW_HDR_CMD_PING  0x30
+
+#define RAW_HDR_CMD_MASK  0xF0
+#define RAW_HDR_USR_MASK  0x0F
+#define RAW_HDR_GET_CMD(x) ((x)[RAW_HDR_CMD] & RAW_HDR_CMD_MASK)
+#define RAW_HDR_GET_USR(x) ((x)[RAW_HDR_CMD] & RAW_HDR_USR_MASK)
+extern const unsigned char raw_header[RAW_HDR_LEN];
+
 #ifdef WINDOWS32
 #include "windows.h"
 #else
+#include <sys/types.h>
 #include <sys/socket.h>
 #include <err.h>
 #include <arpa/inet.h>
 #include <netinet/in.h>
 #endif
 
+#define DNS_PORT 53
 
 #ifndef MIN
 #define MIN(a,b) ((a)<(b)?(a):(b))
@@ -58,6 +74,9 @@
 # define DONT_FRAG_VALUE 1
 #endif
 
+#define T_UNSET 65432
+/* Unused RR type; "private use" range, see http://www.bind9.net/dns-parameters */
+
 struct packet 
 {
        int len;                /* Total packet length */
@@ -71,10 +90,20 @@ struct packet
 struct query {
        char name[QUERY_NAME_SIZE];
        unsigned short type;
+       unsigned short rcode;
        unsigned short id;
        struct in_addr destination;
        struct sockaddr from;
        int fromlen;
+       unsigned short id2;
+       struct sockaddr from2;
+       int fromlen2;
+};
+
+enum connection {
+       CONN_RAW_UDP,
+       CONN_DNS_NULL,
+       CONN_MAX
 };
 
 void check_superuser(void (*usage_fn)(void));
@@ -82,7 +111,9 @@ int open_dns(int, in_addr_t);
 void close_dns(int);
 
 void do_chroot(char *);
+void do_setcon(char *);
 void do_detach();
+void do_pidfile(char *);
 
 void read_password(char*, size_t);
 
@@ -97,4 +128,6 @@ void errx(int eval, const char *fmt, ...);
 void warnx(const char *fmt, ...);
 #endif
 
+int recent_seqno(int , int);
+
 #endif
index 4b8199bc70f98473066e63fd3ea6e1ba5e5ad907..fb2bcaf3d42f1dc227df7c4b9bd9aa38835cbeee 100644 (file)
--- a/src/dns.c
+++ b/src/dns.c
@@ -27,7 +27,8 @@
 #else
 #include <arpa/nameser.h>
 #ifdef DARWIN
-#include <arpa/nameser8_compat.h>
+#define BIND_8_COMPAT
+#include <arpa/nameser_compat.h>
 #endif
 #include <arpa/inet.h>
 #include <err.h>
 #include "encoding.h"
 #include "read.h"
 
+int dnsc_use_edns0 = 1;
+
+#define CHECKLEN(x) if (buflen - (p-buf) < (x))  return 0
+
 int
 dns_encode(char *buf, size_t buflen, struct query *q, qr_t qr, char *data, size_t datalen)
 {
@@ -45,6 +50,10 @@ dns_encode(char *buf, size_t buflen, struct query *q, qr_t qr, char *data, size_
        short name;
        char *p;
        int len;
+       int ancnt;
+
+       if (buflen < sizeof(HEADER))
+               return 0;
 
        memset(buf, 0, buflen);
        
@@ -62,40 +71,150 @@ dns_encode(char *buf, size_t buflen, struct query *q, qr_t qr, char *data, size_
 
        switch (qr) {
        case QR_ANSWER:
-               header->ancount = htons(1);
                header->qdcount = htons(1);
        
                name = 0xc000 | ((p - buf) & 0x3fff);
 
-               putname(&p, sizeof(q->name), q->name);
+               /* Question section */
+               putname(&p, buflen - (p - buf), q->name);
 
+               CHECKLEN(4);
                putshort(&p, q->type);
                putshort(&p, C_IN);
 
-               putshort(&p, name);     
-               putshort(&p, q->type);
-               putshort(&p, C_IN);
-               putlong(&p, 0);
-
-               putshort(&p, datalen);
-               putdata(&p, data, datalen);
+               /* Answer section */
+
+               if (q->type == T_CNAME || q->type == T_A) {
+                       /* data is expected to be like "Hblabla.host.name.com\0" */
+
+                       char *startp;
+                       int namelen;
+
+                       CHECKLEN(10);
+                       putshort(&p, name);     
+                       if (q->type == T_A)
+                               /* answer CNAME to A question */
+                               putshort(&p, T_CNAME);
+                       else
+                               putshort(&p, q->type);
+                       putshort(&p, C_IN);
+                       putlong(&p, 0);         /* TTL */
+
+                       startp = p;
+                       p += 2;                 /* skip 2 bytes length */
+                       putname(&p, buflen - (p - buf), data);
+                       CHECKLEN(0);
+                       namelen = p - startp;
+                       namelen -= 2;
+                       putshort(&startp, namelen);
+                       ancnt = 1;
+               } else if (q->type == T_MX || q->type == T_SRV) {
+                       /* Data is expected to be like
+                          "Hblabla.host.name.com\0Hanother.com\0\0"
+                          For SRV, see RFC2782.
+                        */
+
+                       char *mxdata = data;
+                       char *startp;
+                       int namelen;
+
+                       ancnt = 1;
+                       while (1) {
+                               CHECKLEN(10);
+                               putshort(&p, name);     
+                               putshort(&p, q->type);
+                               putshort(&p, C_IN);
+                               putlong(&p, 0);         /* TTL */
+
+                               startp = p;
+                               p += 2;                 /* skip 2 bytes length */
+                               CHECKLEN(2);
+                               putshort(&p, 10 * ancnt);       /* preference */
+
+                               if (q->type == T_SRV) {
+                                       /* weight, port (5060 = SIP) */
+                                       CHECKLEN(4);
+                                       putshort(&p, 10);
+                                       putshort(&p, 5060);
+                               }
+
+                               putname(&p, buflen - (p - buf), mxdata);
+                               CHECKLEN(0);
+                               namelen = p - startp;
+                               namelen -= 2;
+                               putshort(&startp, namelen);
+
+                               mxdata = mxdata + strlen(mxdata) + 1;
+                               if (*mxdata == '\0')
+                                       break;
+
+                               ancnt++;
+                       }
+               } else if (q->type == T_TXT) {
+                       /* TXT has binary or base-X data */
+                       char *startp;
+                       int txtlen;
+
+                       CHECKLEN(10);
+                       putshort(&p, name);     
+                       putshort(&p, q->type);
+                       putshort(&p, C_IN);
+                       putlong(&p, 0);         /* TTL */
+
+                       startp = p;
+                       p += 2;                 /* skip 2 bytes length */
+                       puttxtbin(&p, buflen - (p - buf), data, datalen);
+                       CHECKLEN(0);
+                       txtlen = p - startp;
+                       txtlen -= 2;
+                       putshort(&startp, txtlen);
+                       ancnt = 1;
+               } else {
+                       /* NULL has raw binary data */
+
+                       CHECKLEN(10);
+                       putshort(&p, name);     
+                       putshort(&p, q->type);
+                       putshort(&p, C_IN);
+                       putlong(&p, 0);         /* TTL */
+
+                       datalen = MIN(datalen, buflen - (p - buf));
+                       CHECKLEN(2);
+                       putshort(&p, datalen);
+                       CHECKLEN(datalen);
+                       putdata(&p, data, datalen);
+                       CHECKLEN(0);
+                       ancnt = 1;
+               }
+               header->ancount = htons(ancnt);
                break;
        case QR_QUERY:
+               /* Note that iodined also uses this for forward queries */
+
                header->qdcount = htons(1);
-               header->arcount = htons(1);
        
+               datalen = MIN(datalen, buflen - (p - buf));
                putname(&p, datalen, data);
 
+               CHECKLEN(4);
                putshort(&p, q->type);
                putshort(&p, C_IN);
 
-               /* EDNS0 */
+               /* EDNS0 to advertise maximum response length
+                  (even CNAME/A/MX, 255+255+header would be >512) */
+               if (dnsc_use_edns0) {
+                       header->arcount = htons(1);
+                       /*XXX START adjust indent 1 tab forward*/
+               CHECKLEN(11);
                putbyte(&p, 0x00);    /* Root */
                putshort(&p, 0x0029); /* OPT */
                putshort(&p, 0x1000); /* Payload size: 4096 */
                putshort(&p, 0x0000); /* Higher bits/edns version */
                putshort(&p, 0x8000); /* Z */
                putshort(&p, 0x0000); /* Data length */
+                       /*XXX END adjust indent 1 tab forward*/
+               }
+
                break;
        }
        
@@ -106,16 +225,21 @@ dns_encode(char *buf, size_t buflen, struct query *q, qr_t qr, char *data, size_
 
 int
 dns_encode_ns_response(char *buf, size_t buflen, struct query *q, char *topdomain)
+/* Only used when iodined gets an NS type query */
+/* Mostly same as dns_encode_a_response() below */
 {
        HEADER *header;
        int len;
        short name;
        short topname;
        short nsname;
-       char *domain;
+       char *ipp;
        int domain_len;
        char *p;
 
+       if (buflen < sizeof(HEADER))
+               return 0;
+
        memset(buf, 0, buflen);
        
        header = (HEADER*)buf;
@@ -137,52 +261,122 @@ dns_encode_ns_response(char *buf, size_t buflen, struct query *q, char *topdomai
        /* pointer to start of name */
        name = 0xc000 | ((p - buf) & 0x3fff);
 
-       domain = strstr(q->name, topdomain);
-       if (domain) {
-               domain_len = (int) (domain - q->name); 
-       } else {
+       domain_len = strlen(q->name) - strlen(topdomain);
+       if (domain_len < 0 || domain_len == 1)
                return -1;
-       }
-       /* pointer to start of topdomain */
+       if (strcasecmp(q->name + domain_len, topdomain))
+               return -1;
+       if (domain_len >= 1 && q->name[domain_len - 1] != '.')
+               return -1;
+
+       /* pointer to start of topdomain; instead of dots at the end
+          we have length-bytes in front, so total length is the same */
        topname = 0xc000 | ((p - buf + domain_len) & 0x3fff);
 
        /* Query section */
-       putname(&p, sizeof(q->name), q->name);  /* Name */
+       putname(&p, buflen - (p - buf), q->name);       /* Name */
+       CHECKLEN(4);
        putshort(&p, q->type);                  /* Type */
        putshort(&p, C_IN);                     /* Class */
 
        /* Answer section */
+       CHECKLEN(12);
        putshort(&p, name);                     /* Name */
        putshort(&p, q->type);                  /* Type */
        putshort(&p, C_IN);                     /* Class */
-       putlong(&p, 0x3ea7d011);                /* TTL */
+       putlong(&p, 3600);                      /* TTL */
        putshort(&p, 5);                        /* Data length */
 
        /* pointer to ns.topdomain */
        nsname = 0xc000 | ((p - buf) & 0x3fff);
+       CHECKLEN(5);
        putbyte(&p, 2);
        putbyte(&p, 'n');
        putbyte(&p, 's');
        putshort(&p, topname);                  /* Name Server */
 
        /* Additional data (A-record of NS server) */
+       CHECKLEN(12);
        putshort(&p, nsname);                   /* Name Server */
        putshort(&p, T_A);                      /* Type */
        putshort(&p, C_IN);                     /* Class */
-       putlong(&p, 0x3ea7d011);                /* TTL */
+       putlong(&p, 3600);                      /* TTL */
        putshort(&p, 4);                        /* Data length */
 
        /* ugly hack to output IP address */
-       domain = (char *) &q->destination;
-       putbyte(&p, *domain++);
-       putbyte(&p, *domain++);
-       putbyte(&p, *domain++);
-       putbyte(&p, *domain);
+       ipp = (char *) &q->destination;
+       CHECKLEN(4);
+       putbyte(&p, *(ipp++));
+       putbyte(&p, *(ipp++));
+       putbyte(&p, *(ipp++));
+       putbyte(&p, *ipp);
 
        len = p - buf;
        return len;
 }
 
+int
+dns_encode_a_response(char *buf, size_t buflen, struct query *q)
+/* Only used when iodined gets an A type query for ns.topdomain or www.topdomain */
+/* Mostly same as dns_encode_ns_response() above */
+{
+       HEADER *header;
+       int len;
+       short name;
+       char *ipp;
+       char *p;
+
+       if (buflen < sizeof(HEADER))
+               return 0;
+
+       memset(buf, 0, buflen);
+       
+       header = (HEADER*)buf;
+       
+       header->id = htons(q->id);
+       header->qr = 1;
+       header->opcode = 0;
+       header->aa = 1;
+       header->tc = 0;
+       header->rd = 0;
+       header->ra = 0;
+
+       p = buf + sizeof(HEADER);
+
+       header->qdcount = htons(1);
+       header->ancount = htons(1);
+
+       /* pointer to start of name */
+       name = 0xc000 | ((p - buf) & 0x3fff);
+
+       /* Query section */
+       putname(&p, buflen - (p - buf), q->name);       /* Name */
+       CHECKLEN(4);
+       putshort(&p, q->type);                  /* Type */
+       putshort(&p, C_IN);                     /* Class */
+
+       /* Answer section */
+       CHECKLEN(12);
+       putshort(&p, name);                     /* Name */
+       putshort(&p, q->type);                  /* Type */
+       putshort(&p, C_IN);                     /* Class */
+       putlong(&p, 3600);                      /* TTL */
+       putshort(&p, 4);                        /* Data length */
+
+       /* ugly hack to output IP address */
+       ipp = (char *) &q->destination;
+       CHECKLEN(4);
+       putbyte(&p, *(ipp++));
+       putbyte(&p, *(ipp++));
+       putbyte(&p, *(ipp++));
+       putbyte(&p, *ipp);
+
+       len = p - buf;
+       return len;
+}
+
+#undef CHECKLEN
+
 unsigned short
 dns_get_id(char *packet, size_t packetlen)
 {
@@ -195,6 +389,8 @@ dns_get_id(char *packet, size_t packetlen)
        return ntohs(header->id);
 }
 
+#define CHECKLEN(x) if (packetlen - (data-packet) < (x))  return 0
+
 int
 dns_decode(char *buf, size_t buflen, struct query *q, qr_t qr, char *packet, size_t packetlen)
 {
@@ -211,6 +407,7 @@ dns_decode(char *buf, size_t buflen, struct query *q, qr_t qr, char *packet, siz
        int id; 
        int rv;
 
+       q->id2 = 0;
        rv = 0;
        header = (HEADER*)packet;
 
@@ -232,65 +429,173 @@ dns_decode(char *buf, size_t buflen, struct query *q, qr_t qr, char *packet, siz
                
        rlen = 0;
 
+       if (q != NULL) 
+               q->rcode = header->rcode;
+
        switch (qr) {
        case QR_ANSWER:
-               if(qdcount != 1 || ancount != 1) {
-                       switch (header->rcode) {
-                       case REFUSED:
-                               warnx("Got REFUSED as reply");
-                               break;
-
-                       case NOTIMP:
-                               warnx("Got NOTIMP as reply");
-                               break;
-
-                       case NXDOMAIN:
-                               warnx("Got NXDOMAIN as reply");
-                               break;
-
-                       case SERVFAIL:
-                               warnx("Got SERVFAIL as reply");
-                               break;
-
-                       case NOERROR:
-                       default:
-                               warnx("no query or answer in reply packet");
-                               break;
-                       }
+               if(qdcount < 1) {
+                       /* We need a question */
                        return -1;
                }
 
                if (q != NULL) 
                        q->id = id;
 
+               /* Read name even if no answer, to give better error message */
                readname(packet, packetlen, &data, name, sizeof(name));
+               CHECKLEN(4);
                readshort(packet, &data, &type);
                readshort(packet, &data, &class);
                
-               readname(packet, packetlen, &data, name, sizeof(name));
-               readshort(packet, &data, &type);
-               readshort(packet, &data, &class);
-               readlong(packet, &data, &ttl);
-               readshort(packet, &data, &rlen);
-               rv = MIN(rlen, sizeof(rdata));
-               rv = readdata(packet, &data, rdata, rv);
-
-               if(type == T_NULL && rv >= 2 && buf) {
-                       rv = MIN(rv, buflen);
-                       memcpy(buf, rdata, rv);
+               /* if CHECKLEN okay, then we're sure to have a proper name */
+               if (q != NULL) {
+                       /* We only need the first char to check it */
+                       q->name[0] = name[0];
+                       q->name[1] = '\0';
+               } 
+               
+               if (ancount < 1) {
+                       /* DNS errors like NXDOMAIN have ancount=0 and
+                          stop here. CNAME may also have A; MX/SRV may have
+                          multiple results. */
+                       return -1;
+               }
+
+               /* Here type is still the question type */
+               if (type == T_NULL) {
+                       /* Assume that first answer is what we wanted */
+                       readname(packet, packetlen, &data, name, sizeof(name));
+                       CHECKLEN(10);
+                       readshort(packet, &data, &type);
+                       readshort(packet, &data, &class);
+                       readlong(packet, &data, &ttl);
+                       readshort(packet, &data, &rlen);
+
+                       rv = MIN(rlen, sizeof(rdata));
+                       rv = readdata(packet, &data, rdata, rv);
+                       if (rv >= 2 && buf) {
+                               rv = MIN(rv, buflen);
+                               memcpy(buf, rdata, rv);
+                       } else {
+                               rv = 0;
+                       }
                }
+               else if ((type == T_A || type == T_CNAME) && buf) {
+                       /* Assume that first answer is what we wanted */
+                       readname(packet, packetlen, &data, name, sizeof(name));
+                       CHECKLEN(10);
+                       readshort(packet, &data, &type);
+                       readshort(packet, &data, &class);
+                       readlong(packet, &data, &ttl);
+                       readshort(packet, &data, &rlen);
+
+                       memset(name, 0, sizeof(name));
+                       readname(packet, packetlen, &data, name, sizeof(name) - 1);
+                       name[sizeof(name)-1] = '\0';
+                       strncpy(buf, name, buflen);
+                       buf[buflen - 1] = '\0';
+                       rv = strlen(buf);
+               }
+               else if ((type == T_MX || type == T_SRV) && buf) {
+                       /* We support 250 records, 250*(255+header) ~= 64kB.
+                          Only exact 10-multiples are accepted, and gaps in
+                          numbering are not jumped over (->truncated).
+                          Hopefully DNS servers won't mess around too much.
+                        */
+                       char names[250][QUERY_NAME_SIZE];
+                       char *rdatastart;
+                       short pref;
+                       int i;
+                       int offset;
+
+                       memset(names, 0, sizeof(names));
+
+                       for (i=0; i < ancount; i++) {
+                               readname(packet, packetlen, &data, name, sizeof(name));
+                               CHECKLEN(12);
+                               readshort(packet, &data, &type);
+                               readshort(packet, &data, &class);
+                               readlong(packet, &data, &ttl);
+                               readshort(packet, &data, &rlen);
+                               rdatastart = data;
+                               readshort(packet, &data, &pref);
+
+                               if (type == T_SRV) {
+                                       /* skip weight, port */
+                                       data += 4;
+                                       CHECKLEN(0);
+                               }
+
+                               if (pref % 10 == 0 && pref >= 10 &&
+                                   pref < 2500) {
+                                       readname(packet, packetlen, &data,
+                                                names[pref / 10 - 1],
+                                                QUERY_NAME_SIZE - 1);
+                                       names[pref / 10 - 1][QUERY_NAME_SIZE-1] = '\0';
+                               }
+
+                               /* always trust rlen, not name encoding */ 
+                               data = rdatastart + rlen;
+                               CHECKLEN(0);
+                       }
+
+                       /* output is like Hname10.com\0Hname20.com\0\0 */
+                       offset = 0;
+                       i = 0;
+                       while (names[i][0] != '\0') {
+                               int l = MIN(strlen(names[i]), buflen-offset-2);
+                               if (l <= 0)
+                                       break;
+                               memcpy(buf + offset, names[i], l);
+                               offset += l;
+                               *(buf + offset) = '\0';
+                               offset++;
+                               i++;
+                       }
+                       *(buf + offset) = '\0';
+                       rv = offset;
+               }
+               else if (type == T_TXT && buf) {
+                       /* Assume that first answer is what we wanted */
+                       readname(packet, packetlen, &data, name, sizeof(name));
+                       CHECKLEN(10);
+                       readshort(packet, &data, &type);
+                       readshort(packet, &data, &class);
+                       readlong(packet, &data, &ttl);
+                       readshort(packet, &data, &rlen);
+
+                       rv = readtxtbin(packet, &data, rlen, rdata, sizeof(rdata));
+                       if (rv >= 1) {
+                               rv = MIN(rv, buflen);
+                               memcpy(buf, rdata, rv);
+                       } else {
+                               rv = 0;
+                       }
+               }
+
+               /* Here type is the answer type (note A->CNAME) */
+               if (q != NULL)
+                       q->type = type;
                break;
        case QR_QUERY:
-               if (qdcount != 1) {
+               if (qdcount < 1) {
                        warnx("no question section in name query");
                        return -1;
                }
 
+               memset(name, 0, sizeof(name));
                readname(packet, packetlen, &data, name, sizeof(name) - 1);
                name[sizeof(name)-1] = '\0';
+               CHECKLEN(4);
                readshort(packet, &data, &type);
                readshort(packet, &data, &class);
 
+               if (q == NULL) {
+                       rv = 0;
+                       break;
+               }
+
                strncpy(q->name, name, sizeof(q->name));
                q->name[sizeof(q->name) - 1] = '\0';
                q->type = type;
index b5c4cc57f92e1f5536627aeee8308aeaf8cc7c5f..72d4fe91b245bf6a4b5c80730ebf5e308af1f4ce 100644 (file)
--- a/src/dns.h
+++ b/src/dns.h
@@ -24,8 +24,11 @@ typedef enum {
        QR_ANSWER = 1
 } qr_t;
 
+extern int dnsc_use_edns0;
+
 int dns_encode(char *, size_t, struct query *, qr_t, char *, size_t);
 int dns_encode_ns_response(char *buf, size_t buflen, struct query *q, char *topdomain);
+int dns_encode_a_response(char *buf, size_t buflen, struct query *q);
 unsigned short dns_get_id(char *packet, size_t packetlen);
 int dns_decode(char *, size_t, struct query *, qr_t, char *, size_t);
 
index 6878e5effd95fec9a91394118febecd1e3b2677d..896d67d8721cb05ce96a92a84565043c907924f5 100644 (file)
  */
 
 #include <string.h>
+#include "common.h"
 #include "encoding.h"
 
+int
+build_hostname(char *buf, size_t buflen, 
+               const char *data, const size_t datalen, 
+               const char *topdomain, struct encoder *encoder, int maxlen)
+{
+       int encsize;
+       size_t space;
+       char *b;
+
+       space = MIN(maxlen, buflen) - strlen(topdomain) - 8;
+       /* 8 = 5 max header length + 1 dot before topdomain + 2 safety */
+
+       if (!encoder->places_dots())
+               space -= (space / 57); /* space for dots */
+
+       memset(buf, 0, buflen);
+       
+       encsize = encoder->encode(buf, &space, data, datalen);
+
+       if (!encoder->places_dots())
+               inline_dotify(buf, buflen);
+
+       b = buf;
+       b += strlen(buf);
+
+       /* move b back one step to see if the dot is there */
+       b--;
+       if (*b != '.') 
+               *++b = '.';
+       b++;
+       /* move b ahead of the string so we can copy to it */
+
+       strncpy(b, topdomain, strlen(topdomain)+1);
+
+       return space;
+}
 
 int
 unpack_data(char *buf, size_t buflen, char *data, size_t datalen, struct encoder *enc)
index dda2c134f0cc41d1088bab234e543ab608efc1fb..7ddf6e04b140524271464fd1433a69b7054f7e18 100644 (file)
 #ifndef _ENCODING_H_
 #define _ENCODING_H_
 
+/* All-0, all-1, 01010101, 10101010: each 4 times to make sure the pattern
+   spreads across multiple encoded chars -> 16 bytes total.
+   Followed by 32 bytes from my /dev/random; should be enough.
+ */
+#define DOWNCODECCHECK1      "\000\000\000\000\377\377\377\377\125\125\125\125\252\252\252\252\201\143\310\322\307\174\262\027\137\117\316\311\111\055\122\041\141\251\161\040\045\263\006\163\346\330\104\060\171\120\127\277"
+#define DOWNCODECCHECK1_LEN  48
+
 struct encoder {
        char name[8];
        int (*encode) (char *, size_t *, const void *, size_t);
@@ -27,6 +34,7 @@ struct encoder {
        int (*blocksize_encoded)(void);
 };
 
+int build_hostname(char *, size_t, const char *, const size_t, const char *, struct encoder *, int);
 int unpack_data(char *, size_t, char *, size_t, struct encoder *);
 int inline_dotify(char *, size_t);
 int inline_undotify(char *, size_t);
index 8c2bc9338ff704847ea578ff0462c5c3100b28ef..03efb18856b9ed5b7209a8b629e250e441d38296 100644 (file)
 #include <sys/param.h>
 #include <sys/time.h>
 #include <fcntl.h>
-#include <zlib.h>
+#include <time.h>
 
 #ifdef WINDOWS32
 #include "windows.h"
 #include <winsock2.h>
 #else
-#include <arpa/nameser.h>
-#ifdef DARWIN
-#include <arpa/nameser8_compat.h>
-#endif
-#include <sys/socket.h>
-#include <err.h>
-#include <arpa/inet.h>
-#include <netinet/in.h>
 #include <grp.h>
 #include <pwd.h>
-#include <netdb.h>
 #endif
 
 #include "common.h"
-#include "encoding.h"
-#include "base32.h"
-#include "base64.h"
-#include "dns.h"
-#include "login.h"
 #include "tun.h"
-#include "version.h"
+#include "client.h"
+#include "util.h"
 
 #ifdef WINDOWS32
 WORD req_version = MAKEWORD(2, 2);
 WSADATA wsa_data;
 #endif
 
-static void send_ping(int fd);
-static void send_chunk(int fd);
-static int build_hostname(char *buf, size_t buflen, 
-       const char *data, const size_t datalen, 
-       const char *topdomain, struct encoder *encoder);
-
-static int running = 1;
-static char password[33];
-
-static struct sockaddr_in nameserv;
-static char *topdomain;
-
-static uint16_t rand_seed;
-static int downstream_seqno;
-static int downstream_fragment;
-static int down_ack_seqno;
-static int down_ack_fragment;
-
-/* Current up/downstream IP packet */
-static struct packet outpkt;
-static struct packet inpkt;
-
-/* My userid at the server */
-static char userid;
-
-/* DNS id for next packet */
-static uint16_t chunkid;
-
-/* Base32 encoder used for non-data packets */
-static struct encoder *b32;
-
-/* The encoder used for data packets
- * Defaults to Base32, can be changed after handshake */
-static struct encoder *dataenc;
-
-/* result of case preservation check done after login */
-static int case_preserved;
-
 #if !defined(BSD) && !defined(__GLIBC__)
 static char *__progname;
 #endif
 
-static void
-sighandler(int sig) 
-{
-       running = 0;
-}
-
-static void
-send_query(int fd, char *hostname)
-{
-       char packet[4096];
-       struct query q;
-       size_t len;
-
-       q.id = ++chunkid;
-       q.type = T_NULL;
-
-       len = dns_encode(packet, sizeof(packet), &q, QR_QUERY, hostname, strlen(hostname));
-
-       sendto(fd, packet, len, 0, (struct sockaddr*)&nameserv, sizeof(nameserv));
-}
-
-static void
-send_packet(int fd, char cmd, const char *data, const size_t datalen)
-{
-       char buf[4096];
-
-       buf[0] = cmd;
-       
-       build_hostname(buf + 1, sizeof(buf) - 1, data, datalen, topdomain, b32);
-       send_query(fd, buf);
-}
-
-static int
-build_hostname(char *buf, size_t buflen, 
-               const char *data, const size_t datalen, 
-               const char *topdomain, struct encoder *encoder)
-{
-       int encsize;
-       size_t space;
-       char *b;
-
-       space = MIN(0xFF, buflen) - strlen(topdomain) - 7;
-       if (!encoder->places_dots())
-               space -= (space / 57); /* space for dots */
-
-       memset(buf, 0, buflen);
-       
-       encsize = encoder->encode(buf, &space, data, datalen);
-
-       if (!encoder->places_dots())
-               inline_dotify(buf, buflen);
-
-       b = buf;
-       b += strlen(buf);
-
-       if (*b != '.') 
-               *b++ = '.';
-
-       strncpy(b, topdomain, strlen(topdomain)+1);
-
-       return space;
-}
-
-static int
-is_sending()
-{
-       return (outpkt.len != 0);
-}
-
-static int
-read_dns(int fd, char *buf, int buflen)
-{
-       struct sockaddr_in from;
-       char data[64*1024];
-       socklen_t addrlen;
-       struct query q;
-       int rv;
-       int r;
-
-       addrlen = sizeof(struct sockaddr);
-       if ((r = recvfrom(fd, data, sizeof(data), 0, 
-                         (struct sockaddr*)&from, &addrlen)) == -1) {
-               warn("recvfrom");
-               return 0;
-       }
-
-       rv = dns_decode(buf, buflen, &q, QR_ANSWER, data, r);
-
-       /* decode the data header, update seqno and frag before next request */
-       if (rv >= 2) {
-               downstream_seqno = (buf[1] >> 5) & 7;
-               downstream_fragment = (buf[1] >> 1) & 15;
-       }
-
-
-       if (is_sending()) {
-               if (chunkid == q.id) {
-                       /* Got ACK on sent packet */
-                       outpkt.offset += outpkt.sentlen;
-                       if (outpkt.offset == outpkt.len) {
-                               /* Packet completed */
-                               outpkt.offset = 0;
-                               outpkt.len = 0;
-                               outpkt.sentlen = 0;
-
-                               /* If the ack contains unacked frag number but no data, 
-                                * send a ping to ack the frag number and get more data*/
-                               if (rv == 2 && (
-                                       downstream_seqno != down_ack_seqno ||
-                                       downstream_fragment != down_ack_fragment
-                                       )) {
-                                       
-                                       send_ping(fd);
-                               }
-                       } else {
-                               /* More to send */
-                               send_chunk(fd);
-                       }
-
-               }
-       }
-       return rv;
-}
-
-
-static int
-tunnel_tun(int tun_fd, int dns_fd)
-{
-       unsigned long outlen;
-       unsigned long inlen;
-       char out[64*1024];
-       char in[64*1024];
-       ssize_t read;
-
-       if ((read = read_tun(tun_fd, in, sizeof(in))) <= 0)
-               return -1;
-
-       outlen = sizeof(out);
-       inlen = read;
-       compress2((uint8_t*)out, &outlen, (uint8_t*)in, inlen, 9);
-
-       memcpy(outpkt.data, out, MIN(outlen, sizeof(outpkt.data)));
-       outpkt.sentlen = 0;
-       outpkt.offset = 0;
-       outpkt.len = outlen;
-       outpkt.seqno++;
-       outpkt.fragment = 0;
-
-       send_chunk(dns_fd);
-
-       return read;
-}
-
-static int
-tunnel_dns(int tun_fd, int dns_fd)
-{
-       unsigned long datalen;
-       char buf[64*1024];
-       size_t read;
-
-       if ((read = read_dns(dns_fd, buf, sizeof(buf))) <= 2) 
-               return -1;
-
-       if (downstream_seqno != inpkt.seqno) {
-               /* New packet */
-               inpkt.seqno = downstream_seqno;
-               inpkt.fragment = downstream_fragment;
-               inpkt.len = 0;
-       } else if (downstream_fragment <= inpkt.fragment) {
-               /* Duplicate fragment */
-               return -1;
-       }
-       inpkt.fragment = downstream_fragment;
-
-       datalen = MIN(read - 2, sizeof(inpkt.data) - inpkt.len);
-
-       /* Skip 2 byte data header and append to packet */
-       memcpy(&inpkt.data[inpkt.len], &buf[2], datalen);
-       inpkt.len += datalen;
-
-       if (buf[1] & 1) { /* If last fragment flag is set */
-               /* Uncompress packet and send to tun */
-               datalen = sizeof(buf);
-               if (uncompress((uint8_t*)buf, &datalen, (uint8_t*) inpkt.data, inpkt.len) == Z_OK) {
-                       write_tun(tun_fd, buf, datalen);
-               }
-               inpkt.len = 0;
-       }
-
-       /* If we have nothing to send, send a ping to get more data */
-       if (!is_sending()) 
-               send_ping(dns_fd);
-       
-       return read;
-}
-
-static int
-tunnel(int tun_fd, int dns_fd)
-{
-       struct timeval tv;
-       fd_set fds;
-       int rv;
-       int i;
-
-       rv = 0;
-
-       while (running) {
-               tv.tv_sec = 1;
-               tv.tv_usec = 0;
-
-
-               FD_ZERO(&fds);
-               if (!is_sending()) {
-                       FD_SET(tun_fd, &fds);
-               }
-               FD_SET(dns_fd, &fds);
-
-               i = select(MAX(tun_fd, dns_fd) + 1, &fds, NULL, NULL, &tv);
-               
-               if (running == 0)
-                       break;
-
-               if (i < 0) 
-                       err(1, "select");
-
-               if (i == 0) /* timeout */
-                       send_ping(dns_fd);
-               else {
-                       if (FD_ISSET(tun_fd, &fds)) {
-                               if (tunnel_tun(tun_fd, dns_fd) <= 0)
-                                       continue;
-                       }
-                       if (FD_ISSET(dns_fd, &fds)) {
-                               if (tunnel_dns(tun_fd, dns_fd) <= 0)
-                                       continue;
-                       } 
-               }
-       }
-
-       return rv;
-}
-
-static void
-send_chunk(int fd)
-{
-       char hex[] = "0123456789ABCDEF";
-       char buf[4096];
-       int avail;
-       int code;
-       char *p;
-
-       p = outpkt.data;
-       p += outpkt.offset;
-       avail = outpkt.len - outpkt.offset;
-
-       outpkt.sentlen = build_hostname(buf + 4, sizeof(buf) - 4, p, avail, topdomain, dataenc);
-
-       /* Build upstream data header (see doc/proto_xxxxxxxx.txt) */
-
-       buf[0] = hex[userid & 15]; /* First byte is 4 bits userid */
-
-       code = ((outpkt.seqno & 7) << 2) | ((outpkt.fragment & 15) >> 2);
-       buf[1] = b32_5to8(code); /* Second byte is 3 bits seqno, 2 upper bits fragment count */
-
-       code = ((outpkt.fragment & 3) << 3) | (downstream_seqno & 7);
-       buf[2] = b32_5to8(code); /* Third byte is 2 bits lower fragment count, 3 bits downstream packet seqno */
-
-       code = ((downstream_fragment & 15) << 1) | (outpkt.sentlen == avail);
-       buf[3] = b32_5to8(code); /* Fourth byte is 4 bits downstream fragment count, 1 bit last frag flag */
-
-       down_ack_seqno = downstream_seqno;
-       down_ack_fragment = downstream_fragment;
-
-       outpkt.fragment++;
-       send_query(fd, buf);
-}
-
-static void
-send_login(int fd, char *login, int len)
-{
-       char data[19];
-
-       memset(data, 0, sizeof(data));
-       data[0] = userid;
-       memcpy(&data[1], login, MIN(len, 16));
-
-       data[17] = (rand_seed >> 8) & 0xff;
-       data[18] = (rand_seed >> 0) & 0xff;
-       
-       rand_seed++;
-
-       send_packet(fd, 'L', data, sizeof(data));
-}
-
-static void
-send_ping(int fd)
-{
-       char data[4];
-       
-       if (is_sending()) {
-               outpkt.sentlen = 0;
-               outpkt.offset = 0;
-               outpkt.len = 0;
-       }
-
-       data[0] = userid;
-       data[1] = ((downstream_seqno & 7) << 4) | (downstream_fragment & 15);
-       data[2] = (rand_seed >> 8) & 0xff;
-       data[3] = (rand_seed >> 0) & 0xff;
-       
-       down_ack_seqno = downstream_seqno;
-       down_ack_fragment = downstream_fragment;
-       
-       rand_seed++;
-
-       send_packet(fd, 'P', data, sizeof(data));
-}
-
-static void
-send_fragsize_probe(int fd, int fragsize)
-{
-       char probedata[256];
-       char buf[4096];
-
-       /* build a large query domain which is random and maximum size */
-       memset(probedata, MIN(1, rand_seed & 0xff), sizeof(probedata));
-       probedata[1] = MIN(1, (rand_seed >> 8) & 0xff);
-       rand_seed++;
-       build_hostname(buf + 4, sizeof(buf) - 4, probedata, sizeof(probedata), topdomain, dataenc);
-
-       fragsize &= 2047;
-
-       buf[0] = 'r'; /* Probe downstream fragsize packet */
-       buf[1] = b32_5to8((userid << 1) | ((fragsize >> 10) & 1));
-       buf[2] = b32_5to8((fragsize >> 5) & 31);
-       buf[3] = b32_5to8(fragsize & 31);
-
-       send_query(fd, buf);
-}
-
-static void
-send_set_downstream_fragsize(int fd, int fragsize)
-{
-       char data[5];
-       
-       data[0] = userid;
-       data[1] = (fragsize & 0xff00) >> 8;
-       data[2] = (fragsize & 0x00ff);
-       data[3] = (rand_seed >> 8) & 0xff;
-       data[4] = (rand_seed >> 0) & 0xff;
-       
-       rand_seed++;
-
-       send_packet(fd, 'N', data, sizeof(data));
-}
-
-static void 
-send_version(int fd, uint32_t version)
-{
-       char data[6];
-
-       data[0] = (version >> 24) & 0xff;
-       data[1] = (version >> 16) & 0xff;
-       data[2] = (version >> 8) & 0xff;
-       data[3] = (version >> 0) & 0xff;
-
-       data[4] = (rand_seed >> 8) & 0xff;
-       data[5] = (rand_seed >> 0) & 0xff;
-       
-       rand_seed++;
-
-       send_packet(fd, 'V', data, sizeof(data));
-}
-
-static void
-send_case_check(int fd)
-{
-       /* The '+' plus character is not allowed according to RFC. 
-        * Expect to get SERVFAIL or similar if it is rejected.
-        */
-       char buf[512] = "zZ+-aAbBcCdDeEfFgGhHiIjJkKlLmMnNoOpPqQrRsStTuUvVwWxXyY1234.";
-
-       strncat(buf, topdomain, 512 - strlen(buf));
-       send_query(fd, buf);
-}
-
-static void
-send_codec_switch(int fd, int userid, int bits)
-{
-       char buf[512] = "S__.";
-       buf[1] = b32_5to8(userid);
-       buf[2] = b32_5to8(bits);
-       
-       strncat(buf, topdomain, 512 - strlen(buf));
-       send_query(fd, buf);
-}
-       
-static int
-handshake_version(int dns_fd, int *seed)
-{
-       struct timeval tv;
-       char in[4096];
-       fd_set fds;
-       uint32_t payload;
-       int i;
-       int r;
-       int read;
-
-       for (i = 0; running && i < 5; i++) {
-               tv.tv_sec = i + 1;
-               tv.tv_usec = 0;
-
-               send_version(dns_fd, VERSION);
-               
-               FD_ZERO(&fds);
-               FD_SET(dns_fd, &fds);
-
-               r = select(dns_fd + 1, &fds, NULL, NULL, &tv);
-
-               if(r > 0) {
-                       read = read_dns(dns_fd, in, sizeof(in));
-                       
-                       if(read <= 0) {
-                               if (read == 0) {
-                                       warn("handshake read");
-                               }
-                               /* if read < 0 then warning has been printed already */
-                               continue;
-                       }
-
-                       if (read >= 9) {
-                               payload =  (((in[4] & 0xff) << 24) |
-                                               ((in[5] & 0xff) << 16) |
-                                               ((in[6] & 0xff) << 8) |
-                                               ((in[7] & 0xff)));
-
-                               if (strncmp("VACK", in, 4) == 0) {
-                                       *seed = payload;
-                                       userid = in[8];
-
-                                       fprintf(stderr, "Version ok, both using protocol v 0x%08x. You are user #%d\n", VERSION, userid);
-                                       return 0;
-                               } else if (strncmp("VNAK", in, 4) == 0) {
-                                       warnx("You use protocol v 0x%08x, server uses v 0x%08x. Giving up", 
-                                                       VERSION, payload);
-                                       return 1;
-                               } else if (strncmp("VFUL", in, 4) == 0) {
-                                       warnx("Server full, all %d slots are taken. Try again later", payload);
-                                       return 1;
-                               }
-                       } else 
-                               warnx("did not receive proper login challenge");
-               }
-               
-               fprintf(stderr, "Retrying version check...\n");
-       }
-       warnx("couldn't connect to server");
-       return 1;
-}
-
-static int
-handshake_login(int dns_fd, int seed)
-{
-       struct timeval tv;
-       char in[4096];
-       char login[16];
-       char server[65];
-       char client[65];
-       int mtu;
-       fd_set fds;
-       int i;
-       int r;
-       int read;
-
-       login_calculate(login, 16, password, seed);
-       
-       for (i=0; running && i<5 ;i++) {
-               tv.tv_sec = i + 1;
-               tv.tv_usec = 0;
-
-               send_login(dns_fd, login, 16);
-               
-               FD_ZERO(&fds);
-               FD_SET(dns_fd, &fds);
-
-               r = select(dns_fd + 1, &fds, NULL, NULL, &tv);
-
-               if(r > 0) {
-                       read = read_dns(dns_fd, in, sizeof(in));
-                       
-                       if(read <= 0) {
-                               warn("read");
-                               continue;
-                       }
-
-                       if (read > 0) {
-                               int netmask;
-                               if (strncmp("LNAK", in, 4) == 0) {
-                                       fprintf(stderr, "Bad password\n");
-                                       return 1;
-                               } else if (sscanf(in, "%64[^-]-%64[^-]-%d-%d", 
-                                       server, client, &mtu, &netmask) == 4) {
-                                       
-                                       server[64] = 0;
-                                       client[64] = 0;
-                                       if (tun_setip(client, netmask) == 0 && 
-                                               tun_setmtu(mtu) == 0) {
-                                               return 0;
-                                       } else {
-                                               warnx("Received handshake with bad data");
-                                       }
-                               } else {
-                                       fprintf(stderr, "Received bad handshake\n");
-                               }
-                       }
-               }
-
-               fprintf(stderr, "Retrying login...\n");
-       }
-       warnx("couldn't login to server");
-       return 1;
-}
-
-static void
-handshake_case_check(int dns_fd)
-{
-       struct timeval tv;
-       char in[4096];
-       fd_set fds;
-       int i;
-       int r;
-       int read;
-
-       case_preserved = 0;
-       for (i=0; running && i<5 ;i++) {
-               tv.tv_sec = i + 1;
-               tv.tv_usec = 0;
-
-               send_case_check(dns_fd);
-               
-               FD_ZERO(&fds);
-               FD_SET(dns_fd, &fds);
-
-               r = select(dns_fd + 1, &fds, NULL, NULL, &tv);
-
-               if(r > 0) {
-                       read = read_dns(dns_fd, in, sizeof(in));
-                       
-                       if (read > 0) {
-                               if (in[0] == 'z' || in[0] == 'Z') {
-                                       if (read < (27 * 2)) {
-                                               fprintf(stderr, "Received short case check reply. Will use base32 encoder\n");
-                                               return;
-                                       } else {
-                                               int k;
-
-                                               /* TODO enhance this, base128 is probably also possible */
-                                               case_preserved = 1;
-                                               for (k = 0; k < 27 && case_preserved; k += 2) {
-                                                       if (in[k] == in[k+1]) {
-                                                               /* test string: zZ+-aAbBcCdDeE... */
-                                                               case_preserved = 0;
-                                                       }
-                                               }
-                                               return;
-                                       }
-                               } else {
-                                       fprintf(stderr, "Received bad case check reply\n");
-                               }
-                       } else {
-                               fprintf(stderr, "Got error on case check, will use base32\n");
-                               return;
-                       }
-               }
-
-               fprintf(stderr, "Retrying case check...\n");
-       }
-
-       fprintf(stderr, "No reply on case check, continuing\n");
-}
-
-static void
-handshake_switch_codec(int dns_fd)
-{
-       struct timeval tv;
-       char in[4096];
-       fd_set fds;
-       int i;
-       int r;
-       int read;
-
-       dataenc = get_base64_encoder();
-       fprintf(stderr, "Switching to %s codec\n", dataenc->name);
-       /* Send to server that this user will use base64 from now on */
-       for (i=0; running && i<5 ;i++) {
-               int bits;
-               tv.tv_sec = i + 1;
-               tv.tv_usec = 0;
-
-               bits = 6; /* base64 = 6 bits per byte */
-
-               send_codec_switch(dns_fd, userid, bits);
-               
-               FD_ZERO(&fds);
-               FD_SET(dns_fd, &fds);
-
-               r = select(dns_fd + 1, &fds, NULL, NULL, &tv);
-
-               if(r > 0) {
-                       read = read_dns(dns_fd, in, sizeof(in));
-                       
-                       if (read > 0) {
-                               if (strncmp("BADLEN", in, 6) == 0) {
-                                       fprintf(stderr, "Server got bad message length. ");
-                                       goto codec_revert;
-                               } else if (strncmp("BADIP", in, 5) == 0) {
-                                       fprintf(stderr, "Server rejected sender IP address. ");
-                                       goto codec_revert;
-                               } else if (strncmp("BADCODEC", in, 8) == 0) {
-                                       fprintf(stderr, "Server rejected the selected codec. ");
-                                       goto codec_revert;
-                               }
-                               in[read] = 0; /* zero terminate */
-                               fprintf(stderr, "Server switched to codec %s\n", in);
-                               return;
-                       }
-               }
-               fprintf(stderr, "Retrying codec switch...\n");
-       }
-       fprintf(stderr, "No reply from server on codec switch. ");
-
-codec_revert: 
-       fprintf(stderr, "Falling back to base32\n");
-       dataenc = get_base32_encoder();
-}
-
-static int
-handshake_autoprobe_fragsize(int dns_fd)
-{
-       struct timeval tv;
-       char in[4096];
-       fd_set fds;
-       int i;
-       int r;
-       int read;
-       int proposed_fragsize = 768;
-       int range = 768;
-       int max_fragsize = 0;
-
-       max_fragsize = 0;
-       fprintf(stderr, "Autoprobing max downstream fragment size... (skip with -m fragsize)\n"); 
-       while (running && range > 0 && (range >= 8 || !max_fragsize)) {
-               for (i=0; running && i<3 ;i++) {
-                       tv.tv_sec = 1;
-                       tv.tv_usec = 0;
-                       send_fragsize_probe(dns_fd, proposed_fragsize);
-
-                       FD_ZERO(&fds);
-                       FD_SET(dns_fd, &fds);
-
-                       r = select(dns_fd + 1, &fds, NULL, NULL, &tv);
-
-                       if(r > 0) {
-                               read = read_dns(dns_fd, in, sizeof(in));
-                               
-                               if (read > 0) {
-                                       /* We got a reply */
-                                       int acked_fragsize = ((in[0] & 0xff) << 8) | (in[1] & 0xff);
-                                       if (acked_fragsize == proposed_fragsize) {
-                                               if (read == proposed_fragsize) {
-                                                       fprintf(stderr, "%d ok.. ", acked_fragsize);
-                                                       fflush(stderr);
-                                                       max_fragsize = acked_fragsize;
-                                               }
-                                       }
-                                       if (strncmp("BADIP", in, 5) == 0) {
-                                               fprintf(stderr, "got BADIP.. ");
-                                               fflush(stderr);
-                                       }
-                                       break;
-                               }
-                       }
-                       fprintf(stderr, ".");
-                       fflush(stderr);
-               }
-               range >>= 1;
-               if (max_fragsize == proposed_fragsize) {
-                       /* Try bigger */
-                       proposed_fragsize += range;
-               } else {
-                       /* Try smaller */
-                       fprintf(stderr, "%d not ok.. ", proposed_fragsize);
-                       fflush(stderr);
-                       proposed_fragsize -= range;
-               }
-       }
-       if (!running) {
-               fprintf(stderr, "\n");
-               warnx("stopped while autodetecting fragment size (Try probing manually with -m)");
-               return 0;
-       }
-       if (range == 0) {
-               /* Tried all the way down to 2 and found no good size */
-               fprintf(stderr, "\n");
-               warnx("found no accepted fragment size. (Try probing manually with -m)");
-               return 0;
-       }
-       fprintf(stderr, "will use %d\n", max_fragsize);
-       return max_fragsize;
-}
+#define PASSWORD_ENV_VAR "IODINE_PASS"
 
 static void
-handshake_set_fragsize(int dns_fd, int fragsize)
-{
-       struct timeval tv;
-       char in[4096];
-       fd_set fds;
-       int i;
-       int r;
-       int read;
-
-       fprintf(stderr, "Setting downstream fragment size to max %d...\n", fragsize);
-       for (i=0; running && i<5 ;i++) {
-               tv.tv_sec = i + 1;
-               tv.tv_usec = 0;
-
-               send_set_downstream_fragsize(dns_fd, fragsize);
-               
-               FD_ZERO(&fds);
-               FD_SET(dns_fd, &fds);
-
-               r = select(dns_fd + 1, &fds, NULL, NULL, &tv);
-
-               if(r > 0) {
-                       read = read_dns(dns_fd, in, sizeof(in));
-                       
-                       if (read > 0) {
-                               int accepted_fragsize;
-
-                               if (strncmp("BADFRAG", in, 7) == 0) {
-                                       fprintf(stderr, "Server rejected fragsize. Keeping default.");
-                                       return;
-                               } else if (strncmp("BADIP", in, 5) == 0) {
-                                       fprintf(stderr, "Server rejected sender IP address.\n");
-                                       return;
-                               }
-
-                               accepted_fragsize = ((in[0] & 0xff) << 8) | (in[1] & 0xff);
-                               return;
-                       }
-               }
-               fprintf(stderr, "Retrying set fragsize...\n");
-       }
-       fprintf(stderr, "No reply from server when setting fragsize. Keeping default.\n");
-}
-
-static int
-handshake(int dns_fd, int autodetect_frag_size, int fragsize)
-{
-       int seed;
-       int r;
-
-       r = handshake_version(dns_fd, &seed);
-       if (r) {
-               return r;
-       }
-
-       r = handshake_login(dns_fd, seed);
-       if (r) {
-               return r;
-       }
-
-       handshake_case_check(dns_fd);
-
-       if (case_preserved) {
-               handshake_switch_codec(dns_fd);
-       }
-
-       if (autodetect_frag_size) {
-               fragsize = handshake_autoprobe_fragsize(dns_fd);
-               if (!fragsize) {
-                       return 1;
-               }
-       }
-
-       handshake_set_fragsize(dns_fd, fragsize);
-
-       return 0;
-}
-
-static char *
-get_resolvconf_addr()
-{
-       static char addr[16];
-       char *rv;
-#ifndef WINDOWS32
-       char buf[80];
-       FILE *fp;
-       
-       rv = NULL;
-
-       if ((fp = fopen("/etc/resolv.conf", "r")) == NULL) 
-               err(1, "/etc/resolve.conf");
-       
-       while (feof(fp) == 0) {
-               fgets(buf, sizeof(buf), fp);
-
-               if (sscanf(buf, "nameserver %15s", addr) == 1) {
-                       rv = addr;
-                       break;
-               }
-       }
-       
-       fclose(fp);
-#else /* !WINDOWS32 */
-       FIXED_INFO  *fixed_info;
-       ULONG       buflen;
-       DWORD       ret;
-
-       rv = NULL;
-       fixed_info = malloc(sizeof(FIXED_INFO));
-       buflen = sizeof(FIXED_INFO);
-
-       if (GetNetworkParams(fixed_info, &buflen) == ERROR_BUFFER_OVERFLOW) {
-               /* official ugly api workaround */
-               free(fixed_info);
-               fixed_info = malloc(buflen);
-       }
-
-       ret = GetNetworkParams(fixed_info, &buflen);
-       if (ret == NO_ERROR) {
-               strncpy(addr, fixed_info->DnsServerList.IpAddress.String, sizeof(addr));
-               addr[15] = 0;
-               rv = addr;
-       }
-       free(fixed_info);
-#endif
-       return rv;
-}
-
-static void
-set_nameserver(const char *cp) 
+sighandler(int sig) 
 {
-       struct in_addr addr;
-
-       if (inet_aton(cp, &addr) != 1)
-               errx(1, "error parsing nameserver address: '%s'", cp);
-
-       memset(&nameserv, 0, sizeof(nameserv));
-       nameserv.sin_family = AF_INET;
-       nameserv.sin_port = htons(53);
-       nameserv.sin_addr = addr;
+       client_stop();
 }
 
 static void
 usage() {
        extern char *__progname;
 
-       fprintf(stderr, "Usage: %s [-v] [-h] [-f] [-u user] [-t chrootdir] [-d device] "
-                       "[-P password] [-m maxfragsize] [nameserver] topdomain\n", __progname);
+       fprintf(stderr, "Usage: %s [-v] [-h] [-f] [-r] [-u user] [-t chrootdir] [-d device] "
+                       "[-P password] [-m maxfragsize] [-M maxlen] [-T type] [-O enc] [-L 0|1] [-I sec] "
+                       "[-z context] [-F pidfile] [nameserver] topdomain\n", __progname);
        exit(2);
 }
 
@@ -967,17 +71,29 @@ help() {
        extern char *__progname;
 
        fprintf(stderr, "iodine IP over DNS tunneling client\n");
-       fprintf(stderr, "Usage: %s [-v] [-h] [-f] [-u user] [-t chrootdir] [-d device] "
-                       "[-P password] [-m maxfragsize] [nameserver] topdomain\n", __progname);
+       fprintf(stderr, "Usage: %s [-v] [-h] [-f] [-r] [-u user] [-t chrootdir] [-d device] "
+                       "[-P password] [-m maxfragsize] [-M maxlen] [-T type] [-O enc] [-L 0|1] [-I sec] "
+                       "[-z context] [-F pidfile] [nameserver] topdomain\n", __progname);
+       fprintf(stderr, "Options to try if connection doesn't work:\n");
+       fprintf(stderr, "  -T force dns type: NULL, TXT, SRV, MX, CNAME, A (default: autodetect)\n");
+       fprintf(stderr, "  -O force downstream encoding for -T other than NULL: Base32, Base64, Base64u,\n");
+       fprintf(stderr, "     Base128, or (only for TXT:) Raw  (default: autodetect)\n");
+       fprintf(stderr, "  -I max interval between requests (default 4 sec) to prevent DNS timeouts\n");
+       fprintf(stderr, "  -L 1: use lazy mode for low-latency (default). 0: don't (implies -I1)\n");
+       fprintf(stderr, "  -m max size of downstream fragments (default: autodetect)\n");
+       fprintf(stderr, "  -M max size of upstream hostnames (~100-255, default: 255)\n");
+       fprintf(stderr, "  -r to skip raw UDP mode attempt\n");
+       fprintf(stderr, "  -P password used for authentication (max 32 chars will be used)\n");
+       fprintf(stderr, "Other options:\n");
        fprintf(stderr, "  -v to print version info and exit\n");
        fprintf(stderr, "  -h to print this help and exit\n");
        fprintf(stderr, "  -f to keep running in foreground\n");
        fprintf(stderr, "  -u name to drop privileges and run as user 'name'\n");
        fprintf(stderr, "  -t dir to chroot to directory dir\n");
        fprintf(stderr, "  -d device to set tunnel device name\n");
-       fprintf(stderr, "  -P password used for authentication (max 32 chars will be used)\n");
-       fprintf(stderr, "  -m maxfragsize, to limit size of downstream packets\n");
-       fprintf(stderr, "nameserver is the IP number of the relaying nameserver, if absent /etc/resolv.conf is used\n");
+       fprintf(stderr, "  -z context, to apply specified SELinux context after initialization\n");
+       fprintf(stderr, "  -F pidfile to write pid to a file\n");
+       fprintf(stderr, "nameserver is the IP number/hostname of the relaying nameserver. if absent, /etc/resolv.conf is used\n");
        fprintf(stderr, "topdomain is the FQDN that is delegated to the tunnel endpoint.\n");
 
        exit(0);
@@ -985,8 +101,8 @@ help() {
 
 static void
 version() {
-       printf("iodine IP over DNS tunneling client\n");
-       printf("version: 0.5.1 from 2009-03-21\n");
+       fprintf(stderr, "iodine IP over DNS tunneling client\n");
+       fprintf(stderr, "version: 0.6.0-rc1 from 2010-02-13\n");
 
        exit(0);
 }
@@ -995,38 +111,56 @@ int
 main(int argc, char **argv)
 {
        char *nameserv_addr;
+       char *topdomain;
 #ifndef WINDOWS32
        struct passwd *pw;
 #endif
        char *username;
+       char password[33];
        int foreground;
        char *newroot;
+       char *context;
        char *device;
+       char *pidfile;
        int choice;
        int tun_fd;
        int dns_fd;
        int max_downstream_frag_size;
        int autodetect_frag_size;
-
-       memset(password, 0, 33);
+       int retval;
+       int raw_mode;
+       int lazymode;
+       int selecttimeout;
+       int hostname_maxlen;
+
+       nameserv_addr = NULL;
+       topdomain = NULL;
+#ifndef WINDOWS32
+       pw = NULL;
+#endif
        username = NULL;
+       memset(password, 0, 33);
+       srand(time(NULL));
        foreground = 0;
        newroot = NULL;
+       context = NULL;
        device = NULL;
-       chunkid = 0;
-
-       outpkt.seqno = 0;
-       inpkt.len = 0;
+       pidfile = NULL;
 
        autodetect_frag_size = 1;
        max_downstream_frag_size = 3072;
-
-       b32 = get_base32_encoder();
-       dataenc = get_base32_encoder();
+       retval = 0;
+       raw_mode = 1;
+       lazymode = 1;
+       selecttimeout = 4;
+       hostname_maxlen = 0xFF;
 
 #ifdef WINDOWS32
        WSAStartup(req_version, &wsa_data);
 #endif
+
+       srand((unsigned) time(NULL));
+       client_init();
        
 #if !defined(BSD) && !defined(__GLIBC__)
        __progname = strrchr(argv[0], '/');
@@ -1036,7 +170,7 @@ main(int argc, char **argv)
                __progname++;
 #endif
 
-       while ((choice = getopt(argc, argv, "vfhu:t:d:P:m:")) != -1) {
+       while ((choice = getopt(argc, argv, "vfhru:t:d:P:m:M:F:T:O:L:I:")) != -1) {
                switch(choice) {
                case 'v':
                        version();
@@ -1049,6 +183,8 @@ main(int argc, char **argv)
                        help();
                        /* NOTREACHED */
                        break;
+               case 'r':
+                       raw_mode = 0;
                case 'u':
                        username = optarg;
                        break;
@@ -1069,6 +205,39 @@ main(int argc, char **argv)
                        autodetect_frag_size = 0;
                        max_downstream_frag_size = atoi(optarg);
                        break;
+               case 'M':
+                       hostname_maxlen = atoi(optarg);
+                       if (hostname_maxlen > 255)
+                               hostname_maxlen = 255;
+                       if (hostname_maxlen < 10)
+                               hostname_maxlen = 10;
+                       break;
+               case 'z':
+                       context = optarg;
+                       break;
+               case 'F':
+                       pidfile = optarg;
+                       break;    
+               case 'T':
+                       set_qtype(optarg);
+                       break;
+               case 'O':       /* not -D, is Debug in server */
+                       set_downenc(optarg);
+                       break;
+               case 'L':
+                       lazymode = atoi(optarg);
+                       if (lazymode > 1)
+                               lazymode = 1;
+                       if (lazymode < 0)
+                               lazymode = 0;
+                       if (!lazymode)
+                               selecttimeout = 1;
+                       break;
+               case 'I':
+                       selecttimeout = atoi(optarg);
+                       if (selecttimeout < 1)
+                               selecttimeout = 1;
+                       break;
                default:
                        usage();
                        /* NOTREACHED */
@@ -1101,13 +270,14 @@ main(int argc, char **argv)
        }
 
        if (nameserv_addr) {
-               set_nameserver(nameserv_addr);
+               client_set_nameserver(nameserv_addr, DNS_PORT);
        } else {
+               warnx("No nameserver found - not connected to any network?\n");
                usage();
                /* NOTREACHED */
        }       
 
-       if(strlen(topdomain) <= 128) {
+       if (strlen(topdomain) <= 128) {
                if(check_topdomain(topdomain)) {
                        warnx("Topdomain contains invalid characters.\n");
                        usage();
@@ -1119,6 +289,11 @@ main(int argc, char **argv)
                /* NOTREACHED */
        }
 
+       client_set_selecttimeout(selecttimeout);
+       client_set_lazymode(lazymode);
+       client_set_topdomain(topdomain);
+       client_set_hostname_maxlen(hostname_maxlen);
+       
        if (username != NULL) {
 #ifndef WINDOWS32
                if ((pw = getpwnam(username)) == NULL) {
@@ -1129,24 +304,46 @@ main(int argc, char **argv)
 #endif
        }
        
-       if (strlen(password) == 0) 
-               read_password(password, sizeof(password));
+       if (strlen(password) == 0) {
+               if (NULL != getenv(PASSWORD_ENV_VAR))
+                       snprintf(password, sizeof(password), "%s", getenv(PASSWORD_ENV_VAR));
+               else
+                       read_password(password, sizeof(password));
+       }
+       
+       client_set_password(password);
 
-       if ((tun_fd = open_tun(device)) == -1)
+       if ((tun_fd = open_tun(device)) == -1) {
+               retval = 1;
                goto cleanup1;
-       if ((dns_fd = open_dns(0, INADDR_ANY)) == -1)
+       }
+       if ((dns_fd = open_dns(0, INADDR_ANY)) == -1) {
+               retval = 1;
                goto cleanup2;
+       }
 
        signal(SIGINT, sighandler);
        signal(SIGTERM, sighandler);
 
-       if(handshake(dns_fd, autodetect_frag_size, max_downstream_frag_size))
+       fprintf(stderr, "Sending DNS queries for %s to %s\n",
+               topdomain, nameserv_addr);
+
+       if (client_handshake(dns_fd, raw_mode, autodetect_frag_size, max_downstream_frag_size)) {
+               retval = 1;
                goto cleanup2;
+       }
        
-       fprintf(stderr, "Sending queries for %s to %s\n", topdomain, nameserv_addr);
+       if (client_get_conn() == CONN_RAW_UDP) {
+               fprintf(stderr, "Sending raw traffic directly to %s\n", client_get_raw_addr());
+       }
+
+       fprintf(stderr, "Connection setup complete, transmitting data.\n");
 
        if (foreground == 0) 
                do_detach();
+       
+       if (pidfile != NULL)
+               do_pidfile(pidfile);
 
        if (newroot != NULL)
                do_chroot(newroot);
@@ -1162,18 +359,17 @@ main(int argc, char **argv)
                }
 #endif
        }
-       
-       downstream_seqno = 0;
-       downstream_fragment = 0;
-       down_ack_seqno = 0;
-       down_ack_fragment = 0;
-       
-       tunnel(tun_fd, dns_fd);
+
+       if (context != NULL)
+               do_setcon(context);
+
+       client_tunnel(tun_fd, dns_fd);
 
 cleanup2:
        close_dns(dns_fd);
        close_tun(tun_fd);
 cleanup1:
 
-       return 0;
+       return retval;
 }
+
index bf35c701d67060c50b915a7b16660ae50aa4d05a..3681084e28389d03d33d28da89826d6c335233dd 100644 (file)
 #include <string.h>
 #include <signal.h>
 #include <unistd.h>
-#include <sys/types.h>
 #include <sys/param.h>
 #include <sys/time.h>
 #include <fcntl.h>
 #include <time.h>
 #include <zlib.h>
 
+#include "common.h"
+
 #ifdef WINDOWS32
 #include "windows.h"
 #include <winsock2.h>
 #else
 #include <arpa/nameser.h>
 #ifdef DARWIN
-#include <arpa/nameser8_compat.h>
+#define BIND_8_COMPAT
+#include <arpa/nameser_compat.h>
 #endif
 #define _XPG4_2
-#include <sys/socket.h>
-#include <err.h>
-#include <arpa/inet.h>
-#include <netinet/in.h>
 #include <netinet/in_systm.h>
 #include <netinet/ip.h>
 #include <grp.h>
 #include <syslog.h>
 #endif
 
-#include "common.h"
 #include "dns.h"
 #include "encoding.h"
 #include "base32.h"
 #include "base64.h"
+#include "base64u.h"
+#include "base128.h"
 #include "user.h"
 #include "login.h"
 #include "tun.h"
@@ -65,10 +64,15 @@ WORD req_version = MAKEWORD(2, 2);
 WSADATA wsa_data;
 #endif
 
+#define PASSWORD_ENV_VAR "IODINED_PASS"
+
 static int running = 1;
 static char *topdomain;
 static char password[33];
 static struct encoder *b32;
+static struct encoder *b64;
+static struct encoder *b64u;
+static struct encoder *b128;
 static int created_users;
 
 static int check_ip;
@@ -85,8 +89,9 @@ static int debug;
 static char *__progname;
 #endif
 
-static int read_dns(int, struct query *);
-static void write_dns(int, struct query *, char *, int);
+static int read_dns(int, int, struct query *);
+static void write_dns(int, struct query *, char *, int, char);
+static void handle_full_packet(int, int, int);
 
 static void
 sigint(int sig) 
@@ -116,10 +121,15 @@ check_user_and_ip(int userid, struct query *q)
 {
        struct sockaddr_in *tempin;
 
+       /* Note: duplicate in handle_raw_login() except IP-address check */
+
        if (userid < 0 || userid >= created_users ) {
                return 1; 
        }
-       if (!users[userid].active) {
+       if (!users[userid].active || users[userid].disabled) {
+               return 1;
+       }
+       if (users[userid].last_pkt + 60 < time(NULL)) {
                return 1;
        }
 
@@ -132,6 +142,407 @@ check_user_and_ip(int userid, struct query *q)
        return memcmp(&(users[userid].host), &(tempin->sin_addr), sizeof(struct in_addr));
 }
 
+static void
+send_raw(int fd, char *buf, int buflen, int user, int cmd, struct query *q)
+{
+       char packet[4096];
+       int len;
+
+       len = MIN(sizeof(packet) - RAW_HDR_LEN, buflen);
+
+       memcpy(packet, raw_header, RAW_HDR_LEN);
+       if (len) {
+               memcpy(&packet[RAW_HDR_LEN], buf, len);
+       }
+
+       len += RAW_HDR_LEN;
+       packet[RAW_HDR_CMD] = cmd | (user & 0x0F);
+
+       if (debug >= 2) {
+               struct sockaddr_in *tempin;
+               tempin = (struct sockaddr_in *) &(q->from);
+               fprintf(stderr, "TX-raw: client %s, cmd %d, %d bytes\n", 
+                       inet_ntoa(tempin->sin_addr), cmd, len);
+       }
+
+       sendto(fd, packet, len, 0, &q->from, q->fromlen);
+}
+
+
+static void
+start_new_outpacket(int userid, char *data, int datalen)
+/* Copies data to .outpacket and resets all counters.
+   data is expected to be compressed already. */
+{
+       datalen = MIN(datalen, sizeof(users[userid].outpacket.data));
+       memcpy(users[userid].outpacket.data, data, datalen);
+       users[userid].outpacket.len = datalen;
+       users[userid].outpacket.offset = 0;
+       users[userid].outpacket.sentlen = 0;
+       users[userid].outpacket.seqno = (users[userid].outpacket.seqno + 1) & 7;
+       users[userid].outpacket.fragment = 0;
+       users[userid].outfragresent = 0;
+}
+
+#ifdef OUTPACKETQ_LEN
+
+static int
+save_to_outpacketq(int userid, char *data, int datalen)
+/* Find space in outpacket-queue and store data (expected compressed already).
+   Returns: 1 = okay, 0 = no space. */
+{
+       int fill;
+
+       if (users[userid].outpacketq_filled >= OUTPACKETQ_LEN)
+               /* no space */
+               return 0;
+
+       fill = users[userid].outpacketq_nexttouse +
+              users[userid].outpacketq_filled;
+       if (fill >= OUTPACKETQ_LEN)
+               fill -= OUTPACKETQ_LEN;
+
+       datalen = MIN(datalen, sizeof(users[userid].outpacketq[fill].data));
+       memcpy(users[userid].outpacketq[fill].data, data, datalen);
+       users[userid].outpacketq[fill].len = datalen;
+
+       users[userid].outpacketq_filled++;
+
+       if (debug >= 3)
+               fprintf(stderr, "    Qstore, now %d\n",
+                       users[userid].outpacketq_filled);
+
+       return 1;
+}
+
+static int
+get_from_outpacketq(int userid)
+/* Starts new outpacket from queue, if any.
+   Returns: 1 = okay, 0 = no packets were waiting. */
+{
+       int use;
+
+       if (users[userid].outpacketq_filled <= 0)
+               /* no packets */
+               return 0;
+
+       use = users[userid].outpacketq_nexttouse;
+
+       start_new_outpacket(userid, users[userid].outpacketq[use].data,
+                           users[userid].outpacketq[use].len);
+
+       use++;
+       if (use >= OUTPACKETQ_LEN)
+               use = 0;
+       users[userid].outpacketq_nexttouse = use;
+       users[userid].outpacketq_filled--;
+
+       if (debug >= 3)
+               fprintf(stderr, "    Qget, now %d\n",
+                       users[userid].outpacketq_filled);
+
+       return 1;
+}
+
+#endif /* OUTPACKETQ_LEN */
+
+#ifdef DNSCACHE_LEN
+
+/* On the DNS cache:
+
+   This cache is implemented to better handle the aggressively impatient DNS
+   servers that very quickly re-send requests when we choose to not
+   immediately answer them in lazy mode. This cache works much better than
+   pruning(=dropping) the improper requests, since the DNS server will
+   actually get an answer instead of silence.
+
+   Because of the CMC in both ping and upstream data, unwanted cache hits
+   are prevented. Data-CMC is only 36 counts, so our cache length should
+   not exceed 36/2=18 packets. (This quick rule assumes all packets are
+   otherwise equal, which they arent: up/downstream seq/frag, tcp sequence
+   number, and of course data.)
+*/
+
+static void
+save_to_dnscache(int userid, struct query *q, char *answer, int answerlen)
+/* Store answer in our little DNS cache. */
+{
+       int fill;
+
+       if (answerlen > sizeof(users[userid].dnscache_answer[fill]))
+               return;  /* can't store this */
+
+       fill = users[userid].dnscache_lastfilled + 1;
+       if (fill >= DNSCACHE_LEN)
+               fill = 0;
+
+       memcpy(&(users[userid].dnscache_q[fill]), q, sizeof(struct query));
+       memcpy(users[userid].dnscache_answer[fill], answer, answerlen);
+       users[userid].dnscache_answerlen[fill] = answerlen;
+
+       users[userid].dnscache_lastfilled = fill;
+}
+
+static int
+answer_from_dnscache(int dns_fd, int userid, struct query *q)
+/* Checks cache and sends repeated answer if we alreay saw this query recently.
+   Returns: 1 = answer sent, drop this query, 0 = no answer sent, this is
+   a new query. */
+{
+       int i;
+       int use;
+
+       for (i = 0; i < DNSCACHE_LEN ; i++) {
+               /* Try cache most-recent-first */
+               use = users[userid].dnscache_lastfilled - i;
+               if (use < 0)
+                       use += DNSCACHE_LEN;
+
+               if (users[userid].dnscache_q[use].id == 0)
+                       continue;
+               if (users[userid].dnscache_answerlen[use] <= 0)
+                       continue;
+
+               if (users[userid].dnscache_q[use].type != q->type ||
+                   strcmp(users[userid].dnscache_q[use].name, q->name))
+                       continue;
+
+               /* okay, match */
+               if (debug >= 1)
+                       fprintf(stderr, "OUT  user %d %s from dnscache\n", userid, q->name);
+
+               write_dns(dns_fd, q, users[userid].dnscache_answer[use],
+                         users[userid].dnscache_answerlen[use],
+                         users[userid].downenc);
+
+               q->id = 0;      /* this query was used */
+               return 1;
+       }
+
+       /* here only when no match found */
+       return 0;
+}
+
+#endif /* DNSCACHE_LEN */
+
+static inline void
+save_to_qmem(unsigned char *qmem_cmc, unsigned short *qmem_type, int qmem_len,
+            int *qmem_lastfilled, unsigned char *cmc_to_add,
+            unsigned short type_to_add)
+/* Remember query to check for duplicates */
+{
+       int fill;
+
+       fill = *qmem_lastfilled + 1;
+       if (fill >= qmem_len)
+               fill = 0;
+
+       memcpy(qmem_cmc + fill * 4, cmc_to_add, 4);
+       qmem_type[fill] = type_to_add;
+       *qmem_lastfilled = fill;
+}
+
+static inline void
+save_to_qmem_pingordata(int userid, struct query *q)
+{
+       /* Our CMC is a bit more than the "official" CMC; we store 4 bytes
+          just because we can, and because it may prevent some false matches.
+          For ping, we save the 4 decoded bytes: userid + seq/frag + CMC.
+          For data, we save the 4 _un_decoded chars in lowercase: seq/frag's
+          + 1 char CMC; that last char is non-Base32.
+        */
+
+       char cmc[8];
+       int i;
+
+       if (q->name[0] == 'P' || q->name[0] == 'p') {
+               /* Ping packet */
+
+               size_t cmcsize = sizeof(cmc);
+               char *cp = strchr(q->name, '.');
+
+               if (cp == NULL)
+                       return;  /* illegal hostname; shouldn't happen */
+
+               /* We already unpacked in handle_null_request(), but that's
+                  lost now... Note: b32 directly, we want no undotify here! */
+               i = b32->decode(cmc, &cmcsize, q->name + 1, (cp - q->name) - 1);
+
+               if (i < 4)
+                       return;  /* illegal ping; shouldn't happen */
+
+               save_to_qmem(users[userid].qmemping_cmc,
+                            users[userid].qmemping_type, QMEMPING_LEN,
+                            &users[userid].qmemping_lastfilled,
+                            (void *) cmc, q->type);
+       } else {
+               /* Data packet, hopefully not illegal */
+               if (strlen(q->name) < 5)
+                       return;
+
+               /* We store CMC in lowercase; if routing via multiple parallel
+                  DNS servers, one may do case-switch and another may not,
+                  and we still want to detect duplicates.
+                  Data-header is always base32, so case-swap won't hurt.
+                */
+               for (i = 0; i < 4; i++)
+                       if (q->name[i+1] >= 'A' && q->name[i+1] <= 'Z')
+                               cmc[i] = q->name[i+1] + ('a' - 'A');
+                       else
+                               cmc[i] = q->name[i+1];
+
+               save_to_qmem(users[userid].qmemdata_cmc,
+                            users[userid].qmemdata_type, QMEMDATA_LEN,
+                            &users[userid].qmemdata_lastfilled,
+                            (void *) cmc, q->type);
+       }
+}
+
+static int
+answer_from_qmem(int dns_fd, struct query *q, unsigned char *qmem_cmc,
+                unsigned short *qmem_type, int qmem_len,
+                unsigned char *cmc_to_check)
+/* Checks query memory and sends an (illegal) answer if this is a duplicate.
+   Returns: 1 = answer sent, drop this query, 0 = no answer sent, this is
+   not a duplicate. */
+{
+       int i;
+
+       for (i = 0; i < qmem_len ; i++) {
+
+               if (qmem_type[i] == T_UNSET)
+                       continue;
+               if (qmem_type[i] != q->type)
+                       continue;
+               if (memcmp(qmem_cmc + i * 4, cmc_to_check, 4))
+                       continue;
+
+               /* okay, match */
+               if (debug >= 1)
+                       fprintf(stderr, "OUT  from qmem for %s == duplicate, sending illegal reply\n", q->name);
+
+               write_dns(dns_fd, q, "x", 1, 'T');
+
+               q->id = 0;      /* this query was used */
+               return 1;
+       }
+
+       /* here only when no match found */
+       return 0;
+}
+
+static inline int
+answer_from_qmem_data(int dns_fd, int userid, struct query *q)
+/* Quick helper function to keep handle_null_request() clean */
+{
+       char cmc[4];
+       int i;
+
+       for (i = 0; i < 4; i++)
+               if (q->name[i+1] >= 'A' && q->name[i+1] <= 'Z')
+                       cmc[i] = q->name[i+1] + ('a' - 'A');
+               else
+                       cmc[i] = q->name[i+1];
+
+       return answer_from_qmem(dns_fd, q, users[userid].qmemdata_cmc,
+                               users[userid].qmemdata_type, QMEMDATA_LEN,
+                               (void *) cmc);
+}
+
+static int
+send_chunk_or_dataless(int dns_fd, int userid, struct query *q)
+/* Sends current fragment to user, or dataless packet if there is no
+   current fragment available (-> normal "quiet" ping reply).
+   Does not update anything, except:
+   - discards q always (query is used)
+   - forgets entire users[userid].outpacket if it was sent in one go,
+     and then tries to get new packet from outpacket-queue
+   Returns: 1 = can call us again immediately, new packet from queue;
+   0 = don't call us again for now.
+*/
+{
+       char pkt[4096];
+       int datalen = 0;
+       int last = 0;
+
+       /* If re-sent too many times, drop entire packet */
+       if (users[userid].outpacket.len > 0 &&
+           users[userid].outfragresent > 5) {
+               users[userid].outpacket.len = 0;
+               users[userid].outpacket.offset = 0;
+               users[userid].outpacket.sentlen = 0;
+               users[userid].outfragresent = 0;
+
+#ifdef OUTPACKETQ_LEN
+               /* Maybe more in queue, use immediately */
+               get_from_outpacketq(userid);
+#endif
+       }
+
+       if (users[userid].outpacket.len > 0) {
+               datalen = MIN(users[userid].fragsize, users[userid].outpacket.len - users[userid].outpacket.offset);
+               datalen = MIN(datalen, sizeof(pkt)-2);
+
+               memcpy(&pkt[2], users[userid].outpacket.data + users[userid].outpacket.offset, datalen);
+               users[userid].outpacket.sentlen = datalen;
+               last = (users[userid].outpacket.len == users[userid].outpacket.offset + datalen);
+
+               users[userid].outfragresent++;
+       }
+
+       /* Build downstream data header (see doc/proto_xxxxxxxx.txt) */
+
+       /* First byte is 1 bit compression flag, 3 bits upstream seqno, 4 bits upstream fragment */
+       pkt[0] = (1<<7) | ((users[userid].inpacket.seqno & 7) << 4) |
+               (users[userid].inpacket.fragment & 15);
+       /* Second byte is 3 bits downstream seqno, 4 bits downstream fragment, 1 bit last flag */
+       pkt[1] = ((users[userid].outpacket.seqno & 7) << 5) | 
+               ((users[userid].outpacket.fragment & 15) << 1) | (last & 1);
+
+       if (debug >= 1) {
+               fprintf(stderr, "OUT  pkt seq# %d, frag %d (last=%d), offset %d, fragsize %d, total %d, to user %d\n",
+                       users[userid].outpacket.seqno & 7, users[userid].outpacket.fragment & 15, 
+                       last, users[userid].outpacket.offset, datalen, users[userid].outpacket.len, userid);
+       }
+       write_dns(dns_fd, q, pkt, datalen + 2, users[userid].downenc);
+
+       if (q->id2 != 0) {
+               q->id = q->id2;
+               q->fromlen = q->fromlen2;
+               memcpy(&(q->from), &(q->from2), q->fromlen2);
+               if (debug >= 1)
+                       fprintf(stderr, "OUT  again to last duplicate\n");
+               write_dns(dns_fd, q, pkt, datalen + 2, users[userid].downenc);
+       }
+
+       save_to_qmem_pingordata(userid, q);
+
+#ifdef DNSCACHE_LEN
+       save_to_dnscache(userid, q, pkt, datalen + 2);
+#endif
+
+       q->id = 0;                      /* this query is used */
+
+       if (datalen > 0 && datalen == users[userid].outpacket.len) {
+               /* Whole packet was sent in one chunk, dont wait for ack */
+               users[userid].outpacket.len = 0;
+               users[userid].outpacket.offset = 0;
+               users[userid].outpacket.sentlen = 0;
+               users[userid].outfragresent = 0;
+
+#ifdef OUTPACKETQ_LEN
+               /* Maybe more in queue, prepare for next time */
+               if (get_from_outpacketq(userid) == 1) {
+                       if (debug >= 3)
+                               fprintf(stderr, "    Chunk & fromqueue: callagain\n");
+                       return 1;       /* call us again */
+               }
+#endif
+       }
+
+       return 0;       /* don't call us again */
+}
+
 static int
 tunnel_tun(int tun_fd, int dns_fd)
 {
@@ -154,17 +565,29 @@ tunnel_tun(int tun_fd, int dns_fd)
        outlen = sizeof(out);
        compress2((uint8_t*)out, &outlen, (uint8_t*)in, read, 9);
 
-       /* if another packet is queued, throw away this one. TODO build queue */
-       if (users[userid].outpacket.len == 0) {
-               memcpy(users[userid].outpacket.data, out, outlen);
-               users[userid].outpacket.len = outlen;
-               users[userid].outpacket.offset = 0;
-               users[userid].outpacket.sentlen = 0;
-               users[userid].outpacket.seqno = (++users[userid].outpacket.seqno & 7);
-               users[userid].outpacket.fragment = 0;
+       if (users[userid].conn == CONN_DNS_NULL) {
+#ifdef OUTPACKETQ_LEN
+               /* If a packet is being sent, try storing the new one in the queue.
+                  If the queue is full, drop the packet. TCP will hopefully notice
+                  and reduce the packet rate. */
+               if (users[userid].outpacket.len > 0) {
+                       save_to_outpacketq(userid, out, outlen);
+                       return 0;
+               }
+#endif
+
+               start_new_outpacket(userid, out, outlen);
+
+               /* Start sending immediately if query is waiting */
+               if (users[userid].q_sendrealsoon.id != 0)
+                       send_chunk_or_dataless(dns_fd, userid, &users[userid].q_sendrealsoon);
+               else if (users[userid].q.id != 0)
+                       send_chunk_or_dataless(dns_fd, userid, &users[userid].q);
+
+               return outlen;
+       } else { /* CONN_RAW_UDP */
+               send_raw(dns_fd, out, outlen, userid, RAW_HDR_CMD_DATA, &users[userid].q);
                return outlen;
-       } else {
-               return 0;
        }
 }
 
@@ -197,97 +620,44 @@ send_version_response(int fd, version_ack_t ack, uint32_t payload, int userid, s
        out[7] = ((payload) & 0xff);
        out[8] = userid & 0xff;
 
-       write_dns(fd, q, out, sizeof(out));
-}
-
-static void
-send_chunk(int dns_fd, int userid) {
-       char pkt[4096];
-       int datalen;
-       int last;
-
-       datalen = MIN(users[userid].fragsize, users[userid].outpacket.len - users[userid].outpacket.offset);
-
-       if (datalen && users[userid].outpacket.sentlen > 0 && 
-                       (
-                       users[userid].outpacket.seqno != users[userid].out_acked_seqno ||
-                       users[userid].outpacket.fragment != users[userid].out_acked_fragment
-                       )
-               ) {
-
-               /* Still waiting on latest ack, send nothing */
-               datalen = 0;
-               last = 0;
-               /* TODO : count down and discard packet if no acks arrive within X queries */
-       } else {
-               memcpy(&pkt[2], &users[userid].outpacket.data[users[userid].outpacket.offset], datalen);
-               users[userid].outpacket.sentlen = datalen;
-               last = (users[userid].outpacket.len == users[userid].outpacket.offset + users[userid].outpacket.sentlen);
-
-               /* Increase fragment# when sending data with offset */
-               if (users[userid].outpacket.offset && datalen)
-                       users[userid].outpacket.fragment++;
-       }
-
-       /* Build downstream data header (see doc/proto_xxxxxxxx.txt) */
-
-       /* First byte is 1 bit compression flag, 3 bits upstream seqno, 4 bits upstream fragment */
-       pkt[0] = (1<<7) | ((users[userid].inpacket.seqno & 7) << 4) | (users[userid].inpacket.fragment & 15);
-       /* Second byte is 3 bits downstream seqno, 4 bits downstream fragment, 1 bit last flag */
-       pkt[1] = ((users[userid].outpacket.seqno & 7) << 5) | 
-               ((users[userid].outpacket.fragment & 15) << 1) | (last & 1);
-
-       if (debug >= 1) {
-               fprintf(stderr, "OUT  pkt seq# %d, frag %d (last=%d), offset %d, fragsize %d, total %d, to user %d\n",
-                       users[userid].outpacket.seqno & 7, users[userid].outpacket.fragment & 15, 
-                       last, users[userid].outpacket.offset, datalen, users[userid].outpacket.len, userid);
-       }
-       write_dns(dns_fd, &users[userid].q, pkt, datalen + 2);
-       users[userid].q.id = 0;
-
-       if (users[userid].outpacket.len > 0 && 
-               users[userid].outpacket.len == users[userid].outpacket.sentlen) {
-
-               /* Whole packet was sent in one chunk, dont wait for ack */
-               users[userid].outpacket.len = 0;
-               users[userid].outpacket.offset = 0;
-               users[userid].outpacket.sentlen = 0;
-       }
+       write_dns(fd, q, out, sizeof(out), users[userid].downenc);
 }
 
 static void
-update_downstream_seqno(int dns_fd, int userid, int down_seq, int down_frag)
+process_downstream_ack(int userid, int down_seq, int down_frag)
+/* Process acks from downstream fragments.
+   After this, .offset and .fragment are updated (if ack correct),
+   or .len is set to zero when all is done.
+*/
 {
-       /* If we just read a new packet from tun we have not sent a fragment of, just send it */
-       if (users[userid].outpacket.len > 0 && users[userid].outpacket.sentlen == 0) {
-               send_chunk(dns_fd, userid);
+       if (users[userid].outpacket.len <= 0)
+               /* No packet to apply acks to */
                return;
-       }
 
-       /* otherwise, check if we received ack on a fragment and can send next */
-       if (users[userid].outpacket.len > 0 &&
-               users[userid].outpacket.seqno == down_seq && users[userid].outpacket.fragment == down_frag) {
+       if (users[userid].outpacket.seqno != down_seq ||
+           users[userid].outpacket.fragment != down_frag)
+               /* Not the ack we're waiting for; probably duplicate of old
+                  ack, happens a lot with ping packets */
+               return;
 
-               if (down_seq != users[userid].out_acked_seqno || down_frag != users[userid].out_acked_fragment) {
-                       /* Received ACK on downstream fragment */
-                       users[userid].outpacket.offset += users[userid].outpacket.sentlen;
-                       users[userid].outpacket.sentlen = 0;
+       /* Received proper ack */
+       users[userid].outpacket.offset += users[userid].outpacket.sentlen;
+       users[userid].outpacket.sentlen = 0;
+       users[userid].outpacket.fragment++;
+       users[userid].outfragresent = 0;
 
-                       /* Is packet done? */
-                       if (users[userid].outpacket.offset == users[userid].outpacket.len) {
-                               users[userid].outpacket.len = 0;
-                               users[userid].outpacket.offset = 0;
-                               users[userid].outpacket.sentlen = 0;
-                       }
-
-                       users[userid].out_acked_seqno = down_seq;
-                       users[userid].out_acked_fragment = down_frag;
+       /* Is packet done? */
+       if (users[userid].outpacket.offset >= users[userid].outpacket.len) {
+               users[userid].outpacket.len = 0;
+               users[userid].outpacket.offset = 0;
+               users[userid].outpacket.fragment--;     /* unneeded ++ above */
+               /* ^keep last seqno/frag, are always returned on pings */
+               /* users[userid].outfragresent = 0; already above */
 
-                       /* Send reply if waiting */
-                       if (users[userid].outpacket.len > 0) {
-                               send_chunk(dns_fd, userid);
-                       }
-               }
+#ifdef OUTPACKETQ_LEN
+               /* Possibly get new packet from queue */
+               get_from_outpacketq(userid);
+#endif
        }
 }
 
@@ -295,24 +665,25 @@ static void
 handle_null_request(int tun_fd, int dns_fd, struct query *q, int domain_len)
 {
        struct in_addr tempip;
-       struct ip *hdr;
-       unsigned long outlen;
        char in[512];
        char logindata[16];
        char out[64*1024];
        char unpacked[64*1024];
        char *tmp[2];
        int userid;
-       int touser;
-       int version;
-       int code;
        int read;
 
        userid = -1;
 
+       /* Everything here needs at least two chars in the name */
+       if (domain_len < 2)
+               return;
+
        memcpy(in, q->name, MIN(domain_len, sizeof(in)));
 
        if(in[0] == 'V' || in[0] == 'v') {
+               int version = 0;
+
                read = unpack_data(unpacked, sizeof(unpacked), &(in[1]), domain_len - 1, b32);
                /* Version greeting, compare and send ack/nak */
                if (read > 4) { 
@@ -326,6 +697,7 @@ handle_null_request(int tun_fd, int dns_fd, struct query *q, int domain_len)
                if (version == VERSION) {
                        userid = find_available_user();
                        if (userid >= 0) {
+                               int i;
                                struct sockaddr_in *tempin;
 
                                users[userid].seed = rand();
@@ -335,10 +707,47 @@ handle_null_request(int tun_fd, int dns_fd, struct query *q, int domain_len)
                                
                                memcpy(&(users[userid].q), q, sizeof(struct query));
                                users[userid].encoder = get_base32_encoder();
+                               users[userid].downenc = 'T';
                                send_version_response(dns_fd, VERSION_ACK, users[userid].seed, userid, q);
                                syslog(LOG_INFO, "accepted version for user #%d from %s",
                                        userid, inet_ntoa(tempin->sin_addr));
                                users[userid].q.id = 0;
+                               users[userid].q.id2 = 0;
+                               users[userid].q_sendrealsoon.id = 0;
+                               users[userid].q_sendrealsoon.id2 = 0;
+                               users[userid].q_sendrealsoon_new = 0;
+                               users[userid].outpacket.len = 0;
+                               users[userid].outpacket.offset = 0;
+                               users[userid].outpacket.sentlen = 0;
+                               users[userid].outpacket.seqno = 0;
+                               users[userid].outpacket.fragment = 0;
+                               users[userid].outfragresent = 0;
+                               users[userid].inpacket.len = 0;
+                               users[userid].inpacket.offset = 0;
+                               users[userid].inpacket.seqno = 0;
+                               users[userid].inpacket.fragment = 0;
+                               users[userid].fragsize = 100; /* very safe */
+                               users[userid].conn = CONN_DNS_NULL;
+                               users[userid].lazy = 0;
+#ifdef OUTPACKETQ_LEN
+                               users[userid].outpacketq_nexttouse = 0;
+                               users[userid].outpacketq_filled = 0;
+#endif
+#ifdef DNSCACHE_LEN
+                               {
+                                       for (i = 0; i < DNSCACHE_LEN; i++) {
+                                               users[userid].dnscache_q[i].id = 0;
+                                               users[userid].dnscache_answerlen[i] = 0;
+                                       }
+                               }
+                               users[userid].dnscache_lastfilled = 0;
+#endif
+                               for (i = 0; i < QMEMPING_LEN; i++)
+                                       users[userid].qmemping_type[i] = T_UNSET;
+                               users[userid].qmemping_lastfilled = 0;
+                               for (i = 0; i < QMEMDATA_LEN; i++)
+                                       users[userid].qmemdata_type[i] = T_UNSET;
+                               users[userid].qmemdata_lastfilled = 0;
                        } else {
                                /* No space for another user */
                                send_version_response(dns_fd, VERSION_FULL, created_users, 0, q);
@@ -353,11 +762,16 @@ handle_null_request(int tun_fd, int dns_fd, struct query *q, int domain_len)
                return;
        } else if(in[0] == 'L' || in[0] == 'l') {
                read = unpack_data(unpacked, sizeof(unpacked), &(in[1]), domain_len - 1, b32);
+               if (read < 17) {
+                       write_dns(dns_fd, q, "BADLEN", 6, 'T');
+                       return;
+               }
+
                /* Login phase, handle auth */
                userid = unpacked[0];
 
                if (check_user_and_ip(userid, q) != 0) {
-                       write_dns(dns_fd, q, "BADIP", 5);
+                       write_dns(dns_fd, q, "BADIP", 5, 'T');
                        syslog(LOG_WARNING, "dropped login request from user #%d from unexpected source %s",
                                userid, inet_ntoa(((struct sockaddr_in *) &q->from)->sin_addr));
                        return;
@@ -376,37 +790,65 @@ handle_null_request(int tun_fd, int dns_fd, struct query *q, int domain_len)
                                read = snprintf(out, sizeof(out), "%s-%s-%d-%d", 
                                                tmp[0], tmp[1], my_mtu, netmask);
 
-                               write_dns(dns_fd, q, out, read);
+                               write_dns(dns_fd, q, out, read, users[userid].downenc);
                                q->id = 0;
                                syslog(LOG_NOTICE, "accepted password from user #%d, given IP %s", userid, tmp[1]);
 
                                free(tmp[1]);
                                free(tmp[0]);
                        } else {
-                               write_dns(dns_fd, q, "LNAK", 4);
+                               write_dns(dns_fd, q, "LNAK", 4, 'T');
                                syslog(LOG_WARNING, "rejected login request from user #%d from %s, bad password",
                                        userid, inet_ntoa(((struct sockaddr_in *) &q->from)->sin_addr));
                        }
                }
                return;
+       } else if(in[0] == 'I' || in[0] == 'i') {
+               /* Request for IP number */
+               in_addr_t replyaddr;
+               unsigned addr;
+               char reply[5];
+               
+               userid = b32_8to5(in[1]);
+               if (check_user_and_ip(userid, q) != 0) {
+                       write_dns(dns_fd, q, "BADIP", 5, 'T');
+                       return; /* illegal id */
+               }
+
+               if (ns_ip != INADDR_ANY) {
+                       /* If set, use assigned external ip (-n option) */
+                       replyaddr = ns_ip;
+               } else {
+                       /* otherwise return destination ip from packet */
+                       memcpy(&replyaddr, &q->destination.s_addr, sizeof(in_addr_t));
+               }
+
+               addr = htonl(replyaddr);
+               reply[0] = 'I';
+               reply[1] = (addr >> 24) & 0xFF;
+               reply[2] = (addr >> 16) & 0xFF;
+               reply[3] = (addr >>  8) & 0xFF;
+               reply[4] = (addr >>  0) & 0xFF;
+               write_dns(dns_fd, q, reply, sizeof(reply), 'T');
        } else if(in[0] == 'Z' || in[0] == 'z') {
                /* Check for case conservation and chars not allowed according to RFC */
 
                /* Reply with received hostname as data */
-               write_dns(dns_fd, q, in, domain_len);
+               /* No userid here, reply with lowest-grade downenc */
+               write_dns(dns_fd, q, in, domain_len, 'T');
                return;
        } else if(in[0] == 'S' || in[0] == 's') {
                int codec;
                struct encoder *enc;
-               if (domain_len != 4) { /* len = 4, example: "S15." */
-                       write_dns(dns_fd, q, "BADLEN", 6);
+               if (domain_len < 3) { /* len at least 3, example: "S15" */
+                       write_dns(dns_fd, q, "BADLEN", 6, 'T');
                        return;
                }
 
                userid = b32_8to5(in[1]);
                
                if (check_user_and_ip(userid, q) != 0) {
-                       write_dns(dns_fd, q, "BADIP", 5);
+                       write_dns(dns_fd, q, "BADIP", 5, 'T');
                        return; /* illegal id */
                }
                
@@ -416,90 +858,353 @@ handle_null_request(int tun_fd, int dns_fd, struct query *q, int domain_len)
                case 5: /* 5 bits per byte = base32 */
                        enc = get_base32_encoder();
                        user_switch_codec(userid, enc);
-                       write_dns(dns_fd, q, enc->name, strlen(enc->name));
+                       write_dns(dns_fd, q, enc->name, strlen(enc->name), users[userid].downenc);
                        break;
                case 6: /* 6 bits per byte = base64 */
                        enc = get_base64_encoder();
                        user_switch_codec(userid, enc);
-                       write_dns(dns_fd, q, enc->name, strlen(enc->name));
+                       write_dns(dns_fd, q, enc->name, strlen(enc->name), users[userid].downenc);
+                       break;
+               case 26: /* "2nd" 6 bits per byte = base64u, with underscore */
+                       enc = get_base64u_encoder();
+                       user_switch_codec(userid, enc);
+                       write_dns(dns_fd, q, enc->name, strlen(enc->name), users[userid].downenc);
+                       break;
+               case 7: /* 7 bits per byte = base128 */
+                       enc = get_base128_encoder();
+                       user_switch_codec(userid, enc);
+                       write_dns(dns_fd, q, enc->name, strlen(enc->name), users[userid].downenc);
+                       break;
+               default:
+                       write_dns(dns_fd, q, "BADCODEC", 8, users[userid].downenc);
+                       break;
+               }
+               return;
+       } else if(in[0] == 'O' || in[0] == 'o') {
+               if (domain_len < 3) { /* len at least 3, example: "O1T" */
+                       write_dns(dns_fd, q, "BADLEN", 6, 'T');
+                       return;
+               }
+
+               userid = b32_8to5(in[1]);
+
+               if (check_user_and_ip(userid, q) != 0) {
+                       write_dns(dns_fd, q, "BADIP", 5, 'T');
+                       return; /* illegal id */
+               }
+
+               switch (in[2]) {
+               case 'T':
+               case 't':
+                       users[userid].downenc = 'T';
+                       write_dns(dns_fd, q, "Base32", 6, users[userid].downenc);
+                       break;
+               case 'S':
+               case 's':
+                       users[userid].downenc = 'S';
+                       write_dns(dns_fd, q, "Base64", 6, users[userid].downenc);
+                       break;
+               case 'U':
+               case 'u':
+                       users[userid].downenc = 'U';
+                       write_dns(dns_fd, q, "Base64u", 7, users[userid].downenc);
+                       break;
+               case 'V':
+               case 'v':
+                       users[userid].downenc = 'V';
+                       write_dns(dns_fd, q, "Base128", 7, users[userid].downenc);
+                       break;
+               case 'R':
+               case 'r':
+                       users[userid].downenc = 'R';
+                       write_dns(dns_fd, q, "Raw", 3, users[userid].downenc);
+                       break;
+               case 'L':
+               case 'l':
+                       users[userid].lazy = 1;
+                       write_dns(dns_fd, q, "Lazy", 4, users[userid].downenc);
+                       break;
+               case 'I':
+               case 'i':
+                       users[userid].lazy = 0;
+                       write_dns(dns_fd, q, "Immediate", 9, users[userid].downenc);
                        break;
                default:
-                       write_dns(dns_fd, q, "BADCODEC", 8);
+                       write_dns(dns_fd, q, "BADCODEC", 8, users[userid].downenc);
+