]> git.meshlink.io Git - meshlink/blob - src/meshlink.c
Send out channel data immediately, bypassing the packet queue.
[meshlink] / src / meshlink.c
1 /*
2     meshlink.c -- Implementation of the MeshLink API.
3     Copyright (C) 2014-2018 Guus Sliepen <guus@meshlink.io>
4
5     This program is free software; you can redistribute it and/or modify
6     it under the terms of the GNU General Public License as published by
7     the Free Software Foundation; either version 2 of the License, or
8     (at your option) any later version.
9
10     This program is distributed in the hope that it will be useful,
11     but WITHOUT ANY WARRANTY; without even the implied warranty of
12     MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
13     GNU General Public License for more details.
14
15     You should have received a copy of the GNU General Public License along
16     with this program; if not, write to the Free Software Foundation, Inc.,
17     51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA.
18 */
19
20 #include "system.h"
21 #include <pthread.h>
22
23 #include "crypto.h"
24 #include "ecdsagen.h"
25 #include "logger.h"
26 #include "meshlink_internal.h"
27 #include "netutl.h"
28 #include "node.h"
29 #include "submesh.h"
30 #include "packmsg.h"
31 #include "prf.h"
32 #include "protocol.h"
33 #include "route.h"
34 #include "sockaddr.h"
35 #include "utils.h"
36 #include "xalloc.h"
37 #include "ed25519/sha512.h"
38 #include "discovery.h"
39 #include "devtools.h"
40 #include "graph.h"
41
42 #ifndef MSG_NOSIGNAL
43 #define MSG_NOSIGNAL 0
44 #endif
45 __thread meshlink_errno_t meshlink_errno;
46 meshlink_log_cb_t global_log_cb;
47 meshlink_log_level_t global_log_level;
48
49 typedef bool (*search_node_by_condition_t)(const node_t *, const void *);
50
51 static int rstrip(char *value) {
52         int len = strlen(value);
53
54         while(len && strchr("\t\r\n ", value[len - 1])) {
55                 value[--len] = 0;
56         }
57
58         return len;
59 }
60
61 static void get_canonical_address(node_t *n, char **hostname, char **port) {
62         if(!n->canonical_address) {
63                 return;
64         }
65
66         *hostname = xstrdup(n->canonical_address);
67         char *space = strchr(*hostname, ' ');
68
69         if(space) {
70                 *space++ = 0;
71                 *port = xstrdup(space);
72         }
73 }
74
75 static bool is_valid_hostname(const char *hostname) {
76         if(!*hostname) {
77                 return false;
78         }
79
80         for(const char *p = hostname; *p; p++) {
81                 if(!(isalnum(*p) || *p == '-' || *p == '.' || *p == ':')) {
82                         return false;
83                 }
84         }
85
86         return true;
87 }
88
89 static bool is_valid_port(const char *port) {
90         if(!*port) {
91                 return false;
92         }
93
94         if(isdigit(*port)) {
95                 char *end;
96                 unsigned long int result = strtoul(port, &end, 10);
97                 return result && result < 65536 && !*end;
98         }
99
100         for(const char *p = port; *p; p++) {
101                 if(!(isalnum(*p) || *p == '-')) {
102                         return false;
103                 }
104         }
105
106         return true;
107 }
108
109 static void set_timeout(int sock, int timeout) {
110 #ifdef _WIN32
111         DWORD tv = timeout;
112 #else
113         struct timeval tv;
114         tv.tv_sec = timeout / 1000;
115         tv.tv_usec = (timeout - tv.tv_sec * 1000) * 1000;
116 #endif
117         setsockopt(sock, SOL_SOCKET, SO_RCVTIMEO, &tv, sizeof(tv));
118         setsockopt(sock, SOL_SOCKET, SO_SNDTIMEO, &tv, sizeof(tv));
119 }
120
121 struct socket_in_netns_params {
122         int domain;
123         int type;
124         int protocol;
125         int netns;
126         int fd;
127 };
128
129 #ifdef HAVE_SETNS
130 static void *socket_in_netns_thread(void *arg) {
131         struct socket_in_netns_params *params = arg;
132
133         if(setns(params->netns, CLONE_NEWNET) == -1) {
134                 meshlink_errno = MESHLINK_EINVAL;
135                 return NULL;
136         }
137
138         params->fd = socket(params->domain, params->type, params->protocol);
139
140         return NULL;
141 }
142 #endif // HAVE_SETNS
143
144 static int socket_in_netns(int domain, int type, int protocol, int netns) {
145         if(netns == -1) {
146                 return socket(domain, type, protocol);
147         }
148
149 #ifdef HAVE_SETNS
150         struct socket_in_netns_params params = {domain, type, protocol, netns, -1};
151
152         pthread_t thr;
153
154         if(pthread_create(&thr, NULL, socket_in_netns_thread, &params) == 0) {
155                 pthread_join(thr, NULL);
156         }
157
158         return params.fd;
159 #else
160         return -1;
161 #endif // HAVE_SETNS
162
163 }
164
165 // Find out what local address a socket would use if we connect to the given address.
166 // We do this using connect() on a UDP socket, so the kernel has to resolve the address
167 // of both endpoints, but this will actually not send any UDP packet.
168 static bool getlocaladdr(char *destaddr, sockaddr_t *sa, socklen_t *salen, int netns) {
169         struct addrinfo *rai = NULL;
170         const struct addrinfo hint = {
171                 .ai_family = AF_UNSPEC,
172                 .ai_socktype = SOCK_DGRAM,
173                 .ai_protocol = IPPROTO_UDP,
174         };
175
176         if(getaddrinfo(destaddr, "80", &hint, &rai) || !rai) {
177                 return false;
178         }
179
180         int sock = socket_in_netns(rai->ai_family, rai->ai_socktype, rai->ai_protocol, netns);
181
182         if(sock == -1) {
183                 freeaddrinfo(rai);
184                 return false;
185         }
186
187         if(connect(sock, rai->ai_addr, rai->ai_addrlen) && !sockwouldblock(errno)) {
188                 closesocket(sock);
189                 freeaddrinfo(rai);
190                 return false;
191         }
192
193         freeaddrinfo(rai);
194
195         if(getsockname(sock, &sa->sa, salen)) {
196                 closesocket(sock);
197                 return false;
198         }
199
200         closesocket(sock);
201         return true;
202 }
203
204 static bool getlocaladdrname(char *destaddr, char *host, socklen_t hostlen, int netns) {
205         sockaddr_t sa;
206         socklen_t salen = sizeof(sa);
207
208         if(!getlocaladdr(destaddr, &sa, &salen, netns)) {
209                 return false;
210         }
211
212         if(getnameinfo(&sa.sa, salen, host, hostlen, NULL, 0, NI_NUMERICHOST | NI_NUMERICSERV)) {
213                 return false;
214         }
215
216         return true;
217 }
218
219 char *meshlink_get_external_address(meshlink_handle_t *mesh) {
220         return meshlink_get_external_address_for_family(mesh, AF_UNSPEC);
221 }
222
223 char *meshlink_get_external_address_for_family(meshlink_handle_t *mesh, int family) {
224         const char *url = mesh->external_address_url;
225
226         if(!url) {
227                 url = "http://meshlink.io/host.cgi";
228         }
229
230         /* Find the hostname part between the slashes */
231         if(strncmp(url, "http://", 7)) {
232                 abort();
233                 meshlink_errno = MESHLINK_EINTERNAL;
234                 return NULL;
235         }
236
237         const char *begin = url + 7;
238
239         const char *end = strchr(begin, '/');
240
241         if(!end) {
242                 end = begin + strlen(begin);
243         }
244
245         /* Make a copy */
246         char host[end - begin + 1];
247         strncpy(host, begin, end - begin);
248         host[end - begin] = 0;
249
250         char *port = strchr(host, ':');
251
252         if(port) {
253                 *port++ = 0;
254         }
255
256         logger(mesh, MESHLINK_DEBUG, "Trying to discover externally visible hostname...\n");
257         struct addrinfo *ai = str2addrinfo(host, port ? port : "80", SOCK_STREAM);
258         char line[256];
259         char *hostname = NULL;
260
261         for(struct addrinfo *aip = ai; aip; aip = aip->ai_next) {
262                 if(family != AF_UNSPEC && aip->ai_family != family) {
263                         continue;
264                 }
265
266                 int s = socket_in_netns(aip->ai_family, aip->ai_socktype, aip->ai_protocol, mesh->netns);
267
268                 if(s >= 0) {
269                         set_timeout(s, 5000);
270
271                         if(connect(s, aip->ai_addr, aip->ai_addrlen)) {
272                                 closesocket(s);
273                                 s = -1;
274                         }
275                 }
276
277                 if(s >= 0) {
278                         send(s, "GET ", 4, 0);
279                         send(s, url, strlen(url), 0);
280                         send(s, " HTTP/1.0\r\n\r\n", 13, 0);
281                         int len = recv(s, line, sizeof(line) - 1, MSG_WAITALL);
282
283                         if(len > 0) {
284                                 line[len] = 0;
285
286                                 if(line[len - 1] == '\n') {
287                                         line[--len] = 0;
288                                 }
289
290                                 char *p = strrchr(line, '\n');
291
292                                 if(p && p[1]) {
293                                         hostname = xstrdup(p + 1);
294                                 }
295                         }
296
297                         closesocket(s);
298
299                         if(hostname) {
300                                 break;
301                         }
302                 }
303         }
304
305         if(ai) {
306                 freeaddrinfo(ai);
307         }
308
309         // Check that the hostname is reasonable
310         if(hostname && !is_valid_hostname(hostname)) {
311                 free(hostname);
312                 hostname = NULL;
313         }
314
315         if(!hostname) {
316                 meshlink_errno = MESHLINK_ERESOLV;
317         }
318
319         return hostname;
320 }
321
322 static bool is_localaddr(sockaddr_t *sa) {
323         switch(sa->sa.sa_family) {
324         case AF_INET:
325                 return *(uint8_t *)(&sa->in.sin_addr.s_addr) == 127;
326
327         case AF_INET6: {
328                 uint16_t first = sa->in6.sin6_addr.s6_addr[0] << 8 | sa->in6.sin6_addr.s6_addr[1];
329                 return first == 0 || (first & 0xffc0) == 0xfe80;
330         }
331
332         default:
333                 return false;
334         }
335 }
336
337 char *meshlink_get_local_address_for_family(meshlink_handle_t *mesh, int family) {
338         (void)mesh;
339
340         // Determine address of the local interface used for outgoing connections.
341         char localaddr[NI_MAXHOST];
342         bool success = false;
343
344         if(family == AF_INET) {
345                 success = getlocaladdrname("93.184.216.34", localaddr, sizeof(localaddr), mesh->netns);
346         } else if(family == AF_INET6) {
347                 success = getlocaladdrname("2606:2800:220:1:248:1893:25c8:1946", localaddr, sizeof(localaddr), mesh->netns);
348         }
349
350 #ifdef HAVE_GETIFADDRS
351
352         if(!success) {
353                 struct ifaddrs *ifa = NULL;
354                 getifaddrs(&ifa);
355
356                 for(struct ifaddrs *ifap = ifa; ifap; ifap = ifap->ifa_next) {
357                         sockaddr_t *sa = (sockaddr_t *)ifap->ifa_addr;
358
359                         if(sa->sa.sa_family != family) {
360                                 continue;
361                         }
362
363                         if(is_localaddr(sa)) {
364                                 continue;
365                         }
366
367                         if(!getnameinfo(&sa->sa, SALEN(sa->sa), localaddr, sizeof(localaddr), NULL, 0, NI_NUMERICHOST | NI_NUMERICSERV)) {
368                                 success = true;
369                                 break;
370                         }
371                 }
372
373                 freeifaddrs(ifa);
374         }
375
376 #endif
377
378         if(!success) {
379                 meshlink_errno = MESHLINK_ENETWORK;
380                 return NULL;
381         }
382
383         return xstrdup(localaddr);
384 }
385
386 void remove_duplicate_hostnames(char *host[], char *port[], int n) {
387         for(int i = 0; i < n; i++) {
388                 if(!host[i]) {
389                         continue;
390                 }
391
392                 // Ignore duplicate hostnames
393                 bool found = false;
394
395                 for(int j = 0; j < i; j++) {
396                         if(!host[j]) {
397                                 continue;
398                         }
399
400                         if(strcmp(host[i], host[j])) {
401                                 continue;
402                         }
403
404                         if(strcmp(port[i], port[j])) {
405                                 continue;
406                         }
407
408                         found = true;
409                         break;
410                 }
411
412                 if(found || !is_valid_hostname(host[i])) {
413                         free(host[i]);
414                         free(port[i]);
415                         host[i] = NULL;
416                         port[i] = NULL;
417                         continue;
418                 }
419         }
420 }
421
422 // This gets the hostname part for use in invitation URLs
423 static char *get_my_hostname(meshlink_handle_t *mesh, uint32_t flags) {
424         int count = 4 + (mesh->invitation_addresses ? mesh->invitation_addresses->count : 0);
425         int n = 0;
426         char *hostname[count];
427         char *port[count];
428         char *hostport = NULL;
429
430         memset(hostname, 0, sizeof(hostname));
431         memset(port, 0, sizeof(port));
432
433         if(!(flags & (MESHLINK_INVITE_LOCAL | MESHLINK_INVITE_PUBLIC))) {
434                 flags |= MESHLINK_INVITE_LOCAL | MESHLINK_INVITE_PUBLIC;
435         }
436
437         if(!(flags & (MESHLINK_INVITE_IPV4 | MESHLINK_INVITE_IPV6))) {
438                 flags |= MESHLINK_INVITE_IPV4 | MESHLINK_INVITE_IPV6;
439         }
440
441         // Add all explicitly set invitation addresses
442         if(mesh->invitation_addresses) {
443                 for list_each(char, combo, mesh->invitation_addresses) {
444                         hostname[n] = xstrdup(combo);
445                         char *slash = strrchr(hostname[n], '/');
446
447                         if(slash) {
448                                 *slash = 0;
449                                 port[n] = xstrdup(slash + 1);
450                         }
451
452                         n++;
453                 }
454         }
455
456         // Add local addresses if requested
457         if(flags & MESHLINK_INVITE_LOCAL) {
458                 if(flags & MESHLINK_INVITE_IPV4) {
459                         hostname[n++] = meshlink_get_local_address_for_family(mesh, AF_INET);
460                 }
461
462                 if(flags & MESHLINK_INVITE_IPV6) {
463                         hostname[n++] = meshlink_get_local_address_for_family(mesh, AF_INET6);
464                 }
465         }
466
467         // Add public/canonical addresses if requested
468         if(flags & MESHLINK_INVITE_PUBLIC) {
469                 // Try the CanonicalAddress first
470                 get_canonical_address(mesh->self, &hostname[n], &port[n]);
471
472                 if(!hostname[n] && count == 4) {
473                         if(flags & MESHLINK_INVITE_IPV4) {
474                                 hostname[n++] = meshlink_get_external_address_for_family(mesh, AF_INET);
475                         }
476
477                         if(flags & MESHLINK_INVITE_IPV6) {
478                                 hostname[n++] = meshlink_get_external_address_for_family(mesh, AF_INET6);
479                         }
480                 } else {
481                         n++;
482                 }
483         }
484
485         for(int i = 0; i < n; i++) {
486                 // Ensure we always have a port number
487                 if(hostname[i] && !port[i]) {
488                         port[i] = xstrdup(mesh->myport);
489                 }
490         }
491
492         remove_duplicate_hostnames(hostname, port, n);
493
494         // Resolve the hostnames
495         for(int i = 0; i < n; i++) {
496                 if(!hostname[i]) {
497                         continue;
498                 }
499
500                 // Convert what we have to a sockaddr
501                 struct addrinfo *ai_in, *ai_out;
502                 struct addrinfo hint = {
503                         .ai_family = AF_UNSPEC,
504                         .ai_flags = AI_NUMERICSERV,
505                         .ai_socktype = SOCK_STREAM,
506                 };
507                 int err = getaddrinfo(hostname[i], port[i], &hint, &ai_in);
508
509                 if(err || !ai_in) {
510                         continue;
511                 }
512
513                 // Remember the address(es)
514                 for(struct addrinfo *aip = ai_in; aip; aip = aip->ai_next) {
515                         node_add_recent_address(mesh, mesh->self, (sockaddr_t *)aip->ai_addr);
516                 }
517
518                 if(flags & MESHLINK_INVITE_NUMERIC) {
519                         // We don't need to do any further conversion
520                         freeaddrinfo(ai_in);
521                         continue;
522                 }
523
524                 // Convert it to a hostname
525                 char resolved_host[NI_MAXHOST];
526                 char resolved_port[NI_MAXSERV];
527                 err = getnameinfo(ai_in->ai_addr, ai_in->ai_addrlen, resolved_host, sizeof resolved_host, resolved_port, sizeof resolved_port, NI_NUMERICSERV);
528
529                 if(err || !is_valid_hostname(resolved_host)) {
530                         freeaddrinfo(ai_in);
531                         continue;
532                 }
533
534                 // Convert the hostname back to a sockaddr
535                 hint.ai_family = ai_in->ai_family;
536                 err = getaddrinfo(resolved_host, resolved_port, &hint, &ai_out);
537
538                 if(err || !ai_out) {
539                         freeaddrinfo(ai_in);
540                         continue;
541                 }
542
543                 // Check if it's still the same sockaddr
544                 if(ai_in->ai_addrlen != ai_out->ai_addrlen || memcmp(ai_in->ai_addr, ai_out->ai_addr, ai_in->ai_addrlen)) {
545                         freeaddrinfo(ai_in);
546                         freeaddrinfo(ai_out);
547                         continue;
548                 }
549
550                 // Yes: replace the hostname with the resolved one
551                 free(hostname[i]);
552                 hostname[i] = xstrdup(resolved_host);
553
554                 freeaddrinfo(ai_in);
555                 freeaddrinfo(ai_out);
556         }
557
558         // Remove duplicates again, since IPv4 and IPv6 addresses might map to the same hostname
559         remove_duplicate_hostnames(hostname, port, n);
560
561         // Concatenate all unique address to the hostport string
562         for(int i = 0; i < n; i++) {
563                 if(!hostname[i]) {
564                         continue;
565                 }
566
567                 // Append the address to the hostport string
568                 char *newhostport;
569                 xasprintf(&newhostport, (strchr(hostname[i], ':') ? "%s%s[%s]:%s" : "%s%s%s:%s"), hostport ? hostport : "", hostport ? "," : "", hostname[i], port[i]);
570                 free(hostport);
571                 hostport = newhostport;
572
573                 free(hostname[i]);
574                 free(port[i]);
575         }
576
577         return hostport;
578 }
579
580 static bool try_bind(meshlink_handle_t *mesh, int port) {
581         struct addrinfo *ai = NULL;
582         struct addrinfo hint = {
583                 .ai_flags = AI_PASSIVE,
584                 .ai_family = AF_UNSPEC,
585                 .ai_socktype = SOCK_STREAM,
586                 .ai_protocol = IPPROTO_TCP,
587         };
588
589         char portstr[16];
590         snprintf(portstr, sizeof(portstr), "%d", port);
591
592         if(getaddrinfo(NULL, portstr, &hint, &ai) || !ai) {
593                 return false;
594         }
595
596         bool success = false;
597
598         for(struct addrinfo *aip = ai; aip; aip = aip->ai_next) {
599                 /* Try to bind to TCP. */
600
601                 int tcp_fd = setup_tcp_listen_socket(mesh, aip);
602
603                 if(tcp_fd == -1) {
604                         if(errno == EADDRINUSE) {
605                                 /* If this port is in use for any address family, avoid it. */
606                                 success = false;
607                                 break;
608                         } else {
609                                 continue;
610                         }
611                 }
612
613                 /* If TCP worked, then we require that UDP works as well. */
614
615                 int udp_fd = setup_udp_listen_socket(mesh, aip);
616
617                 if(udp_fd == -1) {
618                         closesocket(tcp_fd);
619                         success = false;
620                         break;
621                 }
622
623                 closesocket(tcp_fd);
624                 closesocket(udp_fd);
625                 success = true;
626         }
627
628         freeaddrinfo(ai);
629         return success;
630 }
631
632 int check_port(meshlink_handle_t *mesh) {
633         for(int i = 0; i < 1000; i++) {
634                 int port = 0x1000 + prng(mesh, 0x8000);
635
636                 if(try_bind(mesh, port)) {
637                         free(mesh->myport);
638                         xasprintf(&mesh->myport, "%d", port);
639                         return port;
640                 }
641         }
642
643         meshlink_errno = MESHLINK_ENETWORK;
644         logger(mesh, MESHLINK_DEBUG, "Could not find any available network port.\n");
645         return 0;
646 }
647
648 static bool write_main_config_files(meshlink_handle_t *mesh) {
649         if(!mesh->confbase) {
650                 return true;
651         }
652
653         uint8_t buf[4096];
654
655         /* Write the main config file */
656         packmsg_output_t out = {buf, sizeof buf};
657
658         packmsg_add_uint32(&out, MESHLINK_CONFIG_VERSION);
659         packmsg_add_str(&out, mesh->name);
660         packmsg_add_bin(&out, ecdsa_get_private_key(mesh->private_key), 96);
661         packmsg_add_bin(&out, ecdsa_get_private_key(mesh->invitation_key), 96);
662         packmsg_add_uint16(&out, atoi(mesh->myport));
663
664         if(!packmsg_output_ok(&out)) {
665                 return false;
666         }
667
668         config_t config = {buf, packmsg_output_size(&out, buf)};
669
670         if(!main_config_write(mesh, "current", &config, mesh->config_key)) {
671                 return false;
672         }
673
674         /* Write our own host config file */
675         if(!node_write_config(mesh, mesh->self)) {
676                 return false;
677         }
678
679         return true;
680 }
681
682 typedef struct {
683         meshlink_handle_t *mesh;
684         int sock;
685         char cookie[18 + 32];
686         char hash[18];
687         bool success;
688         sptps_t sptps;
689         char *data;
690         size_t thedatalen;
691         size_t blen;
692         char line[4096];
693         char buffer[4096];
694 } join_state_t;
695
696 static bool finalize_join(join_state_t *state, const void *buf, uint16_t len) {
697         meshlink_handle_t *mesh = state->mesh;
698         packmsg_input_t in = {buf, len};
699         uint32_t version = packmsg_get_uint32(&in);
700
701         if(version != MESHLINK_INVITATION_VERSION) {
702                 logger(mesh, MESHLINK_ERROR, "Invalid invitation version!\n");
703                 return false;
704         }
705
706         char *name = packmsg_get_str_dup(&in);
707         packmsg_skip_element(&in); /* submesh */
708         dev_class_t devclass = packmsg_get_int32(&in);
709         uint32_t count = packmsg_get_array(&in);
710
711         if(!name) {
712                 logger(mesh, MESHLINK_DEBUG, "No Name found in invitation!\n");
713                 return false;
714         }
715
716         if(!check_id(name)) {
717                 logger(mesh, MESHLINK_DEBUG, "Invalid Name found in invitation: %s!\n", name);
718                 free(name);
719                 return false;
720         }
721
722         if(!count) {
723                 logger(mesh, MESHLINK_ERROR, "Incomplete invitation file!\n");
724                 free(name);
725                 return false;
726         }
727
728         free(mesh->name);
729         free(mesh->self->name);
730         mesh->name = name;
731         mesh->self->name = xstrdup(name);
732         mesh->self->devclass = devclass == DEV_CLASS_UNKNOWN ? mesh->devclass : devclass;
733
734         // Initialize configuration directory
735         if(!config_init(mesh, "current")) {
736                 return false;
737         }
738
739         if(!write_main_config_files(mesh)) {
740                 return false;
741         }
742
743         // Write host config files
744         for(uint32_t i = 0; i < count; i++) {
745                 const void *data;
746                 uint32_t len = packmsg_get_bin_raw(&in, &data);
747
748                 if(!len) {
749                         logger(mesh, MESHLINK_ERROR, "Incomplete invitation file!\n");
750                         return false;
751                 }
752
753                 packmsg_input_t in2 = {data, len};
754                 uint32_t version = packmsg_get_uint32(&in2);
755                 char *name = packmsg_get_str_dup(&in2);
756
757                 if(!packmsg_input_ok(&in2) || version != MESHLINK_CONFIG_VERSION || !check_id(name)) {
758                         free(name);
759                         packmsg_input_invalidate(&in);
760                         break;
761                 }
762
763                 if(!check_id(name)) {
764                         free(name);
765                         break;
766                 }
767
768                 if(!strcmp(name, mesh->name)) {
769                         logger(mesh, MESHLINK_DEBUG, "Secondary chunk would overwrite our own host config file.\n");
770                         free(name);
771                         meshlink_errno = MESHLINK_EPEER;
772                         return false;
773                 }
774
775                 node_t *n = new_node();
776                 n->name = name;
777
778                 config_t config = {data, len};
779
780                 if(!node_read_from_config(mesh, n, &config)) {
781                         free_node(n);
782                         logger(mesh, MESHLINK_ERROR, "Invalid host config file in invitation file!\n");
783                         meshlink_errno = MESHLINK_EPEER;
784                         return false;
785                 }
786
787                 if(i == 0) {
788                         /* The first host config file is of the inviter itself;
789                          * remember the address we are currently using for the invitation connection.
790                          */
791                         sockaddr_t sa;
792                         socklen_t salen = sizeof(sa);
793
794                         if(getpeername(state->sock, &sa.sa, &salen) == 0) {
795                                 node_add_recent_address(mesh, n, &sa);
796                         }
797                 }
798
799                 /* Clear the reachability times, since we ourself have never seen these nodes yet */
800                 n->last_reachable = 0;
801                 n->last_unreachable = 0;
802
803                 if(!node_write_config(mesh, n)) {
804                         free_node(n);
805                         return false;
806                 }
807
808                 node_add(mesh, n);
809         }
810
811         /* Ensure the configuration directory metadata is on disk */
812         if(!config_sync(mesh, "current") || !sync_path(mesh->confbase)) {
813                 return false;
814         }
815
816         if(!mesh->inviter_commits_first) {
817                 devtool_set_inviter_commits_first(false);
818         }
819
820         sptps_send_record(&state->sptps, 1, ecdsa_get_public_key(mesh->private_key), 32);
821
822         logger(mesh, MESHLINK_DEBUG, "Configuration stored in: %s\n", mesh->confbase);
823
824         return true;
825 }
826
827 static bool invitation_send(void *handle, uint8_t type, const void *data, size_t len) {
828         (void)type;
829         join_state_t *state = handle;
830         const char *ptr = data;
831
832         while(len) {
833                 int result = send(state->sock, ptr, len, 0);
834
835                 if(result == -1 && errno == EINTR) {
836                         continue;
837                 } else if(result <= 0) {
838                         return false;
839                 }
840
841                 ptr += result;
842                 len -= result;
843         }
844
845         return true;
846 }
847
848 static bool invitation_receive(void *handle, uint8_t type, const void *msg, uint16_t len) {
849         join_state_t *state = handle;
850         meshlink_handle_t *mesh = state->mesh;
851
852         if(mesh->inviter_commits_first) {
853                 switch(type) {
854                 case SPTPS_HANDSHAKE:
855                         return sptps_send_record(&state->sptps, 2, state->cookie, 18 + 32);
856
857                 case 1:
858                         break;
859
860                 case 0:
861                         if(!finalize_join(state, msg, len)) {
862                                 return false;
863                         }
864
865                         logger(mesh, MESHLINK_DEBUG, "Invitation successfully accepted.\n");
866                         shutdown(state->sock, SHUT_RDWR);
867                         state->success = true;
868                         break;
869
870                 default:
871                         return false;
872                 }
873         } else {
874                 switch(type) {
875                 case SPTPS_HANDSHAKE:
876                         return sptps_send_record(&state->sptps, 0, state->cookie, 18);
877
878                 case 0:
879                         return finalize_join(state, msg, len);
880
881                 case 1:
882                         logger(mesh, MESHLINK_DEBUG, "Invitation successfully accepted.\n");
883                         shutdown(state->sock, SHUT_RDWR);
884                         state->success = true;
885                         break;
886
887                 default:
888                         return false;
889                 }
890         }
891
892         return true;
893 }
894
895 static bool recvline(join_state_t *state) {
896         char *newline = NULL;
897
898         while(!(newline = memchr(state->buffer, '\n', state->blen))) {
899                 int result = recv(state->sock, state->buffer + state->blen, sizeof(state)->buffer - state->blen, 0);
900
901                 if(result == -1 && errno == EINTR) {
902                         continue;
903                 } else if(result <= 0) {
904                         return false;
905                 }
906
907                 state->blen += result;
908         }
909
910         if((size_t)(newline - state->buffer) >= sizeof(state->line)) {
911                 return false;
912         }
913
914         size_t len = newline - state->buffer;
915
916         memcpy(state->line, state->buffer, len);
917         state->line[len] = 0;
918         memmove(state->buffer, newline + 1, state->blen - len - 1);
919         state->blen -= len + 1;
920
921         return true;
922 }
923
924 static bool sendline(int fd, char *format, ...) {
925         char buffer[4096];
926         char *p = buffer;
927         int blen = 0;
928         va_list ap;
929
930         va_start(ap, format);
931         blen = vsnprintf(buffer, sizeof(buffer), format, ap);
932         va_end(ap);
933
934         if(blen < 1 || (size_t)blen >= sizeof(buffer)) {
935                 return false;
936         }
937
938         buffer[blen] = '\n';
939         blen++;
940
941         while(blen) {
942                 int result = send(fd, p, blen, MSG_NOSIGNAL);
943
944                 if(result == -1 && errno == EINTR) {
945                         continue;
946                 } else if(result <= 0) {
947                         return false;
948                 }
949
950                 p += result;
951                 blen -= result;
952         }
953
954         return true;
955 }
956
957 static const char *errstr[] = {
958         [MESHLINK_OK] = "No error",
959         [MESHLINK_EINVAL] = "Invalid argument",
960         [MESHLINK_ENOMEM] = "Out of memory",
961         [MESHLINK_ENOENT] = "No such node",
962         [MESHLINK_EEXIST] = "Node already exists",
963         [MESHLINK_EINTERNAL] = "Internal error",
964         [MESHLINK_ERESOLV] = "Could not resolve hostname",
965         [MESHLINK_ESTORAGE] = "Storage error",
966         [MESHLINK_ENETWORK] = "Network error",
967         [MESHLINK_EPEER] = "Error communicating with peer",
968         [MESHLINK_ENOTSUP] = "Operation not supported",
969         [MESHLINK_EBUSY] = "MeshLink instance already in use",
970         [MESHLINK_EBLACKLISTED] = "Node is blacklisted",
971 };
972
973 const char *meshlink_strerror(meshlink_errno_t err) {
974         if((int)err < 0 || err >= sizeof(errstr) / sizeof(*errstr)) {
975                 return "Invalid error code";
976         }
977
978         return errstr[err];
979 }
980
981 static bool ecdsa_keygen(meshlink_handle_t *mesh) {
982         logger(mesh, MESHLINK_DEBUG, "Generating ECDSA keypairs:\n");
983
984         mesh->private_key = ecdsa_generate();
985         mesh->invitation_key = ecdsa_generate();
986
987         if(!mesh->private_key || !mesh->invitation_key) {
988                 logger(mesh, MESHLINK_DEBUG, "Error during key generation!\n");
989                 meshlink_errno = MESHLINK_EINTERNAL;
990                 return false;
991         }
992
993         logger(mesh, MESHLINK_DEBUG, "Done.\n");
994
995         return true;
996 }
997
998 static struct timeval idle(event_loop_t *loop, void *data) {
999         (void)loop;
1000         meshlink_handle_t *mesh = data;
1001         struct timeval t, tmin = {3600, 0};
1002
1003         for splay_each(node_t, n, mesh->nodes) {
1004                 if(!n->utcp) {
1005                         continue;
1006                 }
1007
1008                 t = utcp_timeout(n->utcp);
1009
1010                 if(timercmp(&t, &tmin, <)) {
1011                         tmin = t;
1012                 }
1013         }
1014
1015         return tmin;
1016 }
1017
1018 // Get our local address(es) by simulating connecting to an Internet host.
1019 static void add_local_addresses(meshlink_handle_t *mesh) {
1020         sockaddr_t sa;
1021         sa.storage.ss_family = AF_UNKNOWN;
1022         socklen_t salen = sizeof(sa);
1023
1024         // IPv4 example.org
1025
1026         if(getlocaladdr("93.184.216.34", &sa, &salen, mesh->netns)) {
1027                 sa.in.sin_port = ntohs(atoi(mesh->myport));
1028                 node_add_recent_address(mesh, mesh->self, &sa);
1029         }
1030
1031         // IPv6 example.org
1032
1033         salen = sizeof(sa);
1034
1035         if(getlocaladdr("2606:2800:220:1:248:1893:25c8:1946", &sa, &salen, mesh->netns)) {
1036                 sa.in6.sin6_port = ntohs(atoi(mesh->myport));
1037                 node_add_recent_address(mesh, mesh->self, &sa);
1038         }
1039 }
1040
1041 static bool meshlink_setup(meshlink_handle_t *mesh) {
1042         if(!config_destroy(mesh->confbase, "new")) {
1043                 logger(mesh, MESHLINK_ERROR, "Could not delete configuration in %s/new: %s\n", mesh->confbase, strerror(errno));
1044                 meshlink_errno = MESHLINK_ESTORAGE;
1045                 return false;
1046         }
1047
1048         if(!config_destroy(mesh->confbase, "old")) {
1049                 logger(mesh, MESHLINK_ERROR, "Could not delete configuration in %s/old: %s\n", mesh->confbase, strerror(errno));
1050                 meshlink_errno = MESHLINK_ESTORAGE;
1051                 return false;
1052         }
1053
1054         if(!config_init(mesh, "current")) {
1055                 logger(mesh, MESHLINK_ERROR, "Could not set up configuration in %s/current: %s\n", mesh->confbase, strerror(errno));
1056                 meshlink_errno = MESHLINK_ESTORAGE;
1057                 return false;
1058         }
1059
1060         if(!ecdsa_keygen(mesh)) {
1061                 meshlink_errno = MESHLINK_EINTERNAL;
1062                 return false;
1063         }
1064
1065         if(check_port(mesh) == 0) {
1066                 meshlink_errno = MESHLINK_ENETWORK;
1067                 return false;
1068         }
1069
1070         /* Create a node for ourself */
1071
1072         mesh->self = new_node();
1073         mesh->self->name = xstrdup(mesh->name);
1074         mesh->self->devclass = mesh->devclass;
1075         mesh->self->ecdsa = ecdsa_set_public_key(ecdsa_get_public_key(mesh->private_key));
1076         mesh->self->session_id = mesh->session_id;
1077
1078         if(!write_main_config_files(mesh)) {
1079                 logger(mesh, MESHLINK_ERROR, "Could not write main config files into %s/current: %s\n", mesh->confbase, strerror(errno));
1080                 meshlink_errno = MESHLINK_ESTORAGE;
1081                 return false;
1082         }
1083
1084         /* Ensure the configuration directory metadata is on disk */
1085         if(!config_sync(mesh, "current")) {
1086                 return false;
1087         }
1088
1089         return true;
1090 }
1091
1092 static bool meshlink_read_config(meshlink_handle_t *mesh) {
1093         config_t config;
1094
1095         if(!main_config_read(mesh, "current", &config, mesh->config_key)) {
1096                 logger(NULL, MESHLINK_ERROR, "Could not read main configuration file!");
1097                 return false;
1098         }
1099
1100         packmsg_input_t in = {config.buf, config.len};
1101         const void *private_key;
1102         const void *invitation_key;
1103
1104         uint32_t version = packmsg_get_uint32(&in);
1105         char *name = packmsg_get_str_dup(&in);
1106         uint32_t private_key_len = packmsg_get_bin_raw(&in, &private_key);
1107         uint32_t invitation_key_len = packmsg_get_bin_raw(&in, &invitation_key);
1108         uint16_t myport = packmsg_get_uint16(&in);
1109
1110         if(!packmsg_done(&in) || version != MESHLINK_CONFIG_VERSION || private_key_len != 96 || invitation_key_len != 96) {
1111                 logger(NULL, MESHLINK_ERROR, "Error parsing main configuration file!");
1112                 free(name);
1113                 config_free(&config);
1114                 return false;
1115         }
1116
1117 #if 0
1118
1119         // TODO: check this?
1120         if(mesh->name && strcmp(mesh->name, name)) {
1121                 logger(NULL, MESHLINK_ERROR, "Configuration is for a different name (%s)!", name);
1122                 meshlink_errno = MESHLINK_ESTORAGE;
1123                 free(name);
1124                 config_free(&config);
1125                 return false;
1126         }
1127
1128 #endif
1129
1130         free(mesh->name);
1131         mesh->name = name;
1132         xasprintf(&mesh->myport, "%u", myport);
1133         mesh->private_key = ecdsa_set_private_key(private_key);
1134         mesh->invitation_key = ecdsa_set_private_key(invitation_key);
1135         config_free(&config);
1136
1137         /* Create a node for ourself and read our host configuration file */
1138
1139         mesh->self = new_node();
1140         mesh->self->name = xstrdup(name);
1141         mesh->self->devclass = mesh->devclass;
1142         mesh->self->session_id = mesh->session_id;
1143
1144         if(!node_read_public_key(mesh, mesh->self)) {
1145                 logger(NULL, MESHLINK_ERROR, "Could not read our host configuration file!");
1146                 meshlink_errno = MESHLINK_ESTORAGE;
1147                 free_node(mesh->self);
1148                 mesh->self = NULL;
1149                 return false;
1150         }
1151
1152         return true;
1153 }
1154
1155 #ifdef HAVE_SETNS
1156 static void *setup_network_in_netns_thread(void *arg) {
1157         meshlink_handle_t *mesh = arg;
1158
1159         if(setns(mesh->netns, CLONE_NEWNET) != 0) {
1160                 return NULL;
1161         }
1162
1163         bool success = setup_network(mesh);
1164         return success ? arg : NULL;
1165 }
1166 #endif // HAVE_SETNS
1167
1168 meshlink_open_params_t *meshlink_open_params_init(const char *confbase, const char *name, const char *appname, dev_class_t devclass) {
1169         if(!confbase || !*confbase) {
1170                 logger(NULL, MESHLINK_ERROR, "No confbase given!\n");
1171                 meshlink_errno = MESHLINK_EINVAL;
1172                 return NULL;
1173         }
1174
1175         if(!appname || !*appname) {
1176                 logger(NULL, MESHLINK_ERROR, "No appname given!\n");
1177                 meshlink_errno = MESHLINK_EINVAL;
1178                 return NULL;
1179         }
1180
1181         if(strchr(appname, ' ')) {
1182                 logger(NULL, MESHLINK_ERROR, "Invalid appname given!\n");
1183                 meshlink_errno = MESHLINK_EINVAL;
1184                 return NULL;
1185         }
1186
1187         if(!name || !*name) {
1188                 logger(NULL, MESHLINK_ERROR, "No name given!\n");
1189                 meshlink_errno = MESHLINK_EINVAL;
1190                 return NULL;
1191         };
1192
1193         if(!check_id(name)) {
1194                 logger(NULL, MESHLINK_ERROR, "Invalid name given!\n");
1195                 meshlink_errno = MESHLINK_EINVAL;
1196                 return NULL;
1197         }
1198
1199         if(devclass < 0 || devclass >= DEV_CLASS_COUNT) {
1200                 logger(NULL, MESHLINK_ERROR, "Invalid devclass given!\n");
1201                 meshlink_errno = MESHLINK_EINVAL;
1202                 return NULL;
1203         }
1204
1205         meshlink_open_params_t *params = xzalloc(sizeof * params);
1206
1207         params->confbase = xstrdup(confbase);
1208         params->name = xstrdup(name);
1209         params->appname = xstrdup(appname);
1210         params->devclass = devclass;
1211         params->netns = -1;
1212
1213         return params;
1214 }
1215
1216 bool meshlink_open_params_set_netns(meshlink_open_params_t *params, int netns) {
1217         if(!params) {
1218                 meshlink_errno = MESHLINK_EINVAL;
1219                 return false;
1220         }
1221
1222         params->netns = netns;
1223
1224         return true;
1225 }
1226
1227 bool meshlink_open_params_set_storage_key(meshlink_open_params_t *params, const void *key, size_t keylen) {
1228         if(!params) {
1229                 meshlink_errno = MESHLINK_EINVAL;
1230                 return false;
1231         }
1232
1233         if((!key && keylen) || (key && !keylen)) {
1234                 logger(NULL, MESHLINK_ERROR, "Invalid key length!\n");
1235                 meshlink_errno = MESHLINK_EINVAL;
1236                 return false;
1237         }
1238
1239         params->key = key;
1240         params->keylen = keylen;
1241
1242         return true;
1243 }
1244
1245 bool meshlink_encrypted_key_rotate(meshlink_handle_t *mesh, const void *new_key, size_t new_keylen) {
1246         if(!mesh || !new_key || !new_keylen) {
1247                 logger(mesh, MESHLINK_ERROR, "Invalid arguments given!\n");
1248                 meshlink_errno = MESHLINK_EINVAL;
1249                 return false;
1250         }
1251
1252         pthread_mutex_lock(&mesh->mutex);
1253
1254         // Create hash for the new key
1255         void *new_config_key;
1256         new_config_key = xmalloc(CHACHA_POLY1305_KEYLEN);
1257
1258         if(!prf(new_key, new_keylen, "MeshLink configuration key", 26, new_config_key, CHACHA_POLY1305_KEYLEN)) {
1259                 logger(mesh, MESHLINK_ERROR, "Error creating new configuration key!\n");
1260                 meshlink_errno = MESHLINK_EINTERNAL;
1261                 pthread_mutex_unlock(&mesh->mutex);
1262                 return false;
1263         }
1264
1265         // Copy contents of the "current" confbase sub-directory to "new" confbase sub-directory with the new key
1266
1267         if(!config_copy(mesh, "current", mesh->config_key, "new", new_config_key)) {
1268                 logger(mesh, MESHLINK_ERROR, "Could not set up configuration in %s/old: %s\n", mesh->confbase, strerror(errno));
1269                 meshlink_errno = MESHLINK_ESTORAGE;
1270                 pthread_mutex_unlock(&mesh->mutex);
1271                 return false;
1272         }
1273
1274         devtool_keyrotate_probe(1);
1275
1276         // Rename confbase/current/ to confbase/old
1277
1278         if(!config_rename(mesh, "current", "old")) {
1279                 logger(mesh, MESHLINK_ERROR, "Cannot rename %s/current to %s/old\n", mesh->confbase, mesh->confbase);
1280                 meshlink_errno = MESHLINK_ESTORAGE;
1281                 pthread_mutex_unlock(&mesh->mutex);
1282                 return false;
1283         }
1284
1285         devtool_keyrotate_probe(2);
1286
1287         // Rename confbase/new/ to confbase/current
1288
1289         if(!config_rename(mesh, "new", "current")) {
1290                 logger(mesh, MESHLINK_ERROR, "Cannot rename %s/new to %s/current\n", mesh->confbase, mesh->confbase);
1291                 meshlink_errno = MESHLINK_ESTORAGE;
1292                 pthread_mutex_unlock(&mesh->mutex);
1293                 return false;
1294         }
1295
1296         devtool_keyrotate_probe(3);
1297
1298         // Cleanup the "old" confbase sub-directory
1299
1300         if(!config_destroy(mesh->confbase, "old")) {
1301                 pthread_mutex_unlock(&mesh->mutex);
1302                 return false;
1303         }
1304
1305         // Change the mesh handle key with new key
1306
1307         free(mesh->config_key);
1308         mesh->config_key = new_config_key;
1309
1310         pthread_mutex_unlock(&mesh->mutex);
1311
1312         return true;
1313 }
1314
1315 void meshlink_open_params_free(meshlink_open_params_t *params) {
1316         if(!params) {
1317                 meshlink_errno = MESHLINK_EINVAL;
1318                 return;
1319         }
1320
1321         free(params->confbase);
1322         free(params->name);
1323         free(params->appname);
1324
1325         free(params);
1326 }
1327
1328 /// Device class traits
1329 static const dev_class_traits_t default_class_traits[DEV_CLASS_COUNT] = {
1330         { .pingtimeout = 5, .pinginterval = 60, .min_connects = 3, .max_connects = 10000, .edge_weight = 1 }, // DEV_CLASS_BACKBONE
1331         { .pingtimeout = 5, .pinginterval = 60, .min_connects = 3, .max_connects = 100, .edge_weight = 3 },   // DEV_CLASS_STATIONARY
1332         { .pingtimeout = 5, .pinginterval = 60, .min_connects = 3, .max_connects = 3, .edge_weight = 6 },     // DEV_CLASS_PORTABLE
1333         { .pingtimeout = 5, .pinginterval = 60, .min_connects = 1, .max_connects = 1, .edge_weight = 9 },     // DEV_CLASS_UNKNOWN
1334 };
1335
1336 meshlink_handle_t *meshlink_open(const char *confbase, const char *name, const char *appname, dev_class_t devclass) {
1337         if(!confbase || !*confbase) {
1338                 logger(NULL, MESHLINK_ERROR, "No confbase given!\n");
1339                 meshlink_errno = MESHLINK_EINVAL;
1340                 return NULL;
1341         }
1342
1343         /* Create a temporary struct on the stack, to avoid allocating and freeing one. */
1344         meshlink_open_params_t params;
1345         memset(&params, 0, sizeof(params));
1346
1347         params.confbase = (char *)confbase;
1348         params.name = (char *)name;
1349         params.appname = (char *)appname;
1350         params.devclass = devclass;
1351         params.netns = -1;
1352
1353         return meshlink_open_ex(&params);
1354 }
1355
1356 meshlink_handle_t *meshlink_open_encrypted(const char *confbase, const char *name, const char *appname, dev_class_t devclass, const void *key, size_t keylen) {
1357         if(!confbase || !*confbase) {
1358                 logger(NULL, MESHLINK_ERROR, "No confbase given!\n");
1359                 meshlink_errno = MESHLINK_EINVAL;
1360                 return NULL;
1361         }
1362
1363         /* Create a temporary struct on the stack, to avoid allocating and freeing one. */
1364         meshlink_open_params_t params;
1365         memset(&params, 0, sizeof(params));
1366
1367         params.confbase = (char *)confbase;
1368         params.name = (char *)name;
1369         params.appname = (char *)appname;
1370         params.devclass = devclass;
1371         params.netns = -1;
1372
1373         if(!meshlink_open_params_set_storage_key(&params, key, keylen)) {
1374                 return false;
1375         }
1376
1377         return meshlink_open_ex(&params);
1378 }
1379
1380 meshlink_handle_t *meshlink_open_ephemeral(const char *name, const char *appname, dev_class_t devclass) {
1381         /* Create a temporary struct on the stack, to avoid allocating and freeing one. */
1382         meshlink_open_params_t params;
1383         memset(&params, 0, sizeof(params));
1384
1385         params.name = (char *)name;
1386         params.appname = (char *)appname;
1387         params.devclass = devclass;
1388         params.netns = -1;
1389
1390         return meshlink_open_ex(&params);
1391 }
1392
1393 meshlink_handle_t *meshlink_open_ex(const meshlink_open_params_t *params) {
1394         // Validate arguments provided by the application
1395         bool usingname = false;
1396
1397         logger(NULL, MESHLINK_DEBUG, "meshlink_open called\n");
1398
1399         if(!params->appname || !*params->appname) {
1400                 logger(NULL, MESHLINK_ERROR, "No appname given!\n");
1401                 meshlink_errno = MESHLINK_EINVAL;
1402                 return NULL;
1403         }
1404
1405         if(strchr(params->appname, ' ')) {
1406                 logger(NULL, MESHLINK_ERROR, "Invalid appname given!\n");
1407                 meshlink_errno = MESHLINK_EINVAL;
1408                 return NULL;
1409         }
1410
1411         if(!params->name || !*params->name) {
1412                 logger(NULL, MESHLINK_ERROR, "No name given!\n");
1413                 //return NULL;
1414         } else { //check name only if there is a name != NULL
1415
1416                 if(!check_id(params->name)) {
1417                         logger(NULL, MESHLINK_ERROR, "Invalid name given!\n");
1418                         meshlink_errno = MESHLINK_EINVAL;
1419                         return NULL;
1420                 } else {
1421                         usingname = true;
1422                 }
1423         }
1424
1425         if(params->devclass < 0 || params->devclass >= DEV_CLASS_COUNT) {
1426                 logger(NULL, MESHLINK_ERROR, "Invalid devclass given!\n");
1427                 meshlink_errno = MESHLINK_EINVAL;
1428                 return NULL;
1429         }
1430
1431         if((params->key && !params->keylen) || (!params->key && params->keylen)) {
1432                 logger(NULL, MESHLINK_ERROR, "Invalid key length!\n");
1433                 meshlink_errno = MESHLINK_EINVAL;
1434                 return NULL;
1435         }
1436
1437         meshlink_handle_t *mesh = xzalloc(sizeof(meshlink_handle_t));
1438
1439         if(params->confbase) {
1440                 mesh->confbase = xstrdup(params->confbase);
1441         }
1442
1443         mesh->appname = xstrdup(params->appname);
1444         mesh->devclass = params->devclass;
1445         mesh->discovery = true;
1446         mesh->invitation_timeout = 604800; // 1 week
1447         mesh->netns = params->netns;
1448         mesh->submeshes = NULL;
1449         mesh->log_cb = global_log_cb;
1450         mesh->log_level = global_log_level;
1451
1452         randomize(&mesh->prng_state, sizeof(mesh->prng_state));
1453
1454         do {
1455                 randomize(&mesh->session_id, sizeof(mesh->session_id));
1456         } while(mesh->session_id == 0);
1457
1458         memcpy(mesh->dev_class_traits, default_class_traits, sizeof(default_class_traits));
1459
1460         if(usingname) {
1461                 mesh->name = xstrdup(params->name);
1462         }
1463
1464         // Hash the key
1465         if(params->key) {
1466                 mesh->config_key = xmalloc(CHACHA_POLY1305_KEYLEN);
1467
1468                 if(!prf(params->key, params->keylen, "MeshLink configuration key", 26, mesh->config_key, CHACHA_POLY1305_KEYLEN)) {
1469                         logger(NULL, MESHLINK_ERROR, "Error creating configuration key!\n");
1470                         meshlink_close(mesh);
1471                         meshlink_errno = MESHLINK_EINTERNAL;
1472                         return NULL;
1473                 }
1474         }
1475
1476         // initialize mutex
1477         pthread_mutexattr_t attr;
1478         pthread_mutexattr_init(&attr);
1479         pthread_mutexattr_settype(&attr, PTHREAD_MUTEX_RECURSIVE);
1480         pthread_mutex_init(&mesh->mutex, &attr);
1481
1482         mesh->threadstarted = false;
1483         event_loop_init(&mesh->loop);
1484         mesh->loop.data = mesh;
1485
1486         meshlink_queue_init(&mesh->outpacketqueue);
1487
1488         // Atomically lock the configuration directory.
1489         if(!main_config_lock(mesh)) {
1490                 meshlink_close(mesh);
1491                 return NULL;
1492         }
1493
1494         // If no configuration exists yet, create it.
1495
1496         if(!meshlink_confbase_exists(mesh)) {
1497                 if(!meshlink_setup(mesh)) {
1498                         logger(NULL, MESHLINK_ERROR, "Cannot create initial configuration\n");
1499                         meshlink_close(mesh);
1500                         return NULL;
1501                 }
1502         } else {
1503                 if(!meshlink_read_config(mesh)) {
1504                         logger(NULL, MESHLINK_ERROR, "Cannot read main configuration\n");
1505                         meshlink_close(mesh);
1506                         return NULL;
1507                 }
1508         }
1509
1510 #ifdef HAVE_MINGW
1511         struct WSAData wsa_state;
1512         WSAStartup(MAKEWORD(2, 2), &wsa_state);
1513 #endif
1514
1515         // Setup up everything
1516         // TODO: we should not open listening sockets yet
1517
1518         bool success = false;
1519
1520         if(mesh->netns != -1) {
1521 #ifdef HAVE_SETNS
1522                 pthread_t thr;
1523
1524                 if(pthread_create(&thr, NULL, setup_network_in_netns_thread, mesh) == 0) {
1525                         void *retval = NULL;
1526                         success = pthread_join(thr, &retval) == 0 && retval;
1527                 }
1528
1529 #else
1530                 meshlink_errno = MESHLINK_EINTERNAL;
1531                 return NULL;
1532
1533 #endif // HAVE_SETNS
1534         } else {
1535                 success = setup_network(mesh);
1536         }
1537
1538         if(!success) {
1539                 meshlink_close(mesh);
1540                 meshlink_errno = MESHLINK_ENETWORK;
1541                 return NULL;
1542         }
1543
1544         add_local_addresses(mesh);
1545
1546         if(!node_write_config(mesh, mesh->self)) {
1547                 logger(NULL, MESHLINK_ERROR, "Cannot update configuration\n");
1548                 return NULL;
1549         }
1550
1551         idle_set(&mesh->loop, idle, mesh);
1552
1553         logger(NULL, MESHLINK_DEBUG, "meshlink_open returning\n");
1554         return mesh;
1555 }
1556
1557 meshlink_submesh_t *meshlink_submesh_open(meshlink_handle_t  *mesh, const char *submesh) {
1558         meshlink_submesh_t *s = NULL;
1559
1560         if(!mesh) {
1561                 logger(NULL, MESHLINK_ERROR, "No mesh handle given!\n");
1562                 meshlink_errno = MESHLINK_EINVAL;
1563                 return NULL;
1564         }
1565
1566         if(!submesh || !*submesh) {
1567                 logger(NULL, MESHLINK_ERROR, "No submesh name given!\n");
1568                 meshlink_errno = MESHLINK_EINVAL;
1569                 return NULL;
1570         }
1571
1572         //lock mesh->nodes
1573         pthread_mutex_lock(&mesh->mutex);
1574
1575         s = (meshlink_submesh_t *)create_submesh(mesh, submesh);
1576
1577         pthread_mutex_unlock(&mesh->mutex);
1578
1579         return s;
1580 }
1581
1582 static void *meshlink_main_loop(void *arg) {
1583         meshlink_handle_t *mesh = arg;
1584
1585         if(mesh->netns != -1) {
1586 #ifdef HAVE_SETNS
1587
1588                 if(setns(mesh->netns, CLONE_NEWNET) != 0) {
1589                         pthread_cond_signal(&mesh->cond);
1590                         return NULL;
1591                 }
1592
1593 #else
1594                 pthread_cond_signal(&mesh->cond);
1595                 return NULL;
1596 #endif // HAVE_SETNS
1597         }
1598
1599 #if HAVE_CATTA
1600
1601         if(mesh->discovery) {
1602                 discovery_start(mesh);
1603         }
1604
1605 #endif
1606
1607         pthread_mutex_lock(&mesh->mutex);
1608
1609         logger(mesh, MESHLINK_DEBUG, "Starting main_loop...\n");
1610         pthread_cond_broadcast(&mesh->cond);
1611         main_loop(mesh);
1612         logger(mesh, MESHLINK_DEBUG, "main_loop returned.\n");
1613
1614         pthread_mutex_unlock(&mesh->mutex);
1615
1616 #if HAVE_CATTA
1617
1618         // Stop discovery
1619         if(mesh->discovery) {
1620                 discovery_stop(mesh);
1621         }
1622
1623 #endif
1624
1625         return NULL;
1626 }
1627
1628 bool meshlink_start(meshlink_handle_t *mesh) {
1629         if(!mesh) {
1630                 meshlink_errno = MESHLINK_EINVAL;
1631                 return false;
1632         }
1633
1634         logger(mesh, MESHLINK_DEBUG, "meshlink_start called\n");
1635
1636         pthread_mutex_lock(&mesh->mutex);
1637
1638         assert(mesh->self);
1639         assert(mesh->private_key);
1640         assert(mesh->self->ecdsa);
1641         assert(!memcmp((uint8_t *)mesh->self->ecdsa + 64, (uint8_t *)mesh->private_key + 64, 32));
1642
1643         if(mesh->threadstarted) {
1644                 logger(mesh, MESHLINK_DEBUG, "thread was already running\n");
1645                 pthread_mutex_unlock(&mesh->mutex);
1646                 return true;
1647         }
1648
1649         if(mesh->listen_socket[0].tcp.fd < 0) {
1650                 logger(mesh, MESHLINK_ERROR, "Listening socket not open\n");
1651                 meshlink_errno = MESHLINK_ENETWORK;
1652                 return false;
1653         }
1654
1655         // TODO: open listening sockets first
1656
1657         //Check that a valid name is set
1658         if(!mesh->name) {
1659                 logger(mesh, MESHLINK_DEBUG, "No name given!\n");
1660                 meshlink_errno = MESHLINK_EINVAL;
1661                 pthread_mutex_unlock(&mesh->mutex);
1662                 return false;
1663         }
1664
1665         init_outgoings(mesh);
1666
1667         // Start the main thread
1668
1669         event_loop_start(&mesh->loop);
1670
1671         if(pthread_create(&mesh->thread, NULL, meshlink_main_loop, mesh) != 0) {
1672                 logger(mesh, MESHLINK_DEBUG, "Could not start thread: %s\n", strerror(errno));
1673                 memset(&mesh->thread, 0, sizeof(mesh)->thread);
1674                 meshlink_errno = MESHLINK_EINTERNAL;
1675                 event_loop_stop(&mesh->loop);
1676                 pthread_mutex_unlock(&mesh->mutex);
1677                 return false;
1678         }
1679
1680         pthread_cond_wait(&mesh->cond, &mesh->mutex);
1681         mesh->threadstarted = true;
1682
1683         // Ensure we are considered reachable
1684         graph(mesh);
1685
1686         pthread_mutex_unlock(&mesh->mutex);
1687         return true;
1688 }
1689
1690 void meshlink_stop(meshlink_handle_t *mesh) {
1691         if(!mesh) {
1692                 meshlink_errno = MESHLINK_EINVAL;
1693                 return;
1694         }
1695
1696         pthread_mutex_lock(&mesh->mutex);
1697         logger(mesh, MESHLINK_DEBUG, "meshlink_stop called\n");
1698
1699         // Shut down the main thread
1700         event_loop_stop(&mesh->loop);
1701
1702         // Send ourselves a UDP packet to kick the event loop
1703         for(int i = 0; i < mesh->listen_sockets; i++) {
1704                 sockaddr_t sa;
1705                 socklen_t salen = sizeof(sa);
1706
1707                 if(getsockname(mesh->listen_socket[i].udp.fd, &sa.sa, &salen) == -1) {
1708                         logger(mesh, MESHLINK_ERROR, "System call `%s' failed: %s", "getsockname", sockstrerror(sockerrno));
1709                         continue;
1710                 }
1711
1712                 if(sendto(mesh->listen_socket[i].udp.fd, "", 1, MSG_NOSIGNAL, &sa.sa, salen) == -1) {
1713                         logger(mesh, MESHLINK_ERROR, "Could not send a UDP packet to ourself: %s", sockstrerror(sockerrno));
1714                 }
1715         }
1716
1717         if(mesh->threadstarted) {
1718                 // Wait for the main thread to finish
1719                 pthread_mutex_unlock(&mesh->mutex);
1720                 pthread_join(mesh->thread, NULL);
1721                 pthread_mutex_lock(&mesh->mutex);
1722
1723                 mesh->threadstarted = false;
1724         }
1725
1726         // Close all metaconnections
1727         if(mesh->connections) {
1728                 for(list_node_t *node = mesh->connections->head, *next; node; node = next) {
1729                         next = node->next;
1730                         connection_t *c = node->data;
1731                         c->outgoing = NULL;
1732                         terminate_connection(mesh, c, false);
1733                 }
1734         }
1735
1736         exit_outgoings(mesh);
1737
1738         // Ensure we are considered unreachable
1739         if(mesh->nodes) {
1740                 graph(mesh);
1741         }
1742
1743         // Try to write out any changed node config files, ignore errors at this point.
1744         if(mesh->nodes) {
1745                 for splay_each(node_t, n, mesh->nodes) {
1746                         if(n->status.dirty) {
1747                                 n->status.dirty = !node_write_config(mesh, n);
1748                         }
1749                 }
1750         }
1751
1752         pthread_mutex_unlock(&mesh->mutex);
1753 }
1754
1755 void meshlink_close(meshlink_handle_t *mesh) {
1756         if(!mesh) {
1757                 meshlink_errno = MESHLINK_EINVAL;
1758                 return;
1759         }
1760
1761         // stop can be called even if mesh has not been started
1762         meshlink_stop(mesh);
1763
1764         // lock is not released after this
1765         pthread_mutex_lock(&mesh->mutex);
1766
1767         // Close and free all resources used.
1768
1769         close_network_connections(mesh);
1770
1771         logger(mesh, MESHLINK_INFO, "Terminating");
1772
1773         event_loop_exit(&mesh->loop);
1774
1775 #ifdef HAVE_MINGW
1776
1777         if(mesh->confbase) {
1778                 WSACleanup();
1779         }
1780
1781 #endif
1782
1783         ecdsa_free(mesh->invitation_key);
1784
1785         if(mesh->netns != -1) {
1786                 close(mesh->netns);
1787         }
1788
1789         for(vpn_packet_t *packet; (packet = meshlink_queue_pop(&mesh->outpacketqueue));) {
1790                 free(packet);
1791         }
1792
1793         meshlink_queue_exit(&mesh->outpacketqueue);
1794
1795         free(mesh->name);
1796         free(mesh->appname);
1797         free(mesh->confbase);
1798         free(mesh->config_key);
1799         free(mesh->external_address_url);
1800         ecdsa_free(mesh->private_key);
1801
1802         if(mesh->invitation_addresses) {
1803                 list_delete_list(mesh->invitation_addresses);
1804         }
1805
1806         main_config_unlock(mesh);
1807
1808         pthread_mutex_unlock(&mesh->mutex);
1809         pthread_mutex_destroy(&mesh->mutex);
1810
1811         memset(mesh, 0, sizeof(*mesh));
1812
1813         free(mesh);
1814 }
1815
1816 bool meshlink_destroy(const char *confbase) {
1817         if(!confbase) {
1818                 meshlink_errno = MESHLINK_EINVAL;
1819                 return false;
1820         }
1821
1822         /* Exit early if the confbase directory itself doesn't exist */
1823         if(access(confbase, F_OK) && errno == ENOENT) {
1824                 return true;
1825         }
1826
1827         /* Take the lock the same way meshlink_open() would. */
1828         char lockfilename[PATH_MAX];
1829         snprintf(lockfilename, sizeof(lockfilename), "%s" SLASH "meshlink.lock", confbase);
1830
1831         FILE *lockfile = fopen(lockfilename, "w+");
1832
1833         if(!lockfile) {
1834                 logger(NULL, MESHLINK_ERROR, "Could not open lock file %s: %s", lockfilename, strerror(errno));
1835                 meshlink_errno = MESHLINK_ESTORAGE;
1836                 return false;
1837         }
1838
1839 #ifdef FD_CLOEXEC
1840         fcntl(fileno(lockfile), F_SETFD, FD_CLOEXEC);
1841 #endif
1842
1843 #ifdef HAVE_MINGW
1844         // TODO: use _locking()?
1845 #else
1846
1847         if(flock(fileno(lockfile), LOCK_EX | LOCK_NB) != 0) {
1848                 logger(NULL, MESHLINK_ERROR, "Configuration directory %s still in use\n", lockfilename);
1849                 fclose(lockfile);
1850                 meshlink_errno = MESHLINK_EBUSY;
1851                 return false;
1852         }
1853
1854 #endif
1855
1856         if(!config_destroy(confbase, "current") || !config_destroy(confbase, "new") || !config_destroy(confbase, "old")) {
1857                 logger(NULL, MESHLINK_ERROR, "Cannot remove sub-directories in %s: %s\n", confbase, strerror(errno));
1858                 return false;
1859         }
1860
1861         if(unlink(lockfilename)) {
1862                 logger(NULL, MESHLINK_ERROR, "Cannot remove lock file %s: %s\n", lockfilename, strerror(errno));
1863                 fclose(lockfile);
1864                 meshlink_errno = MESHLINK_ESTORAGE;
1865                 return false;
1866         }
1867
1868         fclose(lockfile);
1869
1870         if(!sync_path(confbase)) {
1871                 logger(NULL, MESHLINK_ERROR, "Cannot sync directory %s: %s\n", confbase, strerror(errno));
1872                 meshlink_errno = MESHLINK_ESTORAGE;
1873                 return false;
1874         }
1875
1876         return true;
1877 }
1878
1879 void meshlink_set_receive_cb(meshlink_handle_t *mesh, meshlink_receive_cb_t cb) {
1880         if(!mesh) {
1881                 meshlink_errno = MESHLINK_EINVAL;
1882                 return;
1883         }
1884
1885         pthread_mutex_lock(&mesh->mutex);
1886         mesh->receive_cb = cb;
1887         pthread_mutex_unlock(&mesh->mutex);
1888 }
1889
1890 void meshlink_set_connection_try_cb(meshlink_handle_t *mesh, meshlink_connection_try_cb_t cb) {
1891         if(!mesh) {
1892                 meshlink_errno = MESHLINK_EINVAL;
1893                 return;
1894         }
1895
1896         pthread_mutex_lock(&mesh->mutex);
1897         mesh->connection_try_cb = cb;
1898         pthread_mutex_unlock(&mesh->mutex);
1899 }
1900
1901 void meshlink_set_node_status_cb(meshlink_handle_t *mesh, meshlink_node_status_cb_t cb) {
1902         if(!mesh) {
1903                 meshlink_errno = MESHLINK_EINVAL;
1904                 return;
1905         }
1906
1907         pthread_mutex_lock(&mesh->mutex);
1908         mesh->node_status_cb = cb;
1909         pthread_mutex_unlock(&mesh->mutex);
1910 }
1911
1912 void meshlink_set_node_pmtu_cb(meshlink_handle_t *mesh, meshlink_node_pmtu_cb_t cb) {
1913         if(!mesh) {
1914                 meshlink_errno = MESHLINK_EINVAL;
1915                 return;
1916         }
1917
1918         pthread_mutex_lock(&mesh->mutex);
1919         mesh->node_pmtu_cb = cb;
1920         pthread_mutex_unlock(&mesh->mutex);
1921 }
1922
1923 void meshlink_set_node_duplicate_cb(meshlink_handle_t *mesh, meshlink_node_duplicate_cb_t cb) {
1924         if(!mesh) {
1925                 meshlink_errno = MESHLINK_EINVAL;
1926                 return;
1927         }
1928
1929         pthread_mutex_lock(&mesh->mutex);
1930         mesh->node_duplicate_cb = cb;
1931         pthread_mutex_unlock(&mesh->mutex);
1932 }
1933
1934 void meshlink_set_log_cb(meshlink_handle_t *mesh, meshlink_log_level_t level, meshlink_log_cb_t cb) {
1935         if(mesh) {
1936                 pthread_mutex_lock(&mesh->mutex);
1937                 mesh->log_cb = cb;
1938                 mesh->log_level = cb ? level : 0;
1939                 pthread_mutex_unlock(&mesh->mutex);
1940         } else {
1941                 global_log_cb = cb;
1942                 global_log_level = cb ? level : 0;
1943         }
1944 }
1945
1946 void meshlink_set_error_cb(struct meshlink_handle *mesh, meshlink_error_cb_t cb) {
1947         if(!mesh) {
1948                 meshlink_errno = MESHLINK_EINVAL;
1949                 return;
1950         }
1951
1952         pthread_mutex_lock(&mesh->mutex);
1953         mesh->error_cb = cb;
1954         pthread_mutex_unlock(&mesh->mutex);
1955 }
1956
1957 static vpn_packet_t *prepare_packet(meshlink_handle_t *mesh, meshlink_node_t *destination, const void *data, size_t len) {
1958         meshlink_packethdr_t *hdr;
1959
1960         if(len >= MAXSIZE - sizeof(*hdr)) {
1961                 meshlink_errno = MESHLINK_EINVAL;
1962                 return NULL;
1963         }
1964
1965         node_t *n = (node_t *)destination;
1966
1967         if(n->status.blacklisted) {
1968                 logger(mesh, MESHLINK_ERROR, "Node %s blacklisted, dropping packet\n", n->name);
1969                 meshlink_errno = MESHLINK_EBLACKLISTED;
1970                 return NULL;
1971         }
1972
1973         // Prepare the packet
1974         vpn_packet_t *packet = malloc(sizeof(*packet));
1975
1976         if(!packet) {
1977                 meshlink_errno = MESHLINK_ENOMEM;
1978                 return NULL;
1979         }
1980
1981         packet->probe = false;
1982         packet->tcp = false;
1983         packet->len = len + sizeof(*hdr);
1984
1985         hdr = (meshlink_packethdr_t *)packet->data;
1986         memset(hdr, 0, sizeof(*hdr));
1987         // leave the last byte as 0 to make sure strings are always
1988         // null-terminated if they are longer than the buffer
1989         strncpy((char *)hdr->destination, destination->name, (sizeof(hdr)->destination) - 1);
1990         strncpy((char *)hdr->source, mesh->self->name, (sizeof(hdr)->source) - 1);
1991
1992         memcpy(packet->data + sizeof(*hdr), data, len);
1993
1994         return packet;
1995 }
1996
1997 static bool meshlink_send_immediate(meshlink_handle_t *mesh, meshlink_node_t *destination, const void *data, size_t len) {
1998         assert(mesh);
1999         assert(destination);
2000         assert(data);
2001         assert(len);
2002
2003         // Prepare the packet
2004         vpn_packet_t *packet = prepare_packet(mesh, destination, data, len);
2005
2006         if(!packet) {
2007                 return false;
2008         }
2009
2010         // Send it immediately
2011         route(mesh, mesh->self, packet);
2012         free(packet);
2013
2014         return true;
2015 }
2016
2017 bool meshlink_send(meshlink_handle_t *mesh, meshlink_node_t *destination, const void *data, size_t len) {
2018         // Validate arguments
2019         if(!mesh || !destination) {
2020                 meshlink_errno = MESHLINK_EINVAL;
2021                 return false;
2022         }
2023
2024         if(!len) {
2025                 return true;
2026         }
2027
2028         if(!data) {
2029                 meshlink_errno = MESHLINK_EINVAL;
2030                 return false;
2031         }
2032
2033         // Prepare the packet
2034         vpn_packet_t *packet = prepare_packet(mesh, destination, data, len);
2035
2036         if(!packet) {
2037                 return false;
2038         }
2039
2040         // Queue it
2041         if(!meshlink_queue_push(&mesh->outpacketqueue, packet)) {
2042                 free(packet);
2043                 meshlink_errno = MESHLINK_ENOMEM;
2044                 return false;
2045         }
2046
2047         logger(mesh, MESHLINK_DEBUG, "Adding packet of %zu bytes to packet queue", len);
2048
2049         // Notify event loop
2050         signal_trigger(&mesh->loop, &mesh->datafromapp);
2051
2052         return true;
2053 }
2054
2055 void meshlink_send_from_queue(event_loop_t *loop, void *data) {
2056         (void)loop;
2057         meshlink_handle_t *mesh = data;
2058
2059         logger(mesh, MESHLINK_DEBUG, "Flushing the packet queue");
2060
2061         for(vpn_packet_t *packet; (packet = meshlink_queue_pop(&mesh->outpacketqueue));) {
2062                 logger(mesh, MESHLINK_DEBUG, "Removing packet of %d bytes from packet queue", packet->len);
2063                 mesh->self->in_packets++;
2064                 mesh->self->in_bytes += packet->len;
2065                 route(mesh, mesh->self, packet);
2066                 free(packet);
2067         }
2068 }
2069
2070 ssize_t meshlink_get_pmtu(meshlink_handle_t *mesh, meshlink_node_t *destination) {
2071         if(!mesh || !destination) {
2072                 meshlink_errno = MESHLINK_EINVAL;
2073                 return -1;
2074         }
2075
2076         pthread_mutex_lock(&mesh->mutex);
2077
2078         node_t *n = (node_t *)destination;
2079
2080         if(!n->status.reachable) {
2081                 pthread_mutex_unlock(&mesh->mutex);
2082                 return 0;
2083
2084         } else if(n->mtuprobes > 30 && n->minmtu) {
2085                 pthread_mutex_unlock(&mesh->mutex);
2086                 return n->minmtu;
2087         } else {
2088                 pthread_mutex_unlock(&mesh->mutex);
2089                 return MTU;
2090         }
2091 }
2092
2093 char *meshlink_get_fingerprint(meshlink_handle_t *mesh, meshlink_node_t *node) {
2094         if(!mesh || !node) {
2095                 meshlink_errno = MESHLINK_EINVAL;
2096                 return NULL;
2097         }
2098
2099         pthread_mutex_lock(&mesh->mutex);
2100
2101         node_t *n = (node_t *)node;
2102
2103         if(!node_read_public_key(mesh, n) || !n->ecdsa) {
2104                 meshlink_errno = MESHLINK_EINTERNAL;
2105                 pthread_mutex_unlock(&mesh->mutex);
2106                 return false;
2107         }
2108
2109         char *fingerprint = ecdsa_get_base64_public_key(n->ecdsa);
2110
2111         if(!fingerprint) {
2112                 meshlink_errno = MESHLINK_EINTERNAL;
2113         }
2114
2115         pthread_mutex_unlock(&mesh->mutex);
2116         return fingerprint;
2117 }
2118
2119 meshlink_node_t *meshlink_get_self(meshlink_handle_t *mesh) {
2120         if(!mesh) {
2121                 meshlink_errno = MESHLINK_EINVAL;
2122                 return NULL;
2123         }
2124
2125         return (meshlink_node_t *)mesh->self;
2126 }
2127
2128 meshlink_node_t *meshlink_get_node(meshlink_handle_t *mesh, const char *name) {
2129         if(!mesh || !name) {
2130                 meshlink_errno = MESHLINK_EINVAL;
2131                 return NULL;
2132         }
2133
2134         node_t *n = NULL;
2135
2136         pthread_mutex_lock(&mesh->mutex);
2137         n = lookup_node(mesh, (char *)name); // TODO: make lookup_node() use const
2138         pthread_mutex_unlock(&mesh->mutex);
2139
2140         if(!n) {
2141                 meshlink_errno = MESHLINK_ENOENT;
2142         }
2143
2144         return (meshlink_node_t *)n;
2145 }
2146
2147 meshlink_submesh_t *meshlink_get_submesh(meshlink_handle_t *mesh, const char *name) {
2148         if(!mesh || !name) {
2149                 meshlink_errno = MESHLINK_EINVAL;
2150                 return NULL;
2151         }
2152
2153         meshlink_submesh_t *submesh = NULL;
2154
2155         pthread_mutex_lock(&mesh->mutex);
2156         submesh = (meshlink_submesh_t *)lookup_submesh(mesh, name);
2157         pthread_mutex_unlock(&mesh->mutex);
2158
2159         if(!submesh) {
2160                 meshlink_errno = MESHLINK_ENOENT;
2161         }
2162
2163         return submesh;
2164 }
2165
2166 meshlink_node_t **meshlink_get_all_nodes(meshlink_handle_t *mesh, meshlink_node_t **nodes, size_t *nmemb) {
2167         if(!mesh || !nmemb || (*nmemb && !nodes)) {
2168                 meshlink_errno = MESHLINK_EINVAL;
2169                 return NULL;
2170         }
2171
2172         meshlink_node_t **result;
2173
2174         //lock mesh->nodes
2175         pthread_mutex_lock(&mesh->mutex);
2176
2177         *nmemb = mesh->nodes->count;
2178         result = realloc(nodes, *nmemb * sizeof(*nodes));
2179
2180         if(result) {
2181                 meshlink_node_t **p = result;
2182
2183                 for splay_each(node_t, n, mesh->nodes) {
2184                         *p++ = (meshlink_node_t *)n;
2185                 }
2186         } else {
2187                 *nmemb = 0;
2188                 free(nodes);
2189                 meshlink_errno = MESHLINK_ENOMEM;
2190         }
2191
2192         pthread_mutex_unlock(&mesh->mutex);
2193
2194         return result;
2195 }
2196
2197 static meshlink_node_t **meshlink_get_all_nodes_by_condition(meshlink_handle_t *mesh, const void *condition, meshlink_node_t **nodes, size_t *nmemb, search_node_by_condition_t search_node) {
2198         meshlink_node_t **result;
2199
2200         pthread_mutex_lock(&mesh->mutex);
2201
2202         *nmemb = 0;
2203
2204         for splay_each(node_t, n, mesh->nodes) {
2205                 if(search_node(n, condition)) {
2206                         ++*nmemb;
2207                 }
2208         }
2209
2210         if(*nmemb == 0) {
2211                 free(nodes);
2212                 pthread_mutex_unlock(&mesh->mutex);
2213                 return NULL;
2214         }
2215
2216         result = realloc(nodes, *nmemb * sizeof(*nodes));
2217
2218         if(result) {
2219                 meshlink_node_t **p = result;
2220
2221                 for splay_each(node_t, n, mesh->nodes) {
2222                         if(search_node(n, condition)) {
2223                                 *p++ = (meshlink_node_t *)n;
2224                         }
2225                 }
2226         } else {
2227                 *nmemb = 0;
2228                 free(nodes);
2229                 meshlink_errno = MESHLINK_ENOMEM;
2230         }
2231
2232         pthread_mutex_unlock(&mesh->mutex);
2233
2234         return result;
2235 }
2236
2237 static bool search_node_by_dev_class(const node_t *node, const void *condition) {
2238         dev_class_t *devclass = (dev_class_t *)condition;
2239
2240         if(*devclass == (dev_class_t)node->devclass) {
2241                 return true;
2242         }
2243
2244         return false;
2245 }
2246
2247 static bool search_node_by_submesh(const node_t *node, const void *condition) {
2248         if(condition == node->submesh) {
2249                 return true;
2250         }
2251
2252         return false;
2253 }
2254
2255 struct time_range {
2256         time_t start;
2257         time_t end;
2258 };
2259
2260 static bool search_node_by_last_reachable(const node_t *node, const void *condition) {
2261         const struct time_range *range = condition;
2262         time_t start = node->last_reachable;
2263         time_t end = node->last_unreachable;
2264
2265         if(end < start) {
2266                 end = time(NULL);
2267
2268                 if(end < start) {
2269                         start = end;
2270                 }
2271         }
2272
2273         if(range->end >= range->start) {
2274                 return start <= range->end && end >= range->start;
2275         } else {
2276                 return start > range->start || end < range->end;
2277         }
2278 }
2279
2280 meshlink_node_t **meshlink_get_all_nodes_by_dev_class(meshlink_handle_t *mesh, dev_class_t devclass, meshlink_node_t **nodes, size_t *nmemb) {
2281         if(!mesh || devclass < 0 || devclass >= DEV_CLASS_COUNT || !nmemb) {
2282                 meshlink_errno = MESHLINK_EINVAL;
2283                 return NULL;
2284         }
2285
2286         return meshlink_get_all_nodes_by_condition(mesh, &devclass, nodes, nmemb, search_node_by_dev_class);
2287 }
2288
2289 meshlink_node_t **meshlink_get_all_nodes_by_submesh(meshlink_handle_t *mesh, meshlink_submesh_t *submesh, meshlink_node_t **nodes, size_t *nmemb) {
2290         if(!mesh || !submesh || !nmemb) {
2291                 meshlink_errno = MESHLINK_EINVAL;
2292                 return NULL;
2293         }
2294
2295         return meshlink_get_all_nodes_by_condition(mesh, submesh, nodes, nmemb, search_node_by_submesh);
2296 }
2297
2298 meshlink_node_t **meshlink_get_all_nodes_by_last_reachable(meshlink_handle_t *mesh, time_t start, time_t end, meshlink_node_t **nodes, size_t *nmemb) {
2299         if(!mesh || !nmemb) {
2300                 meshlink_errno = MESHLINK_EINVAL;
2301                 return NULL;
2302         }
2303
2304         struct time_range range = {start, end};
2305
2306         return meshlink_get_all_nodes_by_condition(mesh, &range, nodes, nmemb, search_node_by_last_reachable);
2307 }
2308
2309 dev_class_t meshlink_get_node_dev_class(meshlink_handle_t *mesh, meshlink_node_t *node) {
2310         if(!mesh || !node) {
2311                 meshlink_errno = MESHLINK_EINVAL;
2312                 return -1;
2313         }
2314
2315         dev_class_t devclass;
2316
2317         pthread_mutex_lock(&mesh->mutex);
2318
2319         devclass = ((node_t *)node)->devclass;
2320
2321         pthread_mutex_unlock(&mesh->mutex);
2322
2323         return devclass;
2324 }
2325
2326 meshlink_submesh_t *meshlink_get_node_submesh(meshlink_handle_t *mesh, meshlink_node_t *node) {
2327         if(!mesh || !node) {
2328                 meshlink_errno = MESHLINK_EINVAL;
2329                 return NULL;
2330         }
2331
2332         node_t *n = (node_t *)node;
2333
2334         meshlink_submesh_t *s;
2335
2336         s = (meshlink_submesh_t *)n->submesh;
2337
2338         return s;
2339 }
2340
2341 bool meshlink_get_node_reachability(struct meshlink_handle *mesh, struct meshlink_node *node, time_t *last_reachable, time_t *last_unreachable) {
2342         if(!mesh || !node) {
2343                 meshlink_errno = MESHLINK_EINVAL;
2344                 return NULL;
2345         }
2346
2347         node_t *n = (node_t *)node;
2348         bool reachable;
2349
2350         pthread_mutex_lock(&mesh->mutex);
2351         reachable = n->status.reachable && !n->status.blacklisted;
2352
2353         if(last_reachable) {
2354                 *last_reachable = n->last_reachable;
2355         }
2356
2357         if(last_unreachable) {
2358                 *last_unreachable = n->last_unreachable;
2359         }
2360
2361         pthread_mutex_unlock(&mesh->mutex);
2362
2363         return reachable;
2364 }
2365
2366 bool meshlink_sign(meshlink_handle_t *mesh, const void *data, size_t len, void *signature, size_t *siglen) {
2367         if(!mesh || !data || !len || !signature || !siglen) {
2368                 meshlink_errno = MESHLINK_EINVAL;
2369                 return false;
2370         }
2371
2372         if(*siglen < MESHLINK_SIGLEN) {
2373                 meshlink_errno = MESHLINK_EINVAL;
2374                 return false;
2375         }
2376
2377         pthread_mutex_lock(&mesh->mutex);
2378
2379         if(!ecdsa_sign(mesh->private_key, data, len, signature)) {
2380                 meshlink_errno = MESHLINK_EINTERNAL;
2381                 pthread_mutex_unlock(&mesh->mutex);
2382                 return false;
2383         }
2384
2385         *siglen = MESHLINK_SIGLEN;
2386         pthread_mutex_unlock(&mesh->mutex);
2387         return true;
2388 }
2389
2390 bool meshlink_verify(meshlink_handle_t *mesh, meshlink_node_t *source, const void *data, size_t len, const void *signature, size_t siglen) {
2391         if(!mesh || !source || !data || !len || !signature) {
2392                 meshlink_errno = MESHLINK_EINVAL;
2393                 return false;
2394         }
2395
2396         if(siglen != MESHLINK_SIGLEN) {
2397                 meshlink_errno = MESHLINK_EINVAL;
2398                 return false;
2399         }
2400
2401         pthread_mutex_lock(&mesh->mutex);
2402
2403         bool rval = false;
2404
2405         struct node_t *n = (struct node_t *)source;
2406
2407         if(!node_read_public_key(mesh, n)) {
2408                 meshlink_errno = MESHLINK_EINTERNAL;
2409                 rval = false;
2410         } else {
2411                 rval = ecdsa_verify(((struct node_t *)source)->ecdsa, data, len, signature);
2412         }
2413
2414         pthread_mutex_unlock(&mesh->mutex);
2415         return rval;
2416 }
2417
2418 static bool refresh_invitation_key(meshlink_handle_t *mesh) {
2419         pthread_mutex_lock(&mesh->mutex);
2420
2421         size_t count = invitation_purge_old(mesh, time(NULL) - mesh->invitation_timeout);
2422
2423         if(!count) {
2424                 // TODO: Update invitation key if necessary?
2425         }
2426
2427         pthread_mutex_unlock(&mesh->mutex);
2428
2429         return mesh->invitation_key;
2430 }
2431
2432 bool meshlink_set_canonical_address(meshlink_handle_t *mesh, meshlink_node_t *node, const char *address, const char *port) {
2433         if(!mesh || !node || !address) {
2434                 meshlink_errno = MESHLINK_EINVAL;
2435                 return false;
2436         }
2437
2438         if(!is_valid_hostname(address)) {
2439                 logger(mesh, MESHLINK_DEBUG, "Invalid character in address: %s\n", address);
2440                 meshlink_errno = MESHLINK_EINVAL;
2441                 return false;
2442         }
2443
2444         if(port && !is_valid_port(port)) {
2445                 logger(mesh, MESHLINK_DEBUG, "Invalid character in port: %s\n", address);
2446                 meshlink_errno = MESHLINK_EINVAL;
2447                 return false;
2448         }
2449
2450         char *canonical_address;
2451
2452         if(port) {
2453                 xasprintf(&canonical_address, "%s %s", address, port);
2454         } else {
2455                 canonical_address = xstrdup(address);
2456         }
2457
2458         pthread_mutex_lock(&mesh->mutex);
2459
2460         node_t *n = (node_t *)node;
2461         free(n->canonical_address);
2462         n->canonical_address = canonical_address;
2463
2464         if(!node_write_config(mesh, n)) {
2465                 pthread_mutex_unlock(&mesh->mutex);
2466                 return false;
2467         }
2468
2469         pthread_mutex_unlock(&mesh->mutex);
2470
2471         return config_sync(mesh, "current");
2472 }
2473
2474 bool meshlink_add_invitation_address(struct meshlink_handle *mesh, const char *address, const char *port) {
2475         if(!mesh || !address) {
2476                 meshlink_errno = MESHLINK_EINVAL;
2477                 return false;
2478         }
2479
2480         if(!is_valid_hostname(address)) {
2481                 logger(mesh, MESHLINK_DEBUG, "Invalid character in address: %s\n", address);
2482                 meshlink_errno = MESHLINK_EINVAL;
2483                 return false;
2484         }
2485
2486         if(port && !is_valid_port(port)) {
2487                 logger(mesh, MESHLINK_DEBUG, "Invalid character in port: %s\n", address);
2488                 meshlink_errno = MESHLINK_EINVAL;
2489                 return false;
2490         }
2491
2492         char *combo;
2493
2494         if(port) {
2495                 xasprintf(&combo, "%s/%s", address, port);
2496         } else {
2497                 combo = xstrdup(address);
2498         }
2499
2500         pthread_mutex_lock(&mesh->mutex);
2501
2502         if(!mesh->invitation_addresses) {
2503                 mesh->invitation_addresses = list_alloc((list_action_t)free);
2504         }
2505
2506         list_insert_tail(mesh->invitation_addresses, combo);
2507         pthread_mutex_unlock(&mesh->mutex);
2508
2509         return true;
2510 }
2511
2512 void meshlink_clear_invitation_addresses(struct meshlink_handle *mesh) {
2513         if(!mesh) {
2514                 meshlink_errno = MESHLINK_EINVAL;
2515                 return;
2516         }
2517
2518         pthread_mutex_lock(&mesh->mutex);
2519
2520         if(mesh->invitation_addresses) {
2521                 list_delete_list(mesh->invitation_addresses);
2522                 mesh->invitation_addresses = NULL;
2523         }
2524
2525         pthread_mutex_unlock(&mesh->mutex);
2526 }
2527
2528 bool meshlink_add_address(meshlink_handle_t *mesh, const char *address) {
2529         return meshlink_set_canonical_address(mesh, (meshlink_node_t *)mesh->self, address, NULL);
2530 }
2531
2532 bool meshlink_add_external_address(meshlink_handle_t *mesh) {
2533         if(!mesh) {
2534                 meshlink_errno = MESHLINK_EINVAL;
2535                 return false;
2536         }
2537
2538         char *address = meshlink_get_external_address(mesh);
2539
2540         if(!address) {
2541                 return false;
2542         }
2543
2544         bool rval = meshlink_set_canonical_address(mesh, (meshlink_node_t *)mesh->self, address, NULL);
2545         free(address);
2546
2547         return rval;
2548 }
2549
2550 int meshlink_get_port(meshlink_handle_t *mesh) {
2551         if(!mesh) {
2552                 meshlink_errno = MESHLINK_EINVAL;
2553                 return -1;
2554         }
2555
2556         if(!mesh->myport) {
2557                 meshlink_errno = MESHLINK_EINTERNAL;
2558                 return -1;
2559         }
2560
2561         int port;
2562
2563         pthread_mutex_lock(&mesh->mutex);
2564         port = atoi(mesh->myport);
2565         pthread_mutex_unlock(&mesh->mutex);
2566
2567         return port;
2568 }
2569
2570 bool meshlink_set_port(meshlink_handle_t *mesh, int port) {
2571         if(!mesh || port < 0 || port >= 65536 || mesh->threadstarted) {
2572                 meshlink_errno = MESHLINK_EINVAL;
2573                 return false;
2574         }
2575
2576         if(mesh->myport && port == atoi(mesh->myport)) {
2577                 return true;
2578         }
2579
2580         if(!try_bind(mesh, port)) {
2581                 meshlink_errno = MESHLINK_ENETWORK;
2582                 return false;
2583         }
2584
2585         devtool_trybind_probe();
2586
2587         bool rval = false;
2588
2589         pthread_mutex_lock(&mesh->mutex);
2590
2591         if(mesh->threadstarted) {
2592                 meshlink_errno = MESHLINK_EINVAL;
2593                 goto done;
2594         }
2595
2596         free(mesh->myport);
2597         xasprintf(&mesh->myport, "%d", port);
2598
2599         /* Close down the network. This also deletes mesh->self. */
2600         close_network_connections(mesh);
2601
2602         /* Recreate mesh->self. */
2603         mesh->self = new_node();
2604         mesh->self->name = xstrdup(mesh->name);
2605         mesh->self->devclass = mesh->devclass;
2606         mesh->self->session_id = mesh->session_id;
2607         xasprintf(&mesh->myport, "%d", port);
2608
2609         if(!node_read_public_key(mesh, mesh->self)) {
2610                 logger(NULL, MESHLINK_ERROR, "Could not read our host configuration file!");
2611                 meshlink_errno = MESHLINK_ESTORAGE;
2612                 free_node(mesh->self);
2613                 mesh->self = NULL;
2614                 goto done;
2615         } else if(!setup_network(mesh)) {
2616                 meshlink_errno = MESHLINK_ENETWORK;
2617                 goto done;
2618         }
2619
2620         /* Rebuild our own list of recent addresses */
2621         memset(mesh->self->recent, 0, sizeof(mesh->self->recent));
2622         add_local_addresses(mesh);
2623
2624         /* Write meshlink.conf with the updated port number */
2625         write_main_config_files(mesh);
2626
2627         rval = config_sync(mesh, "current");
2628
2629 done:
2630         pthread_mutex_unlock(&mesh->mutex);
2631
2632         return rval && meshlink_get_port(mesh) == port;
2633 }
2634
2635 void meshlink_set_invitation_timeout(meshlink_handle_t *mesh, int timeout) {
2636         mesh->invitation_timeout = timeout;
2637 }
2638
2639 char *meshlink_invite_ex(meshlink_handle_t *mesh, meshlink_submesh_t *submesh, const char *name, uint32_t flags) {
2640         meshlink_submesh_t *s = NULL;
2641
2642         if(!mesh) {
2643                 meshlink_errno = MESHLINK_EINVAL;
2644                 return NULL;
2645         }
2646
2647         if(submesh) {
2648                 s = (meshlink_submesh_t *)lookup_submesh(mesh, submesh->name);
2649
2650                 if(s != submesh) {
2651                         logger(mesh, MESHLINK_DEBUG, "Invalid SubMesh Handle.\n");
2652                         meshlink_errno = MESHLINK_EINVAL;
2653                         return NULL;
2654                 }
2655         } else {
2656                 s = (meshlink_submesh_t *)mesh->self->submesh;
2657         }
2658
2659         pthread_mutex_lock(&mesh->mutex);
2660
2661         // Check validity of the new node's name
2662         if(!check_id(name)) {
2663                 logger(mesh, MESHLINK_ERROR, "Invalid name for node.\n");
2664                 meshlink_errno = MESHLINK_EINVAL;
2665                 pthread_mutex_unlock(&mesh->mutex);
2666                 return NULL;
2667         }
2668
2669         // Ensure no host configuration file with that name exists
2670         if(config_exists(mesh, "current", name)) {
2671                 logger(mesh, MESHLINK_ERROR, "A host config file for %s already exists!\n", name);
2672                 meshlink_errno = MESHLINK_EEXIST;
2673                 pthread_mutex_unlock(&mesh->mutex);
2674                 return NULL;
2675         }
2676
2677         // Ensure no other nodes know about this name
2678         if(lookup_node(mesh, name)) {
2679                 logger(mesh, MESHLINK_ERROR, "A node with name %s is already known!\n", name);
2680                 meshlink_errno = MESHLINK_EEXIST;
2681                 pthread_mutex_unlock(&mesh->mutex);
2682                 return NULL;
2683         }
2684
2685         // Get the local address
2686         char *address = get_my_hostname(mesh, flags);
2687
2688         if(!address) {
2689                 logger(mesh, MESHLINK_ERROR, "No Address known for ourselves!\n");
2690                 meshlink_errno = MESHLINK_ERESOLV;
2691                 pthread_mutex_unlock(&mesh->mutex);
2692                 return NULL;
2693         }
2694
2695         if(!refresh_invitation_key(mesh)) {
2696                 meshlink_errno = MESHLINK_EINTERNAL;
2697                 pthread_mutex_unlock(&mesh->mutex);
2698                 return NULL;
2699         }
2700
2701         // If we changed our own host config file, write it out now
2702         if(mesh->self->status.dirty) {
2703                 if(!node_write_config(mesh, mesh->self)) {
2704                         logger(mesh, MESHLINK_ERROR, "Could not write our own host config file!\n");
2705                         pthread_mutex_unlock(&mesh->mutex);
2706                         return NULL;
2707                 }
2708         }
2709
2710         char hash[64];
2711
2712         // Create a hash of the key.
2713         char *fingerprint = ecdsa_get_base64_public_key(mesh->invitation_key);
2714         sha512(fingerprint, strlen(fingerprint), hash);
2715         b64encode_urlsafe(hash, hash, 18);
2716
2717         // Create a random cookie for this invitation.
2718         char cookie[25];
2719         randomize(cookie, 18);
2720
2721         // Create a filename that doesn't reveal the cookie itself
2722         char buf[18 + strlen(fingerprint)];
2723         char cookiehash[64];
2724         memcpy(buf, cookie, 18);
2725         memcpy(buf + 18, fingerprint, sizeof(buf) - 18);
2726         sha512(buf, sizeof(buf), cookiehash);
2727         b64encode_urlsafe(cookiehash, cookiehash, 18);
2728
2729         b64encode_urlsafe(cookie, cookie, 18);
2730
2731         free(fingerprint);
2732
2733         /* Construct the invitation file */
2734         uint8_t outbuf[4096];
2735         packmsg_output_t inv = {outbuf, sizeof(outbuf)};
2736
2737         packmsg_add_uint32(&inv, MESHLINK_INVITATION_VERSION);
2738         packmsg_add_str(&inv, name);
2739         packmsg_add_str(&inv, s ? s->name : CORE_MESH);
2740         packmsg_add_int32(&inv, DEV_CLASS_UNKNOWN); /* TODO: allow this to be set by inviter? */
2741
2742         /* TODO: Add several host config files to bootstrap connections.
2743          * Note: make sure we only add config files of nodes that are in the core mesh or the same submesh,
2744          * and are not blacklisted.
2745          */
2746         config_t configs[5];
2747         memset(configs, 0, sizeof(configs));
2748         int count = 0;
2749
2750         if(config_read(mesh, "current", mesh->self->name, &configs[count], mesh->config_key)) {
2751                 count++;
2752         }
2753
2754         /* Append host config files to the invitation file */
2755         packmsg_add_array(&inv, count);
2756
2757         for(int i = 0; i < count; i++) {
2758                 packmsg_add_bin(&inv, configs[i].buf, configs[i].len);
2759                 config_free(&configs[i]);
2760         }
2761
2762         config_t config = {outbuf, packmsg_output_size(&inv, outbuf)};
2763
2764         if(!invitation_write(mesh, "current", cookiehash, &config, mesh->config_key)) {
2765                 logger(mesh, MESHLINK_DEBUG, "Could not create invitation file %s: %s\n", cookiehash, strerror(errno));
2766                 meshlink_errno = MESHLINK_ESTORAGE;
2767                 pthread_mutex_unlock(&mesh->mutex);
2768                 return NULL;
2769         }
2770
2771         // Create an URL from the local address, key hash and cookie
2772         char *url;
2773         xasprintf(&url, "%s/%s%s", address, hash, cookie);
2774         free(address);
2775
2776         pthread_mutex_unlock(&mesh->mutex);
2777         return url;
2778 }
2779
2780 char *meshlink_invite(meshlink_handle_t *mesh, meshlink_submesh_t *submesh, const char *name) {
2781         return meshlink_invite_ex(mesh, submesh, name, 0);
2782 }
2783
2784 bool meshlink_join(meshlink_handle_t *mesh, const char *invitation) {
2785         if(!mesh || !invitation) {
2786                 meshlink_errno = MESHLINK_EINVAL;
2787                 return false;
2788         }
2789
2790         join_state_t state = {
2791                 .mesh = mesh,
2792                 .sock = -1,
2793         };
2794
2795         ecdsa_t *key = NULL;
2796         ecdsa_t *hiskey = NULL;
2797
2798         //TODO: think of a better name for this variable, or of a different way to tokenize the invitation URL.
2799         char copy[strlen(invitation) + 1];
2800
2801         pthread_mutex_lock(&mesh->mutex);
2802
2803         //Before doing meshlink_join make sure we are not connected to another mesh
2804         if(mesh->threadstarted) {
2805                 logger(mesh, MESHLINK_ERROR, "Cannot join while started\n");
2806                 meshlink_errno = MESHLINK_EINVAL;
2807                 goto exit;
2808         }
2809
2810         // Refuse to join a mesh if we are already part of one. We are part of one if we know at least one other node.
2811         if(mesh->nodes->count > 1) {
2812                 logger(mesh, MESHLINK_ERROR, "Already part of an existing mesh\n");
2813                 meshlink_errno = MESHLINK_EINVAL;
2814                 goto exit;
2815         }
2816
2817         strcpy(copy, invitation);
2818
2819         // Split the invitation URL into a list of hostname/port tuples, a key hash and a cookie.
2820
2821         char *slash = strchr(copy, '/');
2822
2823         if(!slash) {
2824                 goto invalid;
2825         }
2826
2827         *slash++ = 0;
2828
2829         if(strlen(slash) != 48) {
2830                 goto invalid;
2831         }
2832
2833         char *address = copy;
2834         char *port = NULL;
2835
2836         if(!b64decode(slash, state.hash, 18) || !b64decode(slash + 24, state.cookie, 18)) {
2837                 goto invalid;
2838         }
2839
2840         if(mesh->inviter_commits_first) {
2841                 memcpy(state.cookie + 18, ecdsa_get_public_key(mesh->private_key), 32);
2842         }
2843
2844         // Generate a throw-away key for the invitation.
2845         key = ecdsa_generate();
2846
2847         if(!key) {
2848                 meshlink_errno = MESHLINK_EINTERNAL;
2849                 goto exit;
2850         }
2851
2852         char *b64key = ecdsa_get_base64_public_key(key);
2853         char *comma;
2854
2855         while(address && *address) {
2856                 // We allow commas in the address part to support multiple addresses in one invitation URL.
2857                 comma = strchr(address, ',');
2858
2859                 if(comma) {
2860                         *comma++ = 0;
2861                 }
2862
2863                 // Split of the port
2864                 port = strrchr(address, ':');
2865
2866                 if(!port) {
2867                         goto invalid;
2868                 }
2869
2870                 *port++ = 0;
2871
2872                 // IPv6 address are enclosed in brackets, per RFC 3986
2873                 if(*address == '[') {
2874                         address++;
2875                         char *bracket = strchr(address, ']');
2876
2877                         if(!bracket) {
2878                                 goto invalid;
2879                         }
2880
2881                         *bracket++ = 0;
2882
2883                         if(*bracket) {
2884                                 goto invalid;
2885                         }
2886                 }
2887
2888                 // Connect to the meshlink daemon mentioned in the URL.
2889                 struct addrinfo *ai = str2addrinfo(address, port, SOCK_STREAM);
2890
2891                 if(ai) {
2892                         for(struct addrinfo *aip = ai; aip; aip = aip->ai_next) {
2893                                 state.sock = socket_in_netns(aip->ai_family, aip->ai_socktype, aip->ai_protocol, mesh->netns);
2894
2895                                 if(state.sock == -1) {
2896                                         logger(mesh, MESHLINK_DEBUG, "Could not open socket: %s\n", strerror(errno));
2897                                         meshlink_errno = MESHLINK_ENETWORK;
2898                                         continue;
2899                                 }
2900
2901                                 set_timeout(state.sock, 5000);
2902
2903                                 if(connect(state.sock, aip->ai_addr, aip->ai_addrlen)) {
2904                                         logger(mesh, MESHLINK_DEBUG, "Could not connect to %s port %s: %s\n", address, port, strerror(errno));
2905                                         meshlink_errno = MESHLINK_ENETWORK;
2906                                         closesocket(state.sock);
2907                                         state.sock = -1;
2908                                         continue;
2909                                 }
2910
2911                                 break;
2912                         }
2913
2914                         freeaddrinfo(ai);
2915                 } else {
2916                         meshlink_errno = MESHLINK_ERESOLV;
2917                 }
2918
2919                 if(state.sock != -1 || !comma) {
2920                         break;
2921                 }
2922
2923                 address = comma;
2924         }
2925
2926         if(state.sock == -1) {
2927                 goto exit;
2928         }
2929
2930         logger(mesh, MESHLINK_DEBUG, "Connected to %s port %s...\n", address, port);
2931
2932         // Tell him we have an invitation, and give him our throw-away key.
2933
2934         state.blen = 0;
2935
2936         if(!sendline(state.sock, "0 ?%s %d.%d %s", b64key, PROT_MAJOR, PROT_MINOR, mesh->appname)) {
2937                 logger(mesh, MESHLINK_DEBUG, "Error sending request to %s port %s: %s\n", address, port, strerror(errno));
2938                 meshlink_errno = MESHLINK_ENETWORK;
2939                 goto exit;
2940         }
2941
2942         free(b64key);
2943
2944         char hisname[4096] = "";
2945         int code, hismajor, hisminor = 0;
2946
2947         if(!recvline(&state) || sscanf(state.line, "%d %s %d.%d", &code, hisname, &hismajor, &hisminor) < 3 || code != 0 || hismajor != PROT_MAJOR || !check_id(hisname) || !recvline(&state) || !rstrip(state.line) || sscanf(state.line, "%d ", &code) != 1 || code != ACK || strlen(state.line) < 3) {
2948                 logger(mesh, MESHLINK_DEBUG, "Cannot read greeting from peer\n");
2949                 meshlink_errno = MESHLINK_ENETWORK;
2950                 goto exit;
2951         }
2952
2953         // Check if the hash of the key he gave us matches the hash in the URL.
2954         char *fingerprint = state.line + 2;
2955         char hishash[64];
2956
2957         if(sha512(fingerprint, strlen(fingerprint), hishash)) {
2958                 logger(mesh, MESHLINK_DEBUG, "Could not create hash\n%s\n", state.line + 2);
2959                 meshlink_errno = MESHLINK_EINTERNAL;
2960                 goto exit;
2961         }
2962
2963         if(memcmp(hishash, state.hash, 18)) {
2964                 logger(mesh, MESHLINK_DEBUG, "Peer has an invalid key!\n%s\n", state.line + 2);
2965                 meshlink_errno = MESHLINK_EPEER;
2966                 goto exit;
2967         }
2968
2969         hiskey = ecdsa_set_base64_public_key(fingerprint);
2970
2971         if(!hiskey) {
2972                 meshlink_errno = MESHLINK_EINTERNAL;
2973                 goto exit;
2974         }
2975
2976         // Start an SPTPS session
2977         if(!sptps_start(&state.sptps, &state, true, false, key, hiskey, meshlink_invitation_label, sizeof(meshlink_invitation_label), invitation_send, invitation_receive)) {
2978                 meshlink_errno = MESHLINK_EINTERNAL;
2979                 goto exit;
2980         }
2981
2982         // Feed rest of input buffer to SPTPS
2983         if(!sptps_receive_data(&state.sptps, state.buffer, state.blen)) {
2984                 meshlink_errno = MESHLINK_EPEER;
2985                 goto exit;
2986         }
2987
2988         ssize_t len;
2989         logger(mesh, MESHLINK_DEBUG, "Starting invitation recv loop: %d %zu\n", state.sock, sizeof(state.line));
2990
2991         while((len = recv(state.sock, state.line, sizeof(state.line), 0))) {
2992                 if(len < 0) {
2993                         if(errno == EINTR) {
2994                                 continue;
2995                         }
2996
2997                         logger(mesh, MESHLINK_DEBUG, "Error reading data from %s port %s: %s\n", address, port, strerror(errno));
2998                         meshlink_errno = MESHLINK_ENETWORK;
2999                         goto exit;
3000                 }
3001
3002                 if(!sptps_receive_data(&state.sptps, state.line, len)) {
3003                         meshlink_errno = MESHLINK_EPEER;
3004                         goto exit;
3005                 }
3006         }
3007
3008         if(!state.success) {
3009                 logger(mesh, MESHLINK_DEBUG, "Connection closed by peer, invitation cancelled.\n");
3010                 meshlink_errno = MESHLINK_EPEER;
3011                 goto exit;
3012         }
3013
3014         sptps_stop(&state.sptps);
3015         ecdsa_free(hiskey);
3016         ecdsa_free(key);
3017         closesocket(state.sock);
3018
3019         pthread_mutex_unlock(&mesh->mutex);
3020         return true;
3021
3022 invalid:
3023         logger(mesh, MESHLINK_DEBUG, "Invalid invitation URL\n");
3024         meshlink_errno = MESHLINK_EINVAL;
3025 exit:
3026         sptps_stop(&state.sptps);
3027         ecdsa_free(hiskey);
3028         ecdsa_free(key);
3029
3030         if(state.sock != -1) {
3031                 closesocket(state.sock);
3032         }
3033
3034         pthread_mutex_unlock(&mesh->mutex);
3035         return false;
3036 }
3037
3038 char *meshlink_export(meshlink_handle_t *mesh) {
3039         if(!mesh) {
3040                 meshlink_errno = MESHLINK_EINVAL;
3041                 return NULL;
3042         }
3043
3044         // Create a config file on the fly.
3045
3046         uint8_t buf[4096];
3047         packmsg_output_t out = {buf, sizeof(buf)};
3048         packmsg_add_uint32(&out, MESHLINK_CONFIG_VERSION);
3049         packmsg_add_str(&out, mesh->name);
3050         packmsg_add_str(&out, CORE_MESH);
3051
3052         pthread_mutex_lock(&mesh->mutex);
3053
3054         packmsg_add_int32(&out, mesh->self->devclass);
3055         packmsg_add_bool(&out, mesh->self->status.blacklisted);
3056         packmsg_add_bin(&out, ecdsa_get_public_key(mesh->private_key), 32);
3057         packmsg_add_str(&out, mesh->self->canonical_address ? mesh->self->canonical_address : "");
3058
3059         uint32_t count = 0;
3060
3061         for(uint32_t i = 0; i < MAX_RECENT; i++) {
3062                 if(mesh->self->recent[i].sa.sa_family) {
3063                         count++;
3064                 } else {
3065                         break;
3066                 }
3067         }
3068
3069         packmsg_add_array(&out, count);
3070
3071         for(uint32_t i = 0; i < count; i++) {
3072                 packmsg_add_sockaddr(&out, &mesh->self->recent[i]);
3073         }
3074
3075         packmsg_add_int64(&out, 0);
3076         packmsg_add_int64(&out, 0);
3077
3078         pthread_mutex_unlock(&mesh->mutex);
3079
3080         if(!packmsg_output_ok(&out)) {
3081                 logger(mesh, MESHLINK_DEBUG, "Error creating export data\n");
3082                 meshlink_errno = MESHLINK_EINTERNAL;
3083                 return NULL;
3084         }
3085
3086         // Prepare a base64-encoded packmsg array containing our config file
3087
3088         uint32_t len = packmsg_output_size(&out, buf);
3089         uint32_t len2 = ((len + 4) * 4) / 3 + 4;
3090         uint8_t *buf2 = xmalloc(len2);
3091         packmsg_output_t out2 = {buf2, len2};
3092         packmsg_add_array(&out2, 1);
3093         packmsg_add_bin(&out2, buf, packmsg_output_size(&out, buf));
3094
3095         if(!packmsg_output_ok(&out2)) {
3096                 logger(mesh, MESHLINK_DEBUG, "Error creating export data\n");
3097                 meshlink_errno = MESHLINK_EINTERNAL;
3098                 free(buf2);
3099                 return NULL;
3100         }
3101
3102         b64encode_urlsafe(buf2, (char *)buf2, packmsg_output_size(&out2, buf2));
3103
3104         return (char *)buf2;
3105 }
3106
3107 bool meshlink_import(meshlink_handle_t *mesh, const char *data) {
3108         if(!mesh || !data) {
3109                 meshlink_errno = MESHLINK_EINVAL;
3110                 return false;
3111         }
3112
3113         size_t datalen = strlen(data);
3114         uint8_t *buf = xmalloc(datalen);
3115         int buflen = b64decode(data, buf, datalen);
3116
3117         if(!buflen) {
3118                 logger(mesh, MESHLINK_DEBUG, "Invalid data\n");
3119                 meshlink_errno = MESHLINK_EPEER;
3120                 return false;
3121         }
3122
3123         packmsg_input_t in = {buf, buflen};
3124         uint32_t count = packmsg_get_array(&in);
3125
3126         if(!count) {
3127                 logger(mesh, MESHLINK_DEBUG, "Invalid data\n");
3128                 meshlink_errno = MESHLINK_EPEER;
3129                 return false;
3130         }
3131
3132         pthread_mutex_lock(&mesh->mutex);
3133
3134         while(count--) {
3135                 const void *data;
3136                 uint32_t len = packmsg_get_bin_raw(&in, &data);
3137
3138                 if(!len) {
3139                         break;
3140                 }
3141
3142                 packmsg_input_t in2 = {data, len};
3143                 uint32_t version = packmsg_get_uint32(&in2);
3144                 char *name = packmsg_get_str_dup(&in2);
3145
3146                 if(!packmsg_input_ok(&in2) || version != MESHLINK_CONFIG_VERSION || !check_id(name)) {
3147                         free(name);
3148                         packmsg_input_invalidate(&in);
3149                         break;
3150                 }
3151
3152                 if(!check_id(name)) {
3153                         free(name);
3154                         break;
3155                 }
3156
3157                 node_t *n = lookup_node(mesh, name);
3158
3159                 if(n) {
3160                         logger(mesh, MESHLINK_DEBUG, "Node %s already exists, not importing\n", name);
3161                         free(name);
3162                         continue;
3163                 }
3164
3165                 n = new_node();
3166                 n->name = name;
3167
3168                 config_t config = {data, len};
3169
3170                 if(!node_read_from_config(mesh, n, &config)) {
3171                         free_node(n);
3172                         packmsg_input_invalidate(&in);
3173                         break;
3174                 }
3175
3176                 /* Clear the reachability times, since we ourself have never seen these nodes yet */
3177                 n->last_reachable = 0;
3178                 n->last_unreachable = 0;
3179
3180                 if(!node_write_config(mesh, n)) {
3181                         free_node(n);
3182                         return false;
3183                 }
3184
3185                 node_add(mesh, n);
3186         }
3187
3188         pthread_mutex_unlock(&mesh->mutex);
3189
3190         free(buf);
3191
3192         if(!packmsg_done(&in)) {
3193                 logger(mesh, MESHLINK_ERROR, "Invalid data\n");
3194                 meshlink_errno = MESHLINK_EPEER;
3195                 return false;
3196         }
3197
3198         if(!config_sync(mesh, "current")) {
3199                 return false;
3200         }
3201
3202         return true;
3203 }
3204
3205 static bool blacklist(meshlink_handle_t *mesh, node_t *n) {
3206         if(n == mesh->self) {
3207                 logger(mesh, MESHLINK_ERROR, "%s blacklisting itself?\n", n->name);
3208                 meshlink_errno = MESHLINK_EINVAL;
3209                 return false;
3210         }
3211
3212         if(n->status.blacklisted) {
3213                 logger(mesh, MESHLINK_DEBUG, "Node %s already blacklisted\n", n->name);
3214                 return true;
3215         }
3216
3217         n->status.blacklisted = true;
3218
3219         /* Immediately shut down any connections we have with the blacklisted node.
3220          * We can't call terminate_connection(), because we might be called from a callback function.
3221          */
3222         for list_each(connection_t, c, mesh->connections) {
3223                 if(c->node == n) {
3224                         shutdown(c->socket, SHUT_RDWR);
3225                 }
3226         }
3227
3228         utcp_abort_all_connections(n->utcp);
3229
3230         n->mtu = 0;
3231         n->minmtu = 0;
3232         n->maxmtu = MTU;
3233         n->mtuprobes = 0;
3234         n->status.udp_confirmed = false;
3235
3236         if(n->status.reachable) {
3237                 n->last_unreachable = mesh->loop.now.tv_sec;
3238         }
3239
3240         /* Graph updates will suppress status updates for blacklisted nodes, so we need to
3241          * manually call the status callback if necessary.
3242          */
3243         if(n->status.reachable && mesh->node_status_cb) {
3244                 mesh->node_status_cb(mesh, (meshlink_node_t *)n, false);
3245         }
3246
3247         return node_write_config(mesh, n) && config_sync(mesh, "current");
3248 }
3249
3250 bool meshlink_blacklist(meshlink_handle_t *mesh, meshlink_node_t *node) {
3251         if(!mesh || !node) {
3252                 meshlink_errno = MESHLINK_EINVAL;
3253                 return false;
3254         }
3255
3256         pthread_mutex_lock(&mesh->mutex);
3257
3258         if(!blacklist(mesh, (node_t *)node)) {
3259                 pthread_mutex_unlock(&mesh->mutex);
3260                 return false;
3261         }
3262
3263         pthread_mutex_unlock(&mesh->mutex);
3264
3265         logger(mesh, MESHLINK_DEBUG, "Blacklisted %s.\n", node->name);
3266         return true;
3267 }
3268
3269 bool meshlink_blacklist_by_name(meshlink_handle_t *mesh, const char *name) {
3270         if(!mesh || !name) {
3271                 meshlink_errno = MESHLINK_EINVAL;
3272                 return false;
3273         }
3274
3275         pthread_mutex_lock(&mesh->mutex);
3276
3277         node_t *n = lookup_node(mesh, (char *)name);
3278
3279         if(!n) {
3280                 n = new_node();
3281                 n->name = xstrdup(name);
3282                 node_add(mesh, n);
3283         }
3284
3285         if(!blacklist(mesh, (node_t *)n)) {
3286                 pthread_mutex_unlock(&mesh->mutex);
3287                 return false;
3288         }
3289
3290         pthread_mutex_unlock(&mesh->mutex);
3291
3292         logger(mesh, MESHLINK_DEBUG, "Blacklisted %s.\n", name);
3293         return true;
3294 }
3295
3296 static bool whitelist(meshlink_handle_t *mesh, node_t *n) {
3297         if(n == mesh->self) {
3298                 logger(mesh, MESHLINK_ERROR, "%s whitelisting itself?\n", n->name);
3299                 meshlink_errno = MESHLINK_EINVAL;
3300                 return false;
3301         }
3302
3303         if(!n->status.blacklisted) {
3304                 logger(mesh, MESHLINK_DEBUG, "Node %s was already whitelisted\n", n->name);
3305                 return true;
3306         }
3307
3308         n->status.blacklisted = false;
3309
3310         if(n->status.reachable) {
3311                 n->last_reachable = mesh->loop.now.tv_sec;
3312                 update_node_status(mesh, n);
3313         }
3314
3315         return node_write_config(mesh, n) && config_sync(mesh, "current");
3316 }
3317
3318 bool meshlink_whitelist(meshlink_handle_t *mesh, meshlink_node_t *node) {
3319         if(!mesh || !node) {
3320                 meshlink_errno = MESHLINK_EINVAL;
3321                 return false;
3322         }
3323
3324         pthread_mutex_lock(&mesh->mutex);
3325
3326         if(!whitelist(mesh, (node_t *)node)) {
3327                 pthread_mutex_unlock(&mesh->mutex);
3328                 return false;
3329         }
3330
3331         pthread_mutex_unlock(&mesh->mutex);
3332
3333         logger(mesh, MESHLINK_DEBUG, "Whitelisted %s.\n", node->name);
3334         return true;
3335 }
3336
3337 bool meshlink_whitelist_by_name(meshlink_handle_t *mesh, const char *name) {
3338         if(!mesh || !name) {
3339                 meshlink_errno = MESHLINK_EINVAL;
3340                 return false;
3341         }
3342
3343         pthread_mutex_lock(&mesh->mutex);
3344
3345         node_t *n = lookup_node(mesh, (char *)name);
3346
3347         if(!n) {
3348                 n = new_node();
3349                 n->name = xstrdup(name);
3350                 node_add(mesh, n);
3351         }
3352
3353         if(!whitelist(mesh, (node_t *)n)) {
3354                 pthread_mutex_unlock(&mesh->mutex);
3355                 return false;
3356         }
3357
3358         pthread_mutex_unlock(&mesh->mutex);
3359
3360         logger(mesh, MESHLINK_DEBUG, "Whitelisted %s.\n", name);
3361         return true;
3362 }
3363
3364 void meshlink_set_default_blacklist(meshlink_handle_t *mesh, bool blacklist) {
3365         mesh->default_blacklist = blacklist;
3366 }
3367
3368 bool meshlink_forget_node(meshlink_handle_t *mesh, meshlink_node_t *node) {
3369         if(!mesh || !node) {
3370                 meshlink_errno = MESHLINK_EINVAL;
3371                 return false;
3372         }
3373
3374         node_t *n = (node_t *)node;
3375
3376         pthread_mutex_lock(&mesh->mutex);
3377
3378         /* Check that the node is not reachable */
3379         if(n->status.reachable || n->connection) {
3380                 pthread_mutex_unlock(&mesh->mutex);
3381                 logger(mesh, MESHLINK_WARNING, "Could not forget %s: still reachable", n->name);
3382                 return false;
3383         }
3384
3385         /* Check that we don't have any active UTCP connections */
3386         if(n->utcp && utcp_is_active(n->utcp)) {
3387                 pthread_mutex_unlock(&mesh->mutex);
3388                 logger(mesh, MESHLINK_WARNING, "Could not forget %s: active UTCP connections", n->name);
3389                 return false;
3390         }
3391
3392         /* Check that we have no active connections to this node */
3393         for list_each(connection_t, c, mesh->connections) {
3394                 if(c->node == n) {
3395                         pthread_mutex_unlock(&mesh->mutex);
3396                         logger(mesh, MESHLINK_WARNING, "Could not forget %s: active connection", n->name);
3397                         return false;
3398                 }
3399         }
3400
3401         /* Remove any pending outgoings to this node */
3402         if(mesh->outgoings) {
3403                 for list_each(outgoing_t, outgoing, mesh->outgoings) {
3404                         if(outgoing->node == n) {
3405                                 list_delete_node(mesh->outgoings, node);
3406                         }
3407                 }
3408         }
3409
3410         /* Delete the config file for this node */
3411         if(!config_delete(mesh, "current", n->name)) {
3412                 pthread_mutex_unlock(&mesh->mutex);
3413                 return false;
3414         }
3415
3416         /* Delete the node struct and any remaining edges referencing this node */
3417         node_del(mesh, n);
3418
3419         pthread_mutex_unlock(&mesh->mutex);
3420
3421         return config_sync(mesh, "current");
3422 }
3423
3424 /* Hint that a hostname may be found at an address
3425  * See header file for detailed comment.
3426  */
3427 void meshlink_hint_address(meshlink_handle_t *mesh, meshlink_node_t *node, const struct sockaddr *addr) {
3428         if(!mesh || !node || !addr) {
3429                 meshlink_errno = EINVAL;
3430                 return;
3431         }
3432
3433         pthread_mutex_lock(&mesh->mutex);
3434
3435         node_t *n = (node_t *)node;
3436
3437         if(node_add_recent_address(mesh, n, (sockaddr_t *)addr)) {
3438                 if(!node_write_config(mesh, n)) {
3439                         logger(mesh, MESHLINK_DEBUG, "Could not update %s\n", n->name);
3440                 }
3441         }
3442
3443         pthread_mutex_unlock(&mesh->mutex);
3444         // @TODO do we want to fire off a connection attempt right away?
3445 }
3446
3447 static bool channel_pre_accept(struct utcp *utcp, uint16_t port) {
3448         (void)port;
3449         node_t *n = utcp->priv;
3450         meshlink_handle_t *mesh = n->mesh;
3451         return mesh->channel_accept_cb;
3452 }
3453
3454 static void aio_signal(meshlink_handle_t *mesh, meshlink_channel_t *channel, meshlink_aio_buffer_t *aio) {
3455         if(aio->data) {
3456                 if(aio->cb.buffer) {
3457                         aio->cb.buffer(mesh, channel, aio->data, aio->len, aio->priv);
3458                 }
3459         } else {
3460                 if(aio->cb.fd) {
3461                         aio->cb.fd(mesh, channel, aio->fd, aio->done, aio->priv);
3462                 }
3463         }
3464 }
3465
3466 static ssize_t channel_recv(struct utcp_connection *connection, const void *data, size_t len) {
3467         meshlink_channel_t *channel = connection->priv;
3468
3469         if(!channel) {
3470                 abort();
3471         }
3472
3473         node_t *n = channel->node;
3474         meshlink_handle_t *mesh = n->mesh;
3475
3476         if(n->status.destroyed) {
3477                 meshlink_channel_close(mesh, channel);
3478                 return len;
3479         }
3480
3481         const char *p = data;
3482         size_t left = len;
3483
3484         while(channel->aio_receive) {
3485                 meshlink_aio_buffer_t *aio = channel->aio_receive;
3486                 size_t todo = aio->len - aio->done;
3487
3488                 if(todo > left) {
3489                         todo = left;
3490                 }
3491
3492                 if(aio->data) {
3493                         memcpy((char *)aio->data + aio->done, p, todo);
3494                 } else {
3495                         ssize_t result = write(aio->fd, p, todo);
3496
3497                         if(result > 0) {
3498                                 todo = result;
3499                         }
3500                 }
3501
3502                 aio->done += todo;
3503
3504                 if(aio->done == aio->len) {
3505                         channel->aio_receive = aio->next;
3506                         aio_signal(mesh, channel, aio);
3507                         free(aio);
3508                 }
3509
3510                 p += todo;
3511                 left -= todo;
3512
3513                 if(!left && len) {
3514                         return len;
3515                 }
3516         }
3517
3518         if(channel->receive_cb) {
3519                 channel->receive_cb(mesh, channel, p, left);
3520         }
3521
3522         return len;
3523 }
3524
3525 static void channel_accept(struct utcp_connection *utcp_connection, uint16_t port) {
3526         node_t *n = utcp_connection->utcp->priv;
3527
3528         if(!n) {
3529                 abort();
3530         }
3531
3532         meshlink_handle_t *mesh = n->mesh;
3533
3534         if(!mesh->channel_accept_cb) {
3535                 return;
3536         }
3537
3538         meshlink_channel_t *channel = xzalloc(sizeof(*channel));
3539         channel->node = n;
3540         channel->c = utcp_connection;
3541
3542         if(mesh->channel_accept_cb(mesh, channel, port, NULL, 0)) {
3543                 utcp_accept(utcp_connection, channel_recv, channel);
3544         } else {
3545                 free(channel);
3546         }
3547 }
3548
3549 static ssize_t channel_send(struct utcp *utcp, const void *data, size_t len) {
3550         node_t *n = utcp->priv;
3551
3552         if(n->status.destroyed) {
3553                 return -1;
3554         }
3555
3556         meshlink_handle_t *mesh = n->mesh;
3557         return meshlink_send_immediate(mesh, (meshlink_node_t *)n, data, len) ? (ssize_t)len : -1;
3558 }
3559
3560 void meshlink_set_channel_receive_cb(meshlink_handle_t *mesh, meshlink_channel_t *channel, meshlink_channel_receive_cb_t cb) {
3561         if(!mesh || !channel) {
3562                 meshlink_errno = MESHLINK_EINVAL;
3563                 return;
3564         }
3565
3566         channel->receive_cb = cb;
3567 }
3568
3569 static void channel_receive(meshlink_handle_t *mesh, meshlink_node_t *source, const void *data, size_t len) {
3570         (void)mesh;
3571         node_t *n = (node_t *)source;
3572
3573         if(!n->utcp) {
3574                 abort();
3575         }
3576
3577         utcp_recv(n->utcp, data, len);
3578 }
3579
3580 static void channel_poll(struct utcp_connection *connection, size_t len) {
3581         meshlink_channel_t *channel = connection->priv;
3582
3583         if(!channel) {
3584                 abort();
3585         }
3586
3587         node_t *n = channel->node;
3588         meshlink_handle_t *mesh = n->mesh;
3589         meshlink_aio_buffer_t *aio = channel->aio_send;
3590
3591         if(aio) {
3592                 /* We at least one AIO buffer. Send as much as possible form the first buffer. */
3593                 size_t left = aio->len - aio->done;
3594                 ssize_t sent;
3595
3596                 if(len > left) {
3597                         len = left;
3598                 }
3599
3600                 if(aio->data) {
3601                         sent = utcp_send(connection, (char *)aio->data + aio->done, len);
3602                 } else {
3603                         char buf[65536];
3604                         size_t todo = utcp_get_sndbuf_free(connection);
3605
3606                         if(todo > left) {
3607                                 todo = left;
3608                         }
3609
3610                         if(todo > sizeof(buf)) {
3611                                 todo = sizeof(buf);
3612                         }
3613
3614                         ssize_t result = read(aio->fd, buf, todo);
3615
3616                         if(result > 0) {
3617                                 sent = utcp_send(connection, buf, result);
3618                         } else {
3619                                 sent = result;
3620                         }
3621                 }
3622
3623                 if(sent >= 0) {
3624                         aio->done += sent;
3625                 }
3626
3627                 /* If the buffer is now completely sent, call the callback and dispose of it. */
3628                 if(aio->done >= aio->len) {
3629                         channel->aio_send = aio->next;
3630                         aio_signal(mesh, channel, aio);
3631                         free(aio);
3632                 }
3633         } else {
3634                 if(channel->poll_cb) {
3635                         channel->poll_cb(mesh, channel, len);
3636                 } else {
3637                         utcp_set_poll_cb(connection, NULL);
3638                 }
3639         }
3640 }
3641
3642 void meshlink_set_channel_poll_cb(meshlink_handle_t *mesh, meshlink_channel_t *channel, meshlink_channel_poll_cb_t cb) {
3643         if(!mesh || !channel) {
3644                 meshlink_errno = MESHLINK_EINVAL;
3645                 return;
3646         }
3647
3648         pthread_mutex_lock(&mesh->mutex);
3649         channel->poll_cb = cb;
3650         utcp_set_poll_cb(channel->c, (cb || channel->aio_send) ? channel_poll : NULL);
3651         pthread_mutex_unlock(&mesh->mutex);
3652 }
3653
3654 void meshlink_set_channel_accept_cb(meshlink_handle_t *mesh, meshlink_channel_accept_cb_t cb) {
3655         if(!mesh) {
3656                 meshlink_errno = MESHLINK_EINVAL;
3657                 return;
3658         }
3659
3660         pthread_mutex_lock(&mesh->mutex);
3661         mesh->channel_accept_cb = cb;
3662         mesh->receive_cb = channel_receive;
3663
3664         for splay_each(node_t, n, mesh->nodes) {
3665                 if(!n->utcp && n != mesh->self) {
3666                         n->utcp = utcp_init(channel_accept, channel_pre_accept, channel_send, n);
3667                 }
3668         }
3669
3670         pthread_mutex_unlock(&mesh->mutex);
3671 }
3672
3673 void meshlink_set_channel_sndbuf(meshlink_handle_t *mesh, meshlink_channel_t *channel, size_t size) {
3674         (void)mesh;
3675
3676         if(!channel) {
3677                 meshlink_errno = MESHLINK_EINVAL;
3678                 return;
3679         }
3680
3681         pthread_mutex_lock(&mesh->mutex);
3682         utcp_set_sndbuf(channel->c, size);
3683         pthread_mutex_unlock(&mesh->mutex);
3684 }
3685
3686 void meshlink_set_channel_rcvbuf(meshlink_handle_t *mesh, meshlink_channel_t *channel, size_t size) {
3687         (void)mesh;
3688
3689         if(!channel) {
3690                 meshlink_errno = MESHLINK_EINVAL;
3691                 return;
3692         }
3693
3694         pthread_mutex_lock(&mesh->mutex);
3695         utcp_set_rcvbuf(channel->c, size);
3696         pthread_mutex_unlock(&mesh->mutex);
3697 }
3698
3699 meshlink_channel_t *meshlink_channel_open_ex(meshlink_handle_t *mesh, meshlink_node_t *node, uint16_t port, meshlink_channel_receive_cb_t cb, const void *data, size_t len, uint32_t flags) {
3700         if(data && len) {
3701                 abort();        // TODO: handle non-NULL data
3702         }
3703
3704         if(!mesh || !node) {
3705                 meshlink_errno = MESHLINK_EINVAL;
3706                 return NULL;
3707         }
3708
3709         pthread_mutex_lock(&mesh->mutex);
3710
3711         node_t *n = (node_t *)node;
3712
3713         if(!n->utcp) {
3714                 n->utcp = utcp_init(channel_accept, channel_pre_accept, channel_send, n);
3715                 mesh->receive_cb = channel_receive;
3716
3717                 if(!n->utcp) {
3718                         meshlink_errno = errno == ENOMEM ? MESHLINK_ENOMEM : MESHLINK_EINTERNAL;
3719                         pthread_mutex_unlock(&mesh->mutex);
3720                         return NULL;
3721                 }
3722         }
3723
3724         if(n->status.blacklisted) {
3725                 logger(mesh, MESHLINK_ERROR, "Cannot open a channel with blacklisted node\n");
3726                 meshlink_errno = MESHLINK_EBLACKLISTED;
3727                 pthread_mutex_unlock(&mesh->mutex);
3728                 return NULL;
3729         }
3730
3731         meshlink_channel_t *channel = xzalloc(sizeof(*channel));
3732         channel->node = n;
3733         channel->receive_cb = cb;
3734
3735         if(data && !len) {
3736                 channel->priv = (void *)data;
3737         }
3738
3739         channel->c = utcp_connect_ex(n->utcp, port, channel_recv, channel, flags);
3740
3741         pthread_mutex_unlock(&mesh->mutex);
3742
3743         if(!channel->c) {
3744                 meshlink_errno = errno == ENOMEM ? MESHLINK_ENOMEM : MESHLINK_EINTERNAL;
3745                 free(channel);
3746                 return NULL;
3747         }
3748
3749         return channel;
3750 }
3751
3752 meshlink_channel_t *meshlink_channel_open(meshlink_handle_t *mesh, meshlink_node_t *node, uint16_t port, meshlink_channel_receive_cb_t cb, const void *data, size_t len) {
3753         return meshlink_channel_open_ex(mesh, node, port, cb, data, len, MESHLINK_CHANNEL_TCP);
3754 }
3755
3756 void meshlink_channel_shutdown(meshlink_handle_t *mesh, meshlink_channel_t *channel, int direction) {
3757         if(!mesh || !channel) {
3758                 meshlink_errno = MESHLINK_EINVAL;
3759                 return;
3760         }
3761
3762         pthread_mutex_lock(&mesh->mutex);
3763         utcp_shutdown(channel->c, direction);
3764         pthread_mutex_unlock(&mesh->mutex);
3765 }
3766
3767 void meshlink_channel_close(meshlink_handle_t *mesh, meshlink_channel_t *channel) {
3768         if(!mesh || !channel) {
3769                 meshlink_errno = MESHLINK_EINVAL;
3770                 return;
3771         }
3772
3773         pthread_mutex_lock(&mesh->mutex);
3774
3775         utcp_close(channel->c);
3776
3777         /* Clean up any outstanding AIO buffers. */
3778         for(meshlink_aio_buffer_t *aio = channel->aio_send, *next; aio; aio = next) {
3779                 next = aio->next;
3780                 aio_signal(mesh, channel, aio);
3781                 free(aio);
3782         }
3783
3784         for(meshlink_aio_buffer_t *aio = channel->aio_receive, *next; aio; aio = next) {
3785                 next = aio->next;
3786                 aio_signal(mesh, channel, aio);
3787                 free(aio);
3788         }
3789
3790         pthread_mutex_unlock(&mesh->mutex);
3791
3792         free(channel);
3793 }
3794
3795 ssize_t meshlink_channel_send(meshlink_handle_t *mesh, meshlink_channel_t *channel, const void *data, size_t len) {
3796         if(!mesh || !channel) {
3797                 meshlink_errno = MESHLINK_EINVAL;
3798                 return -1;
3799         }
3800
3801         if(!len) {
3802                 return 0;
3803         }
3804
3805         if(!data) {
3806                 meshlink_errno = MESHLINK_EINVAL;
3807                 return -1;
3808         }
3809
3810         // TODO: more finegrained locking.
3811         // Ideally we want to put the data into the UTCP connection's send buffer.
3812         // Then, preferably only if there is room in the receiver window,
3813         // kick the meshlink thread to go send packets.
3814
3815         ssize_t retval;
3816
3817         pthread_mutex_lock(&mesh->mutex);
3818
3819         /* Disallow direct calls to utcp_send() while we still have AIO active. */
3820         if(channel->aio_send) {
3821                 retval = 0;
3822         } else {
3823                 retval = utcp_send(channel->c, data, len);
3824         }
3825
3826         pthread_mutex_unlock(&mesh->mutex);
3827
3828         if(retval < 0) {
3829                 meshlink_errno = MESHLINK_ENETWORK;
3830         }
3831
3832         return retval;
3833 }
3834
3835 bool meshlink_channel_aio_send(meshlink_handle_t *mesh, meshlink_channel_t *channel, const void *data, size_t len, meshlink_aio_cb_t cb, void *priv) {
3836         if(!mesh || !channel) {
3837                 meshlink_errno = MESHLINK_EINVAL;
3838                 return false;
3839         }
3840
3841         if(!len || !data) {
3842                 meshlink_errno = MESHLINK_EINVAL;
3843                 return false;
3844         }
3845
3846         meshlink_aio_buffer_t *aio = xzalloc(sizeof(*aio));
3847         aio->data = data;
3848         aio->len = len;
3849         aio->cb.buffer = cb;
3850         aio->priv = priv;
3851
3852         pthread_mutex_lock(&mesh->mutex);
3853
3854         /* Append the AIO buffer descriptor to the end of the chain */
3855         meshlink_aio_buffer_t **p = &channel->aio_send;
3856
3857         while(*p) {
3858                 p = &(*p)->next;
3859         }
3860
3861         *p = aio;
3862
3863         /* Ensure the poll callback is set, and call it right now to push data if possible */
3864         utcp_set_poll_cb(channel->c, channel_poll);
3865         channel_poll(channel->c, len);
3866
3867         pthread_mutex_unlock(&mesh->mutex);
3868
3869         return true;
3870 }
3871
3872 bool meshlink_channel_aio_fd_send(meshlink_handle_t *mesh, meshlink_channel_t *channel, int fd, size_t len, meshlink_aio_fd_cb_t cb, void *priv) {
3873         if(!mesh || !channel) {
3874                 meshlink_errno = MESHLINK_EINVAL;
3875                 return false;
3876         }
3877
3878         if(!len || fd == -1) {
3879                 meshlink_errno = MESHLINK_EINVAL;
3880                 return false;
3881         }
3882
3883         meshlink_aio_buffer_t *aio = xzalloc(sizeof(*aio));
3884         aio->fd = fd;
3885         aio->len = len;
3886         aio->cb.fd = cb;
3887         aio->priv = priv;
3888
3889         pthread_mutex_lock(&mesh->mutex);
3890
3891         /* Append the AIO buffer descriptor to the end of the chain */
3892         meshlink_aio_buffer_t **p = &channel->aio_send;
3893
3894         while(*p) {
3895                 p = &(*p)->next;
3896         }
3897
3898         *p = aio;
3899
3900         /* Ensure the poll callback is set, and call it right now to push data if possible */
3901         utcp_set_poll_cb(channel->c, channel_poll);
3902         channel_poll(channel->c, len);
3903
3904         pthread_mutex_unlock(&mesh->mutex);
3905
3906         return true;
3907 }
3908
3909 bool meshlink_channel_aio_receive(meshlink_handle_t *mesh, meshlink_channel_t *channel, const void *data, size_t len, meshlink_aio_cb_t cb, void *priv) {
3910         if(!mesh || !channel) {
3911                 meshlink_errno = MESHLINK_EINVAL;
3912                 return false;
3913         }
3914
3915         if(!len || !data) {
3916                 meshlink_errno = MESHLINK_EINVAL;
3917                 return false;
3918         }
3919
3920         meshlink_aio_buffer_t *aio = xzalloc(sizeof(*aio));
3921         aio->data = data;
3922         aio->len = len;
3923         aio->cb.buffer = cb;
3924         aio->priv = priv;
3925
3926         pthread_mutex_lock(&mesh->mutex);
3927
3928         /* Append the AIO buffer descriptor to the end of the chain */
3929         meshlink_aio_buffer_t **p = &channel->aio_receive;
3930
3931         while(*p) {
3932                 p = &(*p)->next;
3933         }
3934
3935         *p = aio;
3936
3937         pthread_mutex_unlock(&mesh->mutex);
3938
3939         return true;
3940 }
3941
3942 bool meshlink_channel_aio_fd_receive(meshlink_handle_t *mesh, meshlink_channel_t *channel, int fd, size_t len, meshlink_aio_fd_cb_t cb, void *priv) {
3943         if(!mesh || !channel) {
3944                 meshlink_errno = MESHLINK_EINVAL;
3945                 return false;
3946         }
3947
3948         if(!len || fd == -1) {
3949                 meshlink_errno = MESHLINK_EINVAL;
3950                 return false;
3951         }
3952
3953         meshlink_aio_buffer_t *aio = xzalloc(sizeof(*aio));
3954         aio->fd = fd;
3955         aio->len = len;
3956         aio->cb.fd = cb;
3957         aio->priv = priv;
3958
3959         pthread_mutex_lock(&mesh->mutex);
3960
3961         /* Append the AIO buffer descriptor to the end of the chain */
3962         meshlink_aio_buffer_t **p = &channel->aio_receive;
3963
3964         while(*p) {
3965                 p = &(*p)->next;
3966         }
3967
3968         *p = aio;
3969
3970         pthread_mutex_unlock(&mesh->mutex);
3971
3972         return true;
3973 }
3974
3975 uint32_t meshlink_channel_get_flags(meshlink_handle_t *mesh, meshlink_channel_t *channel) {
3976         if(!mesh || !channel) {
3977                 meshlink_errno = MESHLINK_EINVAL;
3978                 return -1;
3979         }
3980
3981         return channel->c->flags;
3982 }
3983
3984 size_t meshlink_channel_get_sendq(meshlink_handle_t *mesh, meshlink_channel_t *channel) {
3985         if(!mesh || !channel) {
3986                 meshlink_errno = MESHLINK_EINVAL;
3987                 return -1;
3988         }
3989
3990         return utcp_get_sendq(channel->c);
3991 }
3992
3993 size_t meshlink_channel_get_recvq(meshlink_handle_t *mesh, meshlink_channel_t *channel) {
3994         if(!mesh || !channel) {
3995                 meshlink_errno = MESHLINK_EINVAL;
3996                 return -1;
3997         }
3998
3999         return utcp_get_recvq(channel->c);
4000 }
4001
4002 void meshlink_set_node_channel_timeout(meshlink_handle_t *mesh, meshlink_node_t *node, int timeout) {
4003         if(!mesh || !node) {
4004                 meshlink_errno = MESHLINK_EINVAL;
4005                 return;
4006         }
4007
4008         node_t *n = (node_t *)node;
4009
4010         pthread_mutex_lock(&mesh->mutex);
4011
4012         if(!n->utcp) {
4013                 n->utcp = utcp_init(channel_accept, channel_pre_accept, channel_send, n);
4014         }
4015
4016         utcp_set_user_timeout(n->utcp, timeout);
4017
4018         pthread_mutex_unlock(&mesh->mutex);
4019 }
4020
4021 void update_node_status(meshlink_handle_t *mesh, node_t *n) {
4022         if(n->status.reachable && mesh->channel_accept_cb && !n->utcp) {
4023                 n->utcp = utcp_init(channel_accept, channel_pre_accept, channel_send, n);
4024         }
4025
4026         if(mesh->node_status_cb) {
4027                 mesh->node_status_cb(mesh, (meshlink_node_t *)n, n->status.reachable && !n->status.blacklisted);
4028         }
4029
4030         if(mesh->node_pmtu_cb) {
4031                 mesh->node_pmtu_cb(mesh, (meshlink_node_t *)n, n->minmtu);
4032         }
4033 }
4034
4035 void update_node_pmtu(meshlink_handle_t *mesh, node_t *n) {
4036         if(mesh->node_pmtu_cb && !n->status.blacklisted) {
4037                 mesh->node_pmtu_cb(mesh, (meshlink_node_t *)n, n->minmtu);
4038         }
4039 }
4040
4041 void handle_duplicate_node(meshlink_handle_t *mesh, node_t *n) {
4042         if(!mesh->node_duplicate_cb || n->status.duplicate) {
4043                 return;
4044         }
4045
4046         n->status.duplicate = true;
4047         mesh->node_duplicate_cb(mesh, (meshlink_node_t *)n);
4048 }
4049
4050 void meshlink_enable_discovery(meshlink_handle_t *mesh, bool enable) {
4051 #if HAVE_CATTA
4052
4053         if(!mesh) {
4054                 meshlink_errno = MESHLINK_EINVAL;
4055                 return;
4056         }
4057
4058         pthread_mutex_lock(&mesh->mutex);
4059
4060         if(mesh->discovery == enable) {
4061                 goto end;
4062         }
4063
4064         if(mesh->threadstarted) {
4065                 if(enable) {
4066                         discovery_start(mesh);
4067                 } else {
4068                         discovery_stop(mesh);
4069                 }
4070         }
4071
4072         mesh->discovery = enable;
4073
4074 end:
4075         pthread_mutex_unlock(&mesh->mutex);
4076 #else
4077         (void)mesh;
4078         (void)enable;
4079         meshlink_errno = MESHLINK_ENOTSUP;
4080 #endif
4081 }
4082
4083 void meshlink_set_dev_class_timeouts(meshlink_handle_t *mesh, dev_class_t devclass, int pinginterval, int pingtimeout) {
4084         if(!mesh || devclass < 0 || devclass >= DEV_CLASS_COUNT) {
4085                 meshlink_errno = EINVAL;
4086                 return;
4087         }
4088
4089         if(pinginterval < 1 || pingtimeout < 1 || pingtimeout > pinginterval) {
4090                 meshlink_errno = EINVAL;
4091                 return;
4092         }
4093
4094         pthread_mutex_lock(&mesh->mutex);
4095         mesh->dev_class_traits[devclass].pinginterval = pinginterval;
4096         mesh->dev_class_traits[devclass].pingtimeout = pingtimeout;
4097         pthread_mutex_unlock(&mesh->mutex);
4098 }
4099
4100 void meshlink_set_dev_class_fast_retry_period(meshlink_handle_t *mesh, dev_class_t devclass, int fast_retry_period) {
4101         if(!mesh || devclass < 0 || devclass >= DEV_CLASS_COUNT) {
4102                 meshlink_errno = EINVAL;
4103                 return;
4104         }
4105
4106         if(fast_retry_period < 0) {
4107                 meshlink_errno = EINVAL;
4108                 return;
4109         }
4110
4111         pthread_mutex_lock(&mesh->mutex);
4112         mesh->dev_class_traits[devclass].fast_retry_period = fast_retry_period;
4113         pthread_mutex_unlock(&mesh->mutex);
4114 }
4115
4116 extern void meshlink_set_inviter_commits_first(struct meshlink_handle *mesh, bool inviter_commits_first) {
4117         if(!mesh) {
4118                 meshlink_errno = EINVAL;
4119                 return;
4120         }
4121
4122         pthread_mutex_lock(&mesh->mutex);
4123         mesh->inviter_commits_first = inviter_commits_first;
4124         pthread_mutex_unlock(&mesh->mutex);
4125 }
4126
4127 void meshlink_set_external_address_discovery_url(struct meshlink_handle *mesh, const char *url) {
4128         if(!mesh) {
4129                 meshlink_errno = EINVAL;
4130                 return;
4131         }
4132
4133         if(url && (strncmp(url, "http://", 7) || strchr(url, ' '))) {
4134                 meshlink_errno = EINVAL;
4135                 return;
4136         }
4137
4138         pthread_mutex_lock(&mesh->mutex);
4139         free(mesh->external_address_url);
4140         mesh->external_address_url = url ? xstrdup(url) : NULL;
4141         pthread_mutex_unlock(&mesh->mutex);
4142 }
4143
4144 void handle_network_change(meshlink_handle_t *mesh, bool online) {
4145         (void)online;
4146
4147         if(!mesh->connections || !mesh->loop.running) {
4148                 return;
4149         }
4150
4151         retry(mesh);
4152 }
4153
4154 void call_error_cb(meshlink_handle_t *mesh, meshlink_errno_t meshlink_errno) {
4155         // We should only call the callback function if we are in the background thread.
4156         if(!mesh->error_cb) {
4157                 return;
4158         }
4159
4160         if(!mesh->threadstarted) {
4161                 return;
4162         }
4163
4164         if(mesh->thread == pthread_self()) {
4165                 mesh->error_cb(mesh, meshlink_errno);
4166         }
4167 }
4168
4169 static void __attribute__((constructor)) meshlink_init(void) {
4170         crypto_init();
4171 }
4172
4173 static void __attribute__((destructor)) meshlink_exit(void) {
4174         crypto_exit();
4175 }