Webbino - Server web "dinamico" per Arduino

International Italiano Megatopic
#27

Ci sono due cose di cui tenere conto, per quanto riguarda la lentezza di caricamento:

La prima è interna a Webbino: la pagina viene inviata al "driver" della scheda di rete (la libreria che la gestisce, insomma) un byte alla volta. Ora, se il driver non fa buffering (e credo che nessuno lo faccia), ogni byte viene inviato al client in un pacchetto separato, cosa che causa un overhead enorme, visto che per trasmettere un byte ne viaggeranno almeno un centinaio sulla rete, tra header IP, TCP e ACK di risposta.

Questo è noto ma, per mia esperienza, sulle connessioni cablate non crea un grosso problema, le pagina si caricano comunque in maniera accettabile. Sulle connessioni wireless però è un problema più pesante, vista la maggiore latenza, lentezza e perdita di pacchetti. Per questo nei driver wifi Webbino implementa un buffer, in modo da mitigare il problema.

Ovviamente se il tuo Arduino è collegato via Ethernet ma poi in mezzo c'è un ponte radio, il buffering andrebbe fatto, ma Webbino non può essere a conoscenza di questo. Potrei forse spostare il buffering più ad alto livello e mettere una direttiva di configurazione per forzarne l'utilizzo, che ne pensate? Non dite "abilitalo sempre" perché la RAM è preziosa ;).

Altro problema è la sostituzione dei tag, che viene effettuata "in diretta" mentre la pagina viene inviata al client. Se la funzione che gestisce il tag impiega 5 secondi, ovviamente l'invio della pagina è sospeso per 5 secondi. Lì sta a voi scrivere uno sketch "furbo" che sostituisca i tag il più rapidamente possibile. Ad esempio, io non farei mai leggere i sensori in diretta, li leggerei per conto mio in background ogni tanto (1 minuto, 5 minuti) e salverei i risultati in una variabile, in modo da poter ritornare subito questa variabile al momento della sostituzione del tag.

#28

sei stato chiarissimo sukkopera, cosa mi consigli di fare a questo punto? da dove mi conviene partire?

#29

Chiara la spiegazione Sukko. Dipende sempre da quanta RAM uno già spreca :wink: Io per esempio ne utilizzo il 33% del Mega. Come ho detto va lento a caricarsi per quel ciclo for, mentre invece per quanto riguarda il caricamento completo della pagina penso sia dovuto al buffer :wink:

#30

Beh, sulla Mega la RAM non manca ed effettivamente potrebbe avere senso avere il buffer, ma Webbino vuole anche poter girare su una Uno con un ENC28J60, dove la RAM è praticamente satura.

Credo che farò come ho detto sopra, così salviamo capra e cavoli.

Per l'anemometro, fai come ho detto: non leggerlo al momento della richiesta della pagina, ma fallo a intervalli regolari e restituisci l'ultimo dato letto.

Idem per @tototer: che sensori hai?

#31

Il problema più grosso è proprio il fatto che è l'anemometro a causare questo problema, perché se leggo troppo poco spesso, anche ogni minuto, rischio di perdermi molte raffiche di vento e quindi molti dati non veritieri... per questo volevo implementare l'uso di uno standalone dedicato solo ai sensori (quindi non solo l'anemometro) e poi tutti i dati che arrivano magari a un Arduino, vengono gestiti senza dover far niente perché ci pensa lo standalone, avrebbe solo il compito di leggerli e quindi si alleggerirebbe di molto il lavoro... Purtroppo per adesso non posso implementarlo, ma quando ne farò un'altra di stazione meteo, cercherò di farla la più perfetta possibile.

#32

Come funziona l'anemometro? Non puoi leggerlo via interrupt come descritto qui: http://cactus.io/hookups/weather/anemometer/davis/hookup-arduino-to-davis-anemometer-wind-speed?

#33

SukkoPera: Come funziona l'anemometro? Non puoi leggerlo via interrupt come descritto qui: http://cactus.io/hookups/weather/anemometer/davis/hookup-arduino-to-davis-anemometer-wind-speed?

Magari avevo preso quello :) Costa tipo 160 euro. Quello là è molto più semplice anche se più costoso è usa un semplice contatto reed per la velocità del vento e un potenziometro per la direzione. Il mio manda dei bit da decodificare e quindi c'è più da lavorare...

https://www.john.geek.nz/2011/07/la-crosse-tx20-anemometer-communication-protocol/

https://www.john.geek.nz/2011/07/disassembling-a-la-crosse-tx20-wind-anemometer/

http://fabrizio.zellini.org/decoding-la-crosse-tx20-anemometer-with-arduino

#34

Secondo me puoi fare due cose:

  1. Usare un ATtiny, o alla peggio una Uno (ne hai già una, giusto?) per fare un convertitore da questo coso a i2c/SPI/seriale (quel che ti torna più comodo). Continui a leggere l'anemometro, smazzi i dati come devi (che ne so, fare la media o altro) e quando ricevi richiesta fornisci i dati aggiornati.

  2. Fare più o meno come dici tu, ma prendendo invece un Raspberry Pi per gestire la parte web. Anche qua puoi usare i2c/SPI/seriale per leggere i dati dall'Arduino che gestisce i sensori.

Però qua siamo OT, se vuoi sviluppare questa idea apri un nuovo thread :).

#35

Eh già, io ero proprio indeciso da queste due idee :) ma ero più propenso per la seconda :D per via che con rasp magari potrei mettere anche una bella webcam! Devo approfondire il mondo raspberry però. Come dici qui non è il caso di continuare, semmai lo farò in un bel nuovo topic ;) La prima soluzione comunque è quella che potrei fare temporaneamente anche a breve, perché ho un Arduino uno e potrei gestire questo anemometro a parte..

#36

Allora come sensori ho:

1 sensore temperatura 2 sensore correre (1 tarato per corrente AC ed uno per corrente DC) 1 sensore voltaggio

#37

Così non posso dire granché... Bisogna capire quanto è lenta la loro lettura. Comunque nel tuo caso sicuramente incide molto il ponte radio. Inizia a riallinearti alla versione master di Webbino che puoi installare dal Library Manager, nel frattempo vedrò di fare quanto detto prima per il buffering. Dovrebbe aiutare.

#38

SukkoPera: , nel frattempo vedrò di fare quanto detto prima per il buffering. Dovrebbe aiutare.

;)

#39

As_Needed: Magari avevo preso quello :) Costa tipo 160 euro. Quello là è molto più semplice anche se più costoso è usa un semplice contatto reed per la velocità del vento e un potenziometro per la direzione. Il mio manda dei bit da decodificare e quindi c'è più da lavorare...

Quelli più economici sono proprio quelli a reed. Quelli più costosi invece hanno una circuiteria interna con tanto di MCU per gestire il tutto. Il tuo, di cui ti lamenti, sembra appartenere proprio a questa categoria. In ogni caso se ti interessano le raffiche e quindi il monitoraggio continuo devi implementare un qualcosa che si occupi solo di quello. In effetti un'altra MCU sarebbe la soluzione più economica. In alternativa, visto che usi un dispositivo wifi client, potrebbe essere quello ad ospitare il web server.

#40

Buondì Sukko ... ... eccomi di nuovo qui a fare un po' di prove. Leggo :

Compatibile con molte interfacce di rete: • ... • WINC1500 (Wi-Fi): WiFi Shield 101, MKR1000

... ma tu hai provato a compilare, anche se non ce l'hai, per Arduino MKR1000 ? Perché a me, con l'IDE 1.6.12, tira furi veramente parecchi, ovvi, errori !!!

Credo tu abbia trascurato il fatto che stiamo parlando di una scheda NON basata su MCU AVR, ma su ARM ... per cui tutto l'uso di PROGMEM ... va a farsi friggere ... ::)

Ho idea che ti conviene togliere la MKR1000 dalla descrizione, almeno finché non sistemi la cosa ... ;)

Guglielmo

#41

.... ah, altra cosa ... ora che si fa tutto da "Library Manager" (ottima idea :)) devo dire che è veramente scomodo (... specie pensando a principianti), dover andare a modificare il file "webbino_config.h" nella cartella delle librerie. Non solo, se ho un programma per una certa scheda di rete ed uno per un altra, ogni volta devo compilare l'uno, modificare la libreria, compilare l'altro, e così via :confused:

Mi sembra molto più corretto che questo file venga si dato all'utente, magari in una cartella separata dalla "src" così di sicuro, se non lo prende, NON lo trovi e vai in errore, che se lo copia nella cartella del suo programma in modo che sia "locale" per ciascun programma e che la configurazione di un'applicazione con una scheda di rete NON coinvolga quella di un'altra con un'altra scheda di rete ;)

Che ne pensi ?

Guglielmo

#42

Io faccio sempre così se vado a modificare una qualsiasi libreria, la metto nella cartella dello sketch. Certo, con alcune librerie, tipo la ethernet, è un po' scocciante, ti trascini dietro parecchi files.

#43

zoomx: Io faccio sempre così se vado a modificare una qualsiasi libreria, la metto nella cartella dello sketch. Certo, con alcune librerie, tipo la ethernet, è un po' scocciante, ti trascini dietro parecchi files.

Ma qui NON serve tutta la libreria ... ... basta il file di configurazione personalizzato per ogni singolo programma che faccio ;)

Guglielmo

#44

zoomx: Quelli più economici sono proprio quelli a reed. Quelli più costosi invece hanno una circuiteria interna con tanto di MCU per gestire il tutto. Il tuo, di cui ti lamenti, sembra appartenere proprio a questa categoria.

Si ma quello con il reed paghi la marca e la struttura dell anemometro che è fatta meglio ;) Se il mio costa 40 euro e quello 160 (anche se è fatto così semplice) non ci si può fare niente. In ogni caso la lettura di un reed è sempre più semplice. Mi fermo qua perché non voglio andare OT ;)

#45

gpb01: ... ma tu hai provato a compilare, anche se non ce l'hai, per Arduino MKR1000 ? Perché a me, con l'IDE 1.6.12, tira furi veramente parecchi, ovvi, errori !!!

Credo tu abbia trascurato il fatto che stiamo parlando di una scheda NON basata su MCU AVR, ma su ARM ... per cui tutto l'uso di PROGMEM ... va a farsi friggere ... ::)

Erm, veramente sì, ho provato, è l'unica cosa che potevo fare, non avendo la scheda. Credo di averlo anche scritto nel post in cui presentavo la novità. In effetti il supporto PROGMEM non dovrebbe essere attivo con la MKR, essendo così condizionato:

#if defined (ARDUINO_ARCH_AVR) || defined (ESP8266)
    #define ENABLE_FLASH_STRINGS
#endif

Potresti provare ad ABILITARLO, rimuovendo l'#ifdef? Se ci sono dei buoni header di compatibilità potrebbe sistemarsi da solo.

Comunque questo mi fa venire in mente che dopo il supporto MKR1000 ho aggiunto quello ESP, magari ho distrutto qualcosa con questo lavoro.

Per quanto riguarda l'altra idea, sì, in effetti può avere senso, ma sei sicuro che funzioni? Se la libreria viene compilata a parte non credo che si vada a prendere il config dallo sketch.

#46

SukkoPera: Potresti provare ad ABILITARLO, rimuovendo l'#ifdef? Se ci sono dei buoni header di compatibilità potrebbe sistemarsi da solo.

Provo e ti faccio sapere ...

SukkoPera: Per quanto riguarda l'altra idea, sì, in effetti può avere senso, ma sei sicuro che funzioni? Se la libreria viene compilata a parte non credo che si vada a prendere il config dallo sketch.

... occhio, è OVVIO che l'utente debba fare in testa al programma: #include "webbino_config.h" (nota i " " al posto del < >, quindi files locali) che deve trovarsi nella cartella del suo programma e dovrebbe creare le varie #define PRIMA dell'inclusione della libreria. Così credo dovrebbe funzionare (da verificare) ::)

Guglielmo