ARGOMENTO:

il 19 aprile questo progetto (54.196.169.236/duchamp/) passerà dalla fase beta alla fase di produzione

utilizza questo metodo www.atnf.csiro.au/people/Matthew.Whiting/Duchamp/ per rintracciare, se non ho capito male, elementi luminosi nel cielo.
In questo senso si pone a fianco del progetto TheSkynet POGS

Ci sono applicativi per tutti i S.O. Necessita però di VirtualBox

Gli astrofili si facciano avanti per capirne di più

zioriga ha scritto:

In questo senso si pone a fianco del progetto TheSkynet POGS

Da quello che avevo capito doveva essere integrato all'interno di Theskynet.

P.S. Non cerca sorgenti luminose, ma si occupa di radio astronomia

Da quanto leggo nella pagina che hai linkato:

Una grande quantità di dati "radio-astronomici" consistono in tre dimensioni: due rappresentano la posizione nel cielo, e la terza frequenza rappresenta la lunghezza d’onda o frequenza.
Se si sta osservando una particolare linea spettrale, oggetti come galassie o Maser appariranno come degli oggetti in 3 dimensioni, essendo vincolati in una posizione spaziale e dal riempimento della frequenza.
Se uno sta conducendo un’indagine su una ragionevolmente vasta area del cielo, non si vorrà cercare manualmente attraverso i dati, ma invece farlo in modo automatizzato e ripetibile, con criteri di selezione ben definiti.

Dovrebbe essere ottimizzato dal punto di vista dell'automatizzazione per evitare di passare manualmente i dati.

Per i tecnicismi lascio spazio a chi ne sa molto più di me

Comunque negli ultimi mesi ho elaborato su questo progetto, confermo la necessità di VirtualBox. Il progetto è seguito, periodicamente viene fatto un post che annuncia l'andamento dei test.

Come accennato qualche giorno fa, è passato alla fase di produzione.
Di seguito il post dell'annuncio:

duchamp: We're now ready for Production!
Yup, the day has come. Sourcefinder is finally moving from testing to production!

Most of the bugs and issues we've been having during testing have been ironed out to a level that I'm happy with.

All testing work units have been cancelled, and all work units and results have been archived.

We're now going to begin to crunch actual data, 681GB of it!

27G cubelets_1
27G cubelets_2
27G cubelets_3
27G cubelets_4
27G cubelets_5
27G cubelets_6
27G cubelets_7
27G cubelets_8
27G cubelets_9
27G cubelets_10
27G cubelets_11
27G cubelets_12
27G cubelets_13
27G cubelets_14
27G cubelets_15
27G cubelets_16
27G cubelets_17
27G cubelets_18
27G cubelets_19
27G cubelets_20
27G cubelets_21
27G cubelets_22
27G cubelets_23
27G cubelets_24
27G cubelets_25
8.6G cubelets_26
681G total

We're starting with cubelet sets 1 to 4.

A few other notes:

I've added a new process to the server to archive work unit and result data older than 2 weeks, so you wont be able to see any of that archived data on the website.

Any credits earned during testing will remain during production.

All production work units will be registered under run 10.

The limit on the number of work units sent to a single host will be increased. I'm planning on modifying the max work unit configuration from:

<max_wus_to_send>1</max_wus_to_send>
<max_wus_in_progress>2</max_wus_in_progress>
<max_ncpus>4</max_ncpus>

to

<max_wus_to_send>8</max_wus_to_send>
<max_wus_in_progress>3</max_wus_in_progress>
<max_ncpus>16</max_ncpus>

This should mean up to 16 CPUS on each machine will be used, and each user will be able to have up to 3 work units per CPU at any one time. This means the maximum number of WUs that a client can be running at any one time is now 48; just make sure you can crunch them all in time!

Additionally, each scheduler request cycle will provide up to 8 work units.

These numbers are tentative as well, if there are any issues or recommendations, I'm more than happy to change them.

A few future things:

I plan on finally updating theSkyNet website to accurately reflect the current state of the Sourcefinder project.

I'll be reporting the project stats each week, for those who are interested.

I'll definitely be pushing work units out every Wednesday, and sometimes on other days of the week if I get time.

My main focus from now on is fixing the issues with theSkyNet website, as it's been running on life support for miles too long.

Thank you everyone who has helped out with the Sourcefinder project so far, we greatly appreciate the work you've all done. It's because of all of you that this project was able to eventually reach production.

Questo progetto adesso ha un indirizzo definitivo sourcefinder.theskynet.org/duchamp/

Vari aggiustamenti al sito:

Update 24 May 2017

Modified text on the create account page to clarify that the user will require BOINC when signing up to the project.

Updated text on the front page, as we're not a beta project any longer.

Updated forum breadcrumb trail to always have a link back to the main Message Boards.

Pushed out another batch of work units. I'm also transferring some reserve units in case we run out again.

Interessante aggiornamento da questo progetto!

Sam, ha scritto:

Congratulations everyone, we made it through the first 681GB of Sourcefinder cubelets!
You've all done amazing work so far, and everyone at theSkyNet thanks you for it.

Now that we've processed a large portion of the simulated cube data, I'm going to be focusing on developing some visualisation tools to allow everyone to actually see the sources they've processed. This tool is going to be incorporated in to theSkyNet.org.
You're basically going to be able to select a cubelet and parameter set to view, and you'll be shown the locations of the sources within that cubelet along with the name of the users who found the sources.
I'm also planning on adding credit stats from Sourcefinder to your dashboard on theSkyNet.org at some point.

To my knowledge, there should also be another ~300GB of data somewhere to process, as the original supercube was around 1TB in size. I believe this data wasn't extracted from the supercube for whatever reason, so I'm going to be working out how to extract it.
Until then, there wont be any more Sourcefinder work units unfortunately.

Anyway, thank you again to all of you for crunching all of this data. I hope you all enjoy the visualisation tool when I've finished building it

Link: sourcefinder.theskynet.org/duchamp/forum_thread.php?id=206

Altre novità in arrivo:

Real data coming soon!
I've just arrived back from a meeting with Kirsten, and I have some extremely good news to share with everyone!

ASKAP has almost completed observations of its first ~500GB cube, and we're going to be processing it when it's done!
Running a sourcefinding application on ASKAP data hasn't been done yet, so this is going to be a world first.

While we're waiting for ASKAP to be done, we're going to be running the simulated super cube again, this time using a new sourcefinding application called SoFiA.
We're going to be looking at whether SoFiA is any better at finding sources than Duchamp is.

Once we have data from both Duchamp and SoFiA, I'll be working on cross matching the sources they found with the original sources catalogue, then we'll have a clear picture of which is the better sourcefinder.

I'm also told that there's a very high chance of a paper being written on the comparison between Duchamp and SoFiA as sourcefinders, so I'll be sure to keep you all up to date if I hear any more about it.

Finally, there's been a bit of a back end storage issue with some of the data we've processed, and I'll need to re-run a few sets of work units, so expect some more work to be coming fairly soon.

C'è una lunghissima news sul sito.

Voglio solo riportare la parte finale

Gridcoin whitelist
There's currently a poll up for adding Sourcefinder to the gridcoin whitelist. If you're interested in voting yes or no, please check out the post Erkan made about it. (sourcefinder.theskynet.org/duchamp/forum_thread.php?id=212#683)

I think that's about everything I have for now. I'll try to keep everyone as updated as possible on all of these issues.
Thank you again for helping out with Sourcefinder!
19 Jul 2017, 0:14:08 UTC · Discuss

Avevo letto. Dovrebbe trattarsi di una procedura standard che avviene per quasi tutti i progetti. Quando Gridcoin decidere di ammettere il progetto tra quelli che elabora, fa la votazione per questa whitelist.

Da un lato non mi piace perché risucchiano tutto il lavoro, però per la ricerca in sé è buono perché viene completata più velocemente.
La cosa che non mi piace assolutamente è la pubblicità gratuita che si fanno spammando su ogni forum la loro volontà di aggiungere o meno quel progetto, come un dio sceso in terra.

Da un lato non mi piace perché risucchiano tutto il lavoro, però per la ricerca in sé è buono perché viene completata più velocemente.
La cosa che non mi piace assolutamente è la pubblicità gratuita che si fanno spammando su ogni forum la loro volontà di aggiungere o meno quel progetto, come un dio sceso in terra.

non credo che Gridcoin elabori wu "specifiche" di ogni singolo progetto. Per quello che so Gridcoin fa del "data mining" con le FPGA

No, zio. Il client gridcoin si installa a fianco di boinc e serve a tener traccia delle elaborazioni sui progetti boinc (quelli in whitelist), di suo non calcola niente. La quantita' di gridcoin che guadagni dipende da quanto elabori su boinc.

Dopo vari annunci, ecco un altro passo avanti:

SoFiA Beta Update 1
Removed CNHI Filter from all test parameters. This was causing huge workunit runtimes, ultimately resulting in work units timing out.

Added a per-parameter timeout of 30 mins. The VM will now attempt to process each parameter set for a max of 30 mins before timing out. In my local tests, most parameters only take around 2 - 5 mins to run, so this should be more than enough time. I'll keep an eye on whether a 30 min timeout becomes an issue in the future.

Dropped VM RAM size to 128MB from 1024MB. This should significantly reduce the memory requirements of the host system.

Updated vboxwrappers for apple (x86 and x64) to version 26199 from version 26196


A new set of test work units are available now.
6 Sep 2017, 3:07:54 UTC

Fonte

Già, il primo batch di workunit SoFiA è andato male e ci siamo beccati tutti l'errore EXIT_TIME_LIMIT_EXCEEDED (dopo 5-8 ore). Quante ore di scaccolo sprecate.

Il secondo batch è quello dell'annuncio. Non sono riuscito a beccare neanche una wu!

Oggi hanno rilasciato il nuovo applicativo aggiornato, anche se, per ora, non c'è lavoro.
Vediamo se risolve i problemi presentatisi.

Sembra che la fase beta dell'applicativo SoFia sia giunta al termine e che l'applicativo stesso passi alla fase "in produzione".
Una nota importante:

must also recommend that everyone does NOT update to VirtualBox 5.2 for the time being. I'm currently waiting on BOINC to officially release their VirtualBox 5.2 compatible wrapper versions.

A causa dell'alto numero di wu non valide, con la nuova release i ricercatori hanno suddiviso le precedenti wu in 4, riducendo del 75% il tempo di calcolo e, si spera, gli errori.

Hanno aggiornato il wrapper dell'applicativo all'ultima versione

La nuova beta, del 31 gennaio, gira abbastanza bene

Vista l'ultima news, molto probabilmente il progetto andrà a morire. Peccato.