<div dir="auto">Interesting point.<div dir="auto"><br></div><div dir="auto">I'm convinced of a few interrelated points by the discussions surrounding the hackathon.</div><div dir="auto"><br></div><div dir="auto">- There are broad research Infrastructure needs of the RASP RG which include:</div><div dir="auto">   - a database</div><div dir="auto">   - data processing scripts</div><div dir="auto">   - data ingress methods, as well as fixtures for established data (such as expensive annotations)</div><div dir="auto">   - an API to access the database</div><div dir="auto">   - one or more user interfaces visualizing data from the database</div><div dir="auto"><br></div><div dir="auto">The mature version of "the dashboard" looks something like this.</div><div dir="auto"><br></div><div dir="auto"> - BigBang has been slowly growing in this direction, but is far from it. For example, we currently store data in flat files rather than use a database.</div><div dir="auto"><br></div><div dir="auto"> - The current dashboard implementation is a great prototype for future work. It would be great to have something demo-able, and we are getting there fast.</div><div dir="auto"><br></div><div dir="auto">In short, I think it's useful to distinguish between v0.1 features and v1.0 features.</div><div dir="auto"><br></div><div dir="auto">Apache Superset, were we to use it, would be a 1.0 feature. We are still working on a 0.1 demo version.</div></div><br><div class="gmail_quote"><div dir="ltr" class="gmail_attr">On Sun, Mar 26, 2023, 8:49 PM Mridul Seth <<a href="mailto:seth.mridul@gmail.com">seth.mridul@gmail.com</a>> wrote:<br></div><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex"><u></u><div><div>Hmm, from my preliminary reading it seems like superset needs a SQL DB running in the background? Or am I mistaken?<br></div><div><br></div><div>On Sat, Mar 25, 2023, at 09:30, Sebastian Benthall wrote:<br></div><blockquote type="cite" id="m_5423750965795875543qt"><div dir="auto"><div>Our current dashboard implementation uses Bokeh so it naturally extends our Scipy-using notebooks. This is a good way to prototype!<br></div><div dir="auto"><br></div><div dir="auto">Priyanka is enthusiastic about Apache Superset as a dashboarding tool, which could have other features that are useful:<br></div><div dir="auto"><a href="https://superset.apache.org/" target="_blank" rel="noreferrer">https://superset.apache.org/</a><br></div><div dir="auto"><br></div><div dir="auto">I haven't put much thought into dashboarding technologies myself, but as the vision for the dashboard develops (Niels is workshopping the design with a UX designer as I write this), we may want to consider alternative tools and architectures that are fit to our design needs.<br></div></div></blockquote><div><br></div></div></blockquote></div>