<div dir="ltr"><div>Hello,</div><div><br></div><div>At the IETF 116 Hackathon, we have been discussing how while BigBang currently stores email archives in flat files, it would be better if it stored collected data into a database.</div><div><br></div><div>I've created an issue for this based on our discussion (and Priyanka's prototype implementation):</div><div><a href="https://github.com/datactive/bigbang/issues/582">https://github.com/datactive/bigbang/issues/582</a></div><div><br></div><div>However, changing from flat files to a database background would have far-reaching implications and I have moved to upgrade the issue to a BigBang Improvement Proposal. Please see our Governance document's description of the BBIP process:</div><div><br></div><div><a href="https://github.com/datactive/bigbang/wiki/Governance#bigbang-improvement-proposals-bbip">https://github.com/datactive/bigbang/wiki/Governance#bigbang-improvement-proposals-bbip</a></div><div><br></div><div>I hope we can discuss this proposal and come up with a comprehensive plan for what it involves. For example, will we need to update all the notebooks if we make this change? Should we be using containerization of the database to make the installation easier? What are the implications for the performance of the dashboard?</div><div><br></div><div>Looking forward to this very good change for BigBang,</div><div><br></div><div>Seb<br></div></div>