<html>
<head>
<meta http-equiv="Content-Type" content="text/html; charset=utf-8">
</head>
<body style="word-wrap: break-word; -webkit-nbsp-mode: space; line-break: after-white-space;" class="">
Hi,
<div class=""><br class="">
</div>
<div class="">I haven’t looked at mailing list data for the IETF, but I have looked at how Internet-Draft submission dates relate to meetings:</div>
<div class=""><br class="">
</div>
<div class=""><img apple-inline="yes" id="DC1F96A7-4A29-4232-B23B-4BF26AAFD77A" src="cid:431D4D7F-C8BB-4567-B17D-9BBC73AE01BF" class=""></div>
<div class=""><br class="">
</div>
<div class="">This plot shows the counts of drafts submitted on each day for the 12 weeks to the cut-off date before IETF 107 (which was rescheduled as a virtual meeting after the cut-off date). Having a cut-off date leads to a spike in submissions (around
 25% of the submissions were on the last day), and creates a lot of new work for discussion. The implication of the cut-off is that this discussion will take place in the following meeting, but it would be interesting to determine how much of that takes place/starts
 on the mailing lists.</div>
<div class=""><br class="">
</div>
<div class="">The Datatracker API (and via the ietfdata library - <a href="https://github.com/glasgow-ipl/ietfdata" class="">https://github.com/glasgow-ipl/ietfdata</a>) exposes a lot of the data needed to look at this, including meeting dates (and I-D submission
 cut-off dates), along with draft submission metadata. </div>
<div class=""><br class="">
</div>
<div class="">Stephen</div>
<div class=""><br class="">
<div>
<blockquote type="cite" class="">
<div class="">On 13 Jun 2020, at 21:23, Nick Doty <<a href="mailto:npdoty@ischool.berkeley.edu" class="">npdoty@ischool.berkeley.edu</a>> wrote:</div>
<br class="Apple-interchange-newline">
<div class="">
<div class="">Hi all,<br class="">
<br class="">
<blockquote type="cite" class="">On May 22, 2020, at 1:42 PM, Sebastian Benthall <<a href="mailto:sbenthall@gmail.com" class="">sbenthall@gmail.com</a>> wrote:<br class="">
<br class="">
Thanks for the productive call, everyone.<br class="">
<br class="">
Here are the notes, copied from the Etherpad.<br class="">
I look forward to being in touch with you as things progres..<br class="">
<br class="">
Best regards,<br class="">
Seb<br class="">
<br class="">
NEXT STEPS: RESEARCH<br class="">
=====================<br class="">
<br class="">
For the next phase of Article 19 supported work, new and earlier BigBang functionality will be used in new Jupyter notebooks answering research questions of community interest.<br class="">
<br class="">
What are the most pressing research questions?<br class="">
<br class="">
Solicited from the meeting attendees:<br class="">
   - From J.S:<br class="">
<span class="Apple-tab-span" style="white-space:pre"></span>• - Correlation between activity in mailing lists and drafts produced by working.<br class="">
<span class="Apple-tab-span" style="white-space:pre"></span>• - <br class="">
</blockquote>
<br class="">
Regarding this style of research question raised by Joey, I had similar questions about whether mailing list activity would track closely with publication of drafts of W3C specs or with W3C WG face-to-face meetings. There isn’t an API/machine readable data
 source in the same way that IETF has its Datatracker, but I was able to import dates for f2f meetings and draft publications for the Tracking Protection Working Group (which I worked on and study) and create these timelines:<br class="">
<br class="">
<a href="https://github.com/npdoty/bigbang/blob/tpwg-timeline/tpwg/public-tracking-activity-timeline.png" class="">https://github.com/npdoty/bigbang/blob/tpwg-timeline/tpwg/public-tracking-activity-timeline.png</a><br class="">
https://github.com/npdoty/bigbang/blob/tpwg-timeline/tpwg/public-tracking-activity-yearly.png<br class="">
<br class="">
Just looking at those timelines qualitatively, there are some connections to meetings, where there’s more mailing list traffic leading up to a meeting or following a meeting.
<br class="">
<br class="">
The publications dates seem to have less connection. In some ways that makes sense to me: Working Draft publications at W3C are supposed to be heartbeat-style (it might be that I-Ds are supposed to follow that style as well) and published somewhat regularly
 as snapshots. “Last Call” or document transitions (to Candidate Recommendation, for example) are more notable steps in the process, but those also aren’t especially dramatic in terms of discussion activity: for this group (and this should be common at W3C)
 the issues are being hashed out by the group before those milestones, and while there may be some public comments and responses to public comments afterwards, that’s generally less active because the WG has already discussed the controversial issues by then.<br class="">
<br class="">
I’d be interested to compare with anyone else doing this kind of analysis, especially if the IETF Datatracker can provide it for many groups at once.<br class="">
<br class="">
Thanks,<br class="">
Nick<br class="">
_______________________________________________<br class="">
Bigbang-dev mailing list<br class="">
Bigbang-dev@data-activism.net<br class="">
https://lists.ghserv.net/mailman/listinfo/bigbang-dev<br class="">
</div>
</div>
</blockquote>
</div>
<br class="">
</div>
</body>
</html>