<div dir="ltr">Well said, David!<div class="gmail_extra"><br clear="all"><div><div class="gmail_signature" data-smartmail="gmail_signature"><div dir="ltr"><div><div dir="ltr"><div><div dir="ltr"><div><br></div></div></div></div></div></div></div></div>
<br><div class="gmail_quote">On Wed, Sep 14, 2016 at 10:34 AM, David Giaretta <span dir="ltr"><<a href="mailto:david@giaretta.org" target="_blank">david@giaretta.org</a>></span> wrote:<br><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex"><div lang="EN-GB" link="#0563C1" vlink="#954F72"><div><p class="MsoNormal">As discussed at the DAI webex yesterday, and with further exchanges of emails, here is a collection of comments on the MOSSG paper.<u></u><u></u></p><p class="MsoNormal"><u></u> <u></u></p><p class="MsoNormal">..David<u></u><u></u></p><p class="MsoNormal"><u></u> <u></u></p><p><u></u><span>1)<span style="font:7.0pt "Times New Roman"">      </span></span><u></u>Although the paper states “Archive ingestion is not considered part of the IOAG interoperability goals.”, nevertheless as is recognised in “However, the assumption is that there are mechanisms for archive ingestion implemented”, it will not be possible to get data out of an archive unless data is ingested into it. MOIMS-DAI covers data ingest and should be mentioned in the document, for example CCSDS 651.1-B-1, Producer-Archive Interface Specification (PAIS). Blue Book. Issue 1. February 2014.<u></u><u></u></p><p><u></u><span>2)<span style="font:7.0pt "Times New Roman"">      </span></span><u></u>The use of the word archive is misleading. What is discussed in most of the document is what might be termed “short-term storage”. For example, the Service Description of the kind “Archive of Agency Y is accessed by Agency X to…”, which implies simple access to the bits which have been stored. Interoperability normally means being able to use the bits. <u></u><u></u></p><p>The MOIMS-DAI work on archives is about maintaining the usability of the bits. <u></u><u></u></p><p>If agencies X and Y use the same format and semantics for the bits then there is no problem. If one the other hand they do not then agency X will need additional information. This may be relevant if there is a long time between the creation of the data by Agency Y and the use by Agency X. It may also be relevant if there is very little time between creation and use, for example if the agencies use different systems. <u></u><u></u></p><p>This is recognised in slide 29 in the PowerPoint presentation which has, at the top level (with additions/changes marked in red):<u></u><u></u></p><table border="0" cellspacing="0" cellpadding="0" width="784" style="width:588.25pt;margin-left:35.2pt;border-collapse:collapse"><tbody><tr><td width="432" valign="top" style="width:323.7pt;border:solid windowtext 1.0pt;background:red;padding:0cm 5.4pt 0cm 5.4pt"><p class="MsoNormal"><b><span lang="EN-CA">Integration levels</span></b><span style="font-size:12.0pt;font-family:"Times New Roman",serif"><u></u><u></u></span></p><p class="MsoNormal"><b><span lang="EN-CA">Archiving</span></b><u></u><u></u></p></td><td width="353" valign="top" style="width:264.55pt;border:solid windowtext 1.0pt;border-left:none;background:#acb9ca;padding:0cm 5.4pt 0cm 5.4pt"><p class="MsoNormal"><b><span lang="EN-CA">Degree</span></b><u></u><u></u></p><p class="MsoNormal"><b><span lang="EN-CA">of Interoperability</span></b><u></u><u></u></p></td></tr><tr style="height:31.25pt"><td width="432" valign="top" style="width:323.7pt;border:solid windowtext 1.0pt;border-top:none;background:#f2f2f2;padding:0cm 5.4pt 0cm 5.4pt;height:31.25pt"><p><span lang="EN-CA" style="font-size:10.0pt">Ops, engineering <b><span style="color:red">and science</span></b><span style="color:red"> </span>teams from various space agencies  need to  integrate their data in a<b><span style="color:red">n</span></b> archive <b><span style="color:red">or a set of federated archives,</span></b><span style="color:red"> </span>and update/retrieve from <b><span style="color:red">them, both during the mission lifetime, and in long-term archives post-mission.</span></b><span style="color:red">  </span></span><u></u><u></u></p></td><td width="353" valign="top" style="width:264.55pt;border-top:none;border-left:none;border-bottom:solid windowtext 1.0pt;border-right:solid windowtext 1.0pt;background:#f2f2f2;padding:0cm 5.4pt 0cm 5.4pt;height:31.25pt"><p class="MsoNormal"><span lang="EN-CA" style="font-size:10.0pt">Agreed common data formats (data standard), agreements on metadata content, <b><span style="color:red">compliance with long-term digital preservation practices, such as CCSDS standards for OAIS, PAIS and future protocol-level standards yet to be developed by CCSDS.  </span></b></span><u></u><u></u></p></td></tr></tbody></table><p style="margin-left:0cm"><u></u> <u></u></p><p><u></u> <u></u></p><p><u></u> <u></u></p><p>There are several problems with the original right hand side:<u></u><u></u></p><p style="margin-left:54.0pt"><u></u><span>a)<span style="font:7.0pt "Times New Roman"">       </span></span><u></u>Agreeing formats is not adequate. For example the agencies could agree to use CSV – but what do the elements mean? what are the units? Is agency X going to combine something measured in meters with something measured in feet? In other words what metadata content is needed? This is what DAI is concerned with.<u></u><u></u></p><p style="margin-left:54.0pt"><u></u><span>b)<span style="font:7.0pt "Times New Roman"">      </span></span><u></u>If Agency X wants the data from Agency Y after Y’s project has ended, can one be sure that the right metadata has been collected? MOIMS-DAI is working on “INFORMATION PREPARATION TO ENABLE LONG TERM USE” to create a checklist to help ensure that enough of the right kinds of metadata is collected. Of course ensuring the data continues to be usable despite the inevitable changes over time in software, systems, semantics etc., is covered by CCSDS 650.0-M-2, Reference Model for an Open Archival Information System (OAIS). Magenta Book. Issue 2. June 2012.<u></u><u></u></p><p class="MsoNormal"><u></u> <u></u></p><p class="MsoNormal"><u></u> <u></u></p></div></div><br>______________________________<wbr>_________________<br>
MOIMS-DAI mailing list<br>
<a href="mailto:MOIMS-DAI@mailman.ccsds.org">MOIMS-DAI@mailman.ccsds.org</a><br>
<a href="https://mailman.ccsds.org/cgi-bin/mailman/listinfo/moims-dai" rel="noreferrer" target="_blank">https://mailman.ccsds.org/cgi-<wbr>bin/mailman/listinfo/moims-dai</a><br>
<br></blockquote></div><br></div></div>