<html><head><meta http-equiv="Content-Type" content="text/html; charset=utf-8"></head><body style="word-wrap: break-word; -webkit-nbsp-mode: space; line-break: after-white-space;" class=""><div dir="auto" style="word-wrap: break-word; -webkit-nbsp-mode: space; line-break: after-white-space;" class="">Dear Jarek Karciarz,<div class=""><br class=""></div><div class="">Sorry for my late reply, I have been out of the office the last two days. </div><div class=""><br class=""></div><div class="">The datasets collected for the Track 3 (Smartphone-based off-site) can be reached from the EvAAL website (except the ones of the IPIN 2018 conference). Although we are working to create a common repository, you can find all datasets in the links below:</div><div class=""><a href="http://indoorloc.uji.es/ipin2016track3/" class="">http://indoorloc.uji.es/ipin2016track3/</a><br class="">http://indoorloc.uji.es/ipin2017track3/<br class="">http://ipin-conference.org/2018/ipincompetition<br class="">http://indoorloc.uji.es/ipin2019track3/ </div><div class=""><div><br class=""></div><div>We are organizing this track in the current format since 2016. In 2016, we provided training and evaluation data. Since 2017, we provide training, validation and evaluation data. The validation data sets contain the location of some landmarks and they can be used to evaluate your model based built on the training data sets.</div><div><br class=""></div><div>It is true that we provided blind evaluation data for the competition and the ground truth is not available. We are now discussing about this matter and the decision is not easy to take. We will answer your request about releasing the Ground Truth of the evaluation sets (2016, 2017 and  2018) tomorrow.</div><div><br class=""></div><div>In the meanwhile, if you have any question about track 3 or the datasets format, please let me know. </div></div><div><br class=""></div><div class=""><div class="">
<div dir="auto" style="caret-color: rgb(0, 0, 0); color: rgb(0, 0, 0); letter-spacing: normal; text-align: start; text-indent: 0px; text-transform: none; white-space: normal; word-spacing: 0px; -webkit-text-stroke-width: 0px; text-decoration: none; word-wrap: break-word; -webkit-nbsp-mode: space; line-break: after-white-space;" class=""><div dir="auto" style="caret-color: rgb(0, 0, 0); color: rgb(0, 0, 0); letter-spacing: normal; text-align: start; text-indent: 0px; text-transform: none; white-space: normal; word-spacing: 0px; -webkit-text-stroke-width: 0px; text-decoration: none; word-wrap: break-word; -webkit-nbsp-mode: space; line-break: after-white-space;" class=""><div dir="auto" style="caret-color: rgb(0, 0, 0); color: rgb(0, 0, 0); letter-spacing: normal; text-align: start; text-indent: 0px; text-transform: none; white-space: normal; word-spacing: 0px; -webkit-text-stroke-width: 0px; text-decoration: none; word-wrap: break-word; -webkit-nbsp-mode: space; line-break: after-white-space;" class=""><div dir="auto" style="caret-color: rgb(0, 0, 0); color: rgb(0, 0, 0); letter-spacing: normal; text-align: start; text-indent: 0px; text-transform: none; white-space: normal; word-spacing: 0px; -webkit-text-stroke-width: 0px; text-decoration: none; word-wrap: break-word; -webkit-nbsp-mode: space; line-break: after-white-space;" class=""><div dir="auto" style="caret-color: rgb(0, 0, 0); color: rgb(0, 0, 0); letter-spacing: normal; text-align: start; text-indent: 0px; text-transform: none; white-space: normal; word-spacing: 0px; -webkit-text-stroke-width: 0px; text-decoration: none; word-wrap: break-word; -webkit-nbsp-mode: space; line-break: after-white-space;" class=""><div dir="auto" style="word-wrap: break-word; -webkit-nbsp-mode: space; line-break: after-white-space;" class=""><div style="caret-color: rgb(0, 0, 0); color: rgb(0, 0, 0); font-family: Helvetica; font-size: 12px; font-style: normal; font-variant-caps: normal; font-weight: normal; letter-spacing: normal; text-align: start; text-indent: 0px; text-transform: none; white-space: normal; word-spacing: 0px; -webkit-text-stroke-width: 0px; text-decoration: none;">-- <br class=""><b class="">Joaquín Torres-Sospedra</b><br class="">Postdoc @ <a href="http://geotec.uji.es/" class="">GEOTEC</a><br class="">Universitat Jaume I, Castellón, Spain<br class="">Social media: <a href="https://twitter.com/jtorres_phd" class="">@jtorres_phd</a> - <a href="https://www.researchgate.net/profile/Joaquin_Torres-Sospedra" class="">LinkedIn</a> - <a href="https://www.researchgate.net/profile/Joaquin_Torres-Sospedra" class="">ResearchGate</a><br class="">Web:<span class="Apple-converted-space"> </span><a href="http://jtorr.es" class="">http://jtorr.es</a></div></div></div></div></div></div></div>
</div>
<br class=""><div><br class=""></div><div><br class=""></div><div><br class=""></div><div><br class=""><blockquote type="cite" class=""><div class="">El 9 may 2019, a las 11:01, Jarek (Jerry) Karciarz <<a href="mailto:j.karciarz@samsung.com" class="">j.karciarz@samsung.com</a>> escribió:</div><br class="Apple-interchange-newline"><div class=""><div class="">Dear Joaquin, Francesco,<br class=""><br class="">Thanks for your response. Sharing data from 2018 competition would be highly appreciated.<br class="">However our question is a little bit wider. The data shared from 2017 and before editions are so called training and evaluation data. Training data contain Wi-Fi and other sensor readings plus true locations. That’s fine. The evaluation data don’t contain locations because the location should be estimated by the competing algorithm. That’s obvious. Our question was, could you please share the true locations for the evaluation data for 2018 and before editions?. This would help us to real test the performance of our algorithm on data from past competition editions and compare to other participants, especially to the winners.<br class="">Thank you in advance for understanding.<br class=""><br class="">Best Regards<br class=""><br class="">Jarek (Jerry) Karciarz<br class=""><br class=""><br class=""><br class="">Senior Professional<br class="">Head of Network Analytics<br class="">Samsung R&D Institute Poland <br class="">Samsung Electronics <br class="">Office:  +48 22 377 8784<br class="">Cell:     +48 600 098 433 <br class=""><a href="mailto:j.karciarz@samsung.com" class="">j.karciarz@samsung.com</a> <br class=""><br class="">-----Original Message-----<br class="">From: Francesco Potortì [<a href="mailto:Potorti@isti.cnr.it" class="">mailto:Potorti@isti.cnr.it</a>] <br class="">Sent: Wednesday, May 08, 2019 6:14 PM<br class="">To: Jarek (Jerry) Karciarz<br class="">Cc: <a href="mailto:contest@evaal.aaloa.org" class="">contest@evaal.aaloa.org</a>; 'Yuqin Wang'<br class="">Subject: Re: [evaal contest] Question about competition<br class=""><br class=""><blockquote type="cite" class="">We have the question regarding off-line, smartphone based track. Is it <br class="">possible you to share ground true locations for previous contests <br class="">editions? Say for years 2015-2018?<br class=""><br class="">This would greatly let us challenge our solution against corresponding <br class="">winners.<br class=""></blockquote><br class="">Jarek,<br class=""><br class="">on <a href="http://evaal.aaloa.org" class="">http://evaal.aaloa.org</a> you find data for past editions until 2017.<br class="">We are still working on publishing data for 2018, sorry about that.<br class=""><br class="">Since you are specifically interested in smartphone off-site, you may want to ask for details to the Track 3 chair Joaquín Torres Sospedra <<a href="mailto:jtorres@uji.es" class="">jtorres@uji.es</a>>.<br class=""><br class="">Sincerely<br class=""><br class="">-- <br class="">IPIN'19 <a href="http://ipin2019.isti.cnr.it" class="">http://ipin2019.isti.cnr.it</a>    Voice:  +39.050.621.3058<br class="">Francesco Potortì (ricercatore)        Mobile: +39.348.8283.107<br class="">ISTI - Area della ricerca CNR          Skype:  wnlabisti<br class="">via G. Moruzzi 1, I-56124 Pisa         Web:    <a href="http://fly.isti.cnr.it" class="">http://fly.isti.cnr.it</a><br class=""><br class=""><br class=""></div></div></blockquote></div><br class=""></div></div></body></html>