Список проголосовавших за комментарий "<p>Denis, как я понимаю для инициализации робота нужно не очень много данных.</p><p>Так что этот хвостик можно держать не запакованным.</p><p>Для анализа скорость выборки не имеет значения.</p><p>Соответственно можете паковать в любом формате.</p><p>Если оно занимает существенный объём диска.</p><p>И если вам не нужна какая-то выборка по условиям.</p><p>Если места хватает, то можно использовать обычную либо nosql базу и удобно хранить, выбирать, сортировать.</p><p>Про форматы хранения написали выше.</p>"