Веб-скрейпінг як забава
Веб-скрейпінг - дивовижна штука. Можна збирати інформацію із відкритих джерел щодо чого завгодно. І улюблена моя ціль - веб-сайти, котрі містять однорідні дані із користувацькими оцінками. Наприклад, сайт з оцінками кінофільмів, або коміксів, або комп'ютерних ігор. В базі даних обов'язкові такі стовпчики: рейтинг, кількість голосів, ID на сайті-джерелі. Власне, є у мене такі бази даних з комп'ютерними іграми (їх тут 6307), кінофільмами (їх 99998), телесеріалами (їх 43083 штуки), випусками коміксів (ще званих послідовним мистецтвом, 139848 штук). Все це у мене (крім коміксів) є з мітками за жанрами і тематиками. База даних із книжками поки в розробці, один всім відомий сайт піддаватись веб-скрейпінгу не хоче. Під катом трошки топів, а потім алгоритм обчислення.