Скрейпър за залагания е необходимост за тези, които искат да печелят от хазарт. Навременната и точна информация за коефициентите на букмейкърите е от решаващо значение, ако са заложени значителни суми.
За този проект трябваше да намерим начин в реално време да извличаме коефициентите на два от най-популярните букмейкъри в Обединеното Кралство – Bet365 и William Hill. Тази задача беше доста трудна, тъй като уебсайтът на bet365.com използва уеб сокети, за да актуализира резултатите си. От друга страна, Държавната комисия по хазарта ограничава достъпа до сайта на William Hill, така че трябваше да използваме прокси сървъри, за да заобиколим блокирането по IP адрес.
Съхраняването на извлечените данни също беше предизвикателство, поради размера и скоростта на доставяне. Скрейпърът изпращаше до 120 актуализации към сървъра за всеки от футболните мачове. Така че се наложи да оптимизираме базата с данни. За щастие това е една от нашите специалности, и индексирахме и разцепвахме таблиците, докато скрейпърът за залагания не постигна желаната скорост.