Excavator

Опис

Diggernaut е услуга базирана на облак за веб-гребење, екстракција на податоци и други задачи ETL (Extract, Transform, Load). Ако сте препродавач на стоки и вашиот добавувач не ви дозволува да ги имате нивните податоци во соодветен формат, како excel или csv, ќе мора рачно да ги преземете податоците од нивната веб-страница. Сè што треба да направите е да создадете копач, мал робот кој може да прави веб-стружење во ваше име и да извлече податоци од веб-локациите за вас, да го нормализира и да ги зачувува податоците во облакот. Откако ќе заврши, можете да го преземете во формат CSV, XLS, JSON или дури и да го вратите користејќи го нашиот Rest API.

Ако немате програмски вештини, можете да ја користите алатката „Екскаватор“ за да изградите конфигурација за вашите стругалки. Неговата едноставна апликација за точки и кликнување каде избирате кои податоци сакате да ги извлечете и поставувате како сакате да ги имате во структурата на излезните податоци. Имаме видео лекции кои објаснуваат како да го користиме на нашата веб-страница за песок.

Ако сте програмер или веб-програмер, можете да користите мета-јазик за да изградите конфигурација за копач. На овој начин можете да решавате навистина сложени задачи за екстракција на податоци. Имаме сеопфатна метајазична документација која ви помага да се навикнете на неа; исто така, имаме многу објави на нашиот блог каде што покажуваме како можете да користите различни функции на мета-јазик за да решавате различни реални случаи.