Agregacja danych

Agregacja danych to kompilacja informacji z baz danych w celu przygotowania połączonych zestawów danych do przetwarzania danych .

Opis

Służba Geologiczna Stanów Zjednoczonych wyjaśnia, że ​​„kiedy dane są dobrze udokumentowane, wiesz, jak i gdzie szukać informacji, a otrzymane wyniki będą zgodne z oczekiwaniami”. Informacje źródłowe do agregacji danych mogą pochodzić z rejestrów publicznych i kryminalnych baz danych. Informacje są pakowane w raporty zbiorcze, a następnie sprzedawane firmom , a także agencjom lokalnym , stanowym i rządowym. Informacje te mogą być również przydatne do marketingowych . W Stanach Zjednoczonych wiele działań brokerów danych podlega ustawie Fair Credit Reporting Act (FCRA), która reguluje agencje zajmujące się raportami konsumenckimi . Następnie agencje zbierają i umieszczają dane osobowe w konsumenckich , które są sprzedawane wierzycielom , pracodawcom , ubezpieczycielom i innym firmom. Finicity, do Mastercard , jest jednym z głównych agregatorów, którzy przestrzegają FCRA, podczas gdy większość innych agregatorów danych zdecydowała się nie przestrzegać tego prawa ochrony konsumentów.

Agregatory baz danych dostarczają różne raporty informacyjne. Osoby fizyczne mogą zażądać własnych raportów konsumenckich, które zawierają podstawowe biograficzne , takie jak imię i nazwisko, data urodzenia, aktualny adres i numer telefonu. Uprawnione i wykwalifikowane strony trzecie mogą zażądać raportów z kontroli przeszłości pracowników , które zawierają bardzo szczegółowe informacje, takie jak dawne adresy i długość pobytu, licencje zawodowe i przeszłość kryminalna. Dane te mogą być wykorzystywane nie tylko do sprawdzania przeszłości pracowników, ale mogą być również wykorzystywane do podejmowania decyzji dotyczących zakresu ubezpieczenia, ustalania cen i egzekwowania prawa. Obrońcy prywatności argumentują, że agregatory baz danych mogą dostarczać błędnych informacji.

Rola Internetu

Potencjał Internetu do konsolidacji i manipulowania informacjami ma nowe zastosowanie w agregacji danych, znanej również jako screen scraping . Internet daje użytkownikom możliwość konsolidacji nazw użytkowników i haseł lub kodów PIN. Taka konsolidacja umożliwia konsumentom dostęp do szerokiej gamy stron internetowych chronionych kodem PIN , zawierających dane osobowe , przy użyciu jednego głównego kodu PIN na jednej stronie internetowej. Do dostawców kont online należą instytucje finansowe , maklerzy giełdowi , linie lotnicze i programy lojalnościowe oraz inne programy premiowe i konta e-mail . Agregatorzy danych mogą gromadzić informacje o koncie lub inne informacje z wyznaczonych witryn internetowych za pomocą kodów PIN posiadaczy kont, a następnie udostępniać im informacje o kontach użytkowników w jednej witrynie internetowej obsługiwanej przez agregatora na żądanie posiadacza konta. Usługi agregacji mogą być oferowane samodzielnie lub w połączeniu z innymi usługami finansowymi, takimi jak portfela i opłacanie rachunków świadczone przez wyspecjalizowaną stronę internetową, lub jako dodatkowa usługa zwiększająca obecność online przedsiębiorstwa mającego siedzibę poza światem wirtualnym. Wydaje się, że wiele uznanych firm obecnych w Internecie dostrzega wartość oferowania usługi agregacji w celu ulepszenia innych usług internetowych i przyciągnięcia odwiedzających. Oferowanie usługi agregacji danych stronie internetowej może być atrakcyjne ze względu na możliwość częstego przyciągania użytkowników tej usługi z witryny hostingowej.

Agregacja lokalnych danych biznesowych

Jeśli chodzi o kompilowanie informacji o lokalizacji lokalnych firm, istnieje kilka głównych agregatorów danych, które zbierają informacje, takie jak nazwa firmy, adres, numer telefonu, strona internetowa, opis i godziny pracy. Następnie weryfikują te informacje za pomocą różnych metod sprawdzania poprawności. Gdy informacje o firmie zostaną zweryfikowane pod kątem dokładności, agregatory danych udostępniają je wydawcom takim jak Google i Yelp .

Kiedy na przykład Yelp idzie zaktualizować swoje listy Yelp, pobierze dane z tych lokalnych agregatorów danych. Wydawcy pobierają lokalne dane biznesowe z różnych źródeł i porównują je z tym, co mają obecnie w swojej bazie danych. Następnie aktualizują swoją bazę danych o informacje, które uznają za dokładne.

Cztery główne agregatory danych do wyszukiwania lokalnych firm to Acxiom, Infogroup, Localeze i Factual. Od stycznia 2020 r. Acxiom nie będzie już pełnić roli agregatora danych. Foursquare zastępuje Acxiom w czterech podstawowych agregatorach danych. Finicity, firma należąca do Mastercard, jest największym graczem w obszarze pożyczkowym.

Konsekwencje prawne

Instytucje finansowe obawiają się możliwości odpowiedzialności wynikającej z działań agregujących dane, potencjalnych problemów z bezpieczeństwem , naruszenia praw własności intelektualnej oraz możliwości zmniejszenia ruchu na stronie internetowej instytucji. Agregator i instytucja finansowa mogą uzgodnić sposób dostarczania danych aktywowany na żądanie klienta przy użyciu standardu Open Financial Exchange (OFX) w celu żądania i dostarczania informacji do witryny wybranej przez klienta jako miejsca, z którego będą przeglądać dane swojego konta . Umowy dają instytucjom możliwość negocjowania w celu ochrony interesów swoich klientów i oferują agregatorom możliwość świadczenia solidnych usług. Agregatorzy, którzy uzgadniają z dostawcami informacji ekstrakcję danych bez użycia standardu OFX, mogą osiągnąć niższy poziom dobrowolnej relacji; w związku z tym „screen scraping” może być wykorzystany do pozyskania danych konta, ale ze względów biznesowych lub innych agregator może zdecydować się na uzyskanie uprzedniej zgody i negocjować warunki udostępniania danych klientów. „Screen scraping” bez zgody dostawcy treści ma tę zaletę, że umożliwia subskrybentom przeglądanie prawie wszystkich kont, które przypadkowo otworzyli w dowolnym miejscu w Internecie za pośrednictwem jednej witryny.

Perspektywy

Z biegiem czasu transfer dużych ilości danych konta od dostawcy konta do serwera agregatora może przekształcić się w kompleksowy profil użytkownika, szczegółowo opisujący jego transakcje bankowe i karty kredytowe, salda, transakcje na papierach wartościowych i portfele oraz historię podróży i preferencje . Wraz ze wzrostem wrażliwości na względy związane z ochroną danych prawdopodobne będzie znaczne skupienie się na zakresie, w jakim agregatory danych mogą dążyć do wykorzystania tych danych na własny użytek lub do udostępniania ich stronom trzecim i operatorom strona internetowa, na której oferowana jest usługa.