Hur tar jag mig från Azure Data Factory till Wikipedia på 5 minuter?
Följ stegen nedan för att ansluta Azure Data Factory till Wikipedia. Du behöver bara ha kunskaper om Azure Data Factory, din egen verksamhet och Wikipedia-administrationen.
Wikipedia är en webbaserad plattform för uppslagsverkskunskap. Wikipedia hanterar både insamling, delning och underhåll av stora mängder uppslagsverkskunskap på ett stort antal språk.
Det krävs varken tekniska kunskaper eller kunskaper om Wikipedia-API:erna för att ansluta Wikipedia till Azure Data Factory. Denna steg-för-steg-guide visar exakt vilka steg du behöver följa i Invantive Cloud för att skapa ditt eget Azure-datalager med data från Wikipedia.
Så här ansluter du Azure Data Factory till Wikipedia:
- Skapa ett Invantive Cloud-konto.
- Skapa en Wikipedia-databas.
- Gör Wikipedia-databasen tillgänglig via Microsoft OData-anslutningen.
- Anslut Azure Data Factory till Wikipedia via kontakten.
- Ladda data från Wikipedia till datalagret Azure Data Factory.
Invantive Cloud erbjuder en Wikipedia-anslutning för att hämta data från Wikipedia till Azure Data Factory, men det finns även över 110 andra anslutningar tillgängliga för SQL, Power BI Desktop, Power BI Service, Power Query och/eller Azure Data Factory.
Med Wikipedia-anslutningen för Azure Data Factory hämtar du som standard data från alla anslutna Wikipedia-företag i din instrumentpanel. Du kan begränsa antalet Wikipedia företag som hämtas i Azure Data Factory via databasinställningarna. Du kan till exempel också begränsa kopplingen för Azure Data Factory till data från exakt ett Wikipedia företag. Naturligtvis kan du också filtrera data efter ett specifikt Wikipedia företag med hjälp av ett filtersteg i Azure Data Factory. Wikipedia-anslutningen för Azure Data Factory har avancerade optimeringar som ger utmärkt realtidsprestanda, både vid användning med ett enda Wikipedia-företag och med hundratals Wikipedia-företag.
Om du har frågor, vänligen kolla in -forumet för Wikipedia.
Skapa ett konto på Invantive Cloud
Hoppa över det här steget om du redan har ett konto på Invantive Cloud. I annat fall ska du utföra följande steg en gång för att registrera ett konto på Invantive Cloud:
-
Gå till Invantive Clouds startsida.
Klicka på knappen ”Logga in”.
-
Klicka på knappen ”Nästa”.
-
Klicka på knappen ”Nästa”.
Ange ditt lösenord och bekräfta det angivna lösenordet.
Du kommer att få en sexsiffrig verifieringskod via e-post inom två minuter.
-
Klicka på knappen ”Registrera dig”.
-
Logga in nu. >
-
Se till att du har en autentiseringsapp installerad på din telefon. Klicka på knappen ”Nästa”.
-
Lägg till den visade QR-koden i autentiseringsappen, ange den aktuella verifieringskoden och välj ”Slutför”.
-
Invantive Clouds kontrollpanel visas.
Du har nu en inloggningskod på Invantive Cloud som du kan använda för att konfigurera anslutningen till Wikipedia och många andra plattformar. Du använder samma Invantive-inloggningskod och arbetsflöde för alla andra plattformar.
Skapa databasen Wikipedia
I det här steget skapar vi en databas med data från Wikipedia. Databasen är ”virtuell” eftersom den inte är en traditionell databas, utan matas i realtid från Wikipedia. Invantive Cloud förser Azure Data Factory med en realtidslänk till Wikipedia. Databasen kommer att användas för all din Wikipedia-rapportering med Azure Data Factory. Du behöver alltså bara utföra dessa steg en gång.
-
Klicka på knappen Lägg till databas.
-
Vänligen fyll i formuläret med inloggningsuppgifter för Wikipedia.
Klicka på OK-knappen.
Grattis! Du kan nu bearbeta data från Wikipedia på Invantive Cloud-webbplatsen. Det kan du till exempel göra med hjälp av den interaktiva SQL-redigeraren.
Bevilja Azure Data Factory åtkomst till Wikipedia
För att hämta data från Azure Data Factory skapar vi en länk via Invantive Bridge Online. Detta skapar en ”bro” mellan Invantives molntjänst och den standard-OData-anslutning som finns tillgänglig i alla versioner av Azure Data Factory. Du behöver inte installera något lokalt: varken anslutningsmodul, ado.NET-leverantör eller Azure Data Factory-tillägg.
Följ dessa steg för att på ett säkert sätt använda data från Wikipedia utanför Invantive Cloud:
Bredvid databasen finns en orange text där du ombeds att godkänna åtkomst från din nuvarande plats (IP-adress). Klicka på den orange knappen intill.
Du måste inaktivera kontrollen av IP-adresser helt genom att ange en asterisk ("*"), eftersom Microsoft Azure Data Factory består av hundratusentals servrar över hela världen.
Nu är du redo att importera Wikipedia-data till Azure Data Factory.
Konfigurera Azure Data Factory-kontakten för Wikipedia
Du kommer nu att hämta Azure Data Factory data från Wikipedia via den upprättade länken.
Observera återigen att Invantive Cloud i bakgrunden hanterar alla komplexa processer, såsom att konfigurera autentiseringsuppgifter (t.ex. en Refresh Token), hämta en Access Token, optimera och parallellisera åtkomsten samt använda ett API inom ramen för begränsningar avseende frekvens, tillämpningsområden och säkerhet. Det krävs absolut inga kunskaper om komplexa tekniska ämnen som OAuth-Access Token eller API. Stegen, aktiviteterna och pipelinerna i Azure Data Factory kan byggas upp enbart med hjälp av OData-flödet och grundläggande autentisering.
Gör följande:
-
Ange URL-adressen till Azure Data Factory-databasen i Bridge Online i fönstret. Denna URL-adress, som innehåller data, finns i databasformuläret i Invantive Cloud. Välj autentiseringstyp ”Basic authentication”. Ange användarnamn och lösenord för Invantive Cloud.
-
En lista över tillgängliga Wikipedia-tabeller visas. Välj önskade tabeller och skapa din pipeline i Azure Data Factory.