PracticU

עבודה עם קבצים של אקסל בתוך Qlik - חלק 1

בלי כתוביותעם כתוביות
PracticU › קורס BI - ניתוח מסדי נתונים - Qlik Sense › עבודה עם קבצים של אקסל בתוך Qlik - חלק 1
מילון מושגים:
אקסל - תוכנת גיליונות אלקטרוניים של מיקרוסופט לארגון, חישוב וניתוח נתונים בטבלאות ובנוסחאות.
Qlik - פלטפורמה לניתוח נתונים ולהצגתם בלוחות מחוונים אינטראקטיביים (Business Intelligence).
תיקייה - מכל במערכת הקבצים שמשמש לארגון קבצים ותיקיות אחרות בתוך מבנה היררכי.
סקריפט - קובץ המכיל רצף פקודות שמבוצעות על ידי מפרש, לרוב כדי להפוך משימות לאוטומטיות.
טבלה - מבנה במסד נתונים שמאחסן נתונים בשורות ועמודות. כל שורה היא רשומה וכל עמודה היא שדה.
רשומה - שורה בטבלת מסד נתונים שמרכזת את כל השדות של פריט אחד, למשל כל הפרטים של לקוח יחיד.

עבודה עם קבצים של אקסל בתוך Qlik - חלק 1
במקום לטעון כל קובץ אקסל בנפרד, Qlik יכול לקרוא את כל הקבצים שבתיקייה בעזרת כוכבית. כך לא צריך לעדכן את הסקריפט כל יום כשמגיע קובץ חדש.
טעינה מתיקייה
1. קונקשן לתיקייה: מגדירים קונקשן לתיקיית ההחזרות, והקבצים מופיעים בצד ימין לבחירה.
2. כוכבית: במקום שם קובץ מלא כותבים שם עם כוכבית וסיומת xlsx. הסקריפט רץ על כל הקבצים שתואמים.
3. ערך קבוע בסקריפט: השדה Fact Type מוכנס כערך קבוע בתוך הסקריפט, כי הוא לא מגיע מהנתונים עצמם אלא מסמן את סוג הטבלה.
שדות של הקובץ
1. File Name: מוסיף לכל שורה את שם הקובץ שממנו היא הגיעה.
2. File Time: מוסיף את זמן יצירת הקובץ, שימושי לבקרה של מועד הגעת הנתונים.
כך אפשר לטעון בבת אחת את כל הקבצים של התקופה, ובכל רשומה לדעת מאיזה קובץ היא הגיעה.
השיעור הבא בקורס: עבודה עם קבצים של אקסל בתוך Qlik - חלק 2

פרקי ההרצאה: עבודה עם קבצים של אקסל בתוך Qlik - חלק 1

  1. 00:00

    חזרה על שרשור טבלת ההחזרות

  2. 00:55

    הבעיה: קובץ חדש בכל יום

  3. 01:31

    שימוש בכוכבית לקריאת תיקייה

  4. 02:14

    הכנת קובץ החזרות לדוגמה

  5. 02:54

    הזנת נתוני החזרות בקובץ

  6. 04:30

    חיבור תיקייה כ-Folder Connection

  7. 05:36

    בחירת הקובץ וכתיבת הסקריפט

  8. 06:28

    קריאת כל קבצי ה-XLSX בתיקייה

תמלול ההרצאה: עבודה עם קבצים של אקסל בתוך Qlik - חלק 1

הטקסט המלא של הדקות הראשונות בהרצאה «עבודה עם קבצים של אקסל בתוך Qlik - חלק 1» בקורס הווידאו של PracticU – כתוביות בעברית עם זמן התחלה לכל פסקה. כך תוכלו לקרוא ולחפש את הנושאים לפני שמתחילים ללמוד.

  1. 00:02

    אוקיי, אז לפני שני שיעורים ראינו איך אנחנו משרשרים טבלת החזרות לטבלת orders בעזרת פונקציית concatenate. בשיעור הקודם ראינו איך משתמשים ב-no concatenate.

  2. 00:14

    אם אני חוזר לדוגמה הזאת של concatenate לשרשר נתונים, אז זה באמת היה לשם הדוגמה, כי בדרך כלל אנחנו לא נקבל נתונים כאלו בתוך, או לא נקליד אותם בתוך הסקריפט, אלא הם יהיו בדאטאבייס כמובן, או, אופציה לא פחות נפוצה, מקבצים.

  3. 00:30

    הרבה פעמים זה יגיע בקבצים, הרבה פעמים לא בקובץ אחד בודד, בואו נניח נישאר עם הדוגמה הזאת של ההחזרות, שההחזרות משום מה לא נכנסים אלינו לדאטאבייס, יכול להיות שזה פשוט תהליך עסקי אחר שמביא לנו את הנתונים, ואנחנו בעצם מקבלים כל יום את טבלת ההחזרות בקובץ אקסל,

  4. 00:49

    הקבצים זהים, אבל זה כל פעם קובץ אחר. עכשיו אנחנו צריכים לדאוג להכניס אותם לנתונים ולחבר אותם כמו שעשינו פה.

  5. 00:57

    עכשיו הבעיה היא שבעצם זה המון המון פונקציות, פונקציות קונקטנט, קובץ שמגיע בכל יום ולא רק זה אני בעצם צריך כל יום להיכנס ולעדכן את הסקריפט ידנית כי עוד לא הגיע לי קובץ החדש, אתמול עוד לא הגיע לקובץ של היום לכן היום אני צריך להיכנס ולהוסיף את המשפט קונקרטינאי של הקובץ החדש.

  6. 01:18

    כמובן שכל זה לא מאוד מאוד הגיוני לעשות ככה ולכן במקרה כזה נשתמש במנגנון אחר. קונקרטינאי משמש רק כשיש טבלה מאוד ספציפית וקונקרטית שאני יודע שאני רוצה לשרשר אותה אבל במקרה שיש לי הרבה קבצים אני אשתמש במנגנון של קריאה מתיקייה בעזרת כוכבית.

  7. 01:37

    בשביל זה, קודם כל נהפוך את זה לקובץ אקסל, את האכזרות, ונעשה נגיד שניים או שלושה קבצים של אכזרות. אז בואו נפתח תיקייה, D-Temp, ונעשה שם קובץ אקסל, בוא נעשה תיקייה של אכזרות, נניח שזו התיקייה שמגיעים אלינו כל קבצי האכזרות, ואני אעשה פה קובץ אקסל,

  8. 02:08

    נקרא לו Returns, נגיד 19 01 01, זה הקובץ החזרות שהגיע בראשון ינואר, סליחה לא רציתי תיקייה, אני רוצה קובץ אקסל, וזה הקובץ עכשיו, בואו נמלא אותו, כמובן כל זה הדגמות בלבד, אז לפי הנתונים שלנו פה יש לנו Customer ID, אפילו אפשר להעתיק את זה, העמודה הראשונה תהיה Customer ID,

  9. 02:42

    העמודה השנייה תהיה Order Date, והשלישית Product ID, Quantity, פאק טייפ אני לא מכניס פה, תכף תבינו למה, ונשמור, ונתחיל קצת להכניס נתונים, כמובן זה רק בשביל ההדגמה.

  10. 03:06

    אז קסטומר אחד, תאריך, פי שבעים, והכמות אחד. לצורך ההדגמה, נניח שזו הייתה ההחזרה היחידה באותו יום.

  11. 03:24

    כמובן זה לא הגיוני שזה התאריך, אבל לא משנה כרגע. זו הייתה ההחזרה היחידה באותו יום, ונניח שיש קובץ נוסף שכולל את שתי ההחזרות הבאות. בואו נעשה עוד קובץ, נשכפל אותו, קראה לו אותו שם, אבל שני לחודש, ונכניס נתון אחר, פסולה ID 2, את זה נשנה ל-15 לעשירי, כלומר, זה לא משנה, זה רק הדגמה.

  12. 04:06

    את ה-ID, 60. מספיק לי כרגע, וה-Quantity, 2. זה מספיק. אוקיי, אז יש לי שני קבצים בתיקייה, בואו נראה את זה, עם החזרות 1 והחזרות 2. שימו לב, המבנה שלהם זהה לחלוטין, זה באמת מצב מאוד הגיוני, כי אנחנו מדברים על קבצים של אותם נתונים, שכנראה מגיעים לנו כל יום בדרך כזאת או אחרת.

  13. 04:30

    עכשיו, במקום זה, בואו ניקח את זה, נכניס אותו בעצם להערה, ואני רוצה לטעון את הקבצים. אז אני אתחיל לטעון קובץ אחד, ואחרי זה אני אשנה את הסקריפט.

  14. 04:46

    אז אני הולך ל-Folder, בואו נמצא ב-D-Temp Returns. ואני אקח את הראשון. צריך למשוך קובץ. מה שעשיתי, עצרתי קונקשן, אז בואו באמת נעשה קונקשן של פולדר.

  15. 05:19

    בעצם קונקשן מאפשר לי לגשת גם עכשיו וגם בהמשך לקבצים שנמצאים בתיקייה או לדאטה שנמצאה בדאטאביס מסוים, ראינו את זה ממש בתחילת הקורס.

  16. 05:29

    נגיד ש-D-Temp Returns זה תיקייה שאני קורא קונקשן שאני רוצה לקרוא לו Returns, החזרות. ואז הוא בעצם יופיע לי פה בצד ימין ואני אוכל עכשיו לקרוא ממנו קבצים, אני לוחץ על זה ואני קורא את הקובץ הראשון ו-Select, הוא נותן לי איזשהו ויזארד, אני אומר לו, סבבה, לך, זה אינסרט סקריפט, והכניס לי את

  17. 05:48

    הסקריפט הזה. קורא לי את הקבצים, מי הקובץ הראשון. עם כל מיני מאפיינים, שגיליון זה גיליון אחת וכולי. עכשיו, אני בעצם רוצה לעשות לזה לקונקטנט אורדרס, זה הדבר הראשוני, כמו שעשינו במקרה הקודם, אבל בעצם, כמו שאמרנו, זה לא יהיה טוב, כי אנחנו צריכים לעשות קונקטנט לכל אחד מהם.

  18. 06:14

    אז מה אנחנו עושים? הוא בעצם משנה, במקום לכתוב את השם המלא של הקובץ, אני מוחק ואני עושה כוכבית. הסקריפט נשאר אותו דבר, כן יש פה קונקרטיה דעית למעלה, אבל לא היה הפניה לשם קובץ ספציפי, אני בעצם אומר לו, כל מה שבתיקיית ריטרנס, כל הקבצים שנגמרים ב-XLSX,

  19. 06:39

    זאת אומרת קובץ אקסל, תשרשר אותם אחד אחרי השני. בעצם בפועל הוא פשוט יריץ את אותו סקריפט, שוב את אותו קטע בסקריפט, שוב ושוב ושוב ושוב על כל הקבצים שעונים על התנאי הזה. עכשיו, למה לא הכנסתי את ה-Fact type?

  20. 06:55

    עכשיו, כשאנחנו בעצם, יש לנו קבצים אמיתיים, זה לא הגיוני שבכל שורה אנחנו ניכנס ונכניס Fact type return, זה לא הגיוני. אנחנו יכולים להכניס את זה בתוך הסקריפט, כי מן הסתם ה-Fact type זה לא משהו שיגיע

לקורס המלא: קורס BI אונליין עם Qlik Sense

ההרצאה הקודמת: שרשור טבלאות - Qlik concatenate

ההרצאה הבאה: עבודה עם קבצים של אקסל בתוך Qlik - חלק 2

הרצאות קשורות מקורסים אחרים

  • עבודה עם קבצים ב-Xcode - חלק 1
  • עבודה עם קבצים ב-NodeJS
  • עבודה עם VI - חלק 1
  • סוס טרויני בתוך קובץ אקסל - MacroPack & Kali Metasploit

קורסים נוספים במסלול

  • קורס DBA אפליקטיבי - שפת SQL למתחילים
  • קורס NoSQL - MongoDB
  • קורס SSIS
  • קורס Power BI