OpenRefine — המדריך המלא: ניקוי טבלאות נתונים מבולגנות בלי לכתוב קוד
OpenRefine הוא כלי בקוד פתוח לסידור טבלאות נתונים מבולגנות — רשימות ציוד, כתבי כמויות או ייצוא ממערכות שונות. הוא רץ על המחשב שלכם ונפתח בדפדפן, אבל הנתונים לא יוצאים מהמחשב.
OpenRefine
OpenRefine
ניקוי וסידור טבלאות נתונים מבולגנות — כפילויות, איחוד שמות, פיצול עמודות והמרות.
להורדה מאתר היצרןמה מקבלים
- פילוח (Facets) — רואים מיד את כל הערכים השונים בעמודה וכמה פעמים כל אחד מופיע.
- אשכול ערכים — זיהוי של צנרת 4״, צינור 4 אינץ׳ ו-PIPE 4 כאותו פריט ואיחודם.
- עריכת עמודות — פיצול, איחוד, חיתוך רווחים והמרת טיפוסים.
- היסטוריה מלאה — כל פעולה נרשמת, ניתנת לביטול, ואפשר להריץ אותה שוב על קובץ חדש.
- ייצוא — CSV, Excel ופורמטים נוספים.
למה לא פשוט Excel
בגיליון אלקטרוני מתקנים ידנית ושוכחים מה תוקן. ב-OpenRefine רשימת הצעדים נשמרת, כך שבחודש הבא, כשמגיע ייצוא חדש מאותה מערכת, מריצים את אותו ניקוי בלחיצה. הוא לא מחליף גיליון לחישובים — הוא מכין את הנתונים לפני שהם מגיעים לשם.
כלים קשורים
לתהליכי נתונים גרפיים מורכבים יותר — KNIME. לחישובים על הטבלה הנקייה — LibreOffice. לאוטומציה מלאה בקוד — Python.
KNIME Analytics Platform
KNIME
עיבוד וניתוח נתונים בתהליכי עבודה גרפיים, בלי לכתוב קוד — ניקוי, איחוד, סטטיסטיקה ולמידת מכונה.
להורדה מאתר היצרן
LibreOffice
The Document Foundation
חבילה משרדית מלאה — מסמכים, גיליונות אלקטרוניים, מצגות ושרטוטים, תואמת לקבצי Office.
להורדה מאתר היצרן
Python
Python Software Foundation
שפת החישוב המרכזית בהנדסה, עם NumPy, SciPy, pandas ו-Matplotlib סביבה.
להורדה מאתר היצרן
R
R Foundation
השפה המובילה לסטטיסטיקה וניתוח נתונים — בקרת איכות, ניתוח ניסויים, אמינות ותחזיות.
להורדה מאתר היצרןהשורה התחתונה
OpenRefine חוסך שעות של תיקון ידני ומשאיר תיעוד של כל שינוי. חינמי לחלוטין, גם לשימוש מסחרי.