Big-data tool चुनने से पहले result, deadline और correctness rules तय करें। बड़ा dataset अपने-आप distributed processing framework की मांग नहीं करता।
मान लें business को हर सुबह merchant के अनुसार कल की revenue चाहिए। यह संदिग्ध payment को approve करने से पहले पहचानने से अलग है। दोनों में बहुत records हो सकते हैं, लेकिन पहला scheduled processing स्वीकार करता है, दूसरे में समय पर फैसला चाहिए।
1. स्पष्ट करें कि क्या process होगा
मौजूदा मात्रा, नए data की रफ्तार, जरूरी fields और retention जानें। Revenue report में तय करें कि refund मूल दिन बदलेगा या refund वाले दिन गिना जाएगा। इस नियम के बिना तेज pipeline भी गलत total दे सकती है।