ທໍ່ສົ່ງຂໍ້ມູນ ETL ທີ່ເຊື່ອຖືໄດ້ສຳລັບການໂອນຍ້າຍຂໍ້ມູນຈາກລະບົບຫາລະບົບ

ໂດຍຫຍໍ້

ລາຄາ

$562.99

ການຈັດສົ່ງ

ສົ່ງມອບໃນເວລາ 14 ວັນ

ຜູ້ຂາຍ

Zinn Digital

ຂາຍແລ້ວ

0

ກ່ຽວກັບລາຍການນີ້

ສິ່ງທີ່ມັນເຮັດ

ສິ່ງນີ້ເຊື່ອມໂຍງລະບົບຕ່າງໆທີ່ທ່ານກຳລັງນຳໃຊ້ອstateຢູ່, ເຊັ່ນ: ຖານຂໍ້ມູນໄປຫາກະສັງລວມຂໍ້ມູນ (warehouse), CRM ໄປຫາເຄື່ອງມືລາຍງານ, API ໄປຫາສະເປຣດຊີດ, ຫຼື ຫຼາຍໆຢ່າງລວມກັນ. ການໂອນຍ້າຍແຖວຂໍ້ມູນໃນລະຫວ່າງການເຮັດວຽກມາດຕະຖານແມ່ນເປັນເລື່ອງງ່າຍດາຍ; ການທົດສອບຕົວຈິງແມ່ນສິ່ງທີ່ເກີດຂຶ້ນໃນວັນທີສີ່ສິບ, ເມື່ອໂທເຄັນການກວດສອບສິດໝົດອາຍຸໃນເວລາ 2 ໂມງເຊົ້າ, ຕາຕະລາງຕົ້ນທາງມີຊ່ອງຂໍ້ມູນທີ່ອະນຸຍາດຄ່າຫວ່າງ (nullable field) ເພີ່ມຂຶ້ນມາໃໝ່, ຫຼື ການໂອນຍ້າຍແບບຊຸດ (batch transfer) ຖືກລົບກວນເຄິ່ງທາງ.

ວິທີການສ້າງ

ການດຶງຂໍ້ມູນ (Extraction), ການໂຫຼດຂໍ້ມູນ (Loading) ແລະ ການແປງຮູບແບບຂໍ້ມູນ (Transformation) ຖືກແຍກອອກເປັນແຕ່ລະໄລຍະຕ່າງຫາກ, ເພາະວ່າແຕ່ລະຂັ້ນຕອນສາມາດເກີດຄວາມຜິດພາດໄດ້ຈາກສາເຫດທີ່ແຕກຕ່າງກັນ ແລະ ຕ້ອງການກົນໄກການລອງໃໝ່ສະເພາະຂອງຕົນເອງ. ການດຶງຂໍ້ມູນຈະດຳເນີນຕາມ cursor ຫຼື watermark ເພື່ອຮັບປະກັນວ່າການເລີ່ມຕົ້ນໃໝ່ຈະສືບຕໍ່ຈາກຈຸດທີ່ຢຸດໄວ້ ແທນທີ່ຈະສ້າງຂໍ້ມູນຊ້ຳຊ້ອນ. ການໂຫຼດຂໍ້ມູນຈະເກີດຂຶ້ນພາຍໃນທຸລະກຳ (transaction) ສຳລັບທຸກໆຊຸດ, ຊຶ່ງໝາຍຄວາມວ່າການຂັດຂ້ອງຈະເຮັດໃຫ້ລະບົບປາຍທາງຢູ່ໃນສະຖານະທີ່ສອດຄ່ອງກັນ ແທນທີ່ຈະມີການອັບເດດພຽງບາງສ່ວນ. ກົດລະບຽບການແປງຮູບແບບຂໍ້ມູນຍັງຄົງຢູ່ໃນ SQL ຫຼື Python ທີ່ມີການຄວບຄຸມເວີຊັນ (version-controlled) ແທນທີ່ຈະເປັນຕົວສ້າງແບບຮູບພາບ (visual builder) ທີ່ອ່ານຍາກໃນພາຍຫຼັງ.

ທຸກໆການເຮັດວຽກຈະສ້າງບັນທຶກລາຍລະອຽດ (manifest) ທີ່ລະບຸແຖວທີ່ອ່ານ, ແຖວທີ່ຂຽນ, ແຖວທີ່ຖືກປະຕິເສດ ແລະ ເຫດຜົນສຳລັບການປະຕິເສດແຕ່ລະລາຍການ. ຄີທຳມະຊາດ (natural key) ທີ່ຈັບຄູ່ກັບແຮຊ (hash) ຮັບປະກັນວ່າຂະບວນການແມ່ນ idempotent, ຊຶ່ງໝາຍຄວາມວ່າການສັ່ງເຮັດວຽກເກົ່າຊ້ຳອີກຄັ້ງຈະບໍ່ກໍ່ໃຫ້ເກີດຄວາມເສຍຫາຍໃດໆ. ການປ່ຽນແປງຂອງໂຄງສ້າງລະບົບຕົ້ນທາງ (source schemas) ຈະຖືກກວດພົບກ່ອນທີ່ຈະເຮັດໃຫ້ການໂຫຼດຂໍ້ມູນເກີດຄວາມເສຍຫາຍ, ໂດຍຈະມີການສ້າງການແຈ້ງເຕືອນແທນທີ່ຈະລົ້ມເຫຼວແບບງຽບໆ.

ສິ່ງທີ່ທ່ານຈະໄດ້ຮັບ

• ໂຄດໄປປ໌ລາຍທີ່ຖືກຄອມມິດລົງໃນບ່ອນເກັບຂໍ້ມູນຂອງທ່ານເອງ, ຜ່ານການທົດສອບກັບຕົວຢ່າງຂໍ້ມູນຕົວຈິງຂອງທ່ານ.
• ກົນໄກການກຳນົດເວລາທີ່ເໝາະສົມກັບສະແຕັກຂອງທ່ານ - cron, ຕົວກຳນົດເວລາ systemd, Airflow ຫຼື Prefect.
• ການຕິດຕາມກວດກາ ແລະ ການແຈ້ງເຕືອນທີ່ກວມເອົາຈຳນວນແຖວ, ຂໍ້ຜິດພາດ ແລະ ຄວາມຊັກຊ້າທີ່ຜິດປົກກະຕິ.
• ຄູ່ມືການປະຕິບັດງານທີ່ອະທິບາຍກ່ຽວກັບການຣີເພລ, ແບັກຟິລ ແລະ ວິທີການເພີ່ມແຫຼ່ງຂໍ້ມູນໃໝ່.

ສິ່ງທີ່ພວກເຮົາຕ້ອງການຈາກທ່ານ

ສິດການເຂົ້າເຖິງເພື່ອອ່ານລະບົບຕົ້ນທາງ ແລະ ປາຍທາງ, ຕົວຢ່າງຂໍ້ມູນທີ່ໃຊ້ວຽກໄດ້, ແລະ ຕາຕະລາງເວລາທີ່ທຸລະກິດຂອງທ່ານຕ້ອງການຢ່າງແທ້ຈິງ ແທນທີ່ຈະເປັນຕາຕະລາງທີ່ຕັ້ງໄວ້ເກີນຈິງ.

ກຳນົດເວລາ ແລະ ການອັບເດດ

ເວີຊັນເລີ່ມຕົ້ນທີ່ສາມາດໃຊ້ວຽກໄດ້ຕາມປົກກະຕິແລ້ວຈະພ້ອມພາຍໃນຫ້າວັນ, ເຊິ່ງລວມມີການທົດສອບ run ໃນ staging ເພື່ອໃຫ້ທ່ານກວດສອບກ່ອນການນຳໄປໃຊ້ງານຈິງໃນ production. ການອັບເດດຈະຖືກສະໜອງໃຫ້ເປັນຂໍ້ຄວາມຂຽນສັ້ນໆ ໃນແຕ່ລະຂັ້ນຕອນແທນການປະຊຸມ, ແລະ ທາງເລືອກທີ່ມີຜົນຕໍ່ຂໍ້ມູນຂອງທ່ານ - ເຊັ່ນ: ການເກັບຮັກສາຂໍ້ມູນ, ໄລຍະເວລາແບັກຟິລ ແລະ ການຈັດການແຖວທີ່ຖືກປະຕິເສດ - ຈະຖືກບັນທຶກໄວ້ເພື່ອການອ້າງອີງໃນອະນາຄົດ. ຫາກບໍ່ສາມາດບັນລຸຄວາມໜ້າເຊື່ອຖືໄດ້ພາຍໃນເວລາທີ່ກຳນົດ, ທ່ານຈະໄດ້ຮັບການແຈ້ງບອກລ່ວງໜ້າຢ່າງທັນການເພື່ອປັບປ່ຽນແຜນ ແທນທີ່ຈະໄປພົບກັບບັນຫາໃນຕອນເປີດໃຊ້ງານ.

ການສ້າງນີ້ຖືກຈັດສົ່ງເປັນແພັກເກດລາຄາຄົງທີ່ອັນດຽວ, ສຳເລັດໃນຮອບດຽວພ້ອມສິດການແກ້ໄຂໜຶ່ງຄັ້ງ, ພາຍໃນໄລຍະເວລາ 14 ວັນ. ທ່ານຈະຕ້ອງລະບຸໂດເມນທີ່ຄຳສັ່ງຊື້ນີ້ນຳໃຊ້ ແລະ ເອກະສານບຣີຟຂອງທ່ານ.

ຄຳຖາມ ແລະ ຄຳຕອບ