แชร์ผ่าน

กําหนดค่าพื้นที่เก็บข้อมูล Google Cloud ในกิจกรรมการคัดลอก

  • บทความ

บทความนี้สรุปวิธีการใช้กิจกรรมการคัดลอกในไปป์ไลน์ข้อมูลเพื่อคัดลอกข้อมูลจากและไปยัง Google Cloud Storage

ข้อกำหนดเบื้องต้น

การตั้งค่าต่อไปนี้จําเป็นต้องดําเนินการในบัญชี Google Cloud Storage ของคุณ:

  1. เปิดใช้งานการทํางานร่วมกันสําหรับบัญชีที่เก็บข้อมูล Google Cloud

  2. ตั้งค่าโครงการเริ่มต้นที่ประกอบด้วยข้อมูลที่คุณต้องการคัดลอกจากบักเก็ต Google Cloud Storage เป้าหมาย

  3. สร้างบัญชีบริการและกําหนดระดับสิทธิ์ที่ถูกต้องโดยใช้ Cloud IAM บน GCP

  4. สร้างคีย์การเข้าถึงสําหรับบัญชีบริการนี้

    สกรีนช็อตที่แสดงคีย์การเข้าถึงสําหรับ Google Cloud Storage

จำเป็นต้องมีสิทธิ์

เมื่อต้องการคัดลอกข้อมูลจาก Google Cloud Storage ตรวจสอบให้แน่ใจว่า คุณได้รับสิทธิ์ต่อไปนี้สําหรับการดําเนินการวัตถุ: storage.objects.get และstorage.objects.list

นอกจากนี้ storage.buckets.list จําเป็นต้องมีสิทธิ์สําหรับการดําเนินการ เช่น การทดสอบการเชื่อมต่อและการเรียกดูจากราก

สําหรับรายการทั้งหมดของบทบาทที่เก็บข้อมูลบน Google Cloud และสิทธิ์ที่เกี่ยวข้อง ให้ไปที่ บทบาท IAM สําหรับที่เก็บข้อมูล บน Cloud บนเว็บไซต์ของ Google Cloud

รูปแบบที่ได้รับการสนับสนุน

ที่เก็บข้อมูล Google Cloud รองรับรูปแบบไฟล์ต่อไปนี้ ดูแต่ละบทความสําหรับการตั้งค่าตามรูปแบบ

การกําหนดค่าที่ได้รับการสนับสนุน

สําหรับการกําหนดค่าของแต่ละแท็บภายใต้กิจกรรมการคัดลอก ให้ไปที่ส่วนต่อไปนี้ตามลําดับ

ทั่วไป

สําหรับการกําหนดค่าแท็บทั่วไป ไปที่ทั่วไป

แหล่งที่มา

คุณสมบัติต่อไปนี้ได้รับการสนับสนุนสําหรับ Google Cloud Storage ภายใต้ แท็บแหล่งข้อมูล ของกิจกรรมการคัดลอก

สกรีนช็อตที่แสดงแท็บต้นทางและรายการคุณสมบัติ

จําเป็นต้องมีคุณสมบัติต่อไปนี้:

  • ชนิดของที่เก็บข้อมูล: เลือก ภายนอก

  • เชื่อมต่อ: เลือกการเชื่อมต่อ Google Cloud Storage จากรายการการเชื่อมต่อ หากไม่มีการเชื่อมต่อให้สร้างการเชื่อมต่อ Google Cloud Storage ใหม่โดยการเลือก ใหม่

  • ประเภทพาธของไฟล์: คุณสามารถเลือกเส้นทางของไฟล์ คํานําหน้า เส้นทางไฟล์อักขระตัวแทน หรือรายการของไฟล์เป็นประเภทเส้นทางของไฟล์ของคุณได้ การกําหนดค่าของแต่ละการตั้งค่าเหล่านี้คือ:

    • พาธของไฟล์: หากคุณเลือกประเภทนี้ ข้อมูลสามารถคัดลอกจากบักเก็ตหรือเส้นทางโฟลเดอร์/ไฟล์ที่ระบุใน เส้นทางไฟล์ได้

    • คํานําหน้า: ถ้าคุณเลือกชนิดนี้ ให้ ระบุบักเก็ต และ คํานําหน้า

      • บักเก็ต: ระบุชื่อบักเก็ต Google Cloud Storage ซึ่งจําเป็น

      • คํานําหน้า: คํานําหน้าสําหรับชื่อคีย์ Google Cloud Storage ภายใต้บักเก็ตที่ระบุเพื่อกรองแหล่งที่มาของไฟล์ Google Cloud Storage คีย์ Google Cloud Storage ที่มีชื่อเริ่มต้น given_bucket/this_prefix ด้วยถูกเลือก ใช้ตัวกรองด้านบริการของ Google Cloud Storage ซึ่งให้ประสิทธิภาพที่ดีกว่าตัวกรองอักขระตัวแทน

        สกรีนช็อตที่แสดงวิธีกําหนดค่าชนิดเส้นทางของไฟล์คํานําหน้า

    • เส้นทางไฟล์อักขระตัวแทน: ถ้าคุณเลือกชนิดนี้ ให้ระบุเส้นทางบักเก็ตและอักขระตัวแทน

      • บักเก็ต: ระบุชื่อบักเก็ต Google Cloud Storage ซึ่งจําเป็น

      • เส้นทางอักขระตัวแทน: ระบุโฟลเดอร์หรือเส้นทางของแฟ้มด้วยอักขระตัวแทนภายใต้บักเก็ตที่ระบุเพื่อกรองโฟลเดอร์หรือไฟล์ต้นทางของคุณ

        สัญลักษณ์ตัวแทนที่อนุญาตคือ: * (ตรงกับอักขระศูนย์หรือมากกว่า) และ ? (ตรงกับศูนย์หรืออักขระเดี่ยว) ใช้ ^ เพื่อหลีกเลี่ยงถ้าชื่อโฟลเดอร์ของคุณมีอักขระตัวแทนหรืออักขระหลีกอยู่ภายใน สําหรับตัวอย่างเพิ่มเติม ไปที่ ตัวอย่างตัวกรองโฟลเดอร์และไฟล์

        สกรีนช็อตแสดงวิธีการกําหนดค่าเส้นทางไฟล์สัญลักษณ์ตัวแทน

        • เส้นทางโฟลเดอร์อักขระตัวแทน: ระบุเส้นทางโฟลเดอร์ด้วยอักขระตัวแทนภายใต้บักเก็ตที่ระบุเพื่อกรองโฟลเดอร์ต้นทาง

        • ชื่อแฟ้มอักขระตัวแทน: ระบุชื่อแฟ้มด้วยอักขระตัวแทนภายใต้บักเก็ตที่ระบุและเส้นทางโฟลเดอร์ (หรือเส้นทางโฟลเดอร์อักขระตัวแทน) เพื่อกรองแฟ้มต้นฉบับ

    • รายการไฟล์: หากคุณเลือกประเภทนี้ ให้ ระบุเส้นทาง โฟลเดอร์และ เส้นทางไปยังรายการ ไฟล์เพื่อระบุที่จะคัดลอกชุดไฟล์ที่ระบุ ชี้ไปที่ไฟล์ข้อความที่มีรายการของไฟล์ที่คุณต้องการคัดลอกหนึ่งไฟล์ต่อบรรทัดซึ่งเป็นเส้นทางสัมพัทธ์ไปยังเส้นทางที่กําหนดค่าไว้ สําหรับตัวอย่างเพิ่มเติม ไปที่ ตัวอย่างรายการไฟล์

      สกรีนช็อตที่แสดงวิธีการกําหนดค่ารายการไฟล์

      • เส้นทางโฟลเดอร์: ระบุเส้นทางไปยังโฟลเดอร์ภายใต้บักเก็ตที่ระบุ ซึ่งจําเป็น
      • เส้นทางไปยังรายการไฟล์: ระบุเส้นทางของไฟล์ข้อความที่มีรายการของไฟล์ที่คุณต้องการคัดลอก

  • แบบเรียกใช้ซ้ํา: ระบุว่าข้อมูลถูกอ่านซ้ําจากโฟลเดอร์ย่อยหรือเฉพาะจากโฟลเดอร์ที่ระบุ โปรดทราบว่า เมื่อเลือกกล่องกาเครื่องหมายนี้ และปลายทางคือที่เก็บที่ยึดตามไฟล์ โฟลเดอร์หรือโฟลเดอร์ย่อยที่ว่างเปล่าจะไม่ถูกคัดลอกหรือสร้างขึ้นที่ปลายทาง

  • รูปแบบไฟล์: เลือกรูปแบบไฟล์ที่ใช้จากรายการดรอปดาวน์ เลือกการตั้งค่าเพื่อกําหนดค่ารูปแบบไฟล์ สําหรับการตั้งค่ารูปแบบไฟล์ที่แตกต่างกัน ดูที่บทความในรูปแบบที่รองรับสําหรับข้อมูลโดยละเอียด

ภายใต้ ขั้นสูง คุณสามารถระบุเขตข้อมูลต่อไปนี้:

  • กรองตามการปรับเปลี่ยนล่าสุด: ไฟล์จะถูกกรองตามวันที่ปรับเปลี่ยนล่าสุดที่คุณระบุ คุณสมบัตินี้ใช้ไม่ได้เมื่อคุณกําหนดค่าชนิดเส้นทางไฟล์ของคุณเป็นรายการของไฟล์

    • เวลาเริ่มต้น (UTC): ไฟล์จะถูกเลือกถ้าเวลาที่ปรับเปลี่ยนล่าสุดมากกว่าหรือเท่ากับเวลาที่กําหนดไว้
    • เวลาสิ้นสุด (UTC): ไฟล์จะถูกเลือกถ้าเวลาที่ปรับเปลี่ยนล่าสุดน้อยกว่าเวลาที่กําหนดไว้

    เมื่อ เวลาเริ่มต้น (UTC) มีค่าวันที่เวลา แต่ เวลาสิ้นสุด (UTC) เป็น NULL นั่นหมายความว่าไฟล์ที่มีแอตทริบิวต์ที่ปรับเปลี่ยนล่าสุดมากกว่าหรือเท่ากับค่า datetime จะถูกเลือก เมื่อ เวลาสิ้นสุด (UTC) มีค่าวันที่เวลา แต่ เวลาเริ่มต้น (UTC) เป็น NULL ซึ่งหมายความว่าไฟล์ที่มีแอตทริบิวต์ที่ปรับเปลี่ยนล่าสุดน้อยกว่าค่าวันที่เวลาจะถูกเลือก คุณสมบัติอาจเป็น NULL ซึ่งหมายความว่าไม่มีตัวกรองแอตทริบิวต์ของไฟล์ที่จะนําไปใช้กับข้อมูล

  • เปิดใช้งานการค้นพบพาร์ติชัน: ระบุว่าจะแยกวิเคราะห์พาร์ติชันจากเส้นทางไฟล์และเพิ่มพาร์ติชันเป็นคอลัมน์ต้นทางเพิ่มเติมหรือไม่ ซึ่งไม่ได้ถูกเลือกตามค่าเริ่มต้นและไม่ได้รับการสนับสนุนเมื่อคุณใช้รูปแบบไฟล์ไบนารี

    • เส้นทางรากของพาร์ติชัน: เมื่อเปิดใช้งานการค้นพบพาร์ติชัน ให้ระบุเส้นทางรากสัมบูรณ์เพื่ออ่านโฟลเดอร์ที่มีพาร์ติชันเป็นคอลัมน์ข้อมูล

      ถ้าไม่ได้ระบุไว้ ตามค่าเริ่มต้น

      • เมื่อคุณใช้พาธไฟล์หรือรายการของไฟล์ในแหล่งที่มา พาธรูทของพาร์ติชันคือเส้นทางที่คุณกําหนดค่า
      • เมื่อคุณใช้ตัวกรองโฟลเดอร์อักขระตัวแทน เส้นทางรากของพาร์ติชันคือเส้นทางย่อยก่อนอักขระตัวแทนแรก
      • เมื่อคุณใช้คํานําหน้า เส้นทางรากของพาร์ติชันคือเส้นทางย่อยก่อน "/" สุดท้าย

      ตัวอย่างเช่น สมมติว่าคุณกําหนดค่าเส้นทางเป็น root/folder/year=2020/month=08/day=27:

      • ถ้าคุณระบุเส้นทางรากของพาร์ติชันเป็น root/folder/year=2020กิจกรรมการคัดลอกจะสร้างสองคอลัมน์เพิ่มเติมเดือนและวันด้วยค่า "08" และ "27" ตามลําดับ นอกเหนือจากคอลัมน์ภายในไฟล์
      • ถ้าไม่ได้ระบุเส้นทางรากของพาร์ติชัน จะไม่มีการสร้างคอลัมน์พิเศษ

      สกรีนช็อตที่แสดงการเปิดใช้งานการค้นพบพาร์ติชัน

  • การเชื่อมต่อพร้อมกันสูงสุด: ขีดจํากัดสูงสุดของการเชื่อมต่อพร้อมกันที่สร้างไปยังที่เก็บข้อมูลในระหว่างการเรียกใช้กิจกรรม ระบุค่าเมื่อคุณต้องการจํากัดการเชื่อมต่อที่เกิดขึ้นพร้อมกันเท่านั้น

  • คอลัมน์เพิ่มเติม: เพิ่มคอลัมน์ข้อมูลเพิ่มเติมเพื่อจัดเก็บเส้นทางสัมพัทธ์หรือค่าคงที่ของไฟล์ต้นฉบับ นิพจน์ได้รับการสนับสนุนสําหรับอย่างหลัง

ปลายทาง

คุณสมบัติต่อไปนี้ได้รับการสนับสนุนสําหรับพื้นที่เก็บข้อมูล Google Cloud ใต้ แท็บปลายทาง ของกิจกรรมการคัดลอก

สกรีนช็อตที่แสดงแท็บปลายทางและรายการของคุณสมบัติ

จําเป็นต้องมีคุณสมบัติต่อไปนี้:

  • ชนิดของที่เก็บข้อมูล: เลือก ภายนอก
  • เชื่อมต่อ: เลือกการเชื่อมต่อ Google Cloud Storage จากรายการการเชื่อมต่อ หากไม่มีการเชื่อมต่อให้สร้างการเชื่อมต่อ Google Cloud Storage ใหม่โดยการเลือก ใหม่
  • พาธของไฟล์: คุณสามารถคัดลอกข้อมูลไปยังบักเก็ตที่กําหนดหรือบักเก็ตและเส้นทางโฟลเดอร์ที่ระบุได้
  • รูปแบบไฟล์: เลือกรูปแบบไฟล์ที่ใช้จากรายการดรอปดาวน์ เลือกการตั้งค่าเพื่อกําหนดค่ารูปแบบไฟล์ สําหรับการตั้งค่ารูปแบบไฟล์ที่แตกต่างกัน ดูที่บทความในรูปแบบที่รองรับสําหรับข้อมูลโดยละเอียด

ภายใต้ ขั้นสูง คุณสามารถระบุเขตข้อมูลต่อไปนี้:

  • คัดลอกลักษณะการทํางาน: กําหนดลักษณะการทํางานของการคัดลอกเมื่อแหล่งข้อมูลคือไฟล์จากที่เก็บข้อมูลตามไฟล์ คุณสามารถเลือกลักษณะการทํางานจากรายการดรอปดาวน์

    • ลําดับชั้นลดรูปแบบโครงสร้าง: ไฟล์ทั้งหมดจากโฟลเดอร์ต้นทางอยู่ในระดับแรกของโฟลเดอร์ปลายทาง ไฟล์ปลายทางมีชื่อที่สร้างขึ้นโดยอัตโนมัติ
    • ผสานไฟล์: ผสานไฟล์ทั้งหมดจากโฟลเดอร์ต้นทางไปยังไฟล์เดียว ถ้ามีการระบุชื่อไฟล์ ชื่อไฟล์ที่ผสานคือชื่อที่ระบุ มิฉะนั้น จะเป็นชื่อไฟล์ที่สร้างโดยอัตโนมัติ
    • รักษาลําดับชั้น: รักษาลําดับชั้นไฟล์ในโฟลเดอร์เป้าหมาย เส้นทางสัมพัทธ์ของไฟล์ต้นทางไปยังโฟลเดอร์ต้นทางจะเหมือนกับเส้นทางสัมพัทธ์ของไฟล์เป้าหมายไปยังโฟลเดอร์เป้าหมาย

  • การเชื่อมต่อพร้อมกันสูงสุด: คุณสมบัตินี้ระบุขีดจํากัดสูงสุดของการเชื่อมต่อพร้อมกันที่สร้างขึ้นกับที่เก็บข้อมูลในระหว่างการเรียกใช้กิจกรรม ระบุค่าเมื่อคุณต้องการจํากัดการเชื่อมต่อที่เกิดขึ้นพร้อมกันเท่านั้น

การแม็ป

สําหรับ การกําหนดค่าแท็บการแมป ดู กําหนดค่าการแมปของคุณภายใต้แท็บการแมป ถ้าคุณเลือกไบนารีเป็นรูปแบบไฟล์ของคุณ การแมปจะไม่ได้รับการสนับสนุน

การตั้งค่า

สําหรับการกําหนดค่าแท็บการตั้งค่า ให้ไปที่ กําหนดการตั้งค่าอื่น ๆ ของคุณภายใต้แท็บ การตั้งค่า

ข้อมูลสรุปของตาราง

ตารางต่อไปนี้ประกอบด้วยข้อมูลเพิ่มเติมเกี่ยวกับกิจกรรมการคัดลอกใน Google Cloud Storage

ข้อมูลต้นทาง

ชื่อ รายละเอียด ค่า ต้องมี คุณสมบัติสคริปต์ JSON
ชนิดของที่เก็บข้อมูล ประเภทที่เก็บข้อมูลของคุณ ภายนอก ใช่ /
เชื่อมต่อชั่น การเชื่อมต่อของคุณไปยังที่เก็บข้อมูลต้นทาง <การเชื่อมต่อที่เก็บข้อมูล Google Cloud> ใช่ เชื่อม ต่อ
ชนิดพาธของไฟล์ ชนิดพาธของไฟล์ที่ใช้ในการรับข้อมูลต้นทาง • พาธของไฟล์
• คํานําหน้า
• เส้นทางไฟล์อักขระตัวแทน
• รายการไฟล์		 ใช่ /
สําหรับ เส้นทางไฟล์
ถัง ชื่อบักเก็ตที่เก็บข้อมูล Google Cloud <ชื่อบักเก็ตของคุณ> ใช่ bucketName
ได เรก ทอรี เส้นทางไปยังโฟลเดอร์ภายใต้บักเก็ตที่ระบุ <ชื่อโฟลเดอร์ของคุณ> ไม่ โฟลเดอร์พาธ
ชื่อไฟล์ ชื่อไฟล์ภายใต้บักเก็ตและเส้นทางโฟลเดอร์ที่ระบุ <ชื่อไฟล์ของคุณ> ไม่ fileName
สําหรับ คํานําหน้า
ถัง ชื่อบักเก็ตที่เก็บข้อมูล Google Cloud <ชื่อบักเก็ตของคุณ> ใช่ bucketName
คํานําหน้า คํานําหน้าสําหรับชื่อคีย์ Google Cloud Storage ภายใต้บักเก็ตที่ระบุเพื่อกรองแหล่งที่มาของไฟล์ Google Cloud Storage <คํานําหน้าของคุณ> ไม่ คํานําหน้า
สําหรับ เส้นทางไฟล์อักขระตัวแทน
ถัง ชื่อบักเก็ตที่เก็บข้อมูล Google Cloud <ชื่อบักเก็ตของคุณ> ใช่ bucketName
เส้นทางโฟลเดอร์อักขระตัวแทน เส้นทางโฟลเดอร์ที่มีอักขระตัวแทนภายใต้บักเก็ตที่ระบุเพื่อกรองโฟลเดอร์ต้นทาง <เส้นทางโฟลเดอร์ของคุณที่มีอักขระตัวแทน> ไม่ wildcardFolderPath
ชื่อไฟล์อักขระตัวแทน ชื่อแฟ้มที่มีอักขระตัวแทนภายใต้บักเก็ตและเส้นทางโฟลเดอร์ที่ระบุ (หรือเส้นทางโฟลเดอร์สัญลักษณ์ตัวแทน) เพื่อกรองแฟ้มต้นฉบับ <ชื่อไฟล์ของคุณที่มีอักขระตัวแทน> ใช่ wildcardFileName
สําหรับ รายการแฟ้ม
ถัง ชื่อบักเก็ตที่เก็บข้อมูล Google Cloud <ชื่อบักเก็ตของคุณ> ใช่ bucketName
ได เรก ทอรี เส้นทางไปยังโฟลเดอร์ภายใต้บักเก็ตที่ระบุ <ชื่อโฟลเดอร์ของคุณ> ไม่ โฟลเดอร์พาธ
เส้นทางไปยังรายการไฟล์ บ่งชี้ว่าจะคัดลอกชุดไฟล์ที่กําหนด ชี้ไปที่ไฟล์ข้อความที่มีรายการไฟล์ที่คุณต้องการคัดลอกหนึ่งไฟล์ต่อหนึ่งบรรทัด < เส้นทางรายการไฟล์ > ไม่ fileListPath
รูปแบบไฟล์ รูปแบบไฟล์สําหรับข้อมูลต้นฉบับของคุณ สําหรับข้อมูลของรูปแบบไฟล์ที่แตกต่างกัน ดูที่บทความในรูปแบบที่รองรับสําหรับข้อมูลโดยละเอียด / ใช่ /
เรียกใช้ซ้ํา ระบุว่าข้อมูลถูกอ่านซ้ําจากโฟลเดอร์ย่อย หรืออ่านจากโฟลเดอร์ที่ระบุเท่านั้น โปรดทราบว่า เมื่อเลือกกล่องกาเครื่องหมายนี้ และปลายทางคือที่เก็บที่ยึดตามไฟล์ โฟลเดอร์หรือโฟลเดอร์ย่อยที่ว่างเปล่าจะไม่ถูกคัดลอกหรือสร้างขึ้นที่ปลายทาง เลือกแล้ว (ค่าเริ่มต้น) หรือยกเลิกการเลือก ไม่ เกิด ซ้ำ
กรองตามการปรับเปลี่ยนล่าสุด ไฟล์ที่มีเวลาที่ปรับเปลี่ยนครั้งล่าสุดในช่วง [เวลาเริ่มต้น เวลาสิ้นสุด) จะถูกกรองสําหรับการประมวลผลเพิ่มเติม เวลาจะถูกนําไปใช้กับโซนเวลา UTC ในรูปแบบของyyyy-mm-ddThh:mm:ss.fffZ สามารถข้ามคุณสมบัติเหล่านี้ได้ ซึ่งหมายความว่าจะไม่มีการใช้ตัวกรองแอตทริบิวต์ของไฟล์ คุณสมบัตินี้ใช้ไม่ได้เมื่อคุณกําหนดค่าชนิดเส้นทางไฟล์ของคุณเป็นรายการของไฟล์ datetime ไม่ modifiedDatetimeStart
modifiedDatetimeEnd
เปิดใช้งานการค้นพบพาร์ติชัน ระบุว่าจะแยกวิเคราะห์พาร์ติชันจากเส้นทางไฟล์และเพิ่มพาร์ติชันเหล่านั้นเป็นคอลัมน์ต้นทางเพิ่มเติมหรือไม่ เลือกหรือไม่เลือก (ค่าเริ่มต้น) ไม่ enablePartitionDiscovery:
จริง หรือ เท็จ (ค่าเริ่มต้น)
เส้นทางรากของพาร์ติชัน เมื่อเปิดใช้งานการค้นพบพาร์ติชัน ให้ระบุเส้นทางรากสัมบูรณ์เพื่ออ่านโฟลเดอร์ที่มีพาร์ติชันเป็นคอลัมน์ข้อมูล < เส้นทางรากของพาร์ติชันของคุณ > ไม่ partitionRootPath
การเชื่อมต่อพร้อมกันสูงสุด ขีดจํากัดสูงสุดของการเชื่อมต่อพร้อมกันที่สร้างขึ้นกับที่เก็บข้อมูลในระหว่างการเรียกใช้กิจกรรม ระบุค่าเมื่อคุณต้องการจํากัดการเชื่อมต่อที่เกิดขึ้นพร้อมกันเท่านั้น <การเชื่อมต่อพร้อมกันสูงสุด> ไม่ maxConcurrent เชื่อมต่อ ions
คอลัมน์เพิ่มเติม เพิ่มคอลัมน์ข้อมูลเพิ่มเติมเพื่อจัดเก็บเส้นทางสัมพัทธ์หรือค่าคงที่ของไฟล์ต้นฉบับ นิพจน์ได้รับการสนับสนุนสําหรับอย่างหลัง • ชื่อ
•ค่า		 ไม่ additionalColumns:
•ชื่อ
•ค่า

ข้อมูลปลายทาง

ชื่อ รายละเอียด ค่า ต้องมี คุณสมบัติสคริปต์ JSON
ชนิดของที่เก็บข้อมูล ประเภทที่เก็บข้อมูลของคุณ ภายนอก ใช่ /
เชื่อมต่อชั่น การเชื่อมต่อของคุณไปยังที่เก็บข้อมูลปลายทาง <การเชื่อมต่อที่เก็บข้อมูล Google Cloud> ใช่ เชื่อม ต่อ
พาธของไฟล์ พาธโฟลเดอร์/ไฟล์ไปยังไฟล์ปลายทาง < เส้นทางโฟลเดอร์/ไฟล์> ใช่ /
ถัง ชื่อบักเก็ตที่เก็บข้อมูล Google Cloud <ชื่อบักเก็ตของคุณ> ใช่ bucketName
ได เรก ทอรี เส้นทางไปยังโฟลเดอร์ภายใต้บักเก็ตที่ระบุ <ชื่อโฟลเดอร์ของคุณ> ไม่ โฟลเดอร์พาธ
ชื่อไฟล์ ชื่อไฟล์ภายใต้บักเก็ตและเส้นทางโฟลเดอร์ที่ระบุ <ชื่อไฟล์ของคุณ> ไม่ fileName
คัดลอกลักษณะการทํางาน กําหนดลักษณะการทํางานของสําเนาเมื่อแหล่งข้อมูลคือไฟล์จากที่เก็บข้อมูลตามไฟล์ •ลําดับชั้นลดรูปแบบโครงสร้าง
• ผสานไฟล์
•รักษาลําดับชั้น
 ไม่ copyBehavior:
•FlattenHierarchy
• MergeFiles
•สงวนลําดับชั้น
การเชื่อมต่อพร้อมกันสูงสุด ขีดจํากัดสูงสุดของการเชื่อมต่อพร้อมกันที่สร้างขึ้นกับที่เก็บข้อมูลในระหว่างการเรียกใช้กิจกรรม ระบุค่าเมื่อคุณต้องการจํากัดการเชื่อมต่อที่เกิดขึ้นพร้อมกันเท่านั้น <การเชื่อมต่อพร้อมกันสูงสุด> ไม่ maxConcurrent เชื่อมต่อ ions

เนื้อหาที่เกี่ยวข้อง