Hi, I have about 1000 datasets that I want to enter the Rapid Miner software once because it is diff

moni
moni New Altair Community Member
edited November 2024 in Community Q&A
Hi, I have about 1000 datasets that I want to enter the Rapid Miner software once because it is difficult to enter two by one, can anyone help ??



Tagged:

Answers

  • hughesfleming68
    hughesfleming68 New Altair Community Member
    Loop files is what you are looking for. Inside you would put a read csv. Depending on your license, you could easily hit a limit.
  • moni
    moni New Altair Community Member
    They are full of answers
    Can you help me by sending me an instructional video?
  • lionelderkrikor
    lionelderkrikor New Altair Community Member
    Hi @moni,

    As mentioned by @hughesfleming68, you have to implement a Read CSV operator inside a Loop Files operator.
    Set the path where your files are stored in the parameters of the Loop Files operator.
    If you want to store all your files as example sets in your repository, use a Store operator. 
    In the parameters of Store operator, set the repository and give the name %{file_name} to the example set. 
    In attached file, a general process to perform what you want to do.

    Hope this helps,

    Regards,

    Lionel
  • moni
    moni New Altair Community Member

    @lionelderkrikor

    tankyou for nswer me
    i want append all dataset to one dataset but have this error wich send you by imge and  don't want a column to be deleted
  • hughesfleming68
    hughesfleming68 New Altair Community Member
    edited June 2020
    What do you expect your final table to look like? Is it one huge table or are you trying to do something else? Can you take three of your 1000 files give an example of what order you need the data?
  • moni
    moni New Altair Community Member
    hughesfleming68 I have 600 data sets that are of the txt type. I want these 600 data to become a dataset in the event, and when I insert them as input in the repository, the output can be as shown below....All 600 dataset is converted into a  file txt  that when I call, a table of 600 is shown to me as shown below.

  • sara20
    sara20 New Altair Community Member
    @moni

    سلام. وقت بخیر
    اگر اشتباه نکنم شما 600 ستون در فایل خود دارید که در حقیقت همان تعداد ویژگی های شما است. درست عرض کردم؟
    حالا با توجه به این دیتا هدف شما پیاده سازی چه فرایندی است؟

    سارا
  • moni
    moni New Altair Community Member
    sara20 
    سلام وقت شما هم بخیر من 600 تا دیتاست دارم هر کدوم از دیتا ست های من  یک فایل متنی می باشد من میخوام این 600 تا دیتا ست تبدیل به 
      یک دیتاست بشوند  من دیتا ست رو ارسال می کنم ببیند  هر دیتا ست رو که با باز می کنید ستون های مانند دیتاست های مابقی را دارد ولی رکوردها متفاوت هستند میخوام به جای کار روی 600 تا دیتا ست روی 1 دیتاست کار کنم چون همنطور که عرض شد ستون همه دیتاست ها مانند هم هستند فقط رکورد ها دارای فلید های مختلف هست.
     
  • moni
    moni New Altair Community Member
  • sara20
    sara20 New Altair Community Member
    edited June 2020
    سلام
    جواب لیونل درست هست اگر نتوانستید با آن کار کنید بنظرم با پایتون میتوانید کدی بنویسید و کل فایل های خود را یکسان کنید سپس طبق فایل مورد نظر پیاده سازی انجام دهید
    https://docs.rapidminer.com/latest/studio/operators/utility/process_control/loops/loop.html#:~:text=Inside%20the%20Loop%20operator%2C%20nothing,the%20results%20of%20each%20iteration.

    https://docs.rapidminer.com/latest/studio/operators/utility/process_control/loops/loop_examples.html


    https://docs.rapidminer.com/latest/studio/operators/utility/process_control/loops/loop_attributes.html

    https://docs.rapidminer.com/latest/studio/operators/utility/process_control/loops/loop_values.html

    در رابطه با اوپراتور لوپ هم لینک های فوق میتوانند به شما اطلاعات بیشتری بدهند

    موفق باشید
    سارا
  • moni
    moni New Altair Community Member
    sara20 
    آیا کد پایتون را برایم میفرستید؟ که برای کل فایل رو یکسان کنم؟

  • sara20
    sara20 New Altair Community Member
    متاسفانه من تا حالا کدش ننوشتم ولی از بین دوستان دیدم افرادی که با پایتون کد میزنن و فایلها را حتی از سایت های مختلف فراخوانی میکنند و نتایجش با سیستم تجمیع میکنند و معمولا برای این کار باید اسکرپر بنویسید اگر تو نت سرچ کنید کداش مییتونید پیدا کنید
  • moni
    moni New Altair Community Member
    @sara20
    مواردی که ارسال کردید همگی مربوط به جدا کردن سطر یا ستون از یک دیتاست هستند و سوال من پاسخ داده نشده است در واقعه من چندتا فایل دیتاست دارم  می خواهم یکی شوند و فایل ها رو خدمتون ارسال کردم 
  • sara20
    sara20 New Altair Community Member
    در این زمینه متاسفانه اطلاعات بیشتری ندارم. اما باز هم در انجمن سرچ کنید شاید مطلب بهتری پیدا کنید
    با احترام 
    سارا
  • moni
    moni New Altair Community Member

    I need your help to how append file convert to one file Using loop file?
    test.rar 121.5K
  • moni
    moni New Altair Community Member
    @sara20
    سلام شما به من کمک می کنید؟
    من هنوز مشکلم حل نشد می توانید رو سیستم خودتون امتحان کنید به احتمال زیاد می تونید کمک کنید یه نمونه کوچک را خدمتون ارسال کردم
    تشکر
    test.rar 121.5K