پیش-پردازش داده به معنای تغییر یا دور انداختن بخشی از داده قبل از این که برای بهتر کردن کارایی استفاده شود است و همچنین یک مرحله مهم از فرآیند داده کاوی میباشد. اصطلاح ورودی زباله، خروجی زباله برای پروژه های داده کاوی ...
به خواندن ادامه دهیدما خطمشی حفظ حریم خصوصی دادههای سلامت مصرفکنندگان در ایالت واشنگتن را آماده کردیم و تغییراتی در «اعلامیه حریم خصوصی» خود ایجاد کردهایم تا پردازش دادهها از سوی خود و حقوق افراد تحت «قانون سلامتی من، دادههای ...
به خواندن ادامه دهید۴ زبان. از ویکیپدیا، دانشنامهٔ آزاد. در علم رایانه الگوریتم جریان دادهها (به انگلیسی: Streaming algorithm) الگوریتمی ست برای پردازش جریان دادهها که به صورت توالی از آیتمها به عنوان ورودی هستند و ...
به خواندن ادامه دهید2. تعیین داده ها توسط کاربر: (نکته مهم در این بخش آن است کسی که دارد داده ها را پر میکند باید شناخت و اشراف کامل به داده داشته باشد.فرض کنید تاریخ خروج کالا برای بعضی از کالاها در فاکتورهای ما ثبت نشده است.
به خواندن ادامه دهیدزمان مطالعه: ۴ دقیقه. مباحث «مدیریت کلان داده» (Big Data Management) را میتوان به دو بخش مجزا تقسیمبندی کرد که در ادامه بیان شدهاند. مبحث اول، علم داده بزرگ است که موضوع ارزیابی کلان دادهها را ...
به خواندن ادامه دهیدپردازش داده، به مجموعه ای از عملیات گفته می شود که بر روی داده ها جهت رسیدن به نتایج انجام می گردد. در این مقاله پردازش داده را مورد بررسی قرار دادیم.
به خواندن ادامه دهیددادِهها (به انگلیسی: data) بهطور کلی، میتوان همهٔ دانستهها، آگاهیها، داشتهها، آمارها، شناسهها، پیشینهها و داده محسوب میشوند. [۱] انسان برای ثبت و درک مشترک هر واقعیت و پدیده از ...
به خواندن ادامه دهیدبر همین اساس علم دادهها نه تنها سازمانهای بزرگ بلکه کسبوکارهای کوچک نیز به دنبال آن هستند تا از طریق جمعآوری و پردازش دادهها منفعت مالی بهدست آورند. تصمیمگیری داده محور (Data-Driven ...
به خواندن ادامه دهیدبا توجه به تعریف این سیستمها، مهم ترین هدف mis ارائه اطلاعات سازمانی به مدیران است. در راستای این هدف، اهدافی مانند جمع آوری اطلاعات، بایگانی، پردازش و سرعت بخشیدن به دسترسی به اطلاعات نیز ...
به خواندن ادامه دهیدپس از پیش پردازش دادهها، برنامهنویسان یک مدل یادگیری ماشین را انتخاب و دادهها را وارد مدل انتخاب شده میکنند، به طوری که مدل خود را برای یافتن الگوها یا پیشبینی آموزش دهد.
به خواندن ادامه دهیددیتا ساینس حوزهای میانرشتهای است که مفاهیم برنامه نویسی ، تجزیه و تحلیل داده ، «هوش مصنوعی» (Artificial Intelligence) ، «یادگیری ماشین» (Machine Learning) و «یادگیری عمیق» (Deep Learning) را …
به خواندن ادامه دهیدابزارهای داده کاوی از تکنیکهای خاصی برای داده کاوی استفاده میکنند که اصلیترین آن عبارت است از طبقهبندی، انجمن، خوشه بندی، رگرسیون و تشخیص آنومالی. این ابزارها بر اساس نوع و حجم داده ...
به خواندن ادامه دهیدآنچه در Cache رایج است این است که کش های با ظرفیت بالاتر، سرعت کمتری دارند. در اغلب پردازنده های امروزی، L1 Cache و L2 Cache در خود پردازنده و برای هر هسته تعبیه میشود و L3 Cache هم برای همه Core ها قرار می ...
به خواندن ادامه دهیدبعد از آنکه نتایج داده ها توسط نرم افزارهای آماری بررسی شد، نوبت به تجزیه و تحلیل آنها می رسد. مهم ترین عاملی که در انتخاب روش تحلیل تاثیر می گذارد، نوع داده های جمع آوری شده توسط محقق است.
به خواندن ادامه دهیدداده کاوی فرآیندی برای شناسایی الگوها و شناخت توالیهای مرتبط از حجم زیادی از دادهها است. در طی این مراحل، از مدلهای هوشمند برای استخراج الگوهای داده استفاده میشوند. دادهها به عنوان ...
به خواندن ادامه دهیداز آنجا که دادهها به طور مداوم در حال تکامل، به روزرسانی و تغییر هستند، مهم است که درک کنیم پردازش داده نه یک کار مستقل، بلکه یک چرخه تکراری است.
به خواندن ادامه دهیدنگهداری (Maintain): دادهها در فرمی قرار میگیرند که بتوان از آن استفاده کرد. مرحله نگهداری شامل ذخیره سازی داده ها، پاکسازی داده ها، مرحله بندی داده ها، پردازش دادهها و معماری دادهها است.
به خواندن ادامه دهیداز آنجایی که مدل Autoencoder ابعاد دادهها را با حفظ اطلاعات مهم آنها کاهش میدهد، میتوان از دادههای کد شده در سایر الگوریتم های یادگیری عمیق استفاده کرد تا بار محاسباتی یادگیری مدل کاهش ...
به خواندن ادامه دهید۱.مرتب سازی دادهها در حجم زیاد . آیا می توانید هزاران توییت، مکالمه پشتیبانی مشتری یا نظرسنجی را به صورت دستی مرتب کنید؟ دادههای یک کسب و کار برای پردازش دستی بسیار زیاد است.
به خواندن ادامه دهیدذخیره سازی داده ها روش های جمعی و فن آوری هایی است که اطلاعات دیجیتالی را بر روی رسانه ذخیره سازی مبتنی بر الکترومغناطیسی، نوری یا سیلیکون ذخیره و نگهداری می کند. ذخیره سازی یک جزء کلیدی از ...
به خواندن ادامه دهیدشبکه عصبی چیست ؟ الگوریتمهای یادگیری عمیق از ساختارهای لایهای با نام شبکههای عصبی استفاده میکنند تا بر اساس تجزیه و تحلیل دادهها، برای گرفتن تصمیم خاصی، رفتار انسان را تقلید کنند.
به خواندن ادامه دهیددادهکاوی عبارت است از فرآیند اکتشاف الگو و روندهای منظم و پنهان در دادههای بزرگ و توزیع شده، با استفاده از مجموعه وسیعی از الگوریتمهای مبتنی بر علوم ریاضی و آمار. این الگوریتمها معمولا ...
به خواندن ادامه دهیدمفهوم پردازش داده جمعآوری و بررسی دادهها به شکلی قابل استفاده و مناسب است. پردازش خودکار دادهها در توالی از پیش تعیین شده و تحلیل دادهها است. این نوع از پردازش امروزه به صورت خودکار با استفاده از رایانه انجام میشود که سرعت بیشتری دارد و نتایج دقیقی را به دست میآورد. پس از آن، دادههای جمعآوریشده پردازش …
به خواندن ادامه دهیدداده ورودی (Input یا درونداد) پردازش (Process یا Throughput و فرآیند تبدیل) داده خروجی (Output یا برونداد و ستاده) بازخورد (Feedback) در ادامه هر یک از اجزای سیستم را با دقت بررسی کرده و به نقش آنها خواهیم پرداخت.
به خواندن ادامه دهیدفرمولهای اکسل (Excel Formulas): فرمول ها مجموعه ای از دستورالعمل های ریاضی هستند که برای انجام محاسبات در این برنامه مورد استفاده قرار میگیرند. فرمول ها در نوار فرمول و یا خانه های اکسل که مورد نظر ...
به خواندن ادامه دهیدتحلیل داده چیست ؟. فرآیند و تکنیکهای تجزیه و تحلیل داده ها ، ارزیابی ، پاکسازی ، مدل سازی و تبدیل داده ها با استفاده از ابزارهای آماری یا تحلیلی مختلف برای یافتن برخی اطلاعات مفید به منظور ...
به خواندن ادامه دهیدیکی از کتابخانههای اصلی پایتون برای آمادهسازی و پیشپردازش دادهها، پانداس (Pandas) است. بنابراین در این مطلب، به طور خلاصه چگونگی پیشپردازش دادهها با بهرهگیری از پانداس نیز مورد ...
به خواندن ادامه دهیدنکته مهم در این حافظه سرعت بسیار بالای آن در نوشتن و هم چنین در خواندن است اما داده ها فرار میباشند. همچنین این حافظه گران قیمت بوده که در قبال تمامی حافظه های ثانویه قیمت بالاتری دارد.
به خواندن ادامه دهیدنرم افزار pc-xplor جهت مدیریت، نمایش، تجزیه و تحلیل داده های اکتشافی می باشد که فرمت های مختلف بانک های اطلاعاتی را پشتیبانی کرده و قابلیت ورود و همچنین اصلاح داده ها را داراست.
به خواندن ادامه دهیدرمزگشایی: اطلاعات به زبان باینری (زبان کامپیوتر) تبدیل شده و آماده پردازش میشوند. پردازش و اجرا: پردازنده با عملیات محاسباتی و منطقی (ALU) دادهها را مورد پردازش قرار میدهد. بازنویسی: نتیجه ...
به خواندن ادامه دهیدنرمال سازی دادهها ترتیبی است که اطلاعات در تمام اسناد و فیلدها یکسان به نظر میرسد. انسجام انواع ورودی داده، منجر به مرتب کردن، تقسیمبندی و دادههای با کیفیت بالاتر میشود، افزایش می ...
به خواندن ادامه دهیدپیش پردازش داده ها، داده ها را به قالبی تبدیل می کند که در داده کاوی، یادگیری ماشین و سایر کارهای علم داده پردازش آسان تر و مؤثرتر باشد. این تکنیکها معمولاً در مراحل اولیه یادگیری ماشین و خط ...
به خواندن ادامه دهیدبانکها و مؤسسات مالی یکی از مهمترین استفادهکنندگان از کلاندادهها هستند. در دنیای مدرن ما در هر ثانیه مقدار غیرقابل شمارشی اطلاعات از منابع بسیار زیادی در حال رد و بدل میباشد.
به خواندن ادامه دهید3. دادهها. دادهها شامل حقایق، مشاهدات، ادراکات، اعداد، نویسهها، نمادها، تصاویر و غیره هستند که بعد از پردازش معنا پیدا میکنند. دادهها شاید ساده به نظر برسند، اما این سادگی دلیلی بر سازماندهی آنها نیست.
به خواندن ادامه دهید