https://virgool.ir/feed/@m_76199965fa2026-11-12 13:05:27https://files.virgool.ir/upload/users/1809926/avatar/KC8CPn.jpghttps://virgool.ir/@m_76199965https://virgool.ir/@m_76199965/آمار-عملی-برای-دیتا-ساینتیس-ها-بخش-اول-معرفی-داده-svjweuqhvjbyدر چهار بخش ابتدایی این سلسله نوشته به کاوش در داده ها می پردازیم. عموما اولین مرحله هر پروژه آماری، کاوش و یا explore کردن داده هاست. بخش اول به نحوی مقدمه کارمان هست. به نحوی میخواهیم بگوییم قیافه داده های ما باید چه شکلی باشه و از بخش دوم وارد explore کردن داده ها خواهیم شد. جالبه بدونید آمار کلاسیک بر پایه بررسی یک نمونه و نتیجه گیری درباره یک جامعه تمرکز دارد اما آمار جدید بر استنتاج داده ها تمرکز دارد. اولین بار "جان توکی(1962)" تجزیه و تحلیل اکتشافی را مطرح کرد و نمودار های ساده ای همراه با خلاصه های آماری در کتاب خودش منتشر کرد. بعدتر به دلیل قدرت محاسباتی کامپیوتر ها این شاخه علم آمار بسیار سریع تکامل یافت. جان توکی، آماردان برجسته ای که ایده هایش پایه علم داده را تشکیل می دهد. داده ها از منابع متعددی به دست می آیند: اندازه گیری های حسگر، رویدادها، متن، تصاویر و ویدئوها. اینترنت اشیا(IoT) و.... بسیاری از این داده ها بدون ساختار هستند: تصاویر مجموعه ای از پیکسل ها هستند که هر پیکسل حاوی اطلاعات رنگی RGB (قرمز، سبز، آبی) است. متون دنباله ای از کلمات و کاراکترهای غیرکلمه ای هستند که اغلب بر اساس بخش ها، زیربخش ها و غیره سازماندهی می شوند. کلیک‌استریم‌ها دنباله‌ای از اقدامات کاربر در تعامل با یک برنامه یا یک صفحه وب هستند. در واقع، یک چالش بزرگ علم داده این است که این سیل از داده (data) های خام را در اطلاعات(information) عملی مهار کند. برای به کارگیری مفاهیم آماری تحت پوشش این مجموعه تحریر، داده های خام بدون ساختار باید پردازش و به شکلی ساخت یافته دستکاری شوند. یکی از رایج‌ترین شکل‌های داده‌های ساختاریافته، جدول با ردیف‌ها و ستون‌ها است. دو نوع اساسی از داده های ساخت یافته وجود دارد: عددی و طبقه ای. داده های عددی به دو صورت هستند: پیوسته، مانند سرعت باد یا مدت زمان، و گسسته، مانند شمارش وقوع یک رویداد. طبقه ای ها فقط مجموعه ای ثابت از مقادیر را می گیرند، مانند یک نوع صفحه تلویزیون(پلاسما، ال سی دی، LED، و ...) یا نام استان ها (تهران، سیستان و بلوچستان، اصفهان و ....).باینری ها(دو دویی) یک گروه خاص مهم از داده های طبقه بندی است که تنها یکی از دو مقدار را می گیرد، مانند 0/1، yes/no، یا true/false. نوع مفید دیگری از داده های طبقه بندی شده ترتیبی است که در آن دسته ها مرتب شده اند؛ نمونه ای از این رتبه بندی عددی (1، 2، 3، 4، یا 5) است. بنابراین انواع داده ها شامل عددی (پیوسته، گسسته) و دسته ای (دودویی، ترتیبی) می باشد.• داده ها معمولاً بر اساس نوع در نرم افزار طبقه بندی می شوند.• تایپ داده ها در نرم افزار به عنوان یک سیگنال به نرم افزار در مورد نحوه پردازش داده ها عمل می کند.(انواع داده ها ممکن است گیج کننده باشند، زیرا انواع ممکن است همپوشانی داشته باشند، و طبقه بندی در یک نرم افزار ممکن است با نرم افزار دیگری متفاوت باشد)تمرکز این مجموعه نوشته بر روی rectangular data یا داده های جدولی است. داده های جدولی اصطلاح کلی برای یک ماتریس دو بعدی با ردیف هایی است که رکوردها و ستون هایی را نشان می دهد که ویژگی ها (متغیرها) را نشان می دهد. پس متن و صوت و ... چه؟ داده های بدون ساختار باید پردازش و دستکاری شوند تا بتوان آنها را به عنوان مجموعه ای از ویژگی ها در داده های جدولی نشان داد.زهرا ساعدیزهرا ساعدیThu, 03 Aug 2023 14:48:01 +0330https://virgool.ir/@m_76199965/آمار-عملی-برای-دیتا-ساینس-ها-oyswlqmsweiuخب یادتونه خیلی درگیر مسیله روش تحلیل داده ام را چیکار کنم بودم ....به یه سری نتیجه رسیدم....گام اول : تصحیح دیتای موجود.گام دوم: نوشتن گزارش از مجموعه اتفاقات و تعیین علت و معلول رویداد ها به مدت حداقل سه ماه + تصحیح دیتاگام سوم: ساخت دیتا بیس آماری و تحلیل های همبستگی آماری (کشف دقیق تر علت و معلول ها)گام چهارم: ساخت شبکه های ارتباطی و تشکیل خوشه و تحلیل خوشه هاگام پنجم: محدود کردن شرایط محیطی و خرابی های سیستمدر این مدت سه ماه سعی کردم گام یک و دو را بردارم. حالا نوبت گام سوم یعنی تحلیل های آماری و ساخت دیتابیس بر اساس مسیله ها است. یکی از روش های کارم اینست که تمام علت های تاثیر گذار را در سه کتگوری دسته بندی کنم. 1- محیط: تمام رویداد هایی که مربوط به شرایط محیطی است. مثلا اینکه تعطیلات آخر هفته کاربر اپلیکشن کم می شود. تعطیلات و روز کاری بودن یک علت محیطی است. 2- سیستم: تمام خرابی هایی که به خاطر خود محصول است. مثلا در یک روز اپلیکشن خراب می شود و کاربر افت می کند. 3- انسان: تمام رویداد های انسانی که منجر به افزایش یا کاهش کویری می شود. مثلا تیم سردبیری اقدامی انجام می دهند که منجر به افزایش کاربر در آن روز می شود. در قدم بعدی می خواهم روابط دو به دو یا چند به چند پارامتر ها نسبت به هم دیگر بدانم. و قدم بعد تر می خواهم بدانم هر کتگوری علت چه سهمی در تغییرات دارد. جهت افزایش دانش آماری، کتاب آمار عملی برای دیتا ساینس ها را شروع به مطالعه کردم. تونستم خلاصه هایم را اینجا به اشتراک می گذارم. زهرا ساعدیزهرا ساعدیWed, 07 Jun 2023 14:31:17 +0330https://virgool.ir/@m_76199965/انسان-مدرن-oe58dfjejy38انسان مدرن عجب موجودی مزخرفی است. با مهارت های توسعه نیافته فردی میخواهد در دنیای مدرن موفق باشد.‌ یک ماشین به نام هوش مصنوعی ساخته که از خودش باهوش تر است. باید نگران باشد هوش مصنوعی کنترل همه چی را دست نگیرد و انسان را عامل خراب کردن محیط زیست شناسایی نکند و در نهایت دستور قتل اش صادر نشود. انسان مدرن با میزان توانایی جسمی دوران پاره سنگی است. اما مخ بلند پرواز و جاه طلبی دارد که مدام خود را بزرگ تر از آنچه هست نشان دهد. بعد هم از درون محدودیت های جسمی اش با مخ بلند پروازش در جنگ می افتد و می شود امروز ما. مدام خود درگیری، خود درگیری و خود درگیری. آش شلم و شوربایی که نمی تواند جمعش کند. عجب روزگاری است. پ.ن. امروز لپ تاپ ام روشن نمی شود. همش ریست می شود . حال خراب مرا هیچ سخن نیست. زهرا ساعدیزهرا ساعدیSun, 07 May 2023 10:40:12 +0330https://virgool.ir/@m_76199965/تمثیل-دریا-و-موج-دریا-moevjlqjcmeqاز جمله تمثیل‌های مشهور در این باب که شاید بتوان آن را یکی از تمثیل‌های موفق در این زمینه دانست، تمثیل دریا و موج دریاست. عرفا برای تبیین نظریة وحدت شخصیه و روشن‌تر ساختن نوع ارتباط حق و خلق، از تمثیل دریا و امواج آن استفاده کرده‌اند.میان دریا و موج دریا چه نسبتی برقرار است؟ از یک سو موج قطعاً غیر از دریاست؛ زیرا می‌توان دریای آرامی را تصور کرد که هیچ موجی ندارد ولی پس از مدتی موّاج شود. این موج‌های پدید آمده، طبیعتاً غیر از دریا و آب آن‌اند؛ زیرا زمانی دریا و آب آن بود ولی این امواج نبودند؛و از سوی دیگر، موج چیزی بر دریا نیفزوده است، و پس از آنکه دریا موّاج شد، ما باز چیزی جز دریا و آب نخواهیم داشت، و هرچه هست همان آب دریاست و میتوانیم بگوئیم موج آب متموج است.بنابراین از این منظر موج دریا عین دریا و آب دریاست و جز آن نیست؛ زیرا در همان حال که دریا موج برداشته، آب تمام متن آن را فرا گرفته است و موج هیچ بخشی از آن را تشکیل نمی‌دهد. اما با این حال کسی نمی‌تواند موج را انکار کند و آن را صرفاً امری وهمی و ذهنی انگارد. سرّ چنین حالتی برای موج که هم در خارج واقعیت دارد و هم هیچ بخشی از دریا و متن آن را تشکیل نمی‌دهد، آن است که نوعی خاصِّ از تحقق را داراست و گرچه متن وجودی مستقل و منحازی ندارد، چون موج دریاست، موجود و متحقق در خارج است. باز تکرار می‌کنیم، چون «موجِ دریا» است، به حیث تقییدیِ دریا تحقق دارد و هیچ‌وپوچ نیست.عرفا می‌گویند نسبت حق و خلق نیز شبیه نسبت موج و دریاست؛ زیرا همة موجودات و تجلیات و تعینات، امواج دریای بی‌کران وجود حق‌تعالی هستند و حقیقت خلق همان حقیقت موجی است که نه در مرحلة مقام ذات حق، بلکه در مرحلة ظهور و بروز ذات و با مقید شدن آن پدید می‌آید. این امواج خلایق، از جهتی غیر حق‌تعالی، و از جهتی عین او‌یند، و با آنکه وجودی در کنار وجود حق نیستند، چون شأن حق و موج آن دریا هستند، متحقق‌اند و به حیثیت تقییدیه شأنیه وجود خداوند موجودند.زهرا ساعدیزهرا ساعدیMon, 24 Apr 2023 14:35:01 +0330https://virgool.ir/@m_76199965/چند-تا-سوال-قشنگ-که-اگه-زود-به-جواب-برسد-بردم-thbpbjgnu7j6در دنیای کار کسی که نیاز ها و یا سوالات مشتری ها یا کارفرما را زودتر بفهمد و زودتر هم بتواند به جواب برسد؛ برده است. در حال حاضر چند تا نیاز قشنگ پیدا کرده ام ... دنبال راه حل هستم. باید بدوم تا به جواب برسم.سوال ۱ : چگونه با تحلیل داده های اپلیکشن ( مثلا رفتار کاربران) بتوان یک گروه بندی محتوایی و یک درخت دانش بر اساس نیاز کاربران طراحی کرد. یک درخت دانش محتوایی مانند سایت متممسوال ۲: مطالب پیشنهادی که تا الان بر اساس تقویم محتوایی ارایه شده است ؛ چگونه با تحلیل داده های پسیو تقویم محتوایی را آپدیت کنم؟ایده اولیه ام درخت تصمیم است و یا heat map و ...نمیدونم ؟سوال ۳ : محتوای انیمیشنی برای ناشنوایان . تبدیل متن به تصویر این سه تا سوال .... سوال های قشنگ تو ذهنمه ... یعنی میشه به نتیجه رسید؟! نتایج اش رو باهاتون به اشتراک خواهم گذاشت. زهرا ساعدیزهرا ساعدیMon, 09 Jan 2023 17:05:59 +0330https://virgool.ir/@m_76199965/راهنمای-تحلیل-کسب-و-کار-vtuzenm5hhomراهنمای تحلیل کسب و کار به نام خدا قبل تر گفته بودم ... شغل جدیدم این است که تعداد زیادی داشبورد جلوی رویم هست. مدیر BI گاه گاهی تلنگری بهم میزند که ببین چی می تونی از این نمودار ها در آوری ... منم یک نگاه به اون میکنم و یک نگاه عاقل اندر سفیهانه هم به صفحه لپ تاپم. می پرسم : خب از من چه می خواهید ؟ صادقانه پاسخ میدهد : کسی از ما چیزی نمی خواهد ما باید یه چیزی تولید کنیم تا بقیه تیم ها و مدیران خوششان بیاید. مشتری بشوند و سمت ما درخواست بیاید. گزارشی رد میکنم. اما در نهایت نه خودم راضی هستم و نه مدیر. چون نمیدانم به چه میخواهند برسند. اما این مسئله اولین باری نیست که برایم پیش آمده ... خود مدیران هم شاید ندانند چه میخواهند ولی از شما تحلیل میخواهند. جالب است! نه؟ شاید عقبه این موضوع برایم چند سال پیش باشد. اولین بار یه عالمه داده مقالات را مدیرم به دستم داد ... گفت : ببین چی می توانی از این در بیاوری. من هم چند نموداری با تبلو برایش کشیدم. کلی هم ذوق کرد و یک جلسه گذاشت با یکی از مدیران صنایع دریایی! یادم هست قبل از رسیدن به آن جلسه حسابی در خیابان های اطراف فرودگاه مهرآباد گم شدم ... خب ولی در نهایت با حدود یک و نیم ساعت تاخیر به جلسه رسیدم. با همان حال نزار در بین جملات این مدیر صنعت دریایی شنیدم که دوست دارد ارتباطات را مانند گرافی از ارتباطات ببیند. همان جا در سرم جرقه زد که گراف ارتباطی یکی از چیز هایی است که فهمیدنش آسان است. برای کسی که کارشناس این کار نیست یک روش عالی است. دنبال حرفش را گرفتم و خودم شروع کردم به یادگیری ( شبکه های اجتماعی ) یا همان SNA . بعد از این کشف نیاز همان پروژه با این رویکرد انجام دادم. نتیجه اش شد یک فروش عالی پروژه برای مدیرم. از قسمت های مختلف خصوصی و دولتی درخواست برای این پروژه می آمد. موضوع به ما می دادند و شبکه های ارتباطی موضوع و تحلیل این شبکه های اجتماعی را می خواستند. گفتنی است بعد تر گفت حدود یکسالی در آمد شرکت از فروش همان پروژه بوده است. خلاصه تشخیص نیاز مشتری به هدف خورد. یک مدت هم با دکتر زالی گفتگو کرده بود. داده های کرونا گرفته بود. همان آمار روزانه از تعداد فوتی ها. ترخیص شده ها. بستری و ... از روز نخست کرونا. به من گفت چی می تونی از این ها در بیاری ... من چند تا نمودار کشیدم مثلا اینکه روز های پنجشنبه بیشترین بستری هاست و روز های شنبه بیشترین فوتی ... همین چند تا نمودار دست و پا شکسته رو به دکتر زالی نمایش داده بود. دکتر زالی هم گفته بود : خب ؟. البته با ادبیات محترمانه تری... میدانی من اون موقع نتونستم برای خودم حل کنم که نیاز یک مدیر برای سطح کلان مدیریت بحران کرونا در چیست! در نتیجه نا موفق هم بودم. الان مشغول تحلیل داده های یک اپلیکشن هستم. با وضعیتی که در بالا توصیف کردم. تمام تیم های فنی در تلاش هستند فیچر های بیشتری به محصولشان اضافه کنند. مدیر هم میخواهد تعداد کاربران بیشتر شود. تعداد کویری هایی که کاربران می زنند بیشتر شود و در نهایت ترافیک بیشتری بتواند بفروشد. از هزار هزار داده و نموداری که جلوی رویم گذاشته اند کدام یک را انتخاب کنم ؟ کدامیک را به چه کسی ارایه کنم ؟ در نهایت چه جوری میشود دوباره به هدف زد؟ برای حل این مسیله کتاب BABOK را شروع کردم. پ.ن.(بعد ۴ هفته) : کتاب رو خوندم ... اما چیزی که میخوام نبود ! این کتاب در واقع راهنما برای طراحی یک BPM است. این کتاب می خواهد در نهایت با طراحی BPM فرایند کسب و کار رو تحلیل کند.من نیازم رو بالا تر گفتم ... مطمینم راهکار من BPM نیست. بنابراین نتیجه ۱: اگر مشکلی شبیه به مشکل من دارید ؛ سراغ کتاب BABOK نروید. حتی اگر اسمش خیلی شبیه مسیله شماست. زهرا ساعدیزهرا ساعدیMon, 12 Dec 2022 17:15:08 +0330https://virgool.ir/@m_76199965/آغاز-رشته-تحریر-m9gfsy7avmcdنوشتنم را با نام خدا آغاز میکنم که پیامبر (ص) گفته نوشته بدون نام خدا ابتر است . اسمم زهرا ساعدی است . راهنمایی و دبیرستان خود را در فرزانگان تهران گذراندم. بیشتر دوران دبیرستان را به آمادگی برای المپیاد نجوم گذشت اما نهایتا نمره قبولی نگرفتم. کنکور دادم و دانشجویی را در مهندسی صنایع صنعتی شریف گذراندم . ترم چهارم کارشناسی درس ها برایم خسته کننده بود برای همین در کنار مهندسی صنایع ، مهندسی هوافضا را به صورت رشته فرعی گذراندم.کارشناسی که تمام کردم تصمیم گرفتم همان رشته صنایع را دنبال کنم اما اینبار با تمرکز روی تحلیل داده. رتبه ۳ کارشناسی ارشد شدم و در گرایش سیستم اطلاعاتی (تحلیل داده) در مقطع ارشد شرکت کردم. پایان نامه ام هم تمرکز روی پردازش متن داشت. در تمام دوران تحصیلی ام علاوه بر تحصیل در گروه ها و مسابقات مختلفی‌ شرکت کرده ام تا شناختم را از دنیای خودم بیشتر کرده باشم. همچنین از ترم سوم کارشناسی علاوه بر تحصیل مشغول به کار نیز بوده ام.در تمام دوران تحصیلی ام علاوه بر تحصیل در گروه ها و مسابقات مختلفی‌ شرکت کرده ام تا شناختم را از دنیای خودم بیشتر کرده باشم. همچنین از ترم سوم کارشناسی علاوه بر تحصیل مشغول به کار نیز بوده ام. دو سال نخست به عنوان کنترل پروژه در هلدینگ فاطر شریف گذراندم . فهمیدم من از کارم نمی خواهم کنترل پروژه باشم . دوست دارم کار تخصصی تر و خاص تری داشته باشم . درخواستم را با رییسم مطرح کردم. معرفی شدم به یکی از شرکت های زیر مجموعه هلدینگ فاطر به نام اختصاری فراسامان. فراسامان یک شرکت دانش بنیان مهندسی سیستم بود. پروژه های هوافضایی را از صنعت های مختلف می‌گرفت و بین شرکت های فنی مرتبط تقسیم میکرد . سپس خروجی ها دریافت و بخش های مختلف را تجمیع و یکپارچه سازی انجام میشد. پس از پایان دو سال دیگر همکاری با این مجموعه دریافتم روحیاتم با مهندسی هوافضا به صورت جدی سازگار نیست و در محیط تحلیل داده بیشتر می توانم موفق باشم . تصمیم به خروج داشتم اما قبل از آنکه به زبان بیاورم مدیر یکی دیگر از شرکت های زیر مجموعه فاطر پیشنهاد داد تا با او همکاری کنم. . بنابراین دو سال دیگر نیز به همکاری شرکت دانش بنیان صدر سیستم گذراندم. گرچه این شرکت نیز مانند فراسامان یک شرکت مهندسی سیستم بود اما با رویکردی متفاوت در تمام حوزه های دانش ورود میکرد. در این دو سال به عنوان تحلیل گر داده در این مجموعه مشغول شدم و تجربه خوبی برای شروع کار تحلیل داده برایم بود . همزمانی این کار و ارشد تحلیل داده برایم رشد خوبی در زمینه تحلیل داده به همراه داشت. گرچه کار در صدر سیستم تجربه کاری خوبی برایم رغم زد اما با تحقق نشدن وعده های اولیه و پایان یافتن پروژه های تحلیل داده ، موعد همکاری من نیز هلدینگ فاطر شریف به پایان رسید. چند روز بعد در مجموعه اپلیکشن ذره بین قرارداد همکاری بستم. در این مجموعه به عنوان کارشناس تیم BI هوش تجاری مشغول به کار شدم.اینجا به مرا عنوان تازه کار میشناسند. خب البته تازه کار هم هستم و هر روز مطالب تازه ای برای یادگیری برایم وجود دارد.همه این صحبت ها را گفتم تا به این نقطه برسم. عاشق تجربه کردنم . هر روز یادگیری چیزی جدید در دنیا. برایم فرقی ندارد یک درس جدید باشد و یا یک کتاب جدید یا حتی یادگیری یک نکته جدید در آشپزی. قدیم تر وقتی مطلب جدیدی می آموختم حداقل یکسال در ذهنم باقی می ماند اما روز به روز این بازه زمانی کمتر میشود. در حال حاضر، این هفته که یاد میگیرم هفته بعد به طور کلی از ذهنم پاک میشود! گرچه باید به دنبال درمان فراموشی باشم اما گمان کردم مطالبی از تجربیات کاری ام (حتی گاها شخصی) در اینجا بنویسم بلکه اول مرجعی برای رجوع خودم باشد و بعد هم به دوستانی با مسایل مشابه کمکی کرده باشم.با آرزوی موفقیت زهرا ساعدی زهرا ساعدیزهرا ساعدیWed, 28 Sep 2022 10:33:14 +0330