به عنوان یک متخصص سامانههای تحلیلگر یا برنامهنویسی که با ابزارهای تحلیلی سروکار دارید، ایدهآلترین حالت برای شما وقتی است که همه اطلاعات به شکل دقیق و در قالب یک فرمت باز و مستندسازی شده در اختیار شما قرار داشته باشد. در این حالت به سادگی میتوانید در هر حوزهای دادههای موردنیاز خود را به دست آورده و متناسب با هدف کاری خود از آنها استفاده کنید.اما به ندرت زمانی پیش میآید که بتوانید دادهها را به شکل طبقهبندی شده و به دور از هرگونه ناخالصی دریافت کنید. در اغلب موارد نه تنها با دادههای تاریخ مصرف گذشته روبرو هستید، بلکه اطلاعاتی که به آنها نیاز دارید درون یک سایت قرار دارند. در حالی که اکثر سایتها تلاش میکنند، دادههایی شفاف و با فرمتی ساختیافته را ارائه کنند، اما سایتهای دیگر اینگونه عمل نمیکنند. در چنین شرایطی برای جمعآوری اطلاعات از وب باید خود فرآیند استخراج را انجام دهید.خزیدن در وب چیست؟یک تحلیلگر دادهها یا برنامهنویس دادهها با واژگانی همچون Crawling، Scraping، Processing و cleaning data آشنا است. این واژگان که به خزیدن، خراش دادن، پردازش کردن و شفافسازی دادهها اشاره دارند، ارکان اصلی ساختیافتگی دادهها را شکل میدهند. سایتهایی که اطلاعات خود را در یک &, ...ادامه مطلب
جهش فناوری در توانایی حرکت رباتها 7 آذر 1395 رایورز - ربات اطلس (Atlas) شرکت Boston Dynamics پیشرفت زیادی در زمینه ایستادن و راه رفتن به دست آورده است. بزرگترین چالش رباتهای انسان نمای امروزی، توانایی حفظ تعادل و سرپا ایستادن، بهخصوص در شرایط ناپایدار است، اما نسخه تازه ربات اطلس (Atlas) شرکت Boston Dynamics نشان میدهد که پیشرفت زیادی در این مسیر حاصل شده است. به گزاش انگجت، "اطلس" رباتی سرپا است، روی دو پا راه میرود و نوعی فناوری اعجابآور به شمار میرود که میتوان گفت همه ترسناک و هم البته شگفتانگیز است. این شرکت رباتیک، تاریخچهای طولانی در تولید رباتهای شگفتاور دارد و در گوشه و کنار، اخبار مربوط به دستاوردهای آنها را میشنویم. وقتی نسخههای آزمایشی و اولیه این ربات در حال رونمایی بود، اتوماسیونی که از طرف دارپا(DARPA),پیشرفت فناوری در اینده,پیشرفت فناوری در ایران,پیشرفت فناوری اطلاعات در ایران ...ادامه مطلب
مایکروسافت اطلاعات شما را در ویندوز ۱۰ میفروشد 4 آذر 1395 رایورز - مایکروسافت پیش از این اعلام کرده بود آخرین نسخه از سیستم عامل آن حجم بیشتری از دادههای مربوط به هر رایانه شخصی را در خود نگه میدارد. گزارشهای رسیده حاکی از آن است که مایکروسافت با شرکتی به نام FireEye یک قرارداد همکاری منعقد کرده است تا اطلاعات مربوط به فعالیت کاربران در سیستم عامل ویندوز ۱۰ را به کمک آن به مراکز امنیتی بفروشد. به گزارش اینکوئیرر، خبرگزاری استرالیایی ARN در جدیدترین گزارش خود اعلام کرد قرارداد میان مایکروسافت و FireEye منعقد شده است و بر اساس آن اطلاعات مربوط به هر کاربر در سیستم عامل ویندوز ۱۰ ردیابی میشود. در این گزارش آمده است که سیستم امنیتی Windows Defender ابزارهای شرکت iSIGHT Intelligence را به صورت مخفیانه در خود جا داده است و شرکت FireEye قصد دا, ...ادامه مطلب