Github, Switching remote URLs

Changing Remote Url Repository Github

Bagaimana cara mengubah url repository github ?

  1. buka git bash
  2. Ubah direktori kerja saat ini ke proyek lokal Anda.
  3. lihat daftar remote yang ada,untuk mendapatkan nama remote yang ingin Anda ubah gunakan command

    git remote -v
  4. ubah remote url
    git remote set-url origin https://github.com/USERNAME/REPOSITORY.git
  5. lihat perubahan url repository dengan ( git remote -v )
    
    

    .

Tweepy, Get Twitter Trends

Ada saat-saat tertentu kita ingin membuat sebuah apps untuk melihat trending topik pada media sosial twitter. twitter menyediakan api yang bisa kita gunakan untuk mendapatkan data-data tertentu secara terbatas. untuk connect dengan twitter API kamu bisa membaca manualnya di sini.

python mempunyai sebuah library yang dapat membantu kita untuk terintegrasi dengan twitter API yaitu tweepy. install tweepy dengan pip. sebelumnya pastikan kamu sudah mendapatkan akses token dari apps yang akan kamu buat. untuk bisa menggunakan tweepy pastikan hal di bawah ini sudah kamu dapatkan dari twitter API.

consumer_key = 'xdfdfdggfdfd34343'
consumer_secret = '54544090909oOA3'
access_token = '194900968-sdfdfTYaxS7z3vsB99898dfdkfjkdjfkdjfkdf'
access_secret = 'hlI1QB5O090909090909TN'

download source : https://github.com/alfinfanther/twitter

docs tweepy : http://docs.tweepy.org/en/v3.5.0/getting_started.html

 

Scrapy Part 1, Setup & Configuration

Apa itu scrapy ?

scrapy adalah salah tools canggih yang digunakan untuk melakukan web scrapper.

Web scraping, sering disebut web crawling atau web spidering.Dengan scraper web, Anda dapat menambang data tentang serangkaian produk, mendapatkan teks atau data kuantitatif, mendapatkan data dari situs tanpa API resmi, atau hanya memuaskan keingintahuan pribadi Anda sendiri.

secara sederhana scraping bisa dilakukan melalui dua tahap :

  1. mendownload halaman web
  2. mengambil halaman web tersebut dan mengekstrak informasi yang ada di dalamnya.

Instalasi scrapy

pastikan di komputermu sudah terinstal python 2.7

install virtual environment jika belum menginstall virtual environment kamu dapat membaca artikel sebelumnya

jika di komputermu python start defaultnya adalah python 3.x kamu dapat mengikuti langkah di bawah ini

mkvirtualenv version

kemudian install scrapy dengan pip

install scrapy

buat sebuah project dengan nama tutorial

create project scrapy

structur directory framework scrapy

sekarang buat sebuah spiders dengan nama quotes_spider.py letakan di di dalam direktory tutorial/spiders

import scrapy
 
 
class QuotesSpider(scrapy.Spider):
    name = "quotes"
 
    def start_requests(self):
        urls = [
            'http://quotes.toscrape.com/page/1/',
            'http://quotes.toscrape.com/page/2/',
        ]
        for url in urls:
            yield scrapy.Request(url=url, callback=self.parse)
 
    def parse(self, response):
        page = response.url.split("/")[-2]
        filename = 'quotes-%s.html' % page
        with open(filename, 'wb') as f:
            f.write(response.body)
        self.log('Saved file %s' % filename)

sekarang jalan kode diatas dan pindah ke main directory project tutorial

scrapy crawl quotes

untuk melihat hasil akhirnya perhatikan gambar di bawah ini

good lucks ūüôā

doc : https://doc.scrapy.org

download source : https://github.com/alfinfanther/scrapy_tutorial

 

Mt-Migrate V0.1b – Mysql to Postgresql

 

mt-migrate

Just Info :

Saat ini mitratek team sedang mepersiapkan release Mt-Migrate V0.1b  sebuah tools untuk migrasi database dari mysql ke postgresql dan dari postgresql ke mysql. Mt-Migrate V0.1b di kembangkan untuk kalangan enginer dan non enginer, dengan tujuan untuk mempersingkat waktu migrasi database.

Mt-Migrate V0.1b rencananya akan di publish di bulan february 2018

 

Pytz, Create Local Unix Time

change time zone using pytz

python

pytz brings the Olson tz database into Python. This library allows accurate and cross platform timezone calculations using Python 2.4 or higher. It also solves the issue of ambiguous times at the end of daylight saving time, which you can read more about in the Python Library Reference.

How to change human time to unix time ?

– create a function, this function will be used to change local unix time

import pytz
import time
from datetime import datetime
 
def convert_to_unix(date_time):
    localtz = pytz.timezone('Asia/Jakarta')
    date_aware_la = localtz.localize(date_time).strftime("%Y-%m-%d %H:%M:%S")
    source_time = time.strptime(date_aware_la, "%Y-%m-%d %H:%M:%S")
    created_date_unix = time.mktime(source_time)
    return created_date_unix
 
 
date_now = convert_to_unix(datetime.now())
print(date_now)

how to install pytz ?

pip install pytz or easy_install pytz

doc : https://pypi.python.org/pypi/pytz